Контекстно-вільна граматика - це набір правил об'єднання синтаксичних компонент у змістовні рядки

Конвеєри (або pipeline) будуються шляхом утворення послідовності об'єктів, що реалізують відповідний етап, та НЕ можуть містити назви етапів обробки, тож про призначення етапу треба здогавдуватися із типу об'єкту

Часто можна зустріти корпуси, представлені файлами у форматі HTML

Неанотований корпус в NLP - це корпус, який доповнений спеціальною розміткою, або метаданими, що дозволяє використовувати його для застосування алгоритмів машинного навчання з учителем.

Попередня обробка корпусу зазвичай НЕ передбачає обов'язковий поділ тексту на такі елементи (оберіть декілька елементів, що підходять):

Мішок слів, або Bag-Of-Words, може бути представлений частотними векторами, що описують кількість використання відповідних слів зі словника використовуються у вказаному документі чи тексті. При цьому повінстю ігнорується граматика та відносні позиції слів у реченні.

Токени є виокремленими фраментами тексту, зазвичай реченнями або абзацами

Абревіатура "NLP" у контексті вивченого курсу означає "Natural Language Processing"