NLP — область ИИ, позволяющая компьютерам понимать, анализировать и генерировать человеческий язык. Основные задачи: анализ тональности (текст положительный/отрицательный/нейтральный?), NER — Named Entity Recognition (выделение имён, мест, организаций), классификация текстов, машинный перевод, ответы на вопросы, реферирование.
BERT (Google, 2018) — двунаправленный трансформер, понимающий контекст с обеих сторон. Семейство GPT — генеративное, создаёт текст. SpaCy и NLTK — библиотеки NLP для Python. Ресурсы NLP для узбекского языка пока ограничены — эта область продолжает развиваться. Анализ тональности активно применяется для анализа рекламы, отзывов и социальных сетей.
Наши курсы по этой теме