Область ИИ, занимающаяся обучением компьютеров понимать, анализировать и генерировать текст на человеческом языке.
NLP (Natural Language Processing, обработка естественного языка) — это область искусственного интеллекта, занимающаяся обучением компьютеров понимать, анализировать, интерпретировать и генерировать текст на человеческом («естественном») языке, в отличие от формальных языков программирования.
Классические задачи NLP включают машинный перевод, анализ тональности текста (позитивный или негативный отзыв), извлечение именованных сущностей (имена, даты, организации) из документов, суммаризацию длинных текстов и генерацию нового связного текста. До появления крупных языковых моделей каждая из этих задач обычно решалась отдельной узкоспециализированной моделью — сегодня же современные LLM способны решать большинство из них универсально, в рамках одной модели.
В бизнесе NLP чаще всего применяется для автоматического анализа обращений клиентов (определение тематики и тональности), извлечения ключевой информации из юридических и финансовых документов, а также для чат-ботов и голосовых помощников.
NLP — это широкая область науки и практики, посвящённая обработке языка в целом. LLM — конкретный, наиболее универсальный современный инструмент для решения большинства задач NLP.
Нет, современные модели NLP, особенно крупные многоязычные LLM, работают со множеством языков, хотя качество может различаться в зависимости от объёма обучающих данных для конкретного языка.
Перевод, суммаризация, анализ тональности, извлечение сущностей — раньше под каждую из этих задач обучали отдельную специализированную модель, сегодня одна крупная LLM способна решать все эти задачи через разные промпты.