Что такое анализ тональности

Анализ тональности — это обучение программы распознаванию эмоций в тексте, например определению того, положительно или отрицательно написан отзыв. 😊

Компании ежедневно получают тысячи отзывов и сообщений в социальных сетях. Анализ тональности позволяет оценивать настроение в больших масштабах, не читая каждое сообщение вручную.

Большинство систем распределяет текст по трём категориям. Такая метка, как «положительная», «отрицательная» или «нейтральная», передаёт общее настроение предложения.

В основе анализ тональности — всего лишь классификация: на вход подаётся текст, а на выходе получается одна выбранная категория из небольшого фиксированного набора.

Многие инструменты возвращают оценку полярности, обычно от минус единицы до плюс единицы. Числа около нуля означают нейтральность, а крайние значения — сильную эмоцию.

Приведённое ниже предложение явно имеет положительную окраску. Хорошая модель анализирует слова и присваивает ему уверенную положительную метку.

Слова «обожал», «отличный» и «потрясающий» указывают на положительную тональность. «Ужасный» и «скучный» — на отрицательную. Эти сигналы лежат в основе задачи.

Язык непрост, поэтому одно и то же слово меняет значение в зависимости от контекста. «Sick» может означать «больной», а в сленге — «потрясающий», из-за чего наивные системы ошибаются.

Фраза «О, отлично, ещё одна задержка» звучит положительно, но означает обратное. Сарказм — одна из самых сложных проблем анализа тональности. 🙄

Можно создать детектор на основе правил, подсчитывая хорошие и плохие слова, или обучить модель на размеченных примерах. Мы начнём с правил.

Отзывы о товарах, обращения в службу поддержки, социальные сети и обсуждения акций — всё это использует анализ тональности. Та же простая идея масштабируется на огромные реальные наборы данных.

Анализ тональности обозначает эмоцию в тексте как положительную, отрицательную или нейтральную. Это классификация, основанная на сигналах слов, причём контекст может изменить смысл. Далее мы создадим списки сигналов. ✅