Тест на иронию: насколько хорошо искусственный интеллект распознаёт сарказм

Речь идет о больших языковых моделях — тех самых цифровых мозгах, которые сегодня отвечают на наши вопросы, пишут тексты и даже сочиняют стихи. Они анализируют гигантские массивы текста, учатся улавливать связи между словами и контекст. И вот теперь они берутся за одну из самых тонких задач: отличать искренний восторг от ядовитой насмешки.

Зачем это нужно? Представьте, что компания пытается понять, что клиенты думают о новом продукте. Если алгоритм примет саркастичный отзыв «Ну да, просто мечта, а не телефон!» за чистую похвалу, вся аналитика пойдет насмарку. Понимание истинных эмоций — ключ к реальной обратной связи.

Исследователь Джулианн Чжоу из Нью-Йоркского университета решила провести своеобразную «олимпиаду по сарказму» для двух специально обученных моделей. Ее цель — оценить, насколько они близки к человеческому пониманию. Ведь сарказм — это когда слова говорят одно, а подтекст кричит совершенно противоположное. Сложно? Еще бы.

Ирония как она есть: могут ли машины почувствовать подвох?

Анализ настроений — это целая индустрия. Компании тратят миллионы, чтобы в реальном времени отслеживать, что люди пишут о них в соцсетях. Но как отличить искренний восторг от едкой шутки? Существующие системы часто пасуют перед этой задачей, принимая язвительность за похвалу.

Именно поэтому ведущие лаборатории мира уже несколько лет разрабатывают модели, натренированные специально на поиск сарказма. Две из самых известных — CASCADE и RCNN-RoBERTa — появились еще в 2018 году. Чжоу решила устроить им экзамен, взяв за основу живые, необработанные комментарии с Reddit, где иронии хоть отбавляй.

Она сравнила работу алгоритмов с точностью обычного человека, а также с базовыми системами анализа текста. И что же выяснилось? Модель RoBERTa показала себя блестяще, почти догнав человека в умении улавливать скрытый смысл. Главный помощник здесь — контекст. Алгоритм анализирует не только саму фразу, но и другие высказывания автора, его стиль, привычные обороты. Это как если бы вы знали характер собеседника и сразу понимали, когда он шутит.

Конечно, машина пока не идеальна. Но тот факт, что она способна справляться с такой тонкой, почти интуитивной задачей, говорит о многом. Мы стоим на пороге эпохи, когда компьютеры начинают понимать не только наши слова, но и наши намерения. Немного жутковато, но и невероятно интересно, не правда ли?