Эмоции в цифровую эпоху: что нейросети могут рассказать нам о природе человеческой мимики

Способность распознавать эмоции по выражению лица — ключевой аспект человеческого общения. Но насколько универсальны эти мимические паттерны? И могут ли нейросети справиться с этой задачей так же хорошо, как люди? Исследование, проведенное учеными из СПбГУ и НИУ ВШЭ, проливает свет на эти вопросы. Авторы сравнили, как люди и нейросеть классифицируют эмоции, используя базу изображений с естественными, а не постановочными выражениями лиц. Результаты оказались неожиданными.

Традиционно считалось, что базовые эмоции, такие как радость или страх, имеют универсальные мимические выражения. Однако новое исследование ставит это под сомнение. Ученые использовали экологически валидные фотографии, где люди выражали эмоции естественно, без подсказок. Оказалось, что и люди, и нейросеть лучше распознают общие категории, такие как «положительные» или «отрицательные» эмоции, чем конкретные эмоции, например «гордость» или «тревогу». Это говорит о том, что мимика может быть более гибкой, чем предполагалось ранее.

Люди справились с задачей лучше нейросети, особенно когда нужно было определить конкретную эмоцию. Это может быть связано с их жизненным опытом и культурным контекстом, который помогает интерпретировать тонкие нюансы. Нейросеть же, несмотря на обучение, чаще ошибалась, что указывает на сложность автоматического распознавания естественных эмоций. Интересно, что оба метода показали схожую эффективность при классификации эмоций на уровне валентности (позитивные/негативные) и семейств (например, «страх» и «тревога»).

Исследование также поддерживает теорию «New BET», согласно которой эмоции не имеют жестких универсальных паттернов, а варьируются в зависимости от контекста. Это противостоит классическим взглядам Пола Экмана о базовых эмоциях. Ученые предполагают, что социальное научение играет важную роль в том, как мы интерпретируем эмоции, но их выражение может быть более универсальным, чем кажется.

Ограничения исследования включают использование только российской выборки, что не позволяет делать выводы о межкультурных различиях. В будущем авторы планируют расширить работу, включив данные из других культур и более сложные нейросетевые модели. Это исследование открывает новые горизонты для понимания эмоций и разработки технологий их распознавания, которые могут быть полезны в психологии, медицине и искусственном интеллекте.

Работа опубликована в журнале «Вестник санкт-петербургского университета. Психология».

Создано при поддержке Минобрнауки РФ в рамках Десятилетия науки и технологий (ДНТ), объявленного Указом Президента Российской Федерации от 25 апреля 2022 г. № 231.