В России создали ИИ для распознавания человеческих эмоций

Исследователи Санкт-Петербургского Федерального исследовательского центра Российской академии наук (СПб ФИЦ РАН) разработали систему, которая способна распознавать эмоции человека. Об этом говорится в сообщении на сайте РАН.

Отмечается, что такие системы смогут работать даже в трудных условиях – при шуме, плохом освещении или если человек молчит или не смотрит в камеру. Кроме того, ИИ-сервисы смогут распознавать сложные эмоции, например, сарказм или иронию, когда смысл слов не совпадает с интонацией или выражением лица. Это поможет улучшить работу цифровых помощников.

«Мы разработали интеллектуальную систему <…> для многомодального анализа видео, звука и текста для распознавания эмоций человека, например, радости, злости, грусти и прочих эмоциональных проявлений. Кроме того, программа может проводить сентимент-анализ информации – определять отношение человека к какому-либо событию», – пояснил руководитель Лаборатории речевых и многомодальных интерфейсов СПб ФИЦ РАН Алексей Карпов, слова которого приводятся в сообщении.

Система работает на основе нескольких нейросетей, которые обучали на десятке открытых для исследователей баз данных. Они содержат мультиязычные аудио- и видеозаписи людей разного возраста, пола и из разных стран. Для русскоязычной базы, например, привлекали студентов театральных вузов, которые изображали разные эмоции.

Программа умеет распознавать семь основных эмоций человека: радость, грусть, страх, отвращение, удивление, злость и спокойствие. Кроме того, она определяет общий эмоциональный тон – положительный, отрицательный или нейтральный.

Разработка представляет собой приложение с простым интерфейсом: в него можно загрузить любые аудио- или видеозаписи. Система автоматически обработает их и покажет результат – распознанные эмоции и общий тон.

Источник: tvbrics.com