В России искусственный интеллект научили точнее распознавать человеческие эмоции

Теперь ИИ может анализировать мимику, голос и речь одновременно

В России сотрудники Сбербанка и НИУ ВШЭ научили искусственный интеллект точнее распознавать человеческие эмоции. Теперь он может анализировать мимику, голос и речь одновременно. Об этом пишет CNews со ссылкой на представителей финансовой организации — Сбербанка.

Новая технология сочетает в себе временные свёрточные сети (TCN) и трансформерные мультимодальные архитектуры. Это позволяет точнее считывать изменения эмоционального состояния во времени. Система демонстрирует рост точности более чем на 10 % по сравнению с лучшими моделями, анализирующими только выражения лиц. Разработку можно применять в бизнесе, сфере безопасности и социальной сфере.

Как отметил директор Центра практического искусственного интеллекта Сбербанка Андрей Савченко, система делает взаимодействие человека и искусственного интеллекта более естественным и осмысленным. Она будет особенно полезна в тех отраслях бизнеса, где понимание эмоций клиентов повышает качество сервиса. Технология уже продемонстрировала отличные результаты в тестах. В перспективе её можно адаптировать для виртуальных ассистентов, систем безопасности и даже для телемедицины. Аудиовизуальная модель функционирует даже тогда, когда не видно лицо или плохо слышен голос.

Разработка актуальна также для кол-центров, в маркетинговых исследованиях — для оценки реакции на продукты, а в системах безопасности — для выявления агрессии или паники.

Добавим, что учёные продолжают совершенствовать модель. Смеем предположить, что интерес к разработке будет только расти — как в России, так и за её пределами.