Российские исследователи разработали ИИ-систему, способную более точно интерпретировать информацию о чувствах пользователей. Это стало возможным благодаря одновременному анализу мимики, голоса и речи. Данная ИИ-система превосходит лучшие алгоритмы этого типа на 10%, которые опираются на единственный источник данных об эмоциях.

«Наша технология уже демонстрирует отличные результаты в тестах, и в будущем ее возможно адаптировать для виртуальных помощников, систем безопасности и телемедицины. Основное преимущество – гибкость. Аудиовизуальная модель функционирует даже при нехватке данных, например, когда лицо не видно или голос плохо слышен», – отметил научный директор Центра практического искусственного интеллекта «Сбербанка» Андрей Савченко.
Разработкой новой ИИ-системы занимались Савченко и его коллега из НИУ ВШЭ (Нижний Новгород) Алексей Андреев. Конструкция системы позволяет ей более точно отслеживать изменения эмоционального состояния с течением времени. Она способна распознавать сразу несколько источников информации, включая данные о мимике лица, особенностях голоса пользователя и структуре его речи.
По мнению ученых, их разработка может найти применение не только в области маркетинга, но и для повышения эффективности систем безопасности, где ИИ будет использоваться для определения агрессии или паники.
«Наша система способствует тому, чтобы взаимодействие человека и искусственного интеллекта стало более естественным и содержательным. Мы научились не только распознавать базовые эмоции, но и учитывать их динамику в реальных условиях – при различных условиях освещения, фоновом шуме и других помехах. Это особенно актуально для тех отраслей бизнеса, где понимание эмоций клиентов способствует улучшению качества сервиса», – добавил Савченко.
Ранее исследователи из Центра искусственного интеллекта НИУ ВШЭ и специалисты Лаборатории искусственного интеллекта «Сбербанка» разработали модель ИИ, которая проявляет эмоции в процессе общения с человеком. Для создания этой системы ученые применили ИИ-модели компьютерного зрения для распознавания выражений лиц.
ИИ-ребенок научился устраивать истерики


