Исследователи Центр искусственного интеллекта при Московском государственном университете имени М.В. Ломоносова разработали мультимодальный фреймворк (программный каркас) HL-EAI (Человекоподобный эмоциональный ИИ – Human-Like Emotional Artificial Intelligence), позволяющий исследовать эмоциональную взаимность во взаимодействии человека и искусственного интеллекта.
Итоги исследования были озвучены на международной конференции ACM Multimedia (ACM MM), прошедшей в Дублине.
Современные системы, предназначенные для взаимодействия человека и искусственного интеллекта, умеют определять отдельные эмоциональные проявления пользователя. Однако, как правило, эти системы воспринимают эмоции как независимые характеристики и не принимают во внимание взаимный обмен чувствами, который возникает в ходе настоящего диалога. В настоящей работе изучается архитектура, способная учитывать данный фактор и обеспечивать более адекватные эмоциональные отклики системы во время взаимодействия с пользователем.
Предложенный фреймворк объединяет различные типы данных — текстовые, аудио- и видеоинформацию — для определения эмоционального состояния собеседников и создания ответов, соответствующих контексту беседы. Это позволяет учитывать эмоциональные изменения в процессе общения и изучать, как эмоции воздействуют на процесс принятия решений.
«Использование мультимодального подхода дает возможность интегрировать различные типы данных, такие как текст, речь и визуальные сигналы, что позволяет точнее определять эмоциональное состояние пользователя и формировать соответствующие ответы системы» , — прокомментировал Владислав Педашенко, младший научный сотрудник Центра искусственного интеллекта МГУ.
Данная платформа предназначена для проведения экспериментов, основанных на теории игр. В ходе подобных экспериментов участники принимают решения в различных стратегических ситуациях, что дает возможность изучать, как эмоциональный фон влияет на формирование доверия, сотрудничество и стратегические действия.
Фреймворк обеспечивает поддержку различных моделей взаимодействия, включая взаимодействие между людьми, взаимодействие человека с алгоритмом и взаимодействие алгоритмов друг с другом. Это дает возможность изучать, как эмоции влияют на коллективные решения и на действия алгоритмов в условиях стратегического взаимодействия.
Информация предоставлена пресс-службой МГУ