Нет слов — одни эмоции: российские студенты разработали новый софт для анализа мимики

Студенты Новгородского университета представили инновационное программное обеспечение, способное определять эмоциональное состояние человека на основе анализа мимики. Разработка может найти широкое применение в медицине, образовании, маркетинге и других сферах, где важен мониторинг психоэмоционального фона.

Фото: Freepik by freepik, https://creativecommons.org/public-domain/pdm/

Грустная девушка в наушниках

Принцип работы программы схож с технологией FaceID, однако в данном случае анализируются именно мимические мышцы лица. Система фиксирует группы мышц, их состояние — напряжение или расслабленность — и на основании совокупности этих данных определяет эмоции человека. Программное обеспечение способно распознавать семь базовых эмоциональных реакций: гнев, страх, радость, удивление, отвращение, нейтральное выражение и злость.

Один из разработчиков, студент направления "Информатика и вычислительная техника" Данила Ильин, пояснил, что программа использует несколько алгоритмов параллельного действия. В основе лежит метод FACS — научная система кодирования лицевых движений, а также математические модели и искусственный интеллект, которые анализируют стимулы и рассчитывают их интенсивность. Благодаря этому софт точно определяет эмоциональные проявления человека.

Созданная программа открывает новые горизонты для бизнеса и социальных структур. Например, в маркетинге она позволит компаниям лучше понимать реакцию клиентов на рекламные кампании и продукцию. В образовательных учреждениях технология может отслеживать эмоциональное состояние студентов, улучшая методику обучения и обеспечивая психологический комфорт.

В медицине разработка станет полезной для диагностики и мониторинга психического состояния пациентов, а также для анализа восстановления мимических функций после инсультов или других заболеваний. По словам разработчиков, в таких случаях программа не будет фиксировать конкретную эмоцию, а лишь указывать на наиболее вероятное состояние пациента.

Разработчики приложений смогут интегрировать эту технологию в свои продукты для улучшения пользовательского опыта, а индивидуальные пользователи смогут отслеживать собственное эмоциональное состояние в режиме реального времени.

Хотя на рынке уже существуют подобные решения, такие как EmoDetect, FaceReader и продукты Visage Technologies, новгородская программа выгодно отличается простотой интеграции через API и высокой адаптацией под русский язык. При этом качество распознавания эмоций остается на уровне мировых аналогов благодаря использованию FACS.

На данный момент команда завершила создание бета-версии продукта и успешно провела тестирование. В ближайших планах — расширение возможностей программы за счет обучения искусственного интеллекта распознавать более широкий спектр эмоций. Реализация этого этапа станет возможной благодаря гранту "Студенческий стартап", который команда выиграла в 2023 году.

Уточнения

Face ID — сканер объёмно-пространственной формы лица человека, разработанный компанией Apple и впервые применённый в смартфоне iPhone X