CLAIM – научно-образовательный кластер

Экспериментальная система автоматизированного распознавания
экспрессивной составляющей мимики человека

Продолжение разработки: "Mimic Analyzer"

Содержание

Описание программы

Использованные алгоритмы

Структурная схема программы в формате UML

Описание программы

В рамках проекта «Экспериментальная система автоматизированного распознавания экспрессивной составляющей мимики человека» продолжена разработка программого комплекса «MIMIC ANALYZER».

Программа логически разделена на две части, которые тесно взаимодействуют между собой. Одна часть осуществляет обработку цифрового изображения лица человека. Друга часть анализирует полученные данные с помощью нейронной сети.

Предметная область:Существует множество визуальных методик классификации и трактования эмоций, но все они сложны и трудоемки для изучения, требуют специальной квалификации. Эксперт, как правило, владеет только одной методикой, а результаты его заключений носят субъективный характер. Ни одна из визуальных методик не стандартизирована и не описывает всего многообразия мимических проявлений. Затруднен сравнительный анализ результатов исследований эмоций, поскольку ученые используют разные методики, которые отличаются по видам и параметрам измерения.

Если экспериментальные данные получать посредством фото или видеосъемки и воспользоваться возможностью современных высокоскоростных процессоров обрабатывать большие объемы цифровых изображений, можно осуществить актуальную задачу автоматизации процесса описания и классификации эмоций.

Назначение: программа «MIMIC ANALYZER» разработана в качестве инструмента автоматизированного сбора и последующего анализа цифровых изображений лица человека на предмет определения эмоциональной составляющей мимической картины.

В качестве входных данных используются фото или видео файлы, а также видеопоток с web-камеры, обрабатываемый в режиме реального времени. Программа последовательно анализирует поступающие кадры. Результаты работы классификатора мимических картин заносятся в файлы отчета. В состав программного комплекса входит система подготовки классификатора мимических картин.

Программа реализована как модульная система, все компоненты которой взаимодействуют между собой. Модуль представления результатов можно видоизменять. Например, использовать систему в программе обмена мгновенными сообщениями и показывать смайлики, отражающие эмоции субъектов диалога. Таким образом, можно расширять круг применения системы.

В разных модификациях, программа будет полезна для проведения научных или экспертных исследований эмоций, а так же для создания коммуникационного инструментария.

Программа реализована как windows-приложение и как web-приложение.

Использованные алгоритмы

Для обработки цифрового изображения и поиска лица человека использована библиотека OpenCV.

В качесве классификатора выбрана искусственная нейронная сеть, обученная по алгоритму обратного распространения ошибки.

Структурная схема программы в формате UML

Рис.1. Диаграмма деятельности по ГОСТ 19.701-90.


 


 © http://www.philippovich.ru.
 Cайт находится в стадии разработки. Свои замечания, вопросы, информацию о возможных ошибках и неточностях просим сообщать по адресу: andrew@philippovich.ru, anna@philippovich.ru