Метод прямой оценки лицевых экспрессий на видеозаписи: от восприятия эксперта к компьютерному зрению

Гусев, А.Н.; Баев, М.С.; Кремлев, А.Е.

Авторы: Гусев А.Н., Баев М.С., Кремлев А.Е.
Сборник: Социально-психологические проблемы цифровизации современного общества: личность, организация, управление
Глава в коллективной монографии
Год издания: 2021
Издательство: Тверской государственный университет
Местоположение издательства: Тверь
Первая страница: в печати
Аннотация: Реферат. Целью нашего практико ориентированного исследования была разработка методологии и технологии автоматизированного анализа лицевых экспрессий. Можно констатировать, что в настоящее время нет надежных методов для компьютерной оценки мимической активности по видеозаписям, работающих в соответствии с системой FACS. Мы разработали специализированное программное обеспечение F2F Emotion Studio для автоматизированной оценки микро- и макро лицевых экспрессий. Были созданы и использованы оригинальные (авторские) процедуры компьютерного зрения, которые позволили смоделировать процессы восприятия эксперта и прямо по изменению света на лице оценивать отдельные двигательные единицы FACS, базовые эмоции и сложные мимические паттерны. Эмпирическая проверка точности и надежности нашего программного обеспечения была выполнена с использованием двух международных баз данных видеозаписей микро- и макро движений лица - SAMM and CASME II. Описаны и критически оценены возможности двух принципиально разных подходов к анализу мимической активности – селективного и комплексного. Показаны преимущества второго подхода, практическая реализация принципов которого позволили нам с высокой точностью обнаруживать отдельные двигательные единицы и, таким образом решить задачу объективной оценки мимической активности.Ключевые слова: мимическая активность, двигательные единицы системы FACS, эмоции, компьютерное зрение, микро- и макро лицевые экспрессии.Abstract. Background: The purpose of our research is to develop an automatic facial expression analysis methodology and technology. Currently there are no reliable computer FACS (cFACS) tools for facial activity evaluation. We had developed our proprietary cFACS based F2F Emotion Studio software. Methods: The author's computer vision procedures for modeling of perceptive activity of FACS coding experts had been used. Empirical testing of the accuracy and reliability of developed software was carried out using the samples from SAMM and CASME II databases. Results: There are two main approaches for facial expressions automated analysis: selective and comprehensive. Selective analysis assumes search for matching facial expressions to samples from a set of 6-7 basic emotions. The comprehensive analysis is based on detection of AUs combination over time. We realized the second approach advantages when creating the F2F Emotion Studio software. Conclusions: The ability to precisely detect the main AUs and use them to describe real emotions and other types of facial activity allows us to advance in solving the problem of objective study of both macro- and micro-facial expressions.Key words: FACS action units, basic emotions, affective computing, micro and macro facial expressions.
Добавил в систему: Гусев Алексей Николаевич

	ИСТИНА	Войти в систему Регистрация
	ИСТИНА ЦЭМИ РАН
	Главная Поиск Статистика О проекте Помощь

ИСТИНА

ИСТИНА ЦЭМИ РАН

Метод прямой оценки лицевых экспрессий на видеозаписи: от восприятия эксперта к компьютерному зрениюстатья

Прикрепленные файлы