Программно-аппаратный комплекс для распознавания эмоций по выражению лица человека

В современном, высокотехнологичном мире на смену механизации приходит новая главенствующая тенденция ­­­­­­­– автоматизация процессов. А с развитием искусственного интеллекта, в особенности нейросетевых технологий, стало возможным автоматизировать процессы, не поддающиеся обычной алгоритмизации. Например, определение тональности текста, распознавание речи­­.  В то же время умение эффективно общаться с людьми является неотъемлемой частью успешности многих видов профессиональной или бытовой деятельности.  Поэтому задача автоматизации процесса распознавания эмоций становится целесообразной для многих областей, в которых взаимодействие с людьми является необходимым.

Мы представляем проект, реализующий программно-аппаратный комплекс для распознавания эмоций по выражению лица человека. В своем решении мы используем Raspberry Pi для создания системы, не требовательной к ресурсам, чтобы получить легковесное портативное решение.

Цель проекта:

Разработать систему для распознавания эмоций в режиме онлайн, работающую на одноплатном компьютере Raspberry Pi на основе модели, объединяющей две нейронные сети ­– сеть для детекции лица и сеть для классификации эмоций.

Применение и пользователь:

Система распознавания эмоций может использоваться для автоматической оценки действий персонала, непосредственно взаимодействующего с клиентами (МФЦ, обслуживание на кассе) или для повышения эффективности проведения маркетингового исследования (A/B-тестирование, анализ реакции на рекламное объявление).

Реализация данного проекта требует решения слудующих задач:

• Поиск, разметка и обработка данных для задач детекции и распознавания эмоций;
• Разработка нейронной сети, детектирующей лицо человека на снимке;
• Разработка нейронной сети, определяющей эмоции по снимку лица;
• Объединение сетей в единую модель, обрабатывающую видеопоток изображений;
• Развертывание модели на Raspberry Pi и оптимизация скорости выдачи  предсказаний.