УДК 00

АНАЛИЗ И ИССЛЕДОВАНИЕ МЕТОДОВ АВТОМАТИЧЕСКОГО ОПРЕДЕЛЕНИЯ И КОНТРОЛЯ ЭМОЦИОНАЛЬНОГО СОСТОЯНИЯ ПОЛЬЗОВАТЕЛЯ

Мишина Вера Евгеньевна
Волжский политехнический институт
студент 5-го курса направления 09.03.01 "Информатика и вычислительная техника"

Аннотация
В данной работе рассматриваются существующие методы определения эмоционального состояния пользователя системы, их применение в автоматизированных системы, а также методы управления эмоциональным состоянием пользователя.

Ключевые слова: методы диагностики эмоционального состояния пользователя, эмоциональное состояние пользователя


ANALYSIS AND RESEARCH OF METHODS FOR AUTOMATIC DETECTION AND MONITORING OF A USER'S EMOTIONAL STATE

Mishina Vera Evgenievna
Volzhsky Polytechnic Institute
student of the 5th year of the direction 09.03.01 "Informatics and computer engineering"

Abstract
In this paper, we consider existing methods for determining the emotional state of the user of the system, their application in automated systems, as well as methods for managing the emotional state of the user.

Рубрика: 05.00.00 ТЕХНИЧЕСКИЕ НАУКИ

Библиографическая ссылка на статью:
Мишина В.Е. Анализ и исследование методов автоматического определения и контроля эмоционального состояния пользователя // Современные научные исследования и инновации. 2017. № 4 [Электронный ресурс]. URL: http://web.snauka.ru/issues/2017/04/80863 (дата обращения: 02.06.2017).

Руководитель: Макушкина Лидия Александровна

старший преподаватель кафедры “Информатика и технология программирования”

Введение

Эмоции играют важную роль в человеческой жизни. Анализ эмоционального состояния человека даёт возможность отслеживать изменение поведения людей, их отношение к происходящим событиям. Эмоции влияют на когнитивные процессы и принятие решений. Поэтому потребность в определении эмоциональных реакций приобретает все большее значение. Проявление эмоций через телодвижения также остаётся всё ещё слабо изученной областью психологии, которая активно развивается в настоящее время.

Целью данной работы является: анализ эффективности методов автоматического контроля эмоционального состояния пользователя при работе с автоматизированной обучающей системой.

Для достижения поставленной цели были решены следующие исследовательские задачи:

  • Провести анализ и исследование методов диагностики эмоционального состояния пользователя, методов контроля эмоционального состояния пользователя и существующих систем диагностики эмоционального состояния пользователя.
  • Составить математическое описание модели автоматического контроля эмоционального состояния пользователя при работе с автоматизированной обучающей системой.
  • Выполнить программную реализацию модели автоматического контроля эмоционального состояния пользователя при работе с автоматизированной обучающей системой.
  • Проверить эффективность реализованных алгоритмов модели автоматического контроля эмоционального состояния пользователя при работе с автоматизированной обучающей системой.

Постановка задачи

Для более точного понимания того, как надо выполнять контроль эмоционального состояния пользователя первоначально необходимо определить его текущее эмоциональное состояния. Для этого был выполнен анализ методов определения эмоционального состояния пользователя такие как: определение состояния с помощью WiFi, с помощью видеоизображения и по эмоциональной реакции при речевом взаимодействии. Был выбран метод, основанный на видеоизображении, т.к. он не требует установки дополнительно оборудования, а достаточно наличия web-камеры для получения изображения и существует достаточно большое количество библиотек, позволяющих выделить контр лица и определить положения глаз, губ и т.д.

Далее был выполнен анализ существующих систем, позволяющих выполнить диагностику эмоционального состояния. Были рассмотрены такие системы как: FaceReader, eMotion Software и GladOrSad, MMER_FEASy — the FacE Analysis System, FaceSecurity. Все рассмотренные системы работают с изображением лица пользователя, полученного от web-камеры.

В заключении были проанализированы методу управления эмоциональным состоянием.

Первой составной частью комплекса управления психическим состоянием является оперативная система экспресс-диагностики психофизиологических возможностей студентов к восприятию учебной информации и к ее переработке в знания, умения и навыки, а также уровня стрессовой напряженности умственной деятельности. Второй составляющий является оперативное реагирование на изменение эмоционального состояния студента в худшую сторону и переключение его внимание на другой вид деятельности.

В качестве критериев для сравнительного анализа программных продуктов, выберем следующие:

A1 – получение изображения от web-камеры;

A2 – выделение контура лица на снимке;

A3– определение эмоционального состояния человека по снимку;

A4 – адаптация поведения системы в зависимости от эмоционального состояния пользователя;

A5 – хранение информации об изменении состояния пользователя в БД.

Для определения весов критериев воспользуемся аналитической иерархической процедурой Саати.

Матрица парных сравнений, средние геометрические и веса критериев представлены в таблице 1.

Таблица 1 – Матрица парных сравнений, средние геометрические и веса критериев

A1

A2

A3

A4

A5

Среднее геометрическое

Веса критериев

A1

1

1/3

1/5

1/5

1/5

0,31

0,046

A2

3

1

1/3

1/5

1/3

0,58

0,087

A3

5

3

1

1/3

3

1,72

0,258

A4

5

5

3

1

3

2,95

0,443

A5

5

3

1/3

1/3

1

1,11

0,166

Сумма

6,67

1

Диаграмма весовых коэффициентов для критериев A1, A2, A3, A4, A5 представлена на рис. 1.

Рисунок 1 – Весовые коэффициенты критериев качества

Выполним проверку матрицы попарных сравнений на непротиворечивость.

Суммы столбцов матрицы парных сравнений:

R1=19; R2=12,3; R3=4.87; R4=2.07; R5=7.53.

Путем суммирования произведений сумм столбцов матрицы на весовые коэффициенты альтернатив рассчитывается вспомогательная величина L = 5.37. Индексом согласованности ИС = (L-N)/(N-1) = 0.09.

Величина случайной согласованности для размерности матрицы парных сравнений: СлС = 1.12.

Отношение согласованности ОС=ИС/СлС = 0.082. не превышает 0.2, поэтому уточнение матрицы парных сравнений не требуется.

Используя полученные коэффициенты определим интегральный показатель качества для программных продуктов определения эмоционального состояния человека:

  1. Система FaceReader
  2. Система eMotionSoftware и GladOrSad
  3. СистемаMMER_FEASy — the FacE Analysis System
  4. Система FaceSecurity
  5. Разрабатываемая система

Выберем категориальную шкалу от 0 до 7 (где 0 – качество не удовлетворительно, 7 – предельно достижимый уровень качества на современном этапе) для функциональных возможностей программных продуктов.

Значения весовых коэффициентов ai соответствующие функциональным возможностям продуктов:

  1. получение изображения от web-камеры a1=0.046;
  2. выделение контура лица на снимке a2=0.087;
  3. определение эмоционального состояния человека по снимку a3=0.258;
  4. адаптация поведения системы в зависимости от эмоционального состояния пользователя a4=0.443;
  5. хранение информации об изменении состояния пользователя в БД a5=0.166.

где ∑ai = 1.

Определим (по введенной шкале) количественные значения функциональных возможностей Xij(таблица 2). Вычислим интегральный показатель качества для каждого программного продукта.

Таблица 2 – Интегральные показатели качества

Критерии

Весовые коэф-ты

Программные продукты

Базовые знач-я

Разраба-тываемая система

FaceReader

eMotionSoftware

MMER_FEASy

FaceSecurity

a1 0,046

7

0

7

7

5,25

7

a2 0,087

6

0

4

5

3,75

6

a3 0,258

5

4

4

3

4

5

a4 0,443

1

1

2

1

1,25

5

a5 0,166

2

2

1

4

2,25

4

Интегр. показ-ль качества Q

2,909

1,807

2,754

2,638

2,527

5,013

где Qj=∑ai*Xij интегральный показатель качества для j-го программного средства.

Построим лепестковую диаграмму интегрального показателя качества каждого программного продукта (рис. 2).


Рис. 2 – Лепестковая диаграмма интегральных показателей качества программных продуктов

Лепестковая диаграмма значений характеристик качества функциональных возможностей (критериев) представлена на рисунке 3.


Рис. 3 – Лепестковая диаграмма значений функциональных характеристик

На рисунке 4 показана диаграмма верхнего уровня процесса «Обучение и управлением эмоциональным состоянием пользователя».


Рисунок 4 — Диаграмма верхнего уровня процесса «Обучение и управлением эмоциональным состоянием пользователя».

Входной информацией являются следующие данные: лекции и контрольные тесты (лекции загружаются в виде файла rtf, тесты создаются вручную), ответы студента на тесты и изображения пользователя, полученной от web-камеры. Данная входная информация используется на всех этапах процесса обучения.

Выходной информацией в процессе обучения и управления эмоциональным состоянием пользователя являются: результаты оценки знаний студента и значения коэффициентов модели действий пользователя системы.

Исполнителями процесса являются студент, преподаватель и информационная система (ИС*).

Управление процессом осуществляется на основании математической модели автоматизированной обучающей системы и модели управления эмоциональным состоянием пользователя.

На рисунке 5 показана детализация процесса «Обучение и управлением эмоциональным состоянием пользователя».


Рисунок 5 — Декомпозиция диаграммы А1 «Обучение и управлением эмоциональным состоянием пользователя».

Процесс обучения и управления эмоциональным состоянием пользователя осуществляется в пять этапов:

  1. «работа с лекциями или тестовыми заданиями» – на данном этапе преподаватель осуществляет ввод лекций, загружаемых из файла в формате rtf, также преподаватель выполняет ввод вопросов и вариантов ответов контрольного теста;
  2. «визуализация лекций» – на данном этапе выполняется вывод материала, предназначенного для изучения студентом;
  3. «диагностика состояния студента» – система периодически выполняет сохранение изображения лица пользователя, полученного с web-камеры, далее производится анализ данного изображения с выделением контура лица, контуров глаз и губ и определение эмоционального состояния студента, также на данном этапе система принимает решения о необходимости выдачи рекомендаций по изменению состояния пользователя;
  4. «тестирование знаний» – на данном этапе система отображает студенту перечень вопросов для определения уровня его знаний по изученному материалу;
  5. «сохранение результатов тестирования и диагностики в БД» – на данном этапе выполняется сохранение результатом контроля знаний в БД, а также сохранение полученного эмоционального состояния пользователя в БД.

Библиографический список
  1. Вагина В.Е., Макушкина Л.А. Анализ методов определения психофизического состояния обучаемого по фотографическим снимкам// Вагина В.Е., Макушкина Л.А. NovaInfo.Ru. 2015. Т. 1. № 32. С. 9-15.
  2. Макушкина Л.А., МарьяновскийА.В. анализ существующих технологий smart-обучения //Макушкина Л.А., МарьяновскийА.В.NovaInfo.Ru. 2016. Т. 3. № 46. С. 54-56.
  3. Марков К.К,Николаева О.О. Управление психическим состоянием студента в учебно-производственной деятельности ВУЗа//СОВРЕМЕННЫЕ ПРОБЛЕМЫ НАУКИ И ОБРАЗОВАНИЯ Издательство: Издательский Дом “Академия Естествознания” (Пенза) eISSN: 2070-7428 №6 2013 г.
  4. Котин А.И., Рыбанов А.А. Сравнительный анализ существующих программных средств оценки восприятия человеком зрительной информации//NovaInfo.Ru. 2016. Т. 3. № 56. С. 116-122.
  5. Панкова Л.А., Рыбанов А.А. Исследование методов адаптации к обучаемому в современных компьютерных обучающих системах  // Актуальные вопросы профессионального образования. 2008. Т. 5. № 5 (43). С. 67-69.
  6. Рыбанов А.А. Технологии удаленного управления компьютером в повышении эффективности взаимодействия участников образовательного процесса.//Дистанционное и виртуальное обучение. 2010. № 9. С. 28-34.
  7. Rybanov A.A. Educational information quantization for improving content quality in learning management systems//Turkish Online Journal of Distance Education. 2014. Т. 15. № 4. С. 303-321.


Все статьи автора «Мишина Вера Евгеньевна»


© Если вы обнаружили нарушение авторских или смежных прав, пожалуйста, незамедлительно сообщите нам об этом по электронной почте или через форму обратной связи.

Связь с автором (комментарии/рецензии к статье)

Оставить комментарий

Вы должны авторизоваться, чтобы оставить комментарий.

Если Вы еще не зарегистрированы на сайте, то Вам необходимо зарегистрироваться: