ВЕСТНИК ЮГОРСКОГО ГОСУДАРСТВЕННОГО УНИВЕРСИТЕТА
_2021 г. Выпуск 3 (62). С. 59-67_
DOI: 10.17816/byusu20210359-67 УДК 621.397
Исследование выполнено при финансовой поддержке РФФИ в рамках научного проекта 18-47-860018 р_а.
О. Л. Исаева, М. П. Бороненко
ЭКСПЕРИМЕНТАЛЬНЫЕ МЕТОДЫ ПУПИЛЛОГРАФИЧЕСКОГО АНАЛИЗА НА ОСНОВЕ ПРИБОРОВ ВЫСОКОСКОРОСТНОЙ ВИДЕОСЪЕМКИ
Перспективы применения искусственного интеллекта в видеоаналитике становятся все более неоспоримыми. Исследователи активно работают над методами принятия решений, принимаемых на основании результатов автоматизированного анализа последовательности изображений, поступающих с видеокамер. Целью нашего исследования стала разработка методики принятия решений на основе моделирования зрачковой реакции человека на информационный раздражитель. Для исследований применяли цифровую видеокамеру ZWO ASI120MC. Проведенные исследования позволили достоверно установить, что состояние оптической системы глаза при просмотре калибровочного слайда приходит к физическому состоянию, общему для всех людей. Это позволило систематизировать пупиллограммы, относя их к одной из двух категорий (стрессовое состояние есть/нет). Определив при калибровке индивидуальное пороговое значение, становится возможным проводить быструю классификацию эмоциональной реакции человека на полученный информационный импульс. На основании разработанной методики систематизации зрачковой реакции на информационный раздражитель по категориям построено дерево принятия решений для интеллектуальных систем видеонаблюдения. Помимо размеров зрачков алгоритм учитывает параметры фиксации взгляда на стимульных изображениях, стабильность освещенности поверхности зрачков.
Ключевые слова: пупиллограммы, модели зрачковых реакций, принятие решений.
O. L. Isaeva, M. P. Boronenko
EXPERIMENTAL METHODS OF PUPILLOGRAPHIC ANALYSIS BASED ON HIGH-SPEED VIDEO RECORDING DEVICES
The prospects for using artificial intelligence in video analytics are becoming more and more undeniable. Researchers are actively working on methods for making decisions based on the results of automated analysis of the sequence of images received from video cameras. The purpose of our study was to develop a method for decision-making based on modeling a person's pupillary response to an information stimulus. A ZWO ASI120MC digital video camera was used for research. The studies carried out made it possible to reliably establish that the state of the optical system of the eye when viewing the calibration slide comes to a physical state common to all people. This made it possible to systematize the pupillograms, referring them to one of two categories (stress state is / is not). Having determined an individual threshold value during calibration, it becomes possible to quickly classify a person's emotional response to the received information impulse. Based on the developed methodology for systematizing the pupillary reaction to an information stimulus by categories, a decision tree for intelligent video surveillance systems was built. In addition to the size of the pupils, the algorithm takes into account the parameters of gaze fixation on stimulus images, the stability of the illumination of the surface of the pupils.
Keywords: pupillograms, pupil response models, decision making.
Введение
Перспективы применения искусственного интеллекта в видеоаналитике становятся все более неоспоримыми. Исследователи активно работают над методами принятия решений, принимаемых на основании результатов автоматизированного анализа последовательности изображений, поступающих с видеокамер. Также ведется разработка средств, обеспечивающих оптимизацию взаимодействия человека и техники. Стремление научить понимать машину, что чувствует или хочет человек, ставит задачу моделирования реакции человека, в зависимости от условий, в которых он находится. Самым сложным является поиск паттернов, которые искусственный интеллект сможет распознавать или имитировать.
Алгоритмы видеоаналитики чаще всего используются в видеонаблюдении и других сферах безопасности. В таких системах обычно ведется поиск определенной личности [1], наркоманов [2], непосредственно совершающих противоправные действия. Разрабатываются методы, направленные на заблаговременное выявление опасных личностей. Известно, что внешние признаки эмоциональных состояний и форм поведения можно рассматривать как характеристики профиля потенциально опасных людей [3]. Одним из наиболее характерных признаков нештатных террористов — наличие сильной тревоги, попытках обмана и манипуляции [3]. При обязательном учете и других признаков, наличие стрессового (напряженного) состояния является одним из основных показателей, который можно применять для выявления опасных личностей. В стрессовом состоянии эмоциональная реакция человека отличается от обычной [4]. Babiker A. et al. [5] разработали метод обучающей машины для обнаружения и отличия положительных и отрицательных эмоций (a learning machine technique to detect and differentiate between positive and negative emotions.) на основании изменения диаметра зрачка в ответ на звуковые сигналы. Однако, данный метод не позволит указать причину эмоционального возбуждения при использовании в реальных условиях, так невозможно подтвердить наличие причинно-следственной связи.
Человек, особенно обученный, хорошо умеет скрывать свои эмоции и намерения. Поэтому принятие решений о злых намерениях не должно основываться только на присутствии улыбки на лице или отсутствии таковой. Поэтому актуально выявление паттернов, которые можно использовать для прогнозирования поведения человека и создания соответствующих алгоритмов.
Для выявления лжи и прогноза возможных действий обычно используют полиграф. Один из измеряемых параметров на полиграфе это кожно-гальваническая реакция (КГР). Zhang T. et al. [6] создали алгоритм, который извлекает основанные на корреляции признаки (диаметр зрачка и проводимость кожи). Так как КГР и размер зрачков коррелируют, то зрачковую реакцию можно использовать в системах безопасности, в которых наблюдение должно быть ненавязчивым (скрытым). Вероятность успеха увеличивают работы по повышению точности локализации и оконтуривания зрачка. Khan W. et al. [7] предлагают метод грубой и тонкой локализации зрачка, использующего комбинацию алгоритмов машинного обучения и обработки изображений. Предложенный метод превосходит предыдущие работы с точки зрения точности и надежности при бенчмаркинге на нескольких стандартных наборах данных.
Цель работы: разработать методику принятия решений на основе моделирования зрачковой реакции человека на информационный раздражитель. Для этого мы решаем следующие задачи:
1. Разработать методику систематизации пупиллограмм.
2. Построить модели зрачковых реакций, которые будут соответствовать определенной категории пупиллограмм.
3. Построить дерево принятия решений с применением разработанной методики.
Методы и техника эксперимента
Использование в системах безопасности пупиллографии и айтрекинга приводят к необходимости анализировать большой объем информации. Входными данными является последовательность изображений зрачков, по сути набор окружностей разных размеров. Чтобы
производить анализ зрачковой реакции и делать какие-то выводы о психофизическом состоянии человека, нужно систематизировать эти входные данные.
Для получения пупиллограмм использовали цифровую видеокамеру ZWO ASI120MC (30 fps, объектив с оптическим увеличением 1X-100X), шлем, с помощью которого создается жесткая координатная связь с видеокамерой. Основой шлема является каркас сварочной маски, обтянутый мягким материалом. Видеокамера крепится к плоскости, приваренной к полой алюминиевой трубке. Крепление позволяет корректировать наклон видеокамеры и направить объектив на зрачок глаза [8, 9]. Трубка пропускается через два отверстия в каркасе шлема. Величина отверстий регулируется, что позволяет зафиксировать положение трубки. Намеренный сдвиг трубки вдоль оси отверстий делает возможным регулировать расстояние между объективом и глазом. Это позволяет улучшить качество получаемых видеофайлов. Модуль для исследования пупиллограмм представлен на рисунке 1.
Рисунок 1 - Пупиллографический модуль для регистрации изменений размера зрачка
Жесткая связь видеокамеры с головой позволяет избежать искажений трека внимания и облегчает обработку изображений. Анализ полученных результатов осуществлялись в два этапа. Препарирование изображений, обработка и оконтуривание зрачков проводилось с помощью программы 1ша§е1. Визуализация результатов была проведена в программе Оп§т19.
Для эксперимента были приглашены добровольцы, всего приняло участие более 60 студентов (юношей и девушек различных национальностей). Все испытуемые не имели болезней глаз или же зрение было скорректировано (очки, линзы). Во время эксперимента участники по очереди располагались на стуле, шлем надевали на голову, с экрана монитора демонстрировали стимульный материал. Между человеком и монитором было расстояние, при котором изменение освещенности поверхности глаза, обусловленная свечением монитора, становится несущественным.
Испытуемым поочередно через равные промежутки времени предоставлялись изображения (тест-объекты), несущие заранее запланированную информацию, и калибровочные слайды. Ничего запрещенного не демонстрировалось. Для проведения экспериментов использовалась презентация, каждый слайд которой содержит один из стимулов (изображений) с наиболее вероятным эмоциональным откликом. Стимульные изображения выбирались на основании статистического анализа результатов социального опроса. Участники опроса оценивали величину эмоций, вызванных при просмотре предложенных изображений (тест-объектов). Соответственно результатам опроса по шкале от 0 до ±5 (самая сильная эмоция): слайды, содержащие изображение сколопендры, пауков вызывают эмоциональную реакцию с вероятностью р=0,42; изображение гробовых плит вызывает эмоцию с вероятностью р=0,64. Информация, содержащаяся на изображениях, несмотря на тривиальность, должна по-разному воздействовать на испытуемых. Некоторые боятся насекомых, некоторые к ним равнодушны и т. д. Поэтому реакция на стимульный материал ожидалась разной: от равнодушия до проявления страха (стресса, напряженного состояния). Перед испытанием каждого участника инструктировали, о требованиях к процедуре испытания и порядке ее прохожде-
ния. Также для каждого участника проводится регулировка кресла и экрана монитора, поскольку каждый человек имеет свои физиологические особенности. Общее время всей процедуры исследования занимает не более 5 минут, что не влияет на утомляемость респондента, но достаточно для отслеживания зрачковой реакции на информационный стимул [10]. После окончания эксперимента испытуемому предлагали оценить возникшее эмоциональное состояние при просмотре тест-объектов. Все участники после окончания эксперимента были довольны.
Модели данных
Прогнозирование поведения человека необходимо осуществлять методами, совместимыми с методами машинного обучения. Один из способов - это формализация эмпирических данных и представление их в виде математических моделей и алгоритмов.
Последовательно зарегистрированные пупиллограммы представляют собой сложную функцию чередующихся минимумов и максимумов. Зависимость размера зрачков от времени, в общем виде, можно представить вводя поправочные коэффициенты, учитывающие факторы, оказывающие основное влияние на изменение размеров - освещенность £(t), триадную реакцию [11] a(t) и испытываемую эмоцию (напряжение) или повышенное внимание ¥(t) (1):
5(t) = 5e(t)a(t)^(t). (1)
Для того, чтобы расшифровывать такие графики правильно, нужно знать, какой из пиков чем обусловлен. Так как стрессовое состояние характеризуется отличной от нормы эмоциональностью, то необходимо классифицировать пупиллограммы: содержащие эмоции и не содержащие.
Чтобы систематизировать пупиллограммы и находить в них участки эмоциональной реакции человека, нужно выбрать, относительно чего рассматривать изменение размеров зрачков. Широкий спектр внутренних и внешних причин, влияющих на зрачковую реакцию, не позволяет назвать конкретный диаметр зрачков, относительно которого нужно рассматривать все пупиллограммы. Даже среднестатистическое значение нельзя принять за точку отсчета. Однако при всем различии есть общий для всех физический принцип функционирования оптической системы глаза, которое позволяет сделать выбор. В связи с этим, на пупил-лограммах участки концентрации внимания находятся ниже калибровочного уровня (индивидуально). Их можно считать волнами внимания и отнести их к процессу распознавания объектов человеком. Соответственно, после идентификации наблюдаемого объекта человек автоматически оценивает его уровень значимости, в результате чего возникает/не возникает эмоциональный отклик (напряженное состояние). Если эмоциональная реакция не возникает, то размеры зрачка продолжают флуктуировать вокруг калибровочного значения до поступления новой информации.
Модель М0 (калибровочная)
Для того чтобы иметь возможность сравнивать пупиллограммы разных людей нужно нормировать данные. Нормировка должна быть индивидуальна, и должна учитывать первоначальное психофизическое состояние человека. Этим требованиям отвечает состояние зрительной системы человека (при наблюдении калибровочных слайдов). Нормировка делает возможным сравнивать пупиллограммы разных людей. Для проверки данного факта были проведены эксперименты [12] по описанной выше методике. Предварительно данные подвергались очистке от артефактов, обусловленных морганием. Проверка данных на нормальность дала отрицательный результат (большая часть данных не подчиняются закону нормального распределения), несмотря на то что объемы выборок достаточно большие. Так как в данном случае исследовалась зрачковая реакция разных людей, было принято решение применять критерий Краскела-Уоллиса, иногда еще называемый непараметрическим дисперсионным анализом. Критерий Краскела-Уоллиса рассчитывается с использованием не фактических значений переменных, а их рангов, поэтому является методом выбора при сильно скошенных распределе-
ниях. Так же, как и дисперсионный анализ, критерий Краскела-Уоллиса позволяет выяснить, имеются ли различия между группами. По результатам статистического анализа установлено, что при просмотре калибровочных слайдов зрачковая реакция достоверно не отличается: the difference of the means is not significant at the 0.01 level (Таблица 1). Это является очень важным выводом, т. к. дает основание для построения трехуровневой модели зрачковой реакции. Пупил-лограммы, отнесенные к этому уровню хорошо описываются Weibull peak function (2) и (3):
В работе Mortensen Uwe [13] рассматривается возможность применения распределения Weibull для определения психометрической функции. Интерпретация параметров модели активности нейронов, генерируемой стимулом, сложна. Поэтому функцию Weibull можно осмысленно использовать только в качестве приближения. Тем не менее, прослеживается связь психометрической функции с активностью зрительной системы. Таким образом, полученный результат позволяет систематизировать пупиллограммы и построить трехуровневую модель зрачковых реакций, которая обеспечивает сохранение индивидуального подхода.
Как известно, даже в условиях отсутствия эмоций, при рассматривании деталей изображения центр внимания смещается. Это приводит к изменению размеров зрачков, в соответствии с угловыми размерами рассматриваемого объекта и испытываемыми эмоциями. На слайды с изображением высоты, вероятность даже слабого эмоционального отклика оказалась мала (р<0,1). Таким образом, согласно статистическому анализу, это изображение вызывает только внимание при рассматривании деталей. Поэтому эти изображения можно использовать при моделировании внимания в пупиллограммах без эмоций. Таким образом, слайды презентации включали изображения, на которые реакция наиболее вероятна. При просмотре калибровочных слайдов, полезная информация равна нулю, состояние зрачка, соответственно статистическому анализу (таблица 1) не отличается от калибровочного состояния. При просмотре изображений, не вызывающих эмоции, изменение размеров зрачков объясняется только аккомодацией и скольжением взгляда по рассматриваемому объекту (при прочих равных условиях). Если же при просмотре стимульного материала у человека появляются эмоции, значит информация была важной. Сильные эмоции приводят к превышению калибровочных значений относительного размера зрачков. Поэтому проверялась гипотеза H0: Выборка пупиллограмм респондентов, рассматривающих изображения, не вызывающих эмоционального отклика не отличается от выборок пупиллограмм респондентов, рассматривающих калибровочный слайд и не испытывающих эмоцию.
Зрачковая реакция на стимул, вызывающий эмоцию, должна быть другая. Поэтому проверялась еще одна гипотеза H0: Выборка пупиллограмм респондентов, рассматривающих изображения, которые с наибольшей вероятностью должны вызывать эмоциональный отклик, не отличается от выборок пупиллограмм респондентов, рассматривающих калибровочный слайд и слайд, не вызывающий эмоций.
Для связных выборок, проверка статистических гипотез осуществляется Friedman ANOVA. Таким образом, достоверно отличаются друг от друга зрачковые реакции на калибровочный слайд, на слайд, вызывающий эмоции и не вызывающий эмоциональной реакции.
Выбор метода статистического анализа основан на том, что сравниваемые пупиллограммы принадлежат одним и тем же людям, но относятся к разным тест-объектам. Поэтому выборки пупиллограмм относятся к зависимым группам. Для связных выборок, проверка статистических гипотез осуществляется Friedman ANOVA. Результаты показаны на рисунке 2а, в таблице 1.
(2)
(3)
Модель М1 (внимание) и Модель М2 (стресс/эмоция)
Таблица 1 - Friedman Anova
Descriptive Statistics
N Min Q1 Median Q3 Max
«non-emotional stimulus 1» 103 0.838 0.879 0.918 0.940 1.005
«non-emotional stimulus 2» 103 0.882 0.900 0.916 0.935 1.081
«calibration» 103 0.901 0.966 1 1.041 1.112
Ranks
N Mean Rank Sum Rank
«non-emotional stimulus 1» 103 1.665 171.5
«non-emotional stimulus 2» 103 1.519 156.5
«calibration» 103 2.816 290
Test Statistics
Chi-Square DF Prob>Chi-Square
103.84951 2 0
At the 0.01 level, the populations are significantly différent. Это означает, что даже без эмоциональной реакции размеры зрачков отличаются от нормально расширенного состояния, что объясняется концентрацией взгляда на деталях изображения, то есть распознаванием предметов на изображении. Аппроксимация экспериментальных участка пупиллограммы, характеризуемый как «концентрация внимания» представлена на рисунке 2б.
Рисунок 2 - а) результаты сравнения зрачковой реакции на разные стимулы: б) аппроксимация экспериментальных участка пупиллограммы, характеризуемый как
«концентрация внимания»
Подбор математической модели для участка пупиллограммы, характеризуемый как «концентрация внимания» показал, что Weibull3Pos лучше описывает экспериментальные данные, чем Gaussian. Модель М1 «концентрация внимания» также учитывает индивидуальные особенности человека.
В случае наличия эмоции подтверждено отличие зрачковой реакции, чем при безразличии. Одна и та же информация может быть значимой для одного индивида и не представляющей интерес для другого. Чем важнее информация, тем большую эмоцию она может вызвать. В процессе распознавания и осознания поступающей информации размеры зрачков изменяются в зависимости от величины испытываемых эмоций (пропорционально уровню значимости). Соответственно, после идентификации наблюдаемого тест-объекта каждый человек автоматически оценивает его уровень значимости для себя, в результате чего возникает/не возникает эмоциональный отклик. Если стимул несет важную информацию для индивида, то изменение размеров зрачков, обусловленное эмоцией, превосходит изменения, вносимые напряженными глазными мышцами. При возникновении устойчивой сильной эмоции (или напряженного состояния) на пупиллограммах наблюдается рост относительного значе-
ния размеров зрачка. На кривую эмоционального роста накладываются более мелкие - волны концентрации внимания. Понятно, что Weibull функция зависит от его параметров более гибким образом, чем распределение Гаусса. Однако в случае пупиллограммы, содержащей эмоциональные участки, функция не может быть адаптирована к данным. Различие зрачковой реакции приводит к тому, пупиллограмму с наличием stress/emotion лучше описывает функция Gaussian (рис. 3).
Рисунок 3 - Динамика зрачковой реакции на информационный стимул: серая область - калибровка; зеленая область - концентрация внимания; желтая область - стресс/эмоция
Очевидно, что модель находится в согласии с теорией [14]: при продолжительном воздействии различных факторов эмоции накапливаются. Так же и при проявлении слабых эмоций. Новая информация (несколько тест-объектов подряд), приводит к возрастающему психологическому напряжению, наблюдается кумулятивный эффект. В отличие от МО и М1 математическая модель М2 лучше описывается Gaussian. Благодаря нормировке математическая модель также учитывает индивидуальные особенности человека.
На данном этапе исследований можно выделить три категории (уровня) пупиллограмм. Категория (уровень) 1 - это калибровочные пупиллограммы. Данная категория (уровень) описывает общее для всех людей состояние зрительной системы, характеризующееся индивидуальными особенностями каждого. Категория (уровень) 2 - область фокусировки внимания. Категория (уровень) 3 - это эмоциональное состояние/психологическое напряжение человека.
Уровневая модель зрачковой реакции и алгоритм принятия решений
Одной из задач современных систем безопасности является предупреждение противоправных действий. Также выявление напряженного состояния человека важно и в других областях. В предлагаемой методике принятие решения осуществляется на основе синхронизированных данных айтрекинга и пупиллограмм.
Как показано выше, выборки пупиллограмм, соответствующих уровням распознавания ЬЯ (или аккомодации, фокусировке на деталях изображения) и эмоциональной реакции ЬБ (информация важна для индивида) достоверно отличаются. Следовательно, на любой пупил-лограмме можно выделить от 1 до 4 зон (рис. 3). Таким образом, измерив ширину зоны пупиллограммы, соответствующей калибровочному Ь0 состоянию зрачков, и отметив ее на всей пупиллограмме (выполнить индивидуальную настройку пупиллографического модуля), становится возможным быстро определить психофизическое состояние человека. На основании того, к какому уровню отнесена реакция человека будет приниматься решение, например, системами безопасности. Этот подход применим для построения алгоритма принятия решений. Кроме размеров зрачков, как минимум, следует синхронно отслеживать трек внимания, контролировать освещенность.
Для построения алгоритма принятия решений в системах безопасности нужно применять следующий подход. На мониторе, при описанных выше условиях, демонстрируют изображения определенной тематики. В качестве стимулов могут применяться изображения, содержащие подробности, которые могут знать малый процент людей. Такие подробности обычно не вызывают интереса у несведущих. Тогда вероятность того, что область интереса и трек центров внимания совпадут не более 0,1. Ведется видеонаблюдение зрачковой реакции в ответ на полученную на информацию. Человек, который видит стимул проявляет свой интерес тем, что фокусирует взгляд на значимых элементах изображения. В зависимости от степени значимости информации, содержащейся в изображении, проявляется эмоция/ напряженность. Для таких тест-объектов дерево принятия решения можно представить в виде (рис. 4):
Track did not с о
ГС
interest E £ с
Track coincided CL о
with area of GJ □û
interest m U
S S-*1 U О. О 1/1 1с
О: с
S TZ>1
с О и
Track did not
match area of
interest
Track coincided
with area of
interest
« i
> i
potential
respondent
found (p>0,5)
the likelihood
that this is the
respondent
p=0,5
the likelihood
that this is the
respondent is
immaterial
a person in a
tense state is
found with a
high probabi ity
continue observation
remove observation
Рисунок 4 - Дерево принятия решений
Расширенное дерево решений должно включать стабильность освещенности, масштаба и другие параметры. Точность принятия решений повышается с увеличением количества итераций.
Основные выводы
На основании проведенных экспериментов установлено:
1. Участки пупиллограмм - зрачковых реакций на калибровочные слайды М0 и стимулы, не вызывающие эмоций М1 описывается функцией Weibull3Pos и учитывают индивидуальные особенности человека. Пупиллограмма, описывающая состояние психологического напряжения/эмоции благодаря нормировке, также учитывает индивидуальные особенности человека и лучше описывается функцией Gaussian. Математическая формализация пупиллограмм в будущем может позволить идентифицировать конкурирующие процессы сжатия - расширения зрачков.
2. Достоверно установлено (at the 0.01 significance level), что не отличаются зрачковые реакции разных людей на калибровочный слайд. Достоверно установлено (at the 0.01 significance level) отличие зрачковой реакции на эмоциональный стимул.
Этот факт позволил систематизировать пупиллограммы по категориям, относя их к одному из уровней: калибровочному L0, распознавания LR, состояние психологического напряжения/эмоции LE. Разбиение на уровни индивидуально для каждого человека.
3. Описанная методика систематизации пупиллограмм по категориям позволяет построить дерево принятия решений для интеллектуальных систем видеонаблюдения. Алгоритм позволяет определить: нужно ли продолжать видеонаблюдение за объектом, или нет.
Результаты исследований могут быть полезны в медицине при выявлении стрессового состояния человека, в образовании, в системах искусственного интеллекта.
Литература
1. Кольцов, А. С. Использование алгоритмов видеоаналитики в задачах выделения и распознавания человеческого лица в цифровом видеосигнале / А. С. Кольцов, Т. Е. Урусова, П. Ю. Гусев. - Текст : непосредственный // Техника и безопасность объектов уголовно-исполнительной системы. - Воронеж, 2018. - С. 33-35.
2. Бороненко, М. П. Телевизионная измерительная система наносекундного разрешения / М. П. Бороненко, П. Ю. Гуляев. - Текст: непосредственный // Доклады Томского государственного университета систем управления и радиоэлектроники. - 2014. - № 1 (31). - С. 60-64.
3. Каменева, М. Е. Психологические профили потенциально опасных лиц / М. Е. Каменева. - Текст : непосредственный // Вестник Московского университета МВД России. -2010. - № 11. - С. 12-18.
4. Elevated response of human amygdala to neutral stimuli in mild post traumatic stress disorder: neural correlates of generalized emotional response / M. Brunetti [et al.] // Neuroscience. -2010. - Т. 168, №. 3. - P. 670-679.
5. Machine learning to differentiate between positive and negative emotions using pupil diameter / A. Babiker [et al.] // Frontiers in psychology. - 2015. - № 6. - P. 19-21.
6. CorrFeat: correlation-based feature extraction algorithm using skin conductance and pupil diameter for emotion recognition / T. Zhang [et al.] // 2019 International Conference on Multimodal Interaction. - 2019. - P. 404-408.
7. Pupil Localisation and Eye Centre Estimation Using Machine Learning and Computer Vision / W. Khan [et al.] // Sensors. - 2020. - № 20 (13). - P. 3785.
8. Development of a method for adjusting the coordinates of the center of attention in the absence of fixation of the head / E. S. Kiseleva, O. L. Isaeva, M. P. Boronenko, V. I. Zelensky. -doi:10.1088/1742-6596/1695/1/012087 // Journal of Physics: Conference Series. IOP Publishing. -2020. - Vol. 1695, №1. - P. 012087.
9. Determination of the fear coefficient by pupillograms / O. L. Isaeva, M. P. Boronenko, V. I. Zelensky, E. S. Kiseleva. - DOI: 10.1088/1742-6596/1695/1/012062 // Journal of Physics: Conference Series. IOP Publishing. - 2020. - Vol. 1695, № 1. - P. 012062.
10. The Problem of Tracking the Center of Attention in Eye Tracking Systems / M. Boronen-ko, V. Zelensky, O. Isaeva, E. Kiseleva // In International Conference on Intelligent Human Systems Integration. - 2020. - P. 365-371.
11. Фоменко, В. Н. Параметры реакции зрачка при аккомодации зрения / В. Н. Фоменко, А. И. Кубарко. - Текст: непосредственный // Материалы конференции биологического факультета БГУ. - 2017. - С. 123.
12. Model of Emotionally Stained Pupillogram Plot / M. Boronenko, Y. Boronenko, O. Isaeva, E. Kiseleva. - DOI : org/10.1007/978-3-030-39512-4_62 // In International Conference on Intelligent Human Systems Integration, Springer, Cham. - 2020. - P. 398-403.
13. Mortensen, U. Additive noise, Weibull functions and the approximation of psychometric functions / U. Mortensen-// Vision Research. - 2002. - № 42.20. - P. 2371-2393.
14. Shevchenko, R. P. Disorders of the psycho-emotional sphere in military personnel with psychosomatic and neurotic registers / R. P. Shevchenko // Наука i освгга. - 2015. - № 3. - 134-138.