CC BY
171
УПРАВЛЕНИЕ РОБОТИЗИР НА ОСНОВЕ ТЕХНОЛОГИИ « МОТОРНО-ВООБРАЖАЕМОГО ТИПА
DOI: 10.17691/stm2017.9.3.04 УДК 521.1:612.82:681.51 Поступила 31.01.2017 г.
С.Ю. Гордлеева, к.ф.-м.н., научный сотрудник лаборатории математического модели в нейронауке1;
М.В. Лукоянов, ассистент кафедры нормальной физиологии им. Н.Ю. Беленкова2; младший научный сотрудник лаборатории разработки мозго-машинных интерфейсов1; С.А. Минеев, к.ф.-м.н., доцент кафедры информационных технологий в физических исследовании МА хоружко, инженер лаборатории разработки интеллектуальных биомехатронных технологий1; В.И. Миронов, младший научный сотрудник лаборатории разработки интеллектуальных биомехатронных технологий1;
A.Я. Каплан, д.б.н., зав. лабораторией нейрофизиологии и нейрокомпьютерных интерфейсов3; зав. лабораторией разработки мозго-машинных интерфейсов1;
B.Б. Казанцев, д.ф.-м.н., зав. кафедрой нейротехнологий, проректор по научной работе1
Национальный исследовательский Нижегородский государственный университет им. Н.И. Лобачевского, Н. Новгород, 603950, проспект Гагарина, 23;
Нижегородская государственная медицинская академия, Н. Новгород, 603005, пл. Минина и Пожарского, 10/1;
3Московский государственный университет им. М.В. Ломоносова, Москва, 119991, Ленинские Горы, 1
Цель исследования — разработка нейроинтегрированной системы управления экзоскелетонным роботизированным комплексом (ЭРК) нижних конечностей на основе технологии «интерфейс мозг-компьютер» (ИМК), которая основана на распознавании паттернов ЭЭГ, вызываемых воображением движений конечностями.
Материалы и методы. Предлагаемая нейроинтегрированная система управления ЭРК на основе технологии ИМК состоит из трех основных блоков: блок регистрации ЭЭГ-сигналов, классификатор ЭЭГ-сигналов и программное обеспечение для передачи команд на ЭРК. Распознавание паттернов ЭЭГ, вызываемых воображением движений, проводится классификатором, построенным на основе линейного дискриминантного анализа, который использует признаки, выделенные при помощи пространственной фильтрации методом CSP попарно для всех типов команд. Предлагаемые алгоритмы классификации паттернов воображаемых движений и методика обучения пользователя позволяют достоверно разделить несколько (до четырех) различных команд. Оператор после обучения и тестирования классификатора может приступать к управлению внешним устройством, в качестве которого выступает ЭРК нижних конечностей. Для удобной настройки системы разработано программное обеспечение управления ЭРК. Программа имеет простой графический пользовательский интерфейс и позволяет менять сопоставление паттернов и команд ЭРК в процессе работы.
Результаты. В результате тестирования на 14 здоровых добровольцах средняя точность управления экзоскелетоном нижних конечностей в разработанном моторно-воображаемом ИМК для трех команд составила в трех сессиях в среднем 70%.
Заключение. Разработанная система управления ЭРК на основе технологии ИМК обладает достаточно высокой точностью для трех команд. Операторы успешно осваивают навык представления движения руками и работу в контуре ИМК, даже если ранее не имели опыта работы с нейрокомпьютерными интерфейсами.
Ключевые слова: интерфейс мозг-компьютер; воображение движений; экзоскелетон нижних конечностей; система управления экзоскелетоном; постинсультная реабилитация.
Как цитировать: Gordleeva S.Yu., Lukoyanov M.V., Mineev S.A., Khoruzhko M.A., Mironov V.I., Kaplan A.Ya., Kazantsev V.B. Exoskeleton control system based on motor-imaginary brain-computer interface. Sovremennye tehnologii v medicine 2017; 9(3): 31-38, https://doi.org/10.17691/stm2017.93.04
Для контактов: Гордлеева Сусанна Юрьевна, e-mail: [email protected]
Роботизированный экзоскелетон на основе интерфейса мозг-компьютер моторно-воображаемого типа СТМ i 2°17 — ТОМ 9 №3 31
Exoskeleton Control System Based on Motor-Imaginary Brain-Computer Interface
S.Yu. Gordleeva, PhD, Researcher, Laboratory of Mathematical Modeling in Neuroscience1;
M.V. Lukoyanov, Tutor, Department of Normal Physiology named after N.Y. Belenkov2; Junior Researcher,
Laboratory for Brain-Computer Interface Development1;
S.A. Mineev, PhD, Associate Professor, Department of Information Technology in Physics Research1;
M.A. Khoruzhko, Engineer, Laboratory for the Development of Intelligent Biomechatronic Technologies1;
V.I. Mironov, Junior Researcher, Laboratory for the Development of Intelligent Biomechatronic Technologies1;
A.Ya. Kaplan, DSc, Head of the Laboratory of Neurophysiology and Neuro-Computer Interfaces3;
Head of the Laboratory for Brain-Machine Interface Development1;
V.B. Kazantsev, DSc, Head of Neurotechnology Department, Vice-Rector for Scientific Research Work1
1Lobachevsky State University of Nizhni Novgorod, 23 Prospekt Gagarina, Nizhny Novgorod, 603950,
Russian Federation;
2Nizhny Novgorod State Medical Academy, 10/1 Minin and Pozharsky Square, Nizhny Novgorod, 603005,
Russian Federation;
3Lomonosov Moscow State University, 1 Leninskie Gory, Moscow, 119991, Russian Federation
The aim of the investigation was to develop the neuro-integrated control system for a lower-limb robotic exoskeleton (RE) using brain-computer interface (BCI) technology based on recognition of EEG patterns evoked by motor imagery of limb movement.
Materials and Methods. The proposed neuro-integrated RE control system based on BCI technology consists of three main modules: EEG signal recording module, EEG signal classifier and the software for transmission of commands to RE. EEG patterns evoked by motor imagery are recognized by the classifier based on linear discriminant analysis that uses the features identified by spatial filtering applying CSP method for all types of commands pairwise. The proposed algorithms for classification of motor imagery patterns and user training techniques make it possible to reliably distinguish several (up to 4) different commands. After training and testing the classifier, the operator may proceed to control the external device, i.e. the lower-limb RE. RE control software has been developed for easy system customization. The software has a simple graphical user interface and allows the user to change the mapping of RE patterns and commands in the operation process.
Results. As a result of testing in 14 healthy volunteers, the average accuracy of lower limb exoskeleton control based on the developed motor imagery BCI for three commands was found to average 70% in three sessions.
Conclusion. The developed RE control system based on BCI technology offers fairly high accuracy for three commands. The operators successfully learn to practice motor imagery and operate the BCI contour, even if they have no previous experience of work with brain-machine interfaces.
Key words: brain-computer interface; motor imagery; lower limb exoskeleton; exoskeleton control system; post-stroke rehabilitation.
English
В связи со стремительным развитием областей медицинской техники на сегодняшний день актуальным является создание нейроинтегрированных устройств на основе применения технологии «интерфейс мозг-компьютер» (ИМК) в совокупности с роботами (орте-зами, экзоскелетами) для целей нейрореабилитации [1, 2]. Толчком для такого развития стало открытие пластических изменений функциональной топографии первичной моторной коры в результате тренировки [3]. В работах P. Bach-Y-Rita и E. Taub [4, 5] показано, что движение может восстановиться даже через несколько лет после инсульта. Это открыло новые возможности для нейрореабилитации: были разработаны принципы интенсивной, регулярной и мотивированной тренировки движений [6]. Экзоскелетоны оказались идеальными техническими устройствами, обеспечивающими реализацию этих принципов. Различные виды
экзоскелетонов уже активно применяются в клинике, а количество их разработок в последние 10 лет экспоненциально растет [7].
Экзоскелетоны, успешно применяющиеся для нейрореабилитации, можно разделить на устройства, воспроизводящие движения суставов верхней конечности [8], и на устройства, ориентированные на воспроизведение ходьбы. Среди последних можно выделить экзоскелетоны, осуществляющие правильные с точки зрения биомеханики движения в тазобедренных и коленных суставах пациента, такие как LOPES (lower extremity powered exoskeleton) [9], ALEX (active leg exoskeleton) [10], ReWalk (wearable robotic exoskeleton) [http://rewalk.com/], eLEGS (exoskeleton lower extremity gait system) [http://bleex.me.berkeley.edu/research/ exoskeleton/elegs], Rex (robotic exoskeleton) [http://www. rexbionics.com/], MindWalker [11] и др.
//////////////////////^^^^
32 СТМ J 2017 — TOM 9, №3 С.Ю. Гордлеева, М.В. Лукоянов, С.А. Минеев, M.A. Хоружко, В.И. Миронов, А.Я. Каплан, В.Б. Казанцев
Несмотря на то, что к настоящему времени известно несколько типов ИМК [12, 13], наиболее популярными типами неинвазивного ИМК для управления экзоскелетонами являются так называемые синхронные ИМК, в основе которых лежит регистрация отклика в ЭЭГ оператора на внешнюю стимульную среду. Среди них можно выделить частотно-резонансные ИМК, основанные на известном свойстве ритмов спонтанной ЭЭГ резонансно подстраиваться по частоте к внешним источникам ритмической стимуляции [14], а также ИМК на «волне P300», работающие по принципу выделения волны P300 вызванных потенциалов на задуманный пользователем стимул-символ [15, 16]. Точность детектирования команд в таких ИМК достигает 95-97% [17], но при этом внимание оператора должно быть все время привязано к матричной стимульной среде. Примерами использования технологии частотно-резонансных ИМК для управления экзоскелетонными роботизированными комплексами (ЭРК) нижних конечностей являются: MindWalker [11], корейский экзоскелетон нижних конечностей [18].
В отличие от синхронных ИМК в технологиях асинхронного типа, основанных на воображении движений (MI-BCI — motor imagery based brain-computer interface), детектируемые в качестве команд для управления изменением ритмов ЭЭГ вызываются произвольными усилиями человека-оператора вне какой-либо их связи с внешней сенсорной стимуляцией. Несмотря на то, что данный тип ИМК является достаточно сложным для освоения по сравнению с частотно-резонансными ИМК и ИМК «на волне P300», именно моторно-воображаемый ИМК считается наиболее перспективным для тренировки двигательной функции [1, 19, 20]. Принципом работы ИМК, основанного на воображении движения, является детектирование десинхронизации сенсомоторных ритмов в моторной зоне коры больших полушарий, контралатеральной моторному акту, при мысленном представлении оператором образов моторных актов, таких как сжатие кисти руки, перебор пальцами руки и других движений [21]. Показано, что даже пациенты с парезами конечностей способны успешно представлять разнообразные движения парализованными частями тела [22]. Примерами использования такого ИМК в управлении экзоскелетонами являются BCI-RoGO [23] и NeuroRex [24].
Важно отметить, что сравнительно недавно были опубликованы успешные результаты исследования по реабилитации людей, страдающих параплегией, вызванной поражением спинного мозга, с помощью технологии ИМК моторно-воображаемого типа [25]. Протокол реабилитации включал в себя комплексные тренировки с управлением через технологию «интерфейс мозг-компьютер» сценарием виртуальной реальности, экзоскелетом нижних конечностей, тактильной обратной связью и локоматом.
Цель исследования — разработка нейроинтег-рированной системы управления роботизированным
экзоскелетонным комплексом нижних конечностей на основе сигналов ЭЭГ с помощью технологии «интерфейс мозг-компьютер» моторно-воображаемого типа.
Материалы и методы. В экспериментальных исследованиях участвовали 14 здоровых испытуемых (6 мужчин и 8 женщин в возрасте от 18 до 23 лет), которые перед экспериментом знакомились с условиями его проведения и подписывали информированное согласие. Регламент был одобрен Комиссией по биоэтике ННГУ Эксперименты проводились без надевания экзоскелетона на оператора. В ходе эксперимента экзоскелетон располагался рядом с оператором на стойке и выполнял движения левой и правой ногой в зависимости от генерируемого оператором паттерна ЭЭГ (см. видео).
Разработанная нейроинтегрированная система управления ЭРК на основе технологии ИМК состоит из трех основных блоков: блок регистрации ЭЭГ-сигналов; классификатор ЭЭГ-сигналов и программное обеспечение для передачи команд на ЭРК.
Блок регистрации ЭЭГ-сигналов. Регистрацию ЭЭГ-сигналов проводили с помощью сертифицированного усилителя NVX 52 (ООО «Медицинские Компьютерные Системы», Россия). Для записи ЭЭГ использовали 8 отведений (FCz, С5, С3, С1, Cz, С2, С4, С6), размещенных в соответствии с международной схемой 10-10 (рис. 1). Референтный электрод располагался на мочке левого уха, электрод заземления — на лбу. Частота оцифровки сигнала составляла 500 Гц. Сопротивление под электродами не превышало 10 кОм. Сигнал фильтровался в диапазоне от 6 до 15 Гц с Notch-фильтром 50 Гц.
Классификатор ЭЭГ-сигнала. Методика эксперимента по управлению ЭРК с помощью ИМК включала в себя три последовательные сессии: обучающую, сессию тестирования и сессию управления. Сессии обучения и тестирования служили соответственно для первоначальной настройки классификатора и его тестирования.
В ходе обучения классификатора оператор выполнял одну из трех инструкций: расслабиться при появлении на мониторе изображения крестика, представить движение левой или правой руки при появлении на мониторе изображения стрелки «влево/вправо». Оператору предлагалось выбрать любое движение рукой, комфортное, по его мнению, для воображения. В качестве примеров приводились «перебор» пальцами и вращение кисти руки в лучезапястном суставе. По инструкции расслабиться оператор должен был спокойно сидеть, концентрируясь на дыхании. Количество предъявлений для каждой инструкции составило 10, длительность предъявления — 5 с. Межстимульный интервал составлял 3 с (пустой экран). Стимулы предъявлялись в случайном порядке. Длительность обучения классификатора таким образом составляла 4 мин. Во время предъявления стимулов велась запись ЭЭГ при помощи программы NeoRec (ООО
Роботизированный экзоскелетон на основе интерфейса мозг-компьютер моторно-воображаемого типа СТМ J 2017 — том 9, №3 33
Рис. 1. Схема сессий обучения и тестирования классификатора в контуре технологии «интерфейс мозг-компьютер», основанного на представлении движений; схематично показано расположение электродов, использованных в эксперименте
«Медицинские Компьютерные Системы», Россия), которая передавала полученный сигнал по протоколу LSL. Передаваемый сигнал считывался скриптом, написанным на языке Python (www.python.org), который контролировал синхронизацию между предъявлением стимулов и сигналом ЭЭГ
В качестве контроля успешности освоения методики воображаемых движений проводили оценку степени десинхронизации сенсомоторного ритма. После завершения предъявления всех стимулов полученную запись ЭЭГ по всем каналам подвергали пространственной фильтрации (метод Surface Laplacian [26]). Затем для каждого из наборов данных, соответствующих типу стимула, вычисляли мощность в диапазоне частот от 6 до 15 Гц с шагом 1 Гц по каждому каналу в отдельности. Для записей, соответствующих воображаемым движениям, вычисляли процент изменения мощности относительно «покоя». Результаты картировались (рис. 2). При уменьшении мощности спектра (десинхронизации) в процессе воображаемого движения на величину более 50% оператор счи-
Рис. 2. Пример топографического распределения степени десинхронизации ЭЭГ для одного оператора:
а — воображаемое движение левой рукой, б — правой; карты представлены для десинхронизации на частоте 13 Гц; темный цвет соответствует максимальной степени десинхронизации, светлый — минимальной
тался успешно освоившим методику воображаемых движений и переходил к сессии тестирования классификатора. В случае нескольких неудачных попыток процедура повторялась со сменой типа воображаемого движения.
Во время тестирования классификатора результаты распознавания выполняемой ментальной задачи предъявлялись оператору по зрительной обратной связи: от метки в середине экрана, фиксирующей взор, заполнялась вниз шкала зеленого цвета до края экрана, если классификатор распознавал задачу, соответствующую предъявляемой инструкции, и переставала заполняться, если распознавалась другая задача (см. рис. 1).
Распознавание проводили классификатором, построенным на основе линейного дискриминантного анализа, который использует для классификации признаки, выделенные при помощи пространственной фильтрации методом CSP [27] попарно для всех типов команд. Решения парных классификаторов обобщаются «голосованием».
/////////////////////^^^^
34 СТМ f 2017 — Т0М 9 №3 С.Ю. Гордлеева, М.В. Лукоянов, С.А. Минеев, М.А. Хоружко, В.И. Миронов, А.Я. Каплан, В.Б. Казанцев
После обучения и тестирования классификатора оператор мог приступать к управлению внешним устройством, в качестве которого выступал ЭРК [28]. Оператору для управления предлагалось по своему усмотрению последовательно выбирать одну из трех команд (представление движения левой или правой рук и покой). Каждые 4,5 с классификатор анализировал запись ЭЭГ, делал заключение и передавал команду, которую выбрал оператор, на внешнее устройство.
Программное обеспечение для передачи команд на экзоскелетонный роботизированный комплекс. На рис. 3 показана схема действия программного обеспечения (ПО), использованного в работе.
ПО классификатора ИМК и ПО управления ЭРК устанавливают на персональный компьютер под управлением операционной системы Windows. Веб-сервис управления экзоскелетоном запускается на встроенном в экзоскелетон микрокомпьютере под управлением Linux-совместимой операционной системы. Передача данных между компьютером и экзоскелетоном осуществляется по беспроводному каналу Wi-Fi.
Система управления ЭРК на основе ИМК мотор-но-воображаемого типа работает следующим образом. Как было описано выше, данные оператора ЭЭГ с усилителя NVX 52 поступают на классификатор в формате LSL. Каждые 4,5 с номер распознанного классификатором паттерна помещается в протокол пользовательских диаграмм (UDP) и по протоколу TCP/IP отправляется в ПО управления ЭРК. Для удобной настройки системы авторами было разработано оригинальное ПО управления ЭРК. Программа имеет графический пользовательский интерфейс и позво-
ляет менять сопоставление паттернов и команд ЭРК в процессе работы (рис. 4). Программа написана на языке С++ с использованием библиотеки Qt (https:// www.qt.io/).
ПО управления ЭРК, используя предварительно настроенное соответствие между номером паттерна и командой экзоскелетона, посылает запрос веб-сервису экзоскелетона на исполнение соответствующей команды. Вэб-сервис системы управления экзоскелетоном представляет собой программу, выполняющуюся на борту микропроцессорной платы BeagleBoard-xM под управлением дистрибутива Angstrom операционной системы Linux. Интерфейс вэб-сервиса реализован с применением кодогенератора gSOAP (https:// www.cs.fsu.edu/~engelen/soap.html) и обеспечивает возможность запуска паттернов движения конечностей экзоскелетона. Всего реализовано 10 паттернов (выпрямиться, сесть, согнуть/разогнуть правую ногу, согнуть/разогнуть левую ногу, вертикально, эмбрион, прогулка). Каждый из паттернов реализует алгоритм синхронного управления группой из 4 приводов. Параметрами приводов являются предельные углы, по достижении которых движение в соответствующих суставах прекращается, и максимальные моменты силы, выдаваемые на валах приводов суставов в процессе выполнения движения.
Было использовано следующее сопоставление паттернов и команд экзоскелетона:
паттерн 1 (воображение движения левой конечностью) — сгибание/разгибание левой ноги экзоскелетона;
паттерн 2 (воображение движения правой конечностью) — сгибание/разгибание правой ноги экзоскелетона.
Рис. 3. Схема системы управления роботизированным экзоскелетоном на основе технологии «интерфейс мозг-компьютер» моторно-воображаемого типа
^чштштшшшшшшшшшшштштшшшшшшж^
Роботизированный экзоскелетон на основе интерфейса мозг-компьютер моторно-воображаемого типа СТМ J 2017 — том 9, №3 35
Рис. 4. Графический пользовательский интерфейс программного обеспечения управления экзоскелетонным роботизированным комплексом
Точность классификации (в %) в трех сессиях работы с интерфейсом «мозг-компьютер» (сессии 1 и 2 — тестирование классификатора; сессия 3 — управление экзоскелетоном)
Испытуемый 1-я сессия 2-я сессия 3-я сессия
S1 70 46 43
S2 66 80 83
S3 63 56 50
S4 76 83 66
S5 90 77 90
S6 57 70 43
S7 33 37 27
S8 80 97 87
S9 75 85 85
S10 97 97 90
S11 47 50 43
S12 93 97 93
S13 87 53 57
S14 90 60 73
Среднее 73 71 66
В результате тестирования на 14 добровольцах (см. таблицу) средняя точность управления в разработанном моторно-воображаемом ИМК для трех команд составляет в трех сессиях соответственно: 73, 71 и 66%. Как видно, в среднем показатели точности выбора команды в разных сессиях не сильно различаются. При этом интересно отметить, что индивидуальные результаты по показателю точности при тестировании классификатора хорошо предсказывают (коэффициент корреляции =0,8) последующие оценки точности работы со скелетоном. Отметим также, что часть испытуемых (порядка трети) уверенно достигали достаточно высокой точности (90% и выше).
В дальнейшем планируется провести испытания разработанной системы управления в экспериментах с надеванием экзоскелетона на группе здоровых людей и людей с выраженным двигательным дефицитом, а также разработать индивидуальные методики обучения оператора для достижения более высокой точности управления.
Заключение. Разработанная система управления роботизированным экзоскелетонным комплексом (экзоскелетоном нижних конечностей) на основе технологии «интерфейс мозг-компьютер» моторно-воо-бражаемого типа обладает достаточно высокой точностью для трех команд. В качестве роботизированного комплекса реабилитации эта система может использоваться как средство активного электромеханического ассистирования движениям пациента с выраженным двигательным дефицитом, для формирования и тренировки нарушенных постуральных функций у пациентов с расстройством функционирования моторных центров и проводимости нервных сигналов спинным мозгом с клиникой частичной или полной параплегии (инсульт, черепно-мозговая травма, повреждение спинного мозга, церебральный паралич и другие заболевания).
Финансирование исследования. Работа выполнена при поддержке Российского научного фонда, грант №15-19-20053.
Конфликт интересов. Авторы подтверждают отсутствие конфликтов интересов, о которых необходимо сообщить.
Результаты. По результатам работы оператора рассчитывалась средняя точность управления скелетоном с помощью данного ИМК как отношение общего числа правильно введенных команд к общему числу попыток. Каждому оператору в каждой сессии предоставлялось 10 попыток для каждой команды.
Литература/References
1. Каплан А.Я. Нейрофизиологические основания и практические реализации технологии мозг-машинных интерфейсов в неврологической реабилитации. Физиология человека 2016; 42(1): 118-127, https://doi.org/10.7868/
//////////////////////^^^^
36 СТМ | 2017 — ТОМ 9, №3 С.Ю. Гордлеева, М.В. Лукоянов, С.А. Минеев, М.А. Хоружко, В.И. Миронов, А.Я. Каплан, В.Б. Казанцев
s0131164616010100. Kaplan A.Ya. Neurophysiological foundations and practical realizations of the brain-machine interfaces in the technology in neurological rehabilitation. Human Physiology 2016; 42(1): 103-110, https://doi. org/10.1134/s0362119716010102.
2. Fedotchev A.I., Parin S.B., Polevaya S.A., Velikova S.D. Brain-computer interface and neurofeedback technologies: current state, problems and clinical prospects (review). Sovremennye tehnologii v medicine 2017; 9(1): 175-184, https://doi.org/10.17691/stm2017.9.1.22.
3. Nudo R.J., Milliken G.W., Jenkins W.M., Merzenich M.M. Use-dependent alterations of movement representations in primary motor cortex of adult squirrel monkeys. J Neurosci 1996; 16(2): 785-807.
4. Bach-Y-Rita P. Theoretical and practical considerations in the restoration of function after stroke. Top Stroke Rehabil 2001; 8(3): 1-15, https://doi.org/10.1310/8t1t-etxu-8pdf-9x7f.
5. Taub E., Uswatte G., Elbert T. New treatments in neurorehabilitation founded on basic research. Nat Rev Neurosci 2002; 3(3): 228-236, https://doi.org/10.1038/nrn754.
6. Kwakkel G., Wagenaar R.C., Twisk J.W., Lankhorst G.J., Koetsier J.C. Intensity of leg and arm training after primary middle-cerebral-artery stroke: a randomised trial. Lancet 1999; 354(9174): 191-196, https://doi.org/10.1016/ s0140-6736(98)09477-x.
7. Marchal-Crespo L., Reinkensmeyer D.J. Review of control strategies for robotic movement training after neurologic injury. J Neuroeng Rehabil 2009; 6(1): 20, https:// doi.org/10.1186/1743-0003-6-20.
8. Фролов А.А., Бирюкова Е.В., Бобров П.Д., Моки-енко О.А., Платонов А.К., Пряничников В.Е., Черникова Л.А. Принципы нейрореабилитации, основанные на использовании интерфейса «мозг-компьютер» и биологически адекватного управления экзоскелетоном. Физиология человека 2013; 39(2): 99-113, https://doi.org/10.7868/ s0131164613020033. Frolov A.A., Biryukova E.V., Bobrov P.D., Mokienko O.A., Platonov A.K., Pryanichnikov V.E., Chernikova L.A. Principles of neurorehabilitation based on the brain-computer interface and biologically adequate control of the exoskeleton. Human Physiology 2013; 39(2): 196-208, https://doi.org/10.1134/s0362119713020035.
9. Van der Kooij H., Koopman B., van Asseldonk E.H.F. Body weight support by virtual model control of an impedance controlled exoskeleton (LOPES) for gait training. Conf Proc IEEE Eng Med Biol Soc 2008; 2008: 1969-1972, https://doi. org/10.1109/iembs.2008.4649574.
10. Banala S.K., Seok H.K., Agrawal S.K., Scholz J.P. Robot assisted gait training with active leg exoskeleton (ALEX). IEEE Trans Neural Syst Rehabil Eng 2009; 17(1): 2-8, https:// doi.org/10.1109/tnsre.2008.2008280.
11. Wang S., Wang L., Meijneke C., van Asseldonk E., Hoellinger T., Cheron G., Ivanenko Y., La Scaleia V., Sylos-Labini F., Molinari M., Tamburella F., Pisotta I., Thorsteinsson F., Ilzkovitz M., Gancet J., Nevatia Y., Hauffe R., Zanow F., van der Kooij H. Design and control of the MINDWALKER exoskeleton. IEEE Trans Neural Syst Rehabil Eng 2015; 23(2): 277-286, https://doi.org/10.1109/tnsre.2014.2365697.
12. Kaplan A.Ya., Lim J.J., Jin K.S., Park B.W., Byeon J.G., Tarasova S.U. Unconscious operant conditioning in the paradigm of brain-computer interface based on color perception. Int J Neurosci 2005; 115(6): 781-802, https://doi. org/10.1080/00207450590881975.
13. Wolpaw J.R., Birbaumer N., McFarland D.J.,
Pfurtscheller G., Vaughan T.M. Brain-computer interfaces for communication and control. Clin Neurophysiol 2002; 113(6): 767-791, https://doi.org/10.1016/s1388-2457(02)00057-3.
14. Kelly S.P., Lalor E.C., Finucane C., McDarby G., Reilly R.B. Visual spatial attention control in an independent brain-computer interface. IEEE Trans Biomed Eng 2005; 52(9): 1588-1596, https://doi.org/10.1109/tbme.2005.851510.
15. Kaplan A.Ya., Zhigulskaya D.D., Kirjanov D.A. Studying the ability to control human phantom fingers in P300 brain-computer interface. Bulletin of Russian State Medical University 2016; 2: 24-28.
16. Farwell L.A., Donchin E. Talking off the top of your head: toward a mental prosthesis utilizing event-related brain potentials. Electroencephalogr Clin Neurophysiol 1988; 70(6): 510-523, https://doi.org/10.1016/0013-4694(88) 90149-6.
17. Brunner P., Bianchi L., Guger C., Cincotti F., Schalk G. Current trends in hardware and software for brain-computer interfaces (BCIs). J Neural Eng 2011; 8(2): 025001, https://doi. org/10.1088/1741-2560/8/2/025001.
18. Kwak N.S., Müller K.R., Lee S.W. A lower limb exoskeleton control system based on steady state visual evoked potentials. J Neural Eng 2015; 12(5): 056009, https:// doi.org/10.1088/1741-2560/12/5/056009.
19. Kaplan A., Vasilyev A., Liburkina S., Yakovlev L. Poor BCI performers still could benefit from motor imagery training. In: Schmorrow D., Fidopiastis C. (editors). Foundations of augmented cognition: neuroergonomics and operational neuroscience. AC 2016. Lecture notes in computer science. Vol 9743. Springer International Publishing, Cham; 2016; p. 46-56, https://doi.org/10.1007/978-3-319-39955-3_5.
20. Mulder Th. Motor imagery and action observation: cognitive tools for rehabilitation. J Neural Transm (Vienna) 2007; 114(10): 1265-1278, https://doi.org/10.1007/s00702-007-0763-z.
21. Васильев А.Н., Либуркина С.П., Каплан А.Я. Лате-рализация паттернов ЭЭГ у человека при представлении движений руками в интерфейсе мозг-компьютер. Журнал высшей нервной деятельности им. И.П. Павлова 2016; 66(3): 302-312. Vasilyev A.N., Liburkina S.P., Kaplan A.Ya. Lateralization of EEG рatterns in humans during motor imagery of arm movements in the brain-computer interface. Zhurnal vysshey nervnoy deyatel'nosti im. I.P. Pavlova 2016; 66(3): 302-312, https://doi.org/10.7868/ s0044467716030126.
22. De Vries S., Tepper M., Feenstra W., Oosterveld H., Boonstra A.M., Otten B. Motor imagery ability in stroke patients: the relationship between implicit and explicit motor imagery measures. Front Hum Neurosci 2013; 7: 790, https:// doi.org/10.3389/fnhum.2013.00790.
23. Do A.H., Wang P.T., King C.E., Chun S.N., Nenadic Z. Brain-computer interface controlled robotic gait orthosis. J Neuroeng Rehabil 2013; 10(1): 111, https://doi. org/10.1186/1743-0003-10-111.
24. Contreras-Vidal J.L., Grossman R.G. NeuroRex: a clinical neural interface roadmap for EEG-based brain machine interfaces to a lower body robotic exoskeleton. Conf Proc IEEE Eng Med Biol Soc 2013; 2013: 1579-1582, https://doi. org/10.1109/embc.2013.6609816.
25. Donati A.R., Shokur S., Morya E., Campos D.S., Moioli R.C., Gitti C.M., Augusto P.B., Tripodi S., Pires C.G., Pereira G.A., Brasil F.L., Gallo S., Lin A.A., Takigami A.K., Aratanha M.A., Joshi S., Bleuler H., Cheng G., Rudolph A.,
чшшшшт^тчтчшшшшш^тчтчтчшт
Роботизированный экзоскелетон на основе интерфейса мозг-компьютер моторно-воображаемого типа СТМ J 2017 — том 9, №3 37
Nicolelis M.A. Long-term training with a brain-machine interface-based gait protocol induces partial neurological recovery in paraplegic patients. Sci Rep 2016; 6: 30383, https://doi.org/10.1038/srep30383.
26. Hjort B. An on-line transformation of EEG scalp potentials into orthogonal source derivations. Electroencephalogr Clin Neurophysiol 1975; 39(5): 526-530, https://doi.org/10.1016/0013-4694(75)90056-5.
27. Koles Z.J., Lazar M.S., Zhou S.Z. Spatial patterns underlying population differences in the background EEG. Brain Topogr 1990; 2(4): 275-284, https://doi.org/10.1007/ bf01129656.
28. Mineev S.A., Novikov V.A., Kuzmina I.V., Shatalin R.A., Grin I.V. Goniometrie sensor interface for exoskeleton system control device. Biomed Eng 2016; 49(6): 357-361, https://doi. org/10.1007/s10527-016-9566-6.
/тяттту/тттттту/ттту/ттту/тттттж
38 СТМ J 2017 - том 9, №3
С.Ю. Гордлеева, М.В. Лукоянов, С.А. Минеев, М.А. Хоружко, В.И. Миронов, А.Я. Каплан, В.Б. Казанцев
