Summary

Одновременное головы электроэнцефалография (ЭЭГ), электромиография (ЭМГ) и всего тела сегментных инерциальных Запись для Мультимодальные нейронных декодирование

Published: July 26, 2013
doi:

Summary

Разработка эффективной мозг-машинного интерфейса (ИМТ) системы для восстановления и реабилитации прямохождения требует точной расшифровкой намерений пользователя. Здесь мы представляем новый экспериментальный протокол и технологию сбора данных для одновременной неинвазивной приобретение нейронной активности, мышечной активности, и всего тела кинематику различных задач во время передвижения и условий.

Abstract

Последние исследования подтверждают участие супраспинальном сетей в управление двуногих ходьбы человека. Часть этих доказательств проводятся исследования, в том числе наших предыдущих работ, демонстрируя, что походка кинематики и координации конечностей во время беговой дорожке ходьба может быть выведено из головы электроэнцефалограммы (ЭЭГ) с достаточно высокой точностью декодирования. Эти результаты дают импульс к развитию неинвазивных мозг-машинного интерфейса (ИМТ) системы для использования в восстановлении и / или увеличение походке Основная цель реабилитации исследований. На сегодняшний день исследования по изучению ЭЭГ декодирования деятельности при ходьбе были ограничены беговой дорожке ходить в контролируемой среде. Однако, чтобы быть практически жизнеспособной системы ИМТ должны быть применимы для использования в повседневных задач, таких как опорно-двигательного над землей ходьбе и поворотах. Здесь мы представляем новый протокол для неинвазивного коллекции активности мозга (ЭЭГ), мышечной активности (электромиографии (ЭМГ)), а Wholэлектронной кинематических данных тела (голова, туловище и конечности траекторий) как во время беговой дорожкой и над землей ходьбе задач. Собирая эти данные в неконтролируемой среде понимание можно получить относительно возможности декодирования неограниченной походки и ЭМГ от головы ЭЭГ.

Introduction

Этот протокол использует три системы сбора данных для одновременной записи ЭЭГ, ЭМГ, и всего тела кинематики (рис. 1, таблица 1). ЭЭГ данные собираются по беспроводной сети с 64 каналов с частотой дискретизации 1000 Гц в то время как субъекты ходить. Электромиографии (ЭМГ) собирается в 1000 Гц от поверхности электродов, расположенных на двусторонней основе четырех групп мышц: передней большеберцовой (TA), икроножной (Гаст), двуглавой мышцы бедра (BF) и латеральной (VL). Кинематическая данные собираются на 128 Гц от 11 беспроводных датчиков, установленных на голове, верхней части туловища, поясничной области, рук, бедер, голени и ступни для записи движения во время ходьбы. Каждый датчик содержит трехосный магнитометр, гироскоп трехосных и трехосный акселерометр (т.е. датчик MARG).

Данные собираются из каждой системы и синхронизированы во времени с одного ПК хозяина. Синхронизация осуществляется с помощью триггера сигнал, посланный в непрерывном Серидр. связи доступны для всех трех систем данных одновременно. Спусковой механизм был выполнен в виде простого переключателя. При нажатии кнопки сигнал запуска (1) отправляется на хост-компьютере, в то время как нулевой сигнал (0) отправляется, когда не нажата. Нажатие на кнопку пуска также вызывает 0,5 сек тона, используемого в качестве аудио сигнал для субъекта, как описано в протоколе ниже. Пять пар инфракрасный (ИК) датчики были изготовлены для использования в качестве расположение вызывает течение относительно земли ходьбе экспериментах, описанных ниже. Когда сигнал ИК прерывается сигнал запуска (1) отправляется к управляющему компьютеру через последовательный ссылку с помощью радиочастот (RF) связь с ручной коробкой курок.

Пользовательских C + + приложения, используя Software Development Kit (SDK), предоставляемых каждой системы, был разработан для записи и синхронизации данных. Код использует многопоточность техники; функции для сохранения данных из каждой системы (ЭЭГ, ЭМГ, и Margs) содержатся в индивидуумахidual темы. Программный алгоритм показан на рисунке 2. Сбор данных начинается, когда приложение выполняется и заканчивается, когда клавишу 'Q' нажата. Пять темы активируются при выполнении приложения. Один поток (рис. 2) отслеживает значение (0 или 1) сигнала триггера с последовательным соединением. Начальное значение триггера равна нулю. Когда триггер получил (т.е. когда нажата кнопка или прямой видимости между парой ИК датчик сломан) глобальные переменные триггера устанавливаются в 1. Эти переменные остаются 1, пока они не сбрасываются в темы, сбор данных.

ЭЭГ нить удаленный доступ головы ЭЭГ данных в режиме реального времени с использованием протокола TCP / IP. Данные записываются в текстовый файл строка за строкой на соответствующей частоте дискретизации (1000 Гц). Глобальный ЭЭГ сигнала запуска записывается в первом столбце, а столбцы 2-65 являются 64 каналов ЭЭГ. Если глобальный ЭЭГ сигнала запуска было 1, он сбрасывается в нуль. Данныеписьменно продолжается до тех пор ЭЭГ поток не прекращается. Два независимых рекорд темы MARG данных датчиков. Два потока являются необходимыми, поскольку 11 беспроводных датчиков MARG передачу данных с использованием программного обеспечения производителя в прочном потокового режима, который буферизует данные об отдельных датчиков для предотвращения потери данных в случае проблемы беспроводной передачи. Это ухудшает буферизации данных в реальном времени передачи: если один датчик не может передавать данные для данного образца все 11 датчиков сохранить этот момент времени в их буфера и направить его в следующей доступной точки образца. MARG беспроводную передачу данных неизбежно отстает ЭЭГ, таким образом MARG датчики нужно время, чтобы разгрузить буфер данных с компьютером пользователя после сбора данных остановлен. Чтобы решить эту проблему, две темы, которые используются в коллекции MARG данных алгоритм (рис. 2). Первый поток заполняет MARG буфера триггера из глобальной переменной триггер MARG на частоте дискретизации датчиков (128 Гц), а ЭЭГ нить сбораданных. При сборе данных прекращает запись тревожного буфера также завершается. Тема MARG (рис. 2) использует функции от датчика SDK для приема данных от датчиков и записать ее в файл в том же порядке, что и данные ЭЭГ. То есть, первый столбец имеет значение глобальной триггера MARG (полученный из MARG буфер триггер) и следующие 99 столбцов значений от 11 MARG датчиков (9 датчиков на единицу MARG). Нить MARG записывает данные до времени индекс MARG буфер триггера равна последнего индекса время данные ЭЭГ, при котором выполнение точки нити прекращается.

В отличие от ЭЭГ и MARG данных, ЭМГ данные не записываются без проводов. Вместо этого, ЭМГ данные записываются на SD карту в течение регистрации данных блока. Сигнал передается по Bluetooth подключение для запуска и остановки записи данных на карту памяти SD. Запись начинается, когда первый триггер руководство полученных ЭЭГ нити. Запись данных останавливается с ЭЭГпоток, когда кнопка «Q» нажата.

Следующий протокол был рассмотрен и одобрен этическими комитетами в Университете Хьюстона. Все предметы получил, прочитал и подписал форму согласия до участия.

Protocol

1. Предметной подготовки Измерьте высоту предмета, вес, и записывать их возраста. Оцените предпочтительную скорость беговой дорожке объекта с помощью не имеющей их самостоятельно настроить скорость беговой дорожке, пока удобно. Используя фломастер, отметьте вершины головы как середина между назион и ИНИОН субъекта. Кроме того, отмечают 10% от назион в ИНИОН расстояния в качестве эталона для выравнивания крышки. 2. Головы электроэнцефалография (ЭЭГ) Прикрепите ЭЭГ электродов, как указано в международной системе 10-20 использованием ЭЭГ крышки установлены на тему, как в 12. Крышка обеспечивает надлежащее размещение электродов на коже головы. Поместите крышку на ЭЭГ путем выравнивания 10%-ной отметки, начиная с шага 1.3 в середине Fp1 и Fp2 электродов и электрода Cz с отмеченной вершины. Подробнее для размещения крышки находятся в 12. Seвылечить крышку при помощи ленты под подбородком. Подключите электроды к ЭЭГ ЭЭГ блок управления. Начиная с землей и электродов сравнения, использовать небольшой шприц не вводить электролита геля в каждый электрод до импеданс каждой меры ниже 25 кОм, как указано электрода светодиодные зеленела. Более подробную информацию о подготовке ЭЭГ электродов доступны в 12,13. Подключите ЭЭГ электроды к беспроводной ЭЭГ передатчика. Закрепите передатчик на предмет на липучке, расположенных вокруг плеч и подключить беспроводной приемник к ЭЭГ два 32 усилителей канала. Подключите усилитель к компьютеру через порт USB с использованием волоконно-оптических к USB конвертер. Установите разрешение ЭЭГ канала до 0,1 мкВ, низкая частота среза тока в постоянный, и высокие частоты среза до 1000 Гц на ЭЭГ программного обеспечения сбора данных. 3. Поверхность электромиографии (ЭМГ) Подготовка к электроду EMGразмещение в 8 мышц сайтов: брить кожу, обдирать с наждачной бумагой, и очистите площадку изопропилового спирта. Место электродов на подготовленные площадки и подключения к EMG блок данных каротажа. Наведите EMG заземляющего электрода на левом или правом запястье, и подключиться к регистрации данных блока. 4. Motion Capture Синхронизация MARG время стыковки датчики в соответствии с инструкциями производителя. Удалить MARG датчиков и место объекта с помощью липучки ремни или двусторонний скотч в местах в таблице 2. 5. Среде подготовки Подготовьте беговой дорожке, записывая на пленку диагональную линию (45 ° от горизонтали) на поясе. Поместите телевизор монитор, подключенный к видеокамере около 1 м в передней части беговой дорожки. Лента бумажку с диаметром 2 дюйма черный круг на экране телевизора. Настройка ходьбе арене путем размещения 5 комплектов ИК датчики, конусы и телевизораCreen как расположено на рисунке 3. 6. Бегущая дорожка Тема поднимается на беговой дорожке. Прикрепить ремни безопасности. Перед началом сбора данных, изучения ЭЭГ и ЭМГ сигналов для проверки правильности размещения электродов, электродов связи и передачи данных. Начать сбор данных путем запуска C + + консольное приложение. Нажмите кнопку ручного извещающий триггер инициировать EMG записи и дать аудио кия (звуковой сигнал), чтобы начать эксперимент. Предмета остается в тихом позицию в течение 30 сек. Примерно через 30 секунд кнопку триггера толчок для начала ходьбы; беговая дорожка ускоряется медленно предварительно выбранной скорости объекта. Предметом ходит в течение 5 мин. В конце 5 мин, нажать пусковую кнопку, чтобы начать прогулку стоять перехода, медленно остановки беговой дорожки. После прихода к остановке предмета остается стоять в течение 30 сек. Нажмите кнопку «Q», чтобы остановить сбор данных Tриал и сохранить данные. Повторите шаги 6.2-6.7 для всех трех условий беговой дорожке: Беговая дорожка ходьба, глядя на черную точку на расстоянии. Беговая дорожка ходьба, наблюдая движение собственными ногами на мониторе телевизора. Беговая дорожка ходьба при обратной связи с помощью видео, чтобы избежать диагональной линии на беговой дорожке (чтобы имитировать когнитивную нагрузку 6). 7. Арена Ходьба (1) Позиция объекта в начале арене ходьбе петли (рис. 3). Начать сбор данных, как и в 6.2-6.4. Нажмите на пусковую кнопку, чтобы начать ходьбу. В то время, триггер, то первое стрелкой (→, ←, или ↑) отображается на экране напротив предмета (рис. 3). Если → или ← наблюдается, предмет выходит из вход множество конусов, поворачивается на 90 ° в том же направлении, завершает цикл и возвращается к входу конусов. Если и САРR; наблюдается, субъект продолжает прямо из входа конусов и ручного запуска и направление стрелки (→ или ←) дается, когда объект достигает примерно 2 метров до инфракрасных датчиков. Предметом проходит через первый набор инфракрасных датчиков, а затем принимает соответствующее 90 ° повернуть чтобы завершить цикл, возвращаясь к входу конусов. (Во время ходьбы, экспериментатор будет следовать за объектом на расстоянии около 3-5 метров с хост-компьютера на тележке для улучшения беспроводной качество сигнала.) Предметом продолжает идти, когда он / она достигает входа конуса после завершения одного цикла. Последовательность 7,3 повторяется со случайными упорядочение стрелки до 3 петли не были завершены для каждого начального стрелкой (→, ←, или ↑). После удовлетворяющих условию 7.4, нажмите кнопку ручной курок, когда объект достигнет входа конусы, чтобы сигнализировать переход в стоячее. Тема спокойно стоит в течение 30 секунд, после чегосбор данных осуществляется нажатием клавиши 'Q' кнопку на хост-компьютере. 8. Арена Ходьба (2) Перестановка арене ходьбе конечно так, что пять комплексов ИК датчики расположены в полукруге перед субъектом (рис. 4). Начать сбор данных, как с предыдущим испытаний (7,1-7,2). Подобно Arena Прогулки I, дать ручного запуска, чтобы начать ходьбу. Во время запуска, одна из 5 направлении стрелки (←, →, , Или ↑) отображается на экране. Каждая стрелка соответствует одной из множества инфракрасных датчиков, которые расположены вокруг арены (рис. 4). Предметом отмечает стрелка на экране и ваЛКС в соответствующий набор инфракрасных датчиков, что делает разворот вокруг конуса за датчиками, проходя через датчики в два раза (рис. 4). После того, разворот, предмет возвращается к исходной точке и продолжает идти. Повторите последовательность 8,3-8,4, со случайными упорядочение стрел, 3 петли, пока не будут завершены для каждого стрелка. После удовлетворяющих условию 8.6, нажмите кнопку ручной курок, когда объект достигнет отправной точкой для перехода сигнала в стоячее. Полный сбор данных, как и в 7.5. 9. Сядьте на стенд Расположите стул позади объекта и начать сбор данных, как и в 6,2-6,3. Предметом спокойно стоит на 15 сек в начале сбора данных. Через 15 сек, нажмите кнопку ручного запуска. Выслушав переходы кий предмет из стенд сидеть осанку, удерживая сидячем положении до следующего Cue аудио (кнопка). <li> Подождите случайный интервал (5-15 сек) и нажмите кнопку ручного запуска, чтобы дать сигнал для сидеть стоять перехода. Стоячее положение сохраняется до следующего аудио кием. Повторите 9,2-9,3 до 10 полная боевая готовность-сидеть и сидеть в стоящее маневры завершены, после чего предмет спокойно стоит на 15 сек. Затем прекратить сбор данных, нажав 'Q' кнопку. Повторите стенда к сидеть протокол (9.1-9.4) для собственной инициативе стенда к сидеть и сидеть в стоящее перехода. Вместо того чтобы предоставлять предмет триггер для перехода следует удалить объект инициировать передачу не имеют собственных до 10 от каждого маневра завершена. 10. Прихожая Ходьба Субъектной позиции и корзина сбора данных в середине 1/8-й миле, прямой коридор. Начало сбора данных, а с беговой дорожкой эксперименты ходьба (6.2-6.4). После первых 30 сек период покоя, дать ручного запуска, чтобы начать ходьбу. Тематические ссылкикарат идет непрерывно в течение 5 мин. Когда объект достигает в 10 метрах от конца коридора, он / она самостоятельно инициирует разворот и продолжает идти в противоположном направлении. В конце 5 мин нажать кнопку ручного триггера, чтобы остановить ходьбе. Предметом спокойно стоит в течение 30 секунд, глядя прямо перед собой. Завершить сбор данных, нажав кнопку 'Q' кнопку. Начало второго эксперимента, как в коридоре 10.1. Через случайный промежуток времени ходьба (20-40 сек), дают ручного запуска и аудио сигнал, чтобы иметь предмет ходьбе стопа. Тема остается стоять на короткие, случайные продолжительности (5-15 сек). Нажмите кнопку ручного триггера, чтобы иметь предмет ходьба резюме. Повторите шаги 10.5-10.7 до 10 циклов старт-стоп не полны; прекратить сбор данных, как и в 10.3.

Representative Results

На рисунке 5 показана 10 секунд времени заблокирован ЭЭГ, Marg, и ЭМГ данные, записанные во беговой дорожке пешком (протокол раздел 3). Заметим, что каждый MARG сеньор фактически записи 9 сигналов (трехосный магнитометры, гироскопы, акселерометры и), но только вертикальное ускорение показано. Исходные данные на рисунке 5 содержат артефакты, которые должны быть учтены при предварительной обработке до анализа и нейронных декодирования. Примеры ЭЭГ артефакты на рисунке 5, включают глазные мигает присутствовать на приблизительно 8,5 сек и низкой частоты двигательных артефактов присутствует во всем. На рисунке 6 показан один полный петли (~ 35 сек), равной над землей во время ходьбы на арене ходьба (1) протокола. Качественно, данные с арены над землей ходьбе задачи содержат больше артефактов, чем беговая дорожка ходьбе из-за дополнительного движения головы объекта и шеи во время поворота. Лица и черепно мышечной деятельности является частбенно заметно на временные электроды (каналы помечены FT и Т на рисунке 1) на рисунке 6. Обратите внимание на увеличение активности ЭМГ сигнал по сравнению с беговой дорожкой ходьба (рис. 5), в частности, в лодыжке агонист-антагонист пары. Рисунок 6 также отображает события субоптимальный беспроводной ЭЭГ сбора данных, которые должны быть учтены в процессе обработки данных. Непосредственно перед началом 4-го триггера, ЭЭГ данные показывают, плоские линии, показывающие прерывания беспроводной передачи между хост-ПК и ЭЭГ системы. В этом разделе данные должны быть обрезаны из всей совокупности данных (ЭЭГ, Marg, и ЭМГ). На рисунке 7 показан один цикл стенда к сидеть и сидеть-стоять данных. Как и другие данные, артефактов движения присутствуют в ЭЭГ, как во время окончания переходного и как глава стабилизировано, как сидит (или стоит) сохраняется. Один интервал прихожей ходьба включая резервные к ходитьй ходить, чтобы понять, переход показан на рисунке 8. Обратите внимание на линейное изменение ЭМГ и ускорение данных после звуковые сигналы для запуска и остановки ходьбе. Одновременно с этим Изменение скорости появления и исчезновения артефактов движения в данных ЭЭГ. Рисунок 8 также отображает субоптимальными связи на ЭЭГ PO10 электрод, который приходится примерно на 7 с. Такое поведение иногда наблюдается во время эксперимента и, вероятно, в связи с потерей контакта между электрода ЭЭГ и кожу головы. Электрод PO10 должны быть удалены из анализа данных для этого испытания. Потому что данные ЭЭГ можно наблюдать в режиме реального времени, и подключение ЭЭГ электродов проверяется (протокол шагом 6.2) перед каждым испытанием в протоколе, плохой контакт электродов может быть исправлено до следующего суда. Название Компания Количество BrainAmp Amplifier Мозг Продукты, GmbH 2 actiCAP ЭЭГ шапка с 64 электродами Мозг Продукты, GmbH 1 Brainvision MOVE беспроводные системы ЭЭГ Мозг Продукты, GmbH 1 DATALOG MWX8 EMG модуль сбора данных Биометрия, ООО 1 SX230 EMG электроды Биометрия, ООО 8 R506 EMG заземляющий электрод Биометрия, ООО 1 Opal движение монитора (MARG датчиком) АПДМ, Inc 11 Opal док-станция для беспроводной потоковой передачи данных АПДМ, Inc 2 Opal беспроводной точкой доступа АПДМ, Inc 2 <tD> инфракрасный световой барьер Kit MK120 Velleman, Inc 5 Wixel Программируемый модуль беспроводной USB Pololu, Inc 6 Таблица 1. Оборудование. Датчик Расположение Голова Центр лоб над бровями Ствол Между грудными у основания грудины Поясничный Центр обратно при минимальных поясничного кривой Группа 1 Боковые стороны плеча; проксимальнее запястья ~ 10% до локтя Бедро 1 Боковой стороне бедра, 50% между бедром и коленом Хвостовик 1 Боковые стороны хвостовика, 75% дистальных от колен Нога 1 По центру на подъема стопы 1 Arm, бедра, голени, ног и датчики помещены с двух сторон. Таблица 2. Места MARG датчика. Рисунок 1. Сагиттальных (а) и фронтальной (б) вид предмета носить ЭЭГ, ЭМГ, и MARG инерциальных датчиков для сбора данных. (С) Топографическая представление ЭЭГ местах электрода на кожу головы, построенные с EEGlab Matlab инструментов 14. ( D) мобильного сбора данных о содержимом корзины хост-компьютер, ручной запуск, ЭМГ Bluetooth, MARG беспроводных точек доступа и беспроводного приемника ЭЭГ, усилителей и блока питания.d/50602/50602fig1large.jpg "целевых =" _blank "> Нажмите здесь, чтобы увеличить рисунок. Рисунок 2. Блок-схема подробно алгоритм специально созданных, многопоточный сбора данных программного обеспечения. Нажмите здесь, чтобы увеличить рисунок . Рисунок 3. Принципиальная (птичьего) представление арене ходьба (1) экспериментальный протокол. Одна стрелка (→, ←, или ↑) представлено на мониторе, когда объект находится в конце входного конуса с. Если вправо (→) или влево (←) представлена, как обследуемое лицо последует красным или зеленым цикле, соответственно, проходя через четыре комплекта инфракрасного (ИК) датчиков (IR1-IR4). Если прямая (↑) представлена, субъект идет к монитору (синяя линия), и вторая стрелка (→ или ←) представлена, когда объект находится примерно в 1 метр перед инфракрасными датчиками (IR5). После прохождения через IR5 комплект датчиков, субъект завершит цикл по соответствующей (красный или зеленый) путь, возвращаясь в исходную точку. Рисунок 4. Схема (птичьего) представление арена ходьбе (2) Экспериментальный протокол. В начале эксперимента одной стрелкой (pload/50602/50602larrhighres.jpg "/>, , →, ←, или ↑) представлен к теме на дисплее монитора. На основании полученных стрелки, предметом идет непосредственно к соответствующим набором инфракрасных датчиков, проходит через датчики, завершает разворот вокруг конуса, и возвращается в начальную точку (петля соответствующий стрелками показано выше). Рисунок 5. Пример данных из 10 сек беговой дорожке ходьбе. Верхняя панель показывает 64 каналов сырых данных ЭЭГ с названием канала с 10-20 международной конвенции. Средний панель показывает ускорение в вертикальном направлении с 11 датчиками MARG. Нижняя панель показывает 8-канальный сырья EMG. Нажмите здесь, чтобы увеличить рисунок . Рисунок 6. Пример данных из одной петли (правильный путь стрелки, рисунок 3) при ходьбе в течение Арена I протокола. ЭЭГ, ускорение и ЭМГ данные представлены как на рисунке 5. Вертикальные черные полосы расположение триггеров получены с помощью программного обеспечения. Первый триггер из руководства кнопка начала цикла, представляя стрелка →. Следующие четыре триггеры с инфракрасными датчиками IR1-IR4 (рис. 3) как субъект проходит цикл.tp_upload/50602/50602fig6large.jpg "целевых =" _blank "> Нажмите здесь, чтобы увеличить рисунок. Рисунок 7. Пример данных от стенда к сидеть и сидеть в стоящее перехода. ЭЭГ, ускорение, и ЭМГ Данные представлены на рисунке 5. Вертикальные полоски указывают на ручном триггеров (и звуковые сигналы) инициировать стоя и сидя, соответственно. Нажмите здесь , чтобы увеличить рисунок . Рисунок 8. Пример данных из прихожей ходьбе показывающая переход от StanДин, чтобы шли и шли в стоячее. ЭЭГ, ускорение, и ЭМГ данные приведены в виде на рисунке 5. Вертикальные полоски указывают на ручном триггеры и аудио сигнал, чтобы начать ANSD остановить ходьба, соответственно. Нажмите здесь, чтобы увеличить рисунок .

Discussion

Протокол, представленные здесь объединяет три системы сбора данных для одновременной записи активности мозга, мышечной активности, и всего тела кинематики при выполнении различных задач локомотива. Завершение весь протокол занимает примерно 3 часа, в том числе 1 час предметной подготовки. Каждая система смонтирована на, и перемещается вместе, предмет. Поэтому, очень важно, чтобы проверить связь ЭЭГ и ЭМГ электродов до начала каждого нового судебного разбирательства. Это можно легко сделать с помощью программных пакетов в компетенции соответствующих производителей, что позволяет данные, которые будут рассмотрены в реальном времени с использованием графического интерфейса на хост-компьютере. Приложение сбора данных требует эти программные пакеты, которые будут работать, упрощения процесса проверки. Кроме того, необходимо соблюдать осторожность, что MARG датчики надежно прикреплена к предмету перед каждым испытанием.

ЭЭГ и MARG данные передаются по беспроводной 2,4-2,5 ГГцобласти спектра. Поскольку много других электронных устройств использовать эту полосу частот, важно рассмотреть возможность беспроводного интерфейса в экспериментальной среде. Важным аспектом сбора данных линии прямой видимости видимость между подвижной тележки и субъект, который обеспечивает устойчивость к беспроводной помех. Оба ЭЭГ беспроводной приемник и MARG точки доступа (рис. 1) обеспечить светодиодами для индикации соединения верности. Хост-ПК и беспроводные приемники для ЭЭГ и MARG датчики размещаются на передвижную тележку для поддержания прямой видимости и максимально беспроводной передачи данных как субъект подошел землю. Мы нашли надежный сбор данных был наилучшим образом обеспечивается, сохраняя передвижную тележку пределах 5 метров от объекта, расстояние, которое не ограничивает движение объекта во время любого из задач. C + + приложение использует несколько потоков для сбора данных, чтобы обеспечить устойчивость к потере данных из-за прерывания беспроводной Cсвязности ЭЭГ. Если ЭЭГ связь потеряна, MARG и ЭМГ данные по-прежнему записана, но никаких данных ЭЭГ не будет доступна для тех моментов времени. MARG датчики обеспечивают на единицу буферизации, как описано выше для предотвращения потери данных в случае беспроводного соединения, в то время как ЭМГ данные хранятся на SD-карту в мобильном блок регистрации данных.

Общая проблема со сбором данных ЭЭГ во время ходьбы является наличие артефактов в сигналах. Вообще говоря, артефакты могут быть разделены на две группы: физиологические источники артефактов, включая мигает, движения глаз, лицевой мышечной активности, сердце бьется, и механические артефакты, такие как движения электродов и / или кабелей при выполнении экспериментального протокола. Удаление артефактов является предметом текущих исследований, и включает в себя такие методы, как анализ независимых компонентов и 15,16 канала шаблон на основе регрессии процедур 17. Минимизации артефактов и удаление является важным шагом в PReprocessing данных для нейронной декодирование движения тела. Установка, представленная здесь, как и в предыдущих исследованиях, в которых кабели электрода ЭЭГ были объединены в один разъем. Результаты этих исследований показывают, что механические артефакты, вызванные влиянием кабеля или движение не играют роль в декодировании движения от нейронной активности 7,8. Эти результаты подтверждаются данными других исследований, которые к выводу, что походка связанные артефакты были несущественными в медленных до умеренно скоростях ходьбы 17. Тем не менее, этот эксперимент меры ЭЭГ во время мероприятий, которые требуют больше движения тела, чем в предыдущих исследованиях, в том числе сидят в стоящее переходы, над землей ходьбе, и превращения, и, таким образом, тщательное изучение исходных данных ЭЭГ должны быть предприняты для выявления потенциальных от механических загрязнений артефактов. Хотя не получили широкого распространения, эти потенциальные проблемы могут быть решены за счет интеграции новых аппаратных в текущем протоколе. Такие аппаратные IncLudes активных электродов ЭЭГ (используемые в настоящем протоколе) и подпружиненные, сухой ЭЭГ электродов, которые имеют потенциал для улучшения состояния кожи-контакт электрода сопротивление во время движения 18. Эти технологии включаются в беспроводной ЭЭГ системы, которые могут уменьшить влияние артефактов движения 19. Интеграция новых аппаратных несмотря на это, этот протокол предоставляет уникальную возможность для продолжения разработки новых алгоритмов движения и ЭМГ артефакт отказ, потому что каждый сегмент тела была внедрена 16. Мы планируем изучить временных рядов и последовательность корреляции частотной области между показателями ЭЭГ, ЭМГ, и двигательного сегмента по разработке мощных артефактов отказ парадигм применима к в настоящее время ЭЭГ установок. Наши декодирования показали устойчивость к артефактам 7,8; эти методы будут рассмотрены в соответствии с более сложных сценариев в настоящем протоколе.

Особенности записанной поверхностиЭМГ зависят от многих факторов, и интерпретации поверхность сигналы EMG для изучения нейронных стратегий требует их рассмотрение 20. Строгие процедуры для подготовки кожи и ЭМГ размещения электродов, используемых в этом протоколе были разработаны, чтобы минимизировать влияние не-физиологических факторов на поверхности сигналов EMG. Амплитуда и частота ЭМГ, записанные с помощью протокола связаны с сетью единица активности мотор, и поэтому запись не следует интерпретировать как прямое представление нейронной активности нужного мышцы. Тем не менее, тщательное рассмотрение ЭМГ сигнала и более продвинутые методы оценки нейронных езды от мышц путем разложения ЭМГ сигнал для определения относительных изменений в нервной активации (например, путем определения разряда в единицы двигателя) может предоставить ценную информацию о модели мышечной активации 20. Более того, в контексте нейронных декодирования, хотя деятельность мозгаприобретенный Инвазивно было показано, содержат информацию о поверхность EMG 21, в настоящее время неизвестно, будет ли головы ЭЭГ также может быть использована для декодирования более низкую активность мышц конечностей во время ходьбы, в дополнение к походка кинематикой. Мы ожидаем, что этот протокол позволит нам изучить вопрос о пониженной пространственное разрешение неинвазивных методов визуализации головного мозга достаточно, чтобы изолировать нейронной активности, связанные с отдельными мышцами.

Предыдущие исследования показали возможности в использовании неинвазивного ЭЭГ для декодирования кинематики беговой дорожке во время ходьбы 7,8 придании импульса для развития интерфейса мозг машины (ИМТ), чтобы восстановить ходьбе с использованием сигналов от мозга. Временной области декодирования на основе амплитудной модуляции дельта-диапазона ЭЭГ сигналов также было показано нечувствительным к искусственной компоненты 7,8. Тем не менее, беговая дорожка Обучение происходит в контролируемой среде в течение которого пользователь зрения и управления движениемограничен, тем самым ограничивая загрязнение нейронной активности из-за внешних раздражителей. Посредством включения беспроводных данных каротажа, этот протокол позволяет собирать синхронизированных ЭЭГ, ЭМГ, и кинематических данных при выполнении различных задач передвижения и окружающей среды. Интеграция инерциальных датчиков для отслеживания движения требует больше вычислений и автономную обработку для извлечения кинематики, чем система захвата движения, и в результате мер содержат небольшое – но приемлемое – погрешности, которые не будут присутствовать в камеру система, основанная на 22. Эти управляемые трудности необходимость создания экспериментальной протокол, который позволяет мобильным исследование когнитивно-моторного поведения в изменяющейся среде. Как уже говорилось в другом месте 10,11, такую ​​установку почти безграничны в исследовании вопросов, которые могут быть решены. В центре нашего внимания в ближайшем будущем будет на решение важнейших проблем развития ИМТ для реабилитации стоять и ходить послетравмы головного мозга и невропатии. Одним из ключевых компонентов, как упоминалось выше, будет разработка новых устойчивых стратегий развития декодирования для мозга-машинных интерфейсов на реабилитацию робототехнических систем, что может отказаться от физиологических и механических артефактов, чтобы восстановить движение с использованием сигналов, измеренных от мозга. Например, коридор ходьбе протокол выполняется в публичном пространстве с другими людьми присутствовать при сборе данных, и тем самым обеспечивает испытательного стенда для развития нейронных декодирования в естественной среде. Другие вопросы исследований, представляющих интерес с использованием этого протокола включать в себя сравнение реабилитации с участием роботов парадигм ритмические по сравнению с не-ритмической походке подготовки кадров и исследований нейронной активности во время функционального восстановления после травмы в острой и хронической фазе.

Disclosures

The authors have nothing to disclose.

Acknowledgements

Работа выполнена при поддержке Национального института неврологических расстройств и инсульта (NINDS) грант № R01NS075889-01. Это исследование было поддержано частично Внутренние программы исследований NIH, Клинический центр. Авторы также благодарят Shahriar Икбал и Yongtian Он за помощь в сборе данных. Стоимость открытого доступа публикации этой статьи был организован АПДМ, Inc (Портленд, Орегон; http://apdm.com ).

Materials

Name Company Quantity
BrainAmp Amplifier Brain Products, Gmbh Quantity: 2
actiCAP EEG cap with 64 electrodes Brain Products, Gmbh Quantity:1
Brainvision MOVE wireless EEG system Brain Products, Gmbh Quantity:1
DataLOG MWX8 EMG data collection unit Biometrics, Ltd. Quantity:1
SX230 EMG electrodes Biometrics, Ltd. Quantity:8
R506 EMG ground electrode Biometrics, Ltd. Quantity:1
Opal movement monitor (MARG sensor) APDM, Inc. Quantity:11
Opal docking station for wireless data streaming APDM, Inc. Quantity:2
Opal wireless access point APDM, Inc. Quantity:2
Infrared Light Barrier Kit MK120 Velleman, Inc. Quantity:5
Wixel Programmable USB Wireless Module Pololu, Inc. Quantity:6
Table 1. Equipment

References

  1. Choi, J. T., Bastian, A. J. Adaptation reveals independent control networks for human walking. Nature Neuroscience. 10 (8), 1055-1062 (2007).
  2. Grillner, S., Wallen, P., et al. Neural bases of goal-directed locomotion in vertebrates – an overview. Brain Research Reviews. 57, 2-12 (2008).
  3. Petersen, T. H., Willerslev-Olsen, M., Conway, B. A., Nielsen, J. B. The motor cortex drives the muscles during walking in human subjects. Journal of Physiology. 590 (10), 2443-2452 (2012).
  4. Fitzsimmons, N. A., Lebedev, M. A., et al. Extracting kinematic parameters for monkey bipedal walking from cortical neuronal ensemble activity. Frontiers in Integrative Neuroscience. 3, 3 (2009).
  5. Harada, T., Miyai, I., Kubota, K. Gait capacity affects cortical activation patterns related to speed control in the elderly. Experimental Brain Research. 193 (3), 445-454 (2009).
  6. Gwin, J. T., Gramann, K., Makeig, S., Ferris, D. P. Electrocortical activity is coupled to gait cycle phase during treadmill walking. Neuroimage. 54, 1289-1296 (2011).
  7. Presacco, A., Goodman, R., Forrester, L., Contreras-Vidal, J. L. Neural decoding of treadmill walking from noninvasive electroencephalographic signals. Journal of Neurophysiology. 106, 1875-1887 (2011).
  8. Presacco, A., Forrester, L. W., Contreras-Vidal, J. L. Decoding intra-limb and inter-limb kinematics during treadmill walking from scalp electroencephalographic (EEG) signals. IEEE Transactions on Neural Systems and Rehabilitation Engineering. 20 (2), 212-219 (2012).
  9. Wagner, J., Solis-Escalante, T., et al. Level of participation in robotic-assisted treadmill walking modulates midline sensorimotor EEG rhythms in abled-bodied subjects. NeuroImage. 63, 1203-1211 (2012).
  10. Makeig, S., Gramann, K., et al. Linking brain, mind, and behavior. International Journal of Psychophysiology. 73, 95-100 (2009).
  11. Gramann, K., Gwin, J. T., et al. Cognition in action: imaging brain/body dynamics in mobile humans. Reviews in the Neurosciences. 22, 593-608 (2011).
  12. Wilson, J. A., Schalk, G., et al. Using an EEG-based brain computer interface for virtual cursor movement with BCI2000. J. Vis. Exp. (29), e1319 (2009).
  13. Brummer, V., Schneider, S., et al. Coherence between brain cortical function and neurocognitive performance during changed gravity conditions. J. Vis. Exp. (51), e2670 (2011).
  14. Delorme, A., Makeig, S. EEGLAB: an open source toolbox for analysis of single-trial EEG dynamics including independent component analysis. Journal of Neuroscience Methods. 134 (1), 9-21 (2004).
  15. Makeig, S., Bell, A. J., et al. Independent component analysis of electroencephalographic data. Advances in Neural Information Processing Systems. 8, 145-151 (1996).
  16. Rong, F., Contreras-Vidal, J. L. Magnetoencephalographic artifact identification and automatic removal based on independent component analysis and categorization approaches. Journal of Neuroscience Methods. 157, 337-354 (2006).
  17. Gwin, J. T., Gramann, K., Makeig, S., Ferris, D. P. Removal of movement artifact from high-density EEG recorded during walking and running. Journal of Neurophysiology. 103, 3526-3534 (2010).
  18. Liao, L. D., Wang, I. J., Chen, S. F., Chang, J. Y., Lin, C. T. Design, fabrication, and experimental validation of a novel dry-contact sensor for measuring electroencephalography signals without skin preparation. Sensors. 11, 5819-5834 (2011).
  19. Liao, L. D., Lin, C. T., et al. Biosensor technologies for augmented brain-computer interfaces in the next decades. Proceedings of the IEEE. 100, 1553-1566 (2012).
  20. Farina, D., Merletti, R., Enoka, R. M. The extraction of neural strategies from the surface EMG. Journal of Applied Physiology. 96, 1486-1495 (2004).
  21. Flint, R. D., Ethier, C., et al. Local field potentials allow accurate decoding of muscle activity. Journal of Neurophysiology. 108, 18-27 (2012).
  22. Luinge, H. J., Veltink, P. H. Measuring orientation of human body segments using miniature gyroscopes and accelerometers. Medical & Biological Engineering & Computing. 43, 273-282 (2005).

Play Video

Cite This Article
Bulea, T. C., Kilicarslan, A., Ozdemir, R., Paloski, W. H., Contreras-Vidal, J. L. Simultaneous Scalp Electroencephalography (EEG), Electromyography (EMG), and Whole-body Segmental Inertial Recording for Multi-modal Neural Decoding. J. Vis. Exp. (77), e50602, doi:10.3791/50602 (2013).

View Video