Emotiv Insight: первое знакомство с нейроинтерфейсом

в 11:32, , рубрики: Emotiv Insight, гаджеты, гаджеты и девайсы, Железо, мозг, нейроинтерфейс

Emotiv Insight: первое знакомство с нейроинтерфейсом - 1

Emotiv Insight — это небольшой портативный нейроинтерфейс. Пару лет назад (в 2013 году) я проспонсировал этот проект на Kickstarter на сумму 330 $ (сейчас доступен от 299 $). Изначальная дата отправки устройств была назначена на март 2014 года, но получил я его только сегодня.
В этом посте я кратко опишу первое знакомство с Emotiv Insight, после будет опубликована статья с обзором SDK и ПО с точки зрения программиста.

  1. Характеристики
  2. Распаковка и внешний вид
  3. ПО
  4. Недостатки

Характеристики

  • Цена: от 299 $
  • 5 ЭЭГ сенсоров
  • Использует LE Bluetooth 4.0
  • Датчики: гироскоп, акселерометр, магнитометр
  • Аккумулятор: Литий-полимерный 480mAh, обещанное время работы — минимум 4 часа
  • Вес: не нашел в документации и не нашел достаточно чувствительных весов, но я практически не ощущаю устройство на голове.
  • Поставляемое ПО умеет распознавать мимику и некоторые эмоции (улыбка, подмигивание, удивление, заинтересованность), так же имеет возможность распознавать некоторые мысленные команды (вверх, вниз, тяни, толкай и т.д.) все это естественно требует обучения и калибровки. Промо видео

Распаковка и внешний вид

Пришла квадратная симпатичная коробочка, в похожей продаются Mac Mini.
Emotiv Insight: первое знакомство с нейроинтерфейсом - 2

Внутри имеем:
Emotiv Insight: первое знакомство с нейроинтерфейсом - 3

  1. 4 отдельных сенсора.
  2. Зарядный USB кабель.
  3. Дуга с портом для сенсора.
  4. Основная часть с кнопкой «вкл», портом для зарядки и одним встроенными сенсором + 3 порта для установки сенсоров которые идут отдельно. И один порт для установки дополнительной дуги с сенсором.

Сенсоры мягкие и полупрозрачные. Все сенсоры, кроме встроенного в основную часть, взаимозаменяемы и зачем-то неравномерно покрашены в зеленый.

Emotiv Insight: первое знакомство с нейроинтерфейсом - 4 Emotiv Insight: первое знакомство с нейроинтерфейсом - 5 Emotiv Insight: первое знакомство с нейроинтерфейсом - 6

В сборе выглядит так:
Emotiv Insight: первое знакомство с нейроинтерфейсом - 7

Дуги довольно гибкие, вся конструкция сидит на голове удобно, но сначала мне иногда неприятно давила под левым ухом вот эта деталь:
Emotiv Insight: первое знакомство с нейроинтерфейсом - 8

ПО

Следует отметить, что качество всего ПО и документации, попадавшихся мне, было, прямо скажем, плохим. Нестабильная работа, не интуитивные интерфейсы. Все ПО разбросано по разным местам, требует установки плагинов, не работает на некоторых браузерах, сейчас не поддерживается iOS и т.д.

Первое с чем мы сталкиваемся — это Control Panel. Работает через браузер с помощью плагина. Мне удалось запустить ее на Safari, сначала ставим плагин — затем запускаем в браузере. Включаем Emotiv Insight и включаем Bluetooth на компьютере и все заработало.

Emotiv Insight: первое знакомство с нейроинтерфейсом - 9
Зеленый цвет показывает нам, что качество контакта датчиков с моей головой хорошее, а черный — что его нет. Нужно плотнее прижать датчик к макушке, видимо волосы мешают.

Первым делом идем в раздел Facial Expressions в control panel.

Это я радуюсь что пишу статью на Geektimes:
Emotiv Insight: первое знакомство с нейроинтерфейсом - 10

А это я злюсь без причины
Emotiv Insight: первое знакомство с нейроинтерфейсом - 11
Программа неплохо детектит подмигивания, но довольно часто происходят ложные срабатывания на какие-либо выражения лица. Поэтому девушку всегда колбасит, может быть более тщательное обучение способно это исправить.

Можно обучить 4-м выражениям:

  • Хмурый
  • Удивление
  • Улыбка
  • Напряжение

Теперь идем в раздел Performance Metrics
Наверное эти данные могут быть самыми полезными для каких-то реальных исследований.

Этот график отображает активность моего мозга в момент ознакомления с графиком активности моего мозга:

Emotiv Insight: первое знакомство с нейроинтерфейсом - 12

Как видно он дает нам какую-то оценку по таким параметрам как:
Заинтересованность, вовлеченность, концентрация, расслабление, мгновенное возбуждение, длительное возбуждение.

Теперь самое интересное — мысленные команды

Emotiv Insight: первое знакомство с нейроинтерфейсом - 13

Здесь мы пытаемся мысленно управлять объектом, сначала мы обучаем программу тому какие наши мысли интерпретировать как «Тяни», «Толкай», «Влево» и т.д. При этом у каждого действия есть показатель интенсивности.
Главное разочарование: в один момент времени могут быть активны только две команды.
То есть мы либо только тянем или толкаем, либо только поворачиваем или поднимаем и т.д.
Мы не можем применять полный набор действий к объекту.

Здесь я нашел еще несколько приложений и примеров которые можно скачать.

Там есть 2 интересные программы.
Первая — это Emotiv Xavier Emo Key — программа которая может реагировать на события которые я описал выше (Мимика, мысленные команды и т.д.) и отправлять события клавиатуры (Short cut или просто текст) в приложение с которым ты сейчас работаешь.
Звучит классно, не правда ли? Можно например просто подумать о том чтобы открыть диалог поиска или сменить раскладку клавиатуры. Но не стоит забывать об ограничении в 2 команды в Control Panel — наверное оно там стоит неспроста, и вряд ли нам удастся использовать больше команд здесь. К тому же, мне ничего из этого пока не удалось заставить работать на Mac, я отправил пару запросов в тех поддержку и жду ответов, надеюсь пользователям Windows повезло больше.

Вот так выглядит эта программа.

Emotiv Insight: первое знакомство с нейроинтерфейсом - 14
Emotiv Insight: первое знакомство с нейроинтерфейсом - 15

Вторая программа будет больше интересна программистам.
Это эмулятор устройств Emotiv — Emotiv Xavier Composer.
Собственно эмулирует отправку различных команд или параметров с мозга.

Emotiv Insight: первое знакомство с нейроинтерфейсом - 16

Также существует магазин приложений emotiv.com/store/app
Если у вас Mac — то вам не повезло, никаких сторонних приложений для Mac в официальном магазине нет (по фильтру Mac / Insight выдается одно, но оно на самом деле только под Windows)

Еще имеется доступ к SDK, с помощью которого можно самому создавать ПО, обзор SDK и восприятие Emotiv Insight с точки зрения программиста будет оформлено в другом посте.

Недостатки

  1. Не все выглядит гладко. Где-то не плотно стыкуются детали, где-то асимметрично вылиты сенсоры
  2. На данный момент мало ПО
  3. Качество ПО
  4. На данный момент не работает с iOS
  5. Нельзя одновременно заряжать и использовать
  6. Нужно следить чтобы устройство не заряжалось слишком долго — производители предупреждают, что это вредно для аккумулятора

Не смотря на недостатки, я все же надеюсь что из этого выйдет что-то хорошее, ведь не все компоненты еще успели разработать, да и само устройство только начинает продаваться. Интересно, что придумают сторонние разработчики.

Хотелось бы, чтобы люди имеющие это устройство поделились ссылками на стороннее ПО и ресурсами имеющими отношение к этому устройству. Спасибо.

Автор: HeisenbergP

Источник

* - обязательные к заполнению поля


https://ajax.googleapis.com/ajax/libs/jquery/3.4.1/jquery.min.js