Eye-Tracking и нейро-компьютерные интерфейсы<br />Владимир Конышев<br />Иван Василевич<br />www.neurobotics.ruwww.idirecti...
www.iDirection.ru <br />План выступления<br />Как современная наука может помочь в разработкеинтерфейсов и оценке их эффек...
www.iDirection.ru <br />Важные моменты использования этих технологий<br />Они позволяют проводить регистрацию значимых пар...
www.iDirection.ru <br />Основные задачи при разработке/оценке интерфейса:<br />Определить куда человек смотрит, сколько вр...
www.iDirection.ru <br />Два ключевых подхода<br />Нейрофизиология – наука о функционировании мозга, включая процессы внима...
www.iDirection.ru <br />Шаги (подходы) решения этих задач:<br />Системы бесконтактного трекинга глаз:<br /><ul><li>Системы...
Системы, носимые на голове</li></ul>Инструментальная физиометрика:<br /><ul><li> Используются «детекторы лжи» (но в другом...
Нейро-компьютерный интерфейс (управление мозгом внешними устройствами)</li></ul>6<br />
www.iDirection.ru <br />Типичные задачи, решаемые системами трекинга глаз:<br />Вы хотите анализировать распределение вним...
www.iDirection.ru <br />Система бесконтактного трекинга глаз RED<br /><ul><li>Небольшое устройство под монитором
Дистанционная регистрация, не требующая фиксации головы
Рабочий объем – 40х40 см на расстоянии 80 см
Частота регистрации 60, 120 и 250 Гц
Визуализация результатов в реальном времени
Типичная точность определения взора – менее 0.5 градуса</li></ul>8<br />
www.iDirection.ru <br />Система трекинга глаз HED, носимая на голове<br /><ul><li>Полностью мобильная и легкая система (< ...
Разработана для использования внутри и вне помещений
Частота регистрации 50 или 200 Гц
Визуализация результатов в реальном времени
Точность определения взора –0.5-1.0°
Регистрация изображения сцены с оверлеем точки взора</li></ul>9<br />
www.iDirection.ru <br />Качественные виды анализа<br /><ul><li> Тепловые и фокусные карты информационного поля
Пути навигации по нему
Режим «рой пчел» для группового анализа</li></ul>10<br />
Upcoming SlideShare
Loading in …5
×

иван василевич Eye tracking и нейрокомпьютерный интерфейс

915 views

Published on

0 Comments
0 Likes
Statistics
Notes
  • Be the first to comment

  • Be the first to like this

No Downloads
Views
Total views
915
On SlideShare
0
From Embeds
0
Number of Embeds
131
Actions
Shares
0
Downloads
25
Comments
0
Likes
0
Embeds 0
No embeds

No notes for slide

иван василевич Eye tracking и нейрокомпьютерный интерфейс

  1. 1. Eye-Tracking и нейро-компьютерные интерфейсы<br />Владимир Конышев<br />Иван Василевич<br />www.neurobotics.ruwww.idirection.ru<br />
  2. 2. www.iDirection.ru <br />План выступления<br />Как современная наука может помочь в разработкеинтерфейсов и оценке их эффективности? О важности использования технологий нейрофизиологии и психофизиологии в разработке современных интерфейсов.<br />Представление технологий бесконтактного трекинга глаз (eye-tracking), инструментальной психофизиологии (физиометрики), исследовании биопотенциалов мозга (нейрометрики, нейромаркетинга и нейро-компьютерного интерфейса)<br />Примеры использования<br />2<br />
  3. 3. www.iDirection.ru <br />Важные моменты использования этих технологий<br />Они позволяют проводить регистрацию значимых параметров в момент предъявления респонденту новой информации, рекламы и т.д. в повседневных, а не только лабораторных, условиях.<br />Регистрирующая аппаратура - небольшая по размеру и весу.<br />Может работать бесконтактно либо по беспроводному протоколу.<br />Совместное использование этих технологий обеспечивает инструменталь-нуюобъективнуюоценку психологического и ментального состояния человека.<br />3<br />
  4. 4. www.iDirection.ru <br />Основные задачи при разработке/оценке интерфейса:<br />Определить куда человек смотрит, сколько времени и в какой последовательности.<br />Испытывает ли он при этом эмоции, насколько сильно они выражены.<br />Оценить изменение биопотенциалов мозга при поступлении новой информации, например, при просмотре рекламы. Какие моменты телевизионной рекламы привели к наиболее выраженным изменениям? Можно ли это практически использовать?<br />4<br />
  5. 5. www.iDirection.ru <br />Два ключевых подхода<br />Нейрофизиология – наука о функционировании мозга, включая процессы внимания, запоминания, усталости. Основная технология – электроэнцефалография (ЭЭГ) – регистрация и анализ биопотенциалов с поверхности головы.<br />Психофизиология – наука о физиологических основах психики, включая процесс восприятия и эмоции. Основная технология – регистрация и анализ изменений сердцебиения, дыхания, кожно-гальванической реакции (КГР), микротремора мышц и других показателей в ответ на предъявление семантически значимых стимулов (этот подход используется, например, в «детекторе лжи»).<br />5<br />
  6. 6. www.iDirection.ru <br />Шаги (подходы) решения этих задач:<br />Системы бесконтактного трекинга глаз:<br /><ul><li>Системы удаленного трекинга
  7. 7. Системы, носимые на голове</li></ul>Инструментальная физиометрика:<br /><ul><li> Используются «детекторы лжи» (но в другом контексте)</li></ul>Нейрометрика:<br /><ul><li>Нейромаркетинг (воздействие на мозг внешней информации)
  8. 8. Нейро-компьютерный интерфейс (управление мозгом внешними устройствами)</li></ul>6<br />
  9. 9. www.iDirection.ru <br />Типичные задачи, решаемые системами трекинга глаз:<br />Вы хотите анализировать распределение внимания или паттерны поведения при подаче информации через компьютер, при маркетинговых исследованиях, в эргономике, учёбе, искусстве и любых других визуальных задачах. <br />Вы хотите знать, куда смотрят люди, когда работают с новыми приборами, идутпо аэропорту, ищут продукты в супермаркете, учатся играть в теннис или другойвид спорта, требующий сложной координации.<br />Выхотите получать численные результаты быстро, в любой обстановке и для любыхиспытуемых.<br />7<br />
  10. 10. www.iDirection.ru <br />Система бесконтактного трекинга глаз RED<br /><ul><li>Небольшое устройство под монитором
  11. 11. Дистанционная регистрация, не требующая фиксации головы
  12. 12. Рабочий объем – 40х40 см на расстоянии 80 см
  13. 13. Частота регистрации 60, 120 и 250 Гц
  14. 14. Визуализация результатов в реальном времени
  15. 15. Типичная точность определения взора – менее 0.5 градуса</li></ul>8<br />
  16. 16. www.iDirection.ru <br />Система трекинга глаз HED, носимая на голове<br /><ul><li>Полностью мобильная и легкая система (< 80 грамм)
  17. 17. Разработана для использования внутри и вне помещений
  18. 18. Частота регистрации 50 или 200 Гц
  19. 19. Визуализация результатов в реальном времени
  20. 20. Точность определения взора –0.5-1.0°
  21. 21. Регистрация изображения сцены с оверлеем точки взора</li></ul>9<br />
  22. 22. www.iDirection.ru <br />Качественные виды анализа<br /><ul><li> Тепловые и фокусные карты информационного поля
  23. 23. Пути навигации по нему
  24. 24. Режим «рой пчел» для группового анализа</li></ul>10<br />
  25. 25. www.iDirection.ru <br />Количественные виды анализа<br /><ul><li>Анализ зрительных паттернов поиска на основе задания зон интереса (AOI) произвольной формы
  26. 26. Расчет ключевых индикаторов (KPI) с одновременным показом суммарной статистики для всех зон
  27. 27. Анализ саккад, фиксаций, морганий и времени реакции на внешние события
  28. 28. Групповые статистические данные по времени и порядку осмотра, уделяемому различным участкам интерфейса или рекламы</li></ul>11<br />
  29. 29. 12<br />www.iDirection.ru <br />Примеры оборудования для регистрации полиграммы<br />1<br />2<br />3<br />Стационарный 12-и канальный полиграф<br />Беспроводной 9-и канальный полиграф<br />Беспроводной 4-х канальный регистратор (40 грамм) с передачей сигналов по ZigBee<br />
  30. 30. www.iDirection.ru <br />Изменения полиграммы на семантически значимые стимулы<br /><ul><li>Изменение (сбой) регулярного паттерна дыхания
  31. 31. Потение ладоней на выброс адреналина
  32. 32. Сужение периферических сосудов пальцев</li></ul>13<br />
  33. 33. www.iDirection.ru <br />Система исследования биопотенциалов мозга NVX-52<br /><ul><li>Количество каналов – от 52 до 160
  34. 34. Частота опроса – до 2000 Гц/канал
  35. 35. Регистрация ответов первичных сенсорных (слуховой и зрительной) зон
  36. 36. Регистрация ответов зон, ответственных за эмоциональную оценку
  37. 37. Регистрация ответов зон, ответственных за принятие решений</li></ul>14<br />
  38. 38. www.iDirection.ru <br />Использование биопотенциалов мозга в интерфейсах<br />Нейрометрика – извлечение количественных показателей из ЭЭГ человека с целью определения силы и характера внешнего воздействия на мозговую активность.<br />Нейромеркетинг – прикладное использование нейрометрики для оценки и усиления воздействия внешней информации (коммерческой или политической рекламы). Передача информации человеку.<br />Нейро-компьютерный интерфейс – прямое управление мозгом внешними приборами или виртуальными объектами. Передача информации от человека.<br />15<br />
  39. 39. www.iDirection.ru <br />Типичный пример электроэнцефалограммы человека<br /><ul><li>Исходные сигналы ЭЭГ
  40. 40. Спектры мощности с индикацией основных ритмов
  41. 41. Карты распределения мощности для основных частот (дельта, тета, альфа, бета и гамма ритмы)</li></ul>16<br />
  42. 42. www.iDirection.ru <br />Индексы нейромаркетинга<br />Первичные индексы:<br />Уровень внимания к рекламе<br />Эмоциональное вовлечение<br />Её запоминание<br />Вторичные индексы:<br />Желание купить или желание подробнее ознакомиться с продукцией<br />Новизна рекламы<br />Общий уровень знания о продукции<br />17<br />
  43. 43. Преимущества метода нейромаркетинга<br />18<br />www.iDirection.ru <br />Более точная оценка по времени<br />Более объективная<br />Меньший объем фокус-группы.<br />
  44. 44. www.iDirection.ru <br />Преимущества метода нейромаркетинга<br />При предъявлении динамической телерекламы, содержащей видео и аудио контент, возможна оценка отклика мозга на каждый кадр рекламы, что позволяет создавать рекламу с более сильным воздействием на аудиторию.<br />19<br />
  45. 45. Преимущества метода нейромаркетинга<br />При предъявлении динамической телерекламы, содержащей видео и аудио контент, возможна оценка отклика мозга на каждый кадр рекламы, что позволяет создавать рекламу с более сильным воздействием на аудиторию.<br />20<br />www.iDirection.ru <br />При использовании метода определяются объективные показатели воздействия рекламы, а не опосредованные отклики (вегетативные или словестные) респондента.<br />
  46. 46. Преимущества метода нейромаркетинга<br />21<br />www.iDirection.ru <br />При использовании метода определяются объективные показатели воздействия рекламы, а не опосредованные отклики (вегетативные или словесные) респондента.<br />Классические способы оценки рекламы на основе заполнения опросников обеспечивают только субъективную интегральную оценку всего рекламного ролика. Зачастую, такая оценка ограничена социальными, культурными и личностными установками конкретного респондента. Поэтому для получения объективной оценки воздействия рекламы требуются большие объемы фокус группы. <br />
  47. 47. http://www.youtube.com/watch?v=EuWaJOyFZVM <br />22<br />www.iDirection.ru <br />Посмотрим кино…<br />
  48. 48. Пример использования нейромаркетинга<br />23<br />www.iDirection.ru <br />Уровень внимания к рекламе<br />Эмоциональное вовлечение (лицо женщины)<br />Запоминание информации (показ новой BMW)<br />
  49. 49. 24<br />www.iDirection.ru <br />Спасибо за внимание.Вопросы?Иван Василевич, E-mail: sales@idirection.ru<br />

×