иван василевич Eye tracking и нейрокомпьютерный интерфейс
Upcoming SlideShare
Loading in...5
×
 

иван василевич Eye tracking и нейрокомпьютерный интерфейс

on

  • 1,769 views

Eye tracking и нейрокомпьютерный интерфейс НКИ

Eye tracking и нейрокомпьютерный интерфейс НКИ

Statistics

Views

Total Views
1,769
Views on SlideShare
1,140
Embed Views
629

Actions

Likes
0
Downloads
8
Comments
0

3 Embeds 629

http://murketolog.ru 626
http://www.slideshare.net 2
http://xss.yandex.net 1

Accessibility

Categories

Upload Details

Uploaded via as Microsoft PowerPoint

Usage Rights

© All Rights Reserved

Report content

Flagged as inappropriate Flag as inappropriate
Flag as inappropriate

Select your reason for flagging this presentation as inappropriate.

Cancel
  • Full Name Full Name Comment goes here.
    Are you sure you want to
    Your message goes here
    Processing…
Post Comment
Edit your comment

иван василевич Eye tracking и нейрокомпьютерный интерфейс иван василевич Eye tracking и нейрокомпьютерный интерфейс Presentation Transcript

  • Eye-Tracking и нейро-компьютерные интерфейсы
    Владимир Конышев
    Иван Василевич
    www.neurobotics.ruwww.idirection.ru
  • www.iDirection.ru
    План выступления
    Как современная наука может помочь в разработкеинтерфейсов и оценке их эффективности? О важности использования технологий нейрофизиологии и психофизиологии в разработке современных интерфейсов.
    Представление технологий бесконтактного трекинга глаз (eye-tracking), инструментальной психофизиологии (физиометрики), исследовании биопотенциалов мозга (нейрометрики, нейромаркетинга и нейро-компьютерного интерфейса)
    Примеры использования
    2
  • www.iDirection.ru
    Важные моменты использования этих технологий
    Они позволяют проводить регистрацию значимых параметров в момент предъявления респонденту новой информации, рекламы и т.д. в повседневных, а не только лабораторных, условиях.
    Регистрирующая аппаратура - небольшая по размеру и весу.
    Может работать бесконтактно либо по беспроводному протоколу.
    Совместное использование этих технологий обеспечивает инструменталь-нуюобъективнуюоценку психологического и ментального состояния человека.
    3
    View slide
  • www.iDirection.ru
    Основные задачи при разработке/оценке интерфейса:
    Определить куда человек смотрит, сколько времени и в какой последовательности.
    Испытывает ли он при этом эмоции, насколько сильно они выражены.
    Оценить изменение биопотенциалов мозга при поступлении новой информации, например, при просмотре рекламы. Какие моменты телевизионной рекламы привели к наиболее выраженным изменениям? Можно ли это практически использовать?
    4
    View slide
  • www.iDirection.ru
    Два ключевых подхода
    Нейрофизиология – наука о функционировании мозга, включая процессы внимания, запоминания, усталости. Основная технология – электроэнцефалография (ЭЭГ) – регистрация и анализ биопотенциалов с поверхности головы.
    Психофизиология – наука о физиологических основах психики, включая процесс восприятия и эмоции. Основная технология – регистрация и анализ изменений сердцебиения, дыхания, кожно-гальванической реакции (КГР), микротремора мышц и других показателей в ответ на предъявление семантически значимых стимулов (этот подход используется, например, в «детекторе лжи»).
    5
  • www.iDirection.ru
    Шаги (подходы) решения этих задач:
    Системы бесконтактного трекинга глаз:
    • Системы удаленного трекинга
    • Системы, носимые на голове
    Инструментальная физиометрика:
    • Используются «детекторы лжи» (но в другом контексте)
    Нейрометрика:
    • Нейромаркетинг (воздействие на мозг внешней информации)
    • Нейро-компьютерный интерфейс (управление мозгом внешними устройствами)
    6
  • www.iDirection.ru
    Типичные задачи, решаемые системами трекинга глаз:
    Вы хотите анализировать распределение внимания или паттерны поведения при подаче информации через компьютер, при маркетинговых исследованиях, в эргономике, учёбе, искусстве и любых других визуальных задачах.
    Вы хотите знать, куда смотрят люди, когда работают с новыми приборами, идутпо аэропорту, ищут продукты в супермаркете, учатся играть в теннис или другойвид спорта, требующий сложной координации.
    Выхотите получать численные результаты быстро, в любой обстановке и для любыхиспытуемых.
    7
  • www.iDirection.ru
    Система бесконтактного трекинга глаз RED
    • Небольшое устройство под монитором
    • Дистанционная регистрация, не требующая фиксации головы
    • Рабочий объем – 40х40 см на расстоянии 80 см
    • Частота регистрации 60, 120 и 250 Гц
    • Визуализация результатов в реальном времени
    • Типичная точность определения взора – менее 0.5 градуса
    8
  • Система трекинга глаз HED, носимая на голове
    9
    www.iDirection.ru
    • Полностью мобильная и легкая система (< 80 грамм)
    • Разработана для использования внутри и вне помещений
    • Частота регистрации 50 или 200 Гц
    • Визуализация результатов в реальном времени
    • Точность определения взора –0.5-1.0°
    • Регистрация изображения сцены с оверлеем точки взора
  • www.iDirection.ru
    Качественные виды анализа
    • Тепловые и фокусные карты информационного поля
    • Пути навигации по нему
    • Режим «рой пчел» для группового анализа
    10
  • www.iDirection.ru
    Качественные виды анализа
    • Тепловые и фокусные карты информационного поля
    • Пути навигации по нему
    • Режим «рой пчел» для группового анализа
    11
  • www.iDirection.ru
    Количественные виды анализа
    • Анализ зрительных паттернов поиска на основе задания зон интереса (AOI) произвольной формы
    • Расчет ключевых индикаторов (KPI) с одновременным показом суммарной статистики для всех зон
    • Анализ саккад, фиксаций, морганий и времени реакции на внешние события
    • Групповые статистические данные по времени и порядку осмотра, уделяемому различным участкам интерфейса или рекламы
    12
  • 13
    www.iDirection.ru
    Примеры оборудования для регистрации полиграммы
    1
    2
    3
    Стационарный 12-и канальный полиграф
    Беспроводной 9-и канальный полиграф
    Беспроводной 4-х канальный регистратор (40 грамм) с передачей сигналов по ZigBee
  • www.iDirection.ru
    Изменения полиграммы на семантически значимые стимулы
    • Изменение (сбой) регулярного паттерна дыхания
    • Потение ладоней на выброс адреналина
    • Сужение периферических сосудов пальцев
    14
  • www.iDirection.ru
    Система исследования биопотенциалов мозга NVX-52
    • Количество каналов – от 52 до 160
    • Частота опроса – до 2000 Гц/канал
    • Регистрация ответов первичных сенсорных (слуховой и зрительной) зон
    • Регистрация ответов зон, ответственных за эмоциональную оценку
    • Регистрация ответов зон, ответственных за принятие решений
    15
  • www.iDirection.ru
    Использование биопотенциалов мозга в интерфейсах
    Нейрометрика – извлечение количественных показателей из ЭЭГ человека с целью определения силы и характера внешнего воздействия на мозговую активность.
    Нейромеркетинг – прикладное использование нейрометрики для оценки и усиления воздействия внешней информации (коммерческой или политической рекламы). Передача информации человеку.
    Нейро-компьютерный интерфейс – прямое управление мозгом внешними приборами или виртуальными объектами. Передача информации от человека.
    16
  • www.iDirection.ru
    Типичный пример электроэнцефалограммы человека
    • Исходные сигналы ЭЭГ
    • Спектры мощности с индикацией основных ритмов
    • Карты распределения мощности для основных частот (дельта, тета, альфа, бета и гамма ритмы)
    17
  • www.iDirection.ru
    Индексы нейромаркетинга
    Первичные индексы:
    Уровень внимания к рекламе
    Эмоциональное вовлечение
    Её запоминание
    Вторичные индексы:
    Желание купить или желание подробнее ознакомиться с продукцией
    Новизна рекламы
    Общий уровень знания о продукции
    18
  • Преимущества метода нейромаркетинга
    19
    www.iDirection.ru
    Более точная оценка по времени
    Более объективная
    Меньший объем фокус-группы.
  • www.iDirection.ru
    Преимущества метода нейромаркетинга
    При предъявлении динамической телерекламы, содержащей видео и аудио контент, возможна оценка отклика мозга на каждый кадр рекламы, что позволяет создавать рекламу с более сильным воздействием на аудиторию.
    20
  • Преимущества метода нейромаркетинга
    При предъявлении динамической телерекламы, содержащей видео и аудио контент, возможна оценка отклика мозга на каждый кадр рекламы, что позволяет создавать рекламу с более сильным воздействием на аудиторию.
    21
    www.iDirection.ru
    При использовании метода определяются объективные показатели воздействия рекламы, а не опосредованные отклики (вегетативные или словестные) респондента.
  • Преимущества метода нейромаркетинга
    22
    www.iDirection.ru
    При использовании метода определяются объективные показатели воздействия рекламы, а не опосредованные отклики (вегетативные или словесные) респондента.
    Классические способы оценки рекламы на основе заполнения опросников обеспечивают только субъективную интегральную оценку всего рекламного ролика. Зачастую, такая оценка ограничена социальными, культурными и личностными установками конкретного респондента. Поэтому для получения объективной оценки воздействия рекламы требуются большие объемы фокус группы.
  • http://www.youtube.com/watch?v=EuWaJOyFZVM
    23
    www.iDirection.ru
    Посмотрим кино…
  • Пример использования нейромаркетинга
    24
    www.iDirection.ru
    Уровень внимания к рекламе
    Эмоциональное вовлечение (лицо женщины)
    Запоминание информации (показ новой BMW)
  • 25
    www.iDirection.ru
    Спасибо за внимание.Вопросы?Иван Василевич, E-mail: sales@idirection.ru