International Scientific Conference of Students and Young Scientists, Donetsk National Technical University, 17.04.2012

1. _____________________________________
Разработка подсистемы интерактивного
взаимодействия в составе тренажерной
системы с использованием платформы
Microsoft Kinect
_____________________________________
Соболев Е.Г.
магистрант каф.
Прикладной математики и информатики
ДонНТУ, 2012

2. Цель – разработать тренажерный комплекс
на основе техник виртуальной и дополненной
реальностей
Задачи – разработать бесконтактную
(интерактивную) систему взаимодействия
человека и тренажерного комплекса
Платформа – Microsoft Kinect

3. Каким образом Kinect распознает человека?

4. Обработка получаемых данных:
Microsoft Kinect for Windows SDK v1.0
Достоинства:
- официальная библиотека от производителя
- поддержка управляемого и неуправляемого
кода
- интуитивно понятные классы и методы
- хорошая документация
Недостатки:
- отсутствие ориентации частей скелета

5. Основные проблемы при разработке:
- ограниченное пространство реального мира
- отсутствие ориентации частей скелета
- интеграция с продуктами сторонних
разработчиков
Решение:
- программный расчет углов наклонов
- набор жестов, позволяющий выполнять
перемещения в ограниченном пространстве

6. Разработана следующая система жестов:
- движение влево (вправо, вперед, назад) -
перемещение ноги влево, (вправо, вперед, назад)
- поворот камеры влево (вправо) -
поворот туловища влево (вправо)
- поворот камеры вверх (вниз) -
наклон туловища назад (вперед)
- переход (выход) в (из) режим от первого лица -
поднятие левой руки выше головы

7. Структура тренажерного комплекса:

8. Виртуальный мир:
- игровой сервер - OpenSim
- визуализатор – open source проект –
Imprudence Viewer

9. Принцип работы подсистемы:
Kinect
Обработка данных
Генерация Event
SendInput()
Impudence Viewer
Преимущество данного подхода:
- политика «невмешательства»
- универсальность

10. Демонстрация

11. Спасибо!