• Share
  • Email
  • Embed
  • Like
  • Save
  • Private Content
モーションコントロールコンテンツの実装から見えて来た事
 

モーションコントロールコンテンツの実装から見えて来た事

on

  • 1,439 views

2014のデベロッパーサミットで登壇した際に使ったスライドをSlide Share用にモディファイしたものです。 ...

2014のデベロッパーサミットで登壇した際に使ったスライドをSlide Share用にモディファイしたものです。

加速度センサー、タブレットのカメラ、Intel PerC等のセンサーを使ってコントロールするアプリケーションの企画、開発をしてきた経験から見えて来た事です。

Statistics

Views

Total Views
1,439
Views on SlideShare
1,421
Embed Views
18

Actions

Likes
12
Downloads
20
Comments
0

2 Embeds 18

https://twitter.com 17
http://www.linkedin.com 1

Accessibility

Categories

Upload Details

Uploaded via as Adobe PDF

Usage Rights

© All Rights Reserved

Report content

Flagged as inappropriate Flag as inappropriate
Flag as inappropriate

Select your reason for flagging this presentation as inappropriate.

Cancel
  • Full Name Full Name Comment goes here.
    Are you sure you want to
    Your message goes here
    Processing…
Post Comment
Edit your comment

    モーションコントロールコンテンツの実装から見えて来た事 モーションコントロールコンテンツの実装から見えて来た事 Presentation Transcript

    • モーションコントロールコンテンツの 実装から見えて来た事 Naoji Taniguchi
    • 自己紹介 谷口 直嗣
    • フリーランスで インタラクティブコンテンツ、 スマートフォンアプリ、 の企画、ディレクション、開発をしております。 目指す所はIT界のマイルス・デイビス 方向を決め、仲間を集め、コードを書いてプレイ ヤーとなり、セッションのように仕事をする。
    • 最近の仕事の紹介 Ricoh Thetaのプロモーション展示、CES&NY
    • 最近の仕事の紹介
    • 最近の仕事の紹介
    • 最近の仕事の紹介
    • 最近の仕事の紹介
    • 最近の仕事の紹介
    • モーションコントロール と私
    • 2007年、とっと塔 http://www.nicolabo.com/jp/specials_v.htm 加速度センサーが搭載されたゲームコントローラー を振っておさるのキャラクターをジャンプさせる ゲーム、Central East Tokyoで、プロジェクションさ せてゲームをプレイしてもらう展示をした。
    • 2008~2010年 Wiiのダンスゲーム ! コントローラーを持って画面のキャラクターにあ わせて踊るだけのシンプルなゲーム
    • 企画+ディレクションだったが、プロジェクト前半 はどんなダンスの動きがゲームに使えるかをダン サーと検証しながら、振り付けを考えてた。 その間はキーボード触らずにコリオグラファー 状態でした。
    • 2012年 未来の車のUIプロト#1 ! 某自動車メーカーのITの研究所でのプロジェクト
    • 写真&ムービーは出せないので
    • 2013年 未来の車の UI/UXプロト#2 ! 某自動車メーカーのITの研究所でのプロジェクト
    • 写真&ムービーは出せないので
    • 2013年 ABC Cooking Studio 実証実験
    • http://www.youtube.com/watch?v=3e_-TiaZqsI ABC Cooking Studio のタブレットを使った 新しいスタイルの実証実験の為の アプリケーション。 ! 料理のビデオ教材を、 ジェスチャーコントロールで操作。
    • 2013年 Ricoh Theta ショールーム用デモ
    • http://www.youtube.com/watch?v=ELVNLbUNzb0 Thetaの全天球イメージをLeap Motionを使って指先 の動きでぐりぐり回せるデモ
    • 2013年 Intel PerC デモ
    • http://www.youtube.com/watch?v=mRquso-LDlc Intel PerCで手の動き、手の形を認識して操作する 写真ビューワー、Intel Software Innovation Forum にて展示
    • ! モーションコントロール コンテンツの構造
    • ! Image, Depth Image, Acceleration, Gyroscopic.... Data
    • ! Position of finger, Bone, Direction.. Model / Vector
    • ! Rotate, Stop, Forward, Next Page Command
    • UI / Interaction ! Animation, Icon, Sound, Feedback
    • UX / Contents ! Cooking Video, Game, Demo
    • UX / Contents UI / Interaction Command Model / Vector Data
    • ! このモデルの上下を行ったり来たりし ながら作っています。
    • モーションコントロール あるある
    • 遠心力振り切り問題
    • 振る動作をすると遠心力で簡単に 加速度センサーの計測範囲を 超えてしまう そうなったらどっち向きかも取得不能
    • 握り方問題
    • 握り方も人それぞれ、握り方によって 加速度の向きは変わってくる
    • トラッキング待ち問題
    • トラッキング開始に少し時間がかかる Kinectの骨格、PerCのハンドサイン
    • 準備動作問題
    • 右への動きをする場合に一度左に手が動く マウスだったら浮かせればいいが、 モーションコントロールだどっちのモードか 判定がつかない さらにこれをハンドサインとかでモードコントロール すると、ハンドサインの認識にも時間がかかりドツボ
    • ライティング問題
    • 赤外線使ったデバイスは ライティングの熱に弱い
    • 腕しんどい問題
    • 腕を上げたままにするので、 長時間の操作は疲れる。
    • 操作系確立されてない 問題
    • デモを触ってもらうと各人のそれぞれの脳内 のジェスチャーで動かそうとする  実装してないのに、 ピンチアウトをやってるとか。
    • ガングロ問題
    • あまりに色が黒いと画像ベースの 顔認識が効かない
    • オレだけ世界一問題
    • 操作系考えた 実装した ばっちり動いた! 他の人に触ってもらった まるで操作できなかった!
    • 使って気持ちのいいUI
    • 1の入力で5~10ぐらいの反応をする 反応も緩急をつける
    • フィードバックは派手目に 入力に応じた音+アニメーション
    • とにかく反応させる 人様のコンテンツですが、 カグラは手を動かすと、 どこかの楽器が即座に鳴る
    • センサーの特性を理解しつつ、操作系 もデザインしながら、コンテンツのベ ストマッチが大切
    • これからの個人的 NUIキーワード
    • ラスト30cm
    • ちょっと移動すれば手が届くけど めんどくさい ! ご飯食べながらPC、タブレット 使うとか。
    • プロジェクション
    • 大きくプロジェクションされた コンテンツは画面の中に入る 感覚があるのでジェスチャーコントロー ルがしっくり来る。
    • タイルから1画面へ
    • ジェスチャーでタイルを選ぶのは、あ んまり気持ちがよくない。 ! ジェスチャーコントロールに合わせた さらに操作単位の大雑把なコンテンツ レイアウト
    • Robotics
    • 巨人達の動き
    • Intel PerC
    • Microsoft Kinect V2
    • Sport X Sensor
    • スポーツのビデオゲーム化、データ化が進みそうな予感。 記録したデータを元にコンピューターで対戦とか、Google Glass的なウェ アラブルデバイスと組み合わせて、過去の自分や仮想の相手と対戦とか。 ! サッカーボールにセンサーを仕込んで、選手のスパイクにセンサーを仕込 んで、ユニフォームにセンサーを仕込んでサッカーの試合のデータを蓄積、 それを元にリアルの試合データからゲームにフィードバック、試合のデー タを解析すると、コンピューター上で試合のシミュレーションなんかも今 後可能になりそう。
    • Tokyo Motion Control Network
    • アイデアソンやります!
    • 神戸大学杉本さんを招いて、医療の世界でのセンサー 活用事例、問題となっている事をヒアリング、 ! Tokyo Motion Control Networkでアイデアソンやりま す。実現可能そうなアイデアはハッカソンに繋げます。
    • Thank You!