Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.
HoloLensで作る
言霊発射装置
リクルートアドバンスドテクノロジーラボ行ってきた
Tokyo HoloLens ミートアップ vol.4 2017/07/15
えむにわ @m2wasabi
自己紹介
• 山本 允葵
(Masaki Yamamoto)
えむにわ
@m2wasabi新しいものに何でも食いつく
雑食系野良エンジニア
Milkcocoa WebGL(jThree) KinectV2で
本を書いたこともある(共著)
時が経...
過去に作ったもの
MilkcocoaのUnityプラグイン
http://m2wasabi.hatenablog.com/entry/2016/03/25/071932
RPGツクールMVのMilkcocoaプラグイン
http://qiita...
はじめに
言葉には力が宿ると言います。
これを昔の人は言霊と呼びました。
例えば、コミックの中の世界は言葉がビジュアルを
伴って存在し、時として物質となって物理的影響力を
持ちます。
出典:ジョジョの奇妙な冒険
言霊発射装置とは
HoloLensを使って
言葉の見える化を行い、
人類をより漫画の世界に近づけます。
目次
• Chapter1 HoloLensで日本語音声を使うには
• Chapter2 Demo
• Chapter3 リクルートアドバンスド
テクノロジーラボに行ってきた
• Chapter4 今後の野望
Chapter1
HoloLensで日本語音声を使うには
OS標準では英語のみ理解
• 音声認識機能は標準搭載されている
• 言語を英語しか選択できない
• だからエージェントは
コルタナではなくてCortana
• 日本語の発音・文字は
理解できないようだ
それでもHoloLensのUIは
音声コマ...
Google Cloud Speech API
• 「OK Google」はGoogle Assistant API
 APIは英語のみ(お前もか)
• APIで各国対応してるのは、
音声テキスト変換に特化した
「Google Cloud S...
安全牌なAsset ($20)
Google Cloud Speech Recognition
• 利用は簡単
 買ったその日にデモ作れる
 簡単故に、使ってみただけだと、
もはやn番煎じ。アイデアで戦おう
• gRPCではない
 双方向...
Chapter2
Demo
Demo
• 編集に戻る言霊発射装置 Demo1 エアタップ
 https://youtu.be/CfBzbpxRcrA
• 言霊発射装置 Demo2 論理寿司と論理ビールで宴会準備
 https://youtu.be/vLObhEGs1m...
Chapter3
リクルートアドバンスドテクノロジーラボに行ってきた
リクルートアドバンスド
テクノロジーラボ is 何
• オープンイノベーションを旗印として
開発者にVR機器などを無料で使わせてくれる施設
 https://atl-hiroo.recruit-tech.co.jp/
• 各種HMD(勿論Ho...
Chapter4
今後の野望
gRPCぐぬぬ
• gRPC x Unityは今キテルので開拓しよう(したい)
 MagicOnionとか事例あるけど
Unityクライアントがソース読むしかなく難しい…
 それってUWPで動くの?(動かない)
• 求)HoloLensでg...
おわり
HoloLensで作る言霊発射装置
Upcoming SlideShare
Loading in …5
×

HoloLensで作る言霊発射装置

8,121 views

Published on

HoloLensで言霊を発射する話です。

Published in: Engineering
  • Be the first to comment

  • Be the first to like this

HoloLensで作る言霊発射装置

  1. 1. HoloLensで作る 言霊発射装置 リクルートアドバンスドテクノロジーラボ行ってきた Tokyo HoloLens ミートアップ vol.4 2017/07/15 えむにわ @m2wasabi
  2. 2. 自己紹介 • 山本 允葵 (Masaki Yamamoto) えむにわ @m2wasabi新しいものに何でも食いつく 雑食系野良エンジニア Milkcocoa WebGL(jThree) KinectV2で 本を書いたこともある(共著) 時が経つのは早いものでもはや黒歴史です
  3. 3. 過去に作ったもの MilkcocoaのUnityプラグイン http://m2wasabi.hatenablog.com/entry/2016/03/25/071932 RPGツクールMVのMilkcocoaプラグイン http://qiita.com/m2wasabi/items/267b57d2b6c90ce93ad2 VisualStudioCode用のGrimoire.jsプラグイン http://qiita.com/m2wasabi/items/bc18a7d0710ea31d43d5 プラグインばっかり
  4. 4. はじめに 言葉には力が宿ると言います。 これを昔の人は言霊と呼びました。 例えば、コミックの中の世界は言葉がビジュアルを 伴って存在し、時として物質となって物理的影響力を 持ちます。 出典:ジョジョの奇妙な冒険
  5. 5. 言霊発射装置とは HoloLensを使って 言葉の見える化を行い、 人類をより漫画の世界に近づけます。
  6. 6. 目次 • Chapter1 HoloLensで日本語音声を使うには • Chapter2 Demo • Chapter3 リクルートアドバンスド テクノロジーラボに行ってきた • Chapter4 今後の野望
  7. 7. Chapter1 HoloLensで日本語音声を使うには
  8. 8. OS標準では英語のみ理解 • 音声認識機能は標準搭載されている • 言語を英語しか選択できない • だからエージェントは コルタナではなくてCortana • 日本語の発音・文字は 理解できないようだ それでもHoloLensのUIは 音声コマンドが良いと思う。ハンズフリー! Hey, Cortana Not コルタナさん 空耳ならなんとか
  9. 9. Google Cloud Speech API • 「OK Google」はGoogle Assistant API  APIは英語のみ(お前もか) • APIで各国対応してるのは、 音声テキスト変換に特化した 「Google Cloud Speech API」 • 事例としては Meetup Vol2でXin9leさん – Project Sonata Meetup Vol3で森さん井出さん – Project 嫁 でそれぞれ発表している
  10. 10. 安全牌なAsset ($20) Google Cloud Speech Recognition • 利用は簡単  買ったその日にデモ作れる  簡単故に、使ってみただけだと、 もはやn番煎じ。アイデアで戦おう • gRPCではない  双方向ストリームに対応してないので gRPC版作ろう(茨の道) • 最近バージョンアップ(V3.0)で互換性壊してきた  Unity2017でないと使えない  V2.3のプロジェクトにそのままインポートしてもダメ
  11. 11. Chapter2 Demo
  12. 12. Demo • 編集に戻る言霊発射装置 Demo1 エアタップ  https://youtu.be/CfBzbpxRcrA • 言霊発射装置 Demo2 論理寿司と論理ビールで宴会準備  https://youtu.be/vLObhEGs1mM • 言霊発射装置 Demo3 撃てよ大砲  https://youtu.be/swRlu-uzqgc
  13. 13. Chapter3 リクルートアドバンスドテクノロジーラボに行ってきた
  14. 14. リクルートアドバンスド テクノロジーラボ is 何 • オープンイノベーションを旗印として 開発者にVR機器などを無料で使わせてくれる施設  https://atl-hiroo.recruit-tech.co.jp/ • 各種HMD(勿論HoloLensも)やモーションキャプチャ、4Kカ メラのクロマキー施設もある • 今回の発表内容、記事として寄稿させていただいてます  https://atl-hiroo.recruit-tech.co.jp/showcase/archives/474
  15. 15. Chapter4 今後の野望
  16. 16. gRPCぐぬぬ • gRPC x Unityは今キテルので開拓しよう(したい)  MagicOnionとか事例あるけど Unityクライアントがソース読むしかなく難しい…  それってUWPで動くの?(動かない) • 求)HoloLensでgRPC使う方法  無ければ作るしかない  相談できる人がいない(C#,UWP) 技術に関して相談できる人がいないので 技術話せる友達欲しいです…
  17. 17. おわり

×