NSEG 94 goroya slide

1. Google Home
プログラミング
#nseg 94
@gogoroya

2. 自己紹介
・Twitter @gogoroya
・所在 長野市
・最近やってる事
Node.js、Golang、React、React Native、
(New) Google Home

3. 近況
Google Home 2個 買ったよ
2つ買う必要はなかった・・・
値引きして譲るので欲しい人は言って(切実)

4. Google Homeとは
発売日
2016/11/4 米国発売
2017/10/6 日本発売
説明
Googleが作ったスマートスピーカ
使用感
音声認識の精度がすごい良い!!!

5. Google Homeのできる事
・質問に答える
話者「OK Google.。今、何時。」
Google Home 「時刻は10時24分です」
・音楽を再生する
話者「OK Google。君が代を流して。」
Google Home 「君が代ですね。Google Musicから再生します」
できる事はGoogle アシスタントと基本同じ

6. Google Home プログラミング(基本)
お天気は？
晴れだよ
Web Hock (HTTP)

7. Google Home プログラミング(自作デバイス動かす(一例))
動け
了解サーバ
(グローバルIP)
※ngrokがお手軽
Web Hock (HTTP)

8. Google Homeの代わりにRaspberry piを使う場合
1.発話：動け
2.認識：動け
“Google Assistant Library for Python”を使えば
RaspiでGoogle Homeを再現できる
APIドキュメントの日本語訳を書きました
https://gist.github.com/goroya/9fe71af0abf78ad62eeb3a4dc8c87c99
3.応答:何言ってるの
2.5：扇風機を回す

9. Google Homeを調べて思ったこと
Q. プッシュ通知できないの？
今はサポートしてない(将来実装されるかも)。
(どうしてもやりたければ
”Google Home Notifier(Nodejs用)”
と自作プログラムで実現できる)
Q.Google Home実機内に自分のコードをデプロイできないの？
できない。DialogflowとクラウドとのWebhock連携が基本。

10. (本題) Google Homeで何か作りたい
1. Goolge Homeでプッシュ通知使いたい
2. オリジナル・音声操作デバイス作りたい

11. 本題1 ツイートをGoogle Homeで通知したい
Twitter Stream API
#nseg
#nseg_comment
chrome cast api
(Wifi)
google-home-notifier
(node library)
自作プログラム(Node.js)
https://github.com/goroya/twitter-goo
gle-home-notifier

12. 本題２ 自作デバイスが作りたい
テーマ：スマート・スピーカーで操作できるカメラを作りたい
『OK Google.Take a Picture』
『OK!!!』

13. 機能構成
1. 『Take a Picture』の発話でカメラを撮影する。
2. 『Send a Picture』の発話でツイッターに撮影した画像を投稿する
『Take a Picture』→
パシャ
『Send a Picture』→

14. H/W 設計
USB マイク
スピーカー
全天球カメラ

15. ソフト構成
PC: Raspberry pi
OS: Raspbian
開発言語: Python
使用Pythonライブラリ
google-assistant-library Google Homeと同じ事ができるライブラリ。
twitter ツイッターに画像付きツイートをする為に使用。
gTTS Google Text to Speech用ライブラリ。
Raspiをしゃべらせるために使用。
gphoto2 カメラ制御に使用。

16. まとめ
・Google Homeの音声認識精度すごい
・Google Home Notifierを使えばGoogle HomeをPush通知できる
(そのうち、APIからできるようになるかも)
・Google Assistant Library for Pythonを使えば
オリジナルGoogle Homeが作れる