Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

Uchi Kami Final Presentation

205 views

Published on

Uchi Kami

Published in: Internet
  • Be the first to comment

  • Be the first to like this

Uchi Kami Final Presentation

  1. 1. Clovaカメラ と うちの神 Skill & Bot Ktrips 𠮷田 顕一
  2. 2. 家族の何気ない一言 から始まった 「クローバって家族見分けて、 ピッタリな事言ってくれない の?」 カメラで顔を見て、 家族判別! 個々人にピッタリな 事を言ってくれる! ついでに部屋の温湿 度もチェックして リモコンで、電気や 加湿器も操作!
  3. 3. ユーザ情報 (顔写真)取得 Tensorflow トレーニング 顔モデル生成 個人別設定 スケジュール 勤務地 好み、DB クローバで受け答え クローバ側リモコン 温湿度センサ リモコン操作 カメラ写真撮影 モデルマッチング 個人別設定反映 LINE側にも情報送付 データ保存 クラウド GCP クラウド、エッジ側最適な組み合わせで、 クローバに機能追加 ラズパイEdge Clova CEK LINE API
  4. 4. 1 2 3 4 5 4 おうち開いて! おはよう! 簡単なトリガーワード「おうち」と普段のあいさ つで、おうちの事をまとめてやってくれる • 顔を見て、各人のスケジュールチェック • 勤務地、学校の天気予報、経路 • 室温チェック、家電操作(エアコン、電気など) 行ってきます! • 出がけ写真を撮って、アクセサリー提案 • お気に入りブログ、ニュースをLINEに転送 • 電気、家電などを消す ただいま! • 子どもの顔を見て、帰ってきたよLINE • お母さんからのメッセージ、塾の予定を読み上げ • 電気つける、お気に入りの音楽 おやすみ! • 明日の予定読み上げ • リラックスする音楽 簡単なあいさつで動く! 各人の好み、動作はLINEボットで設定
  5. 5. なので作りました、Clovaカメラとうちの 神
  6. 6. 6 おはよう! おはようございます!! 今日の天気は晴れ。 最低気温は15度、最高は 22度で、雨はふりませ ん! 顔チェック ヨシケンさんですね? 今日の予定は、9時から、 LINE BOOT AWARDSで す。 頑張ってくださいね! ただいま! おかえりなさい、ユ ラちゃん! おやつはキッチンに 置いてあります。3 時から塾に行ってね。 行ってきます! ファッション チェック! 時計やアクセサリ を提案 経路、ナビ ヨシケンさんは今日、 新宿に移動する事に なっています。 世田谷の家からだと、 小田急線ですね!
  7. 7. 7 みんなが使える ように! 3Dデータ、APIを全て公開! 3Dプリンタ データ ラズパイ + パイカメラ AI Yourself的な Clovaにハードウェ ア・スキルも追加
  8. 8. Clovaにハードウェア・スキルも追加 課題、やりたい事ユーザ(家族)の声 一回使い出すと、もうクローバが手放せなくなる?? 何に使えるか分からなかった けど、意外と便利! あいさつなので、恥ずかしくない 自分のためにやってくれ ている気がする 機能、できることの完成 度を高める 顔の読取り精度向上、ローカ ル、クラウド連携 ハードウェア(Clova)と直接つ ながる?!
  9. 9. 発話: node-cek うちの神BOT Tensorflowで顔 モデル、識別 うちの神Skill & BOTシステム(カメラ顔読取り、情報取得) うちの神Skill 保存された 情報と連携 Clova Camera で顔写真撮影 カレンダー、経路 情報など
  10. 10. うちの神BOT うちの神BOT登録システム(BOTによる情報登録) クローバ 保存された 情報と連携 天気、場所 経路情報 ブログ、ニュースお気に入り
  11. 11. おうち開いて! あいさつするだけで、カメラ、クローバとボットで、 おうちの事は何でも任せて! う Clovaカメラ 顔を読み取って、その人のスケジュール読み上げ ファッションチェック、あいさつを変える ち おはよう! 簡単なあいさつで起動 各人のスケジュール、 ニュース読み上げ の 温湿度、リモコン機能 今日の予定から路線読み上げ 今日のファッションにぴったりのアクセサリ提案 神 ボットで簡単個人設定 子どもの顔を読み取って、帰ってきたよLINE 塾の予定、おやつの場所を教えてくれる 11 Clova Camera BME280 温湿度センサ
  12. 12. 12 • クローバにはカメラが無い! • Clova WAVEにぴったり!Friendsの帽子代わり! • 温湿度計や拡張端子も! 何でクローバ? • お決まりの言葉で出来ることを簡単セットアップ • 音声とBOTで使い分け • じっくり読みたいものはBOTにも情報が届く! 何でLINE、BOT? クローバとBOTの組合せで、おうちの事まるごとお任せ! カメラと温湿度、IoTでおうちをカバー いつものあいさつで、おうちの事を一気に便利に!
  13. 13. おはよ! うちの神ボットうちの神クローバ 顔写真、カレンダー、 経路を登録 「クローバ、おうち開いて」でカメラ、室温、リモコン操作 おはよう! おはようございます! 今日の時間割は、算数と、、、 雨が降るので、傘を持って 行って下さいね。 おはようございます! 今日の天気は曇り時々雨 室温は29度なので、エア コンつけておきます。 今日の予定は、、、 Clova Camera
  14. 14. うちの神ボットうちの神クローバ 「いってきます」で、ファッション、経路、ニュースをチェック、電気を消す 行ってらっしゃい! 今日の服装は、カジュアルで 明るい色なので、ピンクのイ ヤリングを合わせたら? 朝一のミーティングは、赤坂 なので、小田急線と千代田線 に乗ってください。 今日の注目ブログは、LINE に送っておきます。 経路、ファッション、 ニュース登録 いってきます

×