JAWS-UG Nagoya 20160729
•
1 like•1,898 views
来栖川電算で Docker をどのように活用しているかが分かる資料になっています。Docker は、確実に動くものを届けるよい手段ですので、使っていない方はぜひ使ってみるとよいかと思います。 今回の発表は AWS とそれほど深く絡んでいないですが、オンプレでも AWS でも動くシステムを作るなら参考になるかもしれません。
More Related Content
What's hot
What's hot (20)
Viewers also liked
Viewers also liked (18)
Similar to JAWS-UG Nagoya 20160729
Similar to JAWS-UG Nagoya 20160729 (20)
More from 陽平 山口
More from 陽平 山口 (20)
Recently uploaded
Recently uploaded (7)
JAWS-UG Nagoya 20160729
- 1. 認識技術 の 研究開発 が捗る環境 2016.7.29 山口 陽平JAWS-UG 名古屋 AWS勉強会 第13回 来 栖 川 電 算 に お け る A W S 活 用 事 例 Docker編
- 2. 今日話すこと • 自己紹介 ＆ 会社紹介 • Docker とは？ • 事例紹介 – 詰め込み過ぎサーバ – Jenkins × Docker – その他の作業 – TensorFlowとは？ – TensorFlow Manager • まとめ 2
- 4. 山 口 陽 平 @melleo1978 • 所属 ＆ 経歴 – 有限会社 来栖川電算 取締役 – Mashup Awards 9 優秀賞受賞 – 名古屋工業大学大学院 博士前期課程修了 – IPA未踏ソフトウェア創造事業 採択 • 自己紹介 企画 ～ 実装まで全部やる人 – 認識技術 & アルゴリズム の研究開発 • 文字認識，物体認識，動作認識，行動認識 – 言語処理系 の研究開発 • 分散DB，仮想機械，コンパイラ • 好きなAWS S3 × Lambda × API Gateway ※実物に髪の毛はありません。 4
- 5. 山 口 陽 平 @melleo1978 • ［実践］画像認識 を執筆 WEB+DB PRESS Vol.83 – これから画像認識をはじめる人におススメ 5 – OpenCV の使い 方や実装例 – SIFTなどの各種 アルゴリズムや 特定物体認識の しくみ – 精度改善への取 り組み方
- 6. 来栖川電算 設立 2003年（名古屋工業大学発ベンチャー） 従業員 38人 • SF世界の技術を実現し、社会に役立てる – 人工知能技術のライセンス販売・研究・SI • 文字認識，物体認識，動作認識，行動認識 – スマホアプリの企画・制作・運営 スマートライフ技術 NTTドコモ様との共同研究 スマートドライブ技術 大手自動車メーカー様むけ メイドさん もふくめて 6
- 7. 来栖川電算 様々なアルゴリズムを駆使する技術者集団 • 様々な認識技術 – 文字認識，物体認識，モーション認識 • 限界性能を引き出す優れた実装技術 – 機械学習・コンパイラ・データベース・仮想 機械などのアルゴリズムとバイナリハック • 高速化，並列化，分散化，省空間化，高精度化 • ビジネスを差別化する認識エコシステム – スケールに応じた仕組，競争力の自動強化 7
- 9. Docker とは？ 雑に言えば、作り捨てても痛くないくらい軽い VM • コンテナ型の仮想化 – ホストOSと同じOSの仮想化しかサポートし ないため、計算資源を名前空間で分離する オーバーヘッドしかかからない。 – ハイパーバイザー型の仮想化（VMwareな ど）と比べて、インスタンス作成や起動が速 く、ディスクやメモリの使用量は少なく、速 度劣化が少ない。 9
- 10. Docker の概念 実はみなさんよく知っている考え方 • Docker ファイル：Makefile 的なもの • Docker イメージ：コンテナを保存した物 • Docker コンテナ：実行中のイメージ 10
- 12. 発端 節約のために１台に様々な社内サービスを集約 • C をアップデートしたら、芋づる式に D と E もアップデートされ動かなくなった 12
- 13. 苦悩 調べてみると D の依存先を外から変更不可能！ • 仕方がないので、おおもとの依存先を変 えてみたけどダメだった 13
- 14. 閃き 2 台あればいけるのに ⇒ Docker で出来るじゃん！ • 各サービスを Docker コンテナに閉じ込め ればアップデートが干渉しなくなる 14
- 15. 解決 小規模なら Docker Compose がおススメ • Docker Compose – 凄くシンプルなオーケストレーションツール – 設定（docker-compose.yml）が簡単 • docker run のオプションと同じことを書くだけ • コンテナ連携，ポートフォワード，ボリューム， – 起動が簡単（docker-compose up –d のみ） • 依存先のコンテナも一緒に起動 • サービス単位で管理すると楽 – 簡潔さよりポータビリティを優先した方が吉 15
- 16. Jenkins × Docker 快適な CI を実現する 16
- 17. Jenkins × Docker プルリクが更新されるたびにクリーンな環境で試験 • Docker が 0.6 の頃から採用 – Jenkins から Docker を使うプラグインを自作 17
- 18. Jenkins × Docker プルリクが更新されるたびにクリーンな環境で試験 • 本番なみにクリーンな環境 – 毎回作り捨てるのでゴミに邪魔されない • 不正な依存関係の早期発見 – 特定の人の環境にしかないライブラリ – 納品先の人がアクセスできないライブラリ • Dockerfile による安全な構成管理 – ソースコードと同様の構成管理 – 確実に動く環境構築方法やビルド方法 – 本番環境と同じコードから生成される開発環境 • VM と違って軌道がサクサク 18
- 20. その他の作業 Docker はちょっとしたことにも大活躍 • 手順書の確認作業 – 手順を修正したら、まっさらの環境からすぐやり 直せる。 • 依存ライブラリの収集作業 – まっさらの環境でコマンド（mvn，gradle，sbt） を実行すれば、必要なライブラリを確実に収集で きる。 • バッチ処理の受け渡し – コンテナの中に必要なものを全部入れておけるの で、受けとったスクリプトの動かし方が分からな いということが少ない。 20
- 22. TensorFlow Manager オンプレ環境でも動かせる ECS っぽいシステム 22
- 23. TensorFlow Manager Docker なら割と簡単に実現可能 • 計算資源の有効活用 – 資源が豊富な計算機では、複数の実験を並行 実行したいが、他と干渉しないようにしたい。 – 実験が始まるまでの待ち時間をなくしたい。 • 様々な環境 – どんな環境でもすぐに使えるようにしたい。 • クラウド環境，社内環境，お客様環境 • ※持ち出し範囲が限定されたデータがある。 – １台の開発ＰＣでクラスタを再現したい。 23
- 25. まとめ Docker は使うべき（ほとんどの場合、良い選択） • 使い捨て環境を手軽に作る方法 • 干渉や想定外の事態が起こりにくい環境 を手軽に作る方法 • 手順を伝える安全な方法 • 構成管理可能な環境を実現する良い方法 • ＣＩやＣＤを実現する良い方法 25
- 27. スタッフ募集中 学生さん、転職者さん、力を貸して！ • 研究（認識技術） – 機械学習・アルゴリズム・高速化・省メモリ・画 像・センサーに関する知識，Java，C++ • 開発（サーバサイド） – プロセス・アーキテクチャ・ミドルウェア・ネッ トワークに関する知識，Scala，Java，C++ • 開発（フロントエンド） – UI/UX・Android・iOSに関する知識，JavaScript • 企画（認識アプリ・認識サービス） – 新しい習慣を考える力，普及のためのアイデア 27
- 28. オフィス 新オフィス 移転日：2016年6月 床面積：2倍 • いつでも 見学 ＯＫ、メイド さんの 夕飯 付き 28
- 32. 情景画像文字認識とは いわゆる “OCR” とは ”扱う画像” が違う • 悪環境下での文字認識 – 手書き・様々な書体・かすれ・点描・きつい パース・統一性のない並び・逆光・陰・影・ グラデーション・モアレなど • 使える場面 – 屋外でのスマホカメラを使った棚卸し – 車載カメラからの標識認識 – 商品パッケージからの成分情報抽出 – キーワードによるアルバム・ビデオの頭出し 32
- 34. 物体認識 技術紹介② 34
- 37. 物体認識とは モノをカウント、見た目で分からない情報を表示 • 使える場面 工場内で箱の仕分け 体験や評判の調査 ワインラベルで情報検索 AR付箋 集めて応募キャンペーン ARフィギュア 37
- 38. 事例：1000sors 誰でも簡単に使えるクラウド型物体認識エンジン • 広い適用範囲 – 照明姿勢の変化に強く、様々な撮影環境に対応 • 驚異的な精度 – 数十万種類をほぼ完ぺきに識別 • 圧倒的な性能 – たった１台のＰＣで１００万種類を瞬時に識別 – 台数を増やせばリニアにスケールアウト 38
- 39. 事例：1000sors 手元の画像で精度や速度をすぐに確認可能 • ShotPreview for Android / iOS ①設定 ②撮影 ③確認 39
- 42. 事例：Cellars 18万件のワインラベルを認識するアプリ • 世界で賞を獲得したアプリをダウンロード！ – Asia Smartphone Apps Contest • 広告マーケティング部門 Silver Award 2位 – 立命館大学 学生ベンチャーコンテスト • 最優秀賞 NICT賞 42
- 44. 事例：画像認識API 画像を送るだけで写っている商品の情報を取得 • 登録商品：500 万件以上（昨年10月）の市販商品 – 書籍，DVD，CD，PCソフト，ゲームソフト， 食品パッケージ，… どんどん増加中 • 定期更新：網羅性 と 認識精度 の改善 – データ追加，パラメータ・アルゴリズム改良 44
- 45. 開発者は今すぐ登録！ ⇒ https://dev.smt.docomo.ne.jp 事例：画像認識API だれでも、かんたんに、マッシュアップ！ • docomo Developer support より提供中 画像認識 画像に写っている物体の情報を取得 環境センサー 日本全国の気温、降水量、紫外線量を取得 音声認識 話した内容を即座に文字に変換 雑談対話 自然な会話をやり取り 知識Q&A 今知りたいことをピンポイントで回答 音声合成 入力した文字を読み上げ トレンド記事抽出 今人気の話題をジャンルやキーワードで検索 文字認識 画像の文字を読み取り 発話理解 要求を理解して、適切な機能を提示 動作推定 行っていた動作の推定 45
- 46. モーション認識 技術紹介③ 46
- 48. 事例：動作推定API ドコモ と 来栖川電算 の共同研究 • 加速度データから人の動作や行動を検出 – 静止，歩き，走り，自転車，睡眠，食事 • 動作と直接対応しない行動も検出可能 • スマホ・スマートウォッチに対応 – Android，Android Wear，… • 加速度データにアクセスできる API を備えたウェアラブルデバイス – ※次の画像は画像中のデバイスに対応していることを保証するものではありません。 48
- 49. 開発者は今すぐ登録！ ⇒ https://dev.smt.docomo.ne.jp 事例：動作推定API だれでも、かんたんに、マッシュアップ！ • docomo Developer support より提供中 画像認識 画像に写っている物体の情報を取得 環境センサー 日本全国の気温、降水量、紫外線量を取得 音声認識 話した内容を即座に文字に変換 雑談対話 自然な会話をやり取り 知識Q&A 今知りたいことをピンポイントで回答 音声合成 入力した文字を読み上げ トレンド記事抽出 今人気の話題をジャンルやキーワードで検索 文字認識 画像の文字を読み取り 発話理解 要求を理解して、適切な機能を提示 動作推定 行っていた動作の推定 49
- 51. 事例：毎朝体操 だれでも、いつでも、どこでも、すぐできる • Android & iPhone ⇒ http://maiasa.jp/ 51
- 52. 事例：なりきり 2.0 ウェアラブルで現実のモノを操作する作品 • ゲームコントローラへの応用 – 格闘ゲームが遊べる程、応答が速く、精度もよい。 52