トヨタ自動車で進めている デジタルトランスフォーメーション、xR テクノロジーの活用方法や利用シーンについて、”最新” の HoloLens 活用事例を中心にご紹介します。 出演： 栢野 浩一 トヨタ自動車株式会社 第２エンジニアリング情報部 主幹 佐戸川 晶 トヨタ自動車株式会社 第２エンジニアリング情報部

1. トヨタのxR活用事例ご紹介
トヨタ自動車株式会社
第２エンジニアリング情報部
栢野 浩一
佐戸川 昌

2. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
1936/4発表
豊田佐吉
(1867-1930)
トヨダ
AA型乗用車
豊田喜一郎
(1894-1952)
豊田自動織機
Ｇ型
1

3. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
本社 東京本社 名古屋本社
2
Mar.2018
従業員数 74,890
連結従業員数 369,124

4. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
海外170ヶ国／地域以上で販売
3
Mar 2018
27ヶ国／地域
67の国内海外製造事業体

5. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
武器：車両一台分の3Dデータ
4
データを基準とした業務遂行を支援、正しく遅れなく
ミッション：設計3Dデータを全行程で活用 データ正活動

6. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
３Dデータ活用カタログ
ＣＭ
サービスマニュアル
パーツカタログ
用品デザインレビュー
デザイン
レビュー
レイアウト検討
作業要領書 荷姿検討
構成部品表
ｴﾝｼﾞﾝ搭載検討
作業手順書
計測
CAE
設計デザイン
品管
評価
生技・工場
用品
企画
販売
サービス
5

7. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
3Dデータを活用し
「もっといいクルマづくり」を
～ お客様の笑顔のために ～
3Dデータをみんなで上手に活用
もっと考える力・時間を創出
高品質で魅力ある車を効率よくタイムリーに開発
6

8. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
・1996年～ V-Comm導入（生技DE検討の開始）
7

9. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
部品ｘ工具の干渉 やりにくい作業＝品質低下
8
最新xR活用でも本質は同じ

10. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
現場のカイゼンの積み重ね
CADで
定規をつくり解決
隙間を測る
機能も無い
1999年頃
9

11. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
・2005年～ 市販CG用データ 海外拠点へ提供開始
10

12. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
マテリアル
データ3D形状
データ
配色設定
（紐付）
トヨタ で保証（バーチャルヴィーグルチーム VV） 活用推進
（販売拠点）
北米
欧州
豪州
他
後工程が安心して利用できる＝自工程完結
ビジュアル
3Dデータ
（CGソフト）
11

13. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
カーコンフィギュレータ
CM
VRイベント
12

14. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
・2000初～ 手書きイラストの元ネタ
・2007年～ 修理書等のイラストに3Dデータ活用開始
13

15. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
タイムリー ＆ 正確 ＆ わかりやすい ‘９７ ‘０７
配線図
ボデー
修理書
修理書
基礎
教材 新型車
教材
新型車
解説書 取扱
説明書
パーツ
カタログ
限界！
車種＆機能
増加
14

16. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
手書きｲﾗｽﾄ ｸﾞﾚｰｲﾗｽﾄ
工数平均値 xx xx (▲87％)
事例
STEERING
WHEELの
取外し
15

17. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
「もっといい車＆サービス」に向け、カイゼン
AR/VR/MR/HoloLens ＝ xR活用
３Dデータを用いた
業務改善を20年間継続
若手エンジニア＝デジタル活用が当たり前
16

18. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
ねらい）離れていてもリアルに体験＆知見共有
VR空間を共有
多人数がコラボしながら研修
複数拠点で
実証実験中
17
試行中

19. © 2019 Toyota Motor Corporation. All rights reserved.

20. © 2019 Toyota Motor Corporation. All rights reserved.

21. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
VPN
マルチプレーヤ
エンジン
車両モデル
（オリジナル）
VPN
（モバイル）
車両モデル
（キャッシュ）
VR HMD
（ゲーム用）
ゲームPC
安価でシンプル ©Exit Games, ©Microsoft Corp.
20
試行中

22. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6021
VR教材を、誰でも、もっと気軽に学べる
試行中
© Facebook Technologies, LLC
Oculus GO
２万円台～

23. © 2019 Toyota Motor Corporation. All rights reserved.

24. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6023
ゲーム作成技術の応用
UnityとExcelでシナリオ作成
VR教材を容易に作成できる
試行中
冷却水量で
正しいものを
選べ
冷却水量がHi
とLoの間
冷却水の量
がLoより下
冷却水量が
Hiより上
リザーバタン
ク内が空 1
mo
del_
1
クーラントタンクに冷却液がFullと
Lowの間にある事を確認します。
Full以上に入れてしまうとエンジン
ルーム内に排出されてしまいます。
冷却水の点
検で正しい
ものを選べ
リザーバタンク
内の冷却水は、
漏れ以外に減
ることは無い
リザーバタンク
内の冷却水
は自然蒸発に
より徐々に減
少する
冷却水がきれ
いな場合、定
期的な交換
は必要ない
冷却水の定
期交換は
12ヶ月ごとで
ある 2
mo
del_
1
クーラントタンクに冷却液がFullと
Lowの間にある事を確認します。
補充の際、スーパーLLCを充填しま
す。
例

25. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6024
映画で憧れた未来
デジタルを現場で
HoloLens

26. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
サービス現場での課題
作業中に
すぐ見れない
わかりにくい
（カン、コツ）
Web（PC）で配信
サービスドキュメント（修理書他）
25
試行中

27. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
試行中
26
大変評判がいい
すぐほしい！
本格的な
展開へむけ
活動

28. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6027
①
車
両
入
庫
②
カ
ル
テ
作
成
③
故
障
診
断
（
部
位
特
定）
④
作
業
前
準
備
（
工
具・
部
品）
⑤
修
理
作
業
（
部
品
交
換）
⑥
お
客
様
説
明
試行中

29. © 2019 Toyota Motor Corporation. All rights reserved.

30. © 2019 Toyota Motor Corporation. All rights reserved.

31. © 2019 Toyota Motor Corporation. All rights reserved.

32. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6031
⑤機能解説教材
⑥作業確認モレ ①配線図
③作業手順
④機能解説教材
②遠隔地支援
試行中

33. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6032
・解り辛かった部品やコネクタ配置を直感的に理解
・配線に関わる情報を一括表示
試行中

34. © 2019 Toyota Motor Corporation. All rights reserved.

35. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6034
Top Crew
(国内トップ
技術者）
・すぐほしい、持って帰りたい
・若い奴らに使わせたい、教えたい
・すげー、信じられない！
× 経験値がかえって減る心配
予想が確信へ90％が好印象

36. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6035
試行中
オフィスから
サービス
現場を支援
Dynamics 365 Remote Assist

37. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
試行中
36

38. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
▲90%
37
試行中
Dynamics 365 Guides

39. © 2019 Toyota Motor Corporation. All rights reserved.
38

40. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6039
試行中

41. © 2019 Toyota Motor Corporation. All rights reserved.

42. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6041
試行中

43. © 2019 Toyota Motor Corporation. All rights reserved.

44. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6043
試行中
作業確認のモレを防ぎたい
人間の目では多くの部品を一目で確認できない
思い込み、見落とし 等
画像解析や機械学習で
判定できないか？
例：冷却水タンクの
キャップの閉め忘れ

45. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6044
試行中
アジャイル開発のスプリント形式で短期開発 4-15.Mar.2019
HoloLens
Kaoru Nakamura (HoloLab)
Toshimasa Shiraki (HoloLab)
Akihiro Ueyama (HoloLab)
Jason Fox (Microsoft)
Jackie Becker (Microsoft)
クラウド
Vivek Gupta (Microsoft)
Taylor Rockey (Microsoft)
Jason Mostella (Microsoft)
Paige Liu (Microsoft)
機械学習モデル
Daisuke Yamanaka (HoloLab)
Yusuke Furuta (HoloLab)
Dae Woo Kim (Micrososft)
Ayaka Hara (Microsoft)
Micheleen Harris (Microsoft)
Hannah Krager (Microsoft)
コーディネーター
Kohei Kawata (Microsoft)
各分野のエキスパートが参加

46. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
Object Detection on multiple items
Engine
Coolant
Reservoir
Cap
Air Cleaner
Bracket
Oil Level
Gauge
45
試行中

47. © 2019 Toyota Motor Corporation. All rights reserved.

48. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
Photoshoot
Annotations
Training
(Azure GPU VM)
Deployment
(Container on
Azure AKS)
HoloLens app
20,000 photos
10 hours
10 classes * 20,000 photos
= 200,000 tags
200 hours
Machine Learning development process
Photoshoot
Annotations
写真、タグ付けに時間がかかる
47
試行中

49. © 2019 Toyota Motor Corporation. All rights reserved.

50. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
3D CG model vehicle – Prius 2016 Real vehicle – Prius 2016
49
試行中

51. © 2019 Toyota Motor Corporation. All rights reserved.

52. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6051
試行中
30 min
Photoshoot/Annotations
Photoshoot Annotations Training
(Azure GPU VM)
Deployment
(Container on
Azure AKS)
HoloLens app
Training
(Azure GPU VM)
Deployment
(Container on
Azure AKS)
HoloLens app
20,000 photos
10 hours
10 classes * 20,000 photos
= 200,000 tags
200 hours(2,000 photos/hour)

53. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6052
※試作機

54. © 2019 Toyota Motor Corporation. All rights reserved.

55. © 2019 Toyota Motor Corporation. All rights reserved.

56. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
HoloLens1

57. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
Interactive
High-End
Experience
Interactive
Mobile,Web
Experience
Interactive
AR/VR/MR
Experience
VIRTUAL FACTORY
CAD
PDM
Toyota Digital Pipeline
Visual 3D
Model
Material Library
Polygon
56
※HoloLens2開発者版

58. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6057
Tri:624,787 Tri:604,800
⑤OM/Decimate ④OM/Remove holes
Tri: 628,709
③OM/Hidden removal②Mesh/repair mesh
Tri: 1,692,220 Tri:633,955
① File/Import wizard
Tri: 1,692,843
⑥Finish

59. © 2019 Toyota Motor Corporation. All rights reserved.

60. © 2019 Toyota Motor Corporation. All rights reserved.
/ 60
・xR活用のヒントは現場にあり
課題を一番しっているのは現場
・若い世代にまかせてみる
デジタルネイティブで、センスがいい
・気軽にまずはやってみる
従来よりはるかに、安い、早い、うまい技術が豊富
59
xRは働き方改革に確実に役立つ

61. © 2019 Toyota Motor Corporation. All rights reserved.
/ 6060
xRを用いて
もっといいクルマづくり＆サービス
に努めてまいります
お客様の笑顔のために
ご清聴ありがとうございました