SlideShare a Scribd company logo
1 of 21
Download to read offline
奇点汽车美国研究与创新中心首席科学家
兼奇点汽车美国公司总裁
黄浴
“AI-Car时代”
加速自动驾驶落地的路线及解决方案
自 动 驾 驶 级 别
模块化主流研究方向
地图
规划
决策
控制感知
问题最多的模块
其中“多传感器融合”是目前认可的关键研发方向,
数据层的前融合
(甚至可能在传感器硬件层就已经实现)
任务层的后融合
(包括车辆定位,障碍物检测和跟踪,景物语义分割等)
自 动 驾 驶 研 究 主 流 趋 势
Camera为主
低成本、轻地图、
渐进式迭代开发MobilEye,
Tesla和跟随者们
LiDAR为主
高成本、重地图
谷歌自研的激光雷达达到128线,并且可
以调节发射激光的强度,性能优越。
更适合奇点汽车
自动驾驶研究主流趋势
自 动 驾 驶 具 有 挑 战 性
复杂的周边环境
大量的特殊情景
环境感知算法并不完美
需要大量数据来开展深度学习
运算密集且需要保证实时性
深度学习在自动驾驶中扮演重要角色
目标检测/识别/追踪
驾驶行为建模
端到端驾驶学习
仍需要在未来开展大量工作
自动驾驶具有挑战性
自动驾驶
Deep Learning for Autonomous Driving
Training in Deep Learning
SGD Adam Weight decay
NAG AdaGrad/AdaDelta
Batch Normalization Momentum
Drop out Learning rate
Data Augmentation
Deep Learning for Computer Vision
Enhancement Denoising Object Tracking
Contour Extraction Depth Estimation
Object Detection Object Recognition
Semantic Segmentation Motion Estimation
SLAM Instance Segmentation
深度学习(Deep Learning)最近10年在AI领域的飞速发展有目共睹,
尤其在计算机视觉方面突破了以前设计图像/视频特征的瓶颈,其深度网络实现了很多应用的最佳性能
Deep Learning for Autonomous Driving
CNN Models in Deep Learning
AlexNet GoogleNet ResNet SSD
Faster R-CNN YOLO (1, 2, 3) Mask R-CNN
DenseNet RetinaNet MobileNet
Platforms in Deep Learning
Caffe(2) TensorFlow Torch Paddle
Keras Theano CNTK MXNet
RNN in Deep Learning
LSTM GRU
Deep Reinforcement Learning
NAS
Encoder-Decoder Model in Deep Learning
FCN SegNet ParseNet FlowNet
U-Net SFM-Net Capsule Network
GAN(Generative Adversarial Network)
深度学习的发展,除了自身机器学习理论的进步(比如GAN)以外,是跟计算机硬件的发展(Nvidia GPU)分不开的,
特别是深度学习界的开放态度和开源代码起了推波助澜的作用(如Caffe,TensorFlow)。
Deep Learning for Autonomous Driving
Deep Learning in Autonomous Driving
Obstacle Detection Obstacle Tracking Lane Detection
Free space Extraction Scene Segmentation Traffic Sign Detection & Recognition
Traffic Light Detection & Classification Landmark Detection
Sensor Calibration Sensor Fusion (early/late)
Vehicle Feedback Control Driving Behavior Modeling
在自动驾驶领域,我们可以看到,除了以上提到的视觉问题以外,深度学习也在多传感器标定(calibration)和融合(fusion),
以及驾驶行为和反馈控制等方面体现了强大的攻关能力。
Camera-based vehicle detection
F Chabot et al., “Deep MANTA: A Coarse-to-fine Many-Task Network for joint 2D and 3D vehicle analysis from monocular image”.
Deep Learning for Autonomous Driving
Faster R-CNN
FCL + Softmax
FCN
Deep Learning for Autonomous Driving
MultiNet: Joint classification, detection and segmentation
M Teichmann et al., “MultiNet: Real-time Joint Semantic Reasoning for Autonomous Driving”.
自动驾驶对我来说,最重要的是产品化以及商业化落地
奇点汽车希望能在不同技术路线上以不同的策略与不同的伙伴展开合作
“以人为本”、满足个性化需求的
“轮式机器人”
奇点汽车自动驾驶研发如何布局
中美两国同时布局,采用同一开发平台,
两地人才可以互通有无,技术开发工作也可以互相协调,共同前进
苏州全球研发中心美国研究与创新中心 X-LAB ADAS
借助硅谷人才和技术实力,自动驾驶技
术的研发和推进落地实现
环境感知,高清地图,车联网和驾驶行
为模型,利用英伟达(NVIDIA)自动驾
驶计算平台NVIDIA DRIVE PX2,奇点
汽车目标于2018年内将自主驾驶算法提
升至L3(SAE标准)
L3为主,和美研合作紧密,
面向国内的合作伙伴,
着力于将自动驾驶技术适配国内市场。
L2为主,已成立3年,
今后会继续支持自动驾驶的量产落地。
自动驾驶系统研发、自动驾驶安全技术
研发、整车研发、造型设计、智能系统
电子电气研发等为主要方向。
未来5年容纳2000至3000名高科技研发
人才,建立奇点汽车技术委员会,并结
合苏州优质高校资源联合开办自动驾驶
学院,培养输送产业人才。
在汽车电动化和智能化大趋势下,奇点汽车始终将“汽车大脑”——智能
系统的开发作为核心竞争力进行战略布局,自动驾驶更是奇点汽车的核心
竞争力,会参考Tesla的做法,从L2演进到L4 。汽车将会成为一台“轮式
机器人”,这是奇点对汽车的全新定义。
L2 L3 L4
奇点汽车自动驾驶技术路线
奇点汽车自动驾驶技术路线
奇点汽车自动驾驶的目标:短期目标实现L2,中期目标实现L3,长期目标实现L4.。
奇点汽车的硬件配置(传感器,计算平台,云服务)上已经能支持L4,
L2-L3-L4的迭代升级完全是软件上的。
环境感知 定位 路径规划 决策执行
复杂的传感器系统 计算机控制 线控执行器数据融合
毫米波雷达视觉传感器 超声波雷达
毫米波雷达
毫米波雷达
超声波雷达
超声波雷达
视觉传感器
视觉传感器
超声波雷达
超声波雷达
超声波雷达
超声波雷达
毫米波雷达
毫米波雷达
超声波雷达
超声波雷达
超声波雷达
超声波雷达
超声波雷达
视觉传感器
快速推进商业落地,奇点汽车的解决之道
自研+第三方合作
2019年实现L3级别
(SAE标准)
MAKE
EVERY DRIVE
A WONDERFUL
MEMORY
THANKS
让每次出行都成为美好的记忆

More Related Content

Similar to AI-Car: Solution and Routes to accelerate Autonomous Driving's landing from research

海通证券金融云思考与实践(数据技术嘉年华2017)
海通证券金融云思考与实践(数据技术嘉年华2017)海通证券金融云思考与实践(数据技术嘉年华2017)
海通证券金融云思考与实践(数据技术嘉年华2017)Zhaoyang Wang
 
迎接云计算大时代 - EasyStack 联合创始人兼CTO 刘国辉
迎接云计算大时代 - EasyStack 联合创始人兼CTO 刘国辉迎接云计算大时代 - EasyStack 联合创始人兼CTO 刘国辉
迎接云计算大时代 - EasyStack 联合创始人兼CTO 刘国辉Hardway Hou
 
海量計算的學習歷程分析與雲端資料庫管理系統Sqlmr appliance一體機開發計畫書 20140101
海量計算的學習歷程分析與雲端資料庫管理系統Sqlmr appliance一體機開發計畫書 20140101海量計算的學習歷程分析與雲端資料庫管理系統Sqlmr appliance一體機開發計畫書 20140101
海量計算的學習歷程分析與雲端資料庫管理系統Sqlmr appliance一體機開發計畫書 20140101Jackie Liu
 
project for Dapar deepfake researcher in anmerca
project for Dapar deepfake researcher in anmercaproject for Dapar deepfake researcher in anmerca
project for Dapar deepfake researcher in anmercaniushaodong
 
研華物聯網之無線監控技術發展現況_092111
研華物聯網之無線監控技術發展現況_092111研華物聯網之無線監控技術發展現況_092111
研華物聯網之無線監控技術發展現況_092111Eric Lo
 
03_AI旅宿訂房系統-AI智慧訂房方案
03_AI旅宿訂房系統-AI智慧訂房方案03_AI旅宿訂房系統-AI智慧訂房方案
03_AI旅宿訂房系統-AI智慧訂房方案IttrainingIttraining
 
貫通物聯網每一哩路 with Microsfot Azure IoT Sutie
貫通物聯網每一哩路 with Microsfot Azure IoT Sutie貫通物聯網每一哩路 with Microsfot Azure IoT Sutie
貫通物聯網每一哩路 with Microsfot Azure IoT SutieHerman Wu
 
從雲端到邊緣 Azure IoT Edge 幫工廠設備長智慧
從雲端到邊緣 Azure IoT Edge 幫工廠設備長智慧從雲端到邊緣 Azure IoT Edge 幫工廠設備長智慧
從雲端到邊緣 Azure IoT Edge 幫工廠設備長智慧Poy Chang
 
达尔文信息云平台
达尔文信息云平台达尔文信息云平台
达尔文信息云平台SmartData
 
AI Agent,大模型时代重要落地方向 202310 东吴证券.pdf
AI Agent,大模型时代重要落地方向 202310 东吴证券.pdfAI Agent,大模型时代重要落地方向 202310 东吴证券.pdf
AI Agent,大模型时代重要落地方向 202310 东吴证券.pdfShan Fu
 
Chap12 嵌入式系统开发模式
Chap12 嵌入式系统开发模式Chap12 嵌入式系统开发模式
Chap12 嵌入式系统开发模式Allen Galler
 
Y20151003 詹文男-物聯網的商機與挑戰
Y20151003 詹文男-物聯網的商機與挑戰Y20151003 詹文男-物聯網的商機與挑戰
Y20151003 詹文男-物聯網的商機與挑戰m12016changTIIMP
 
为什么你需要了解应用云
为什么你需要了解应用云为什么你需要了解应用云
为什么你需要了解应用云easychen
 
Introduction to Huawei's Full-Stack AI Portfolio
Introduction to Huawei's Full-Stack AI PortfolioIntroduction to Huawei's Full-Stack AI Portfolio
Introduction to Huawei's Full-Stack AI PortfolioHuawei Technologies
 
Top100summit 腾讯-周健-服务化与体系化解决大量定制小项目开发困境
Top100summit 腾讯-周健-服务化与体系化解决大量定制小项目开发困境Top100summit 腾讯-周健-服务化与体系化解决大量定制小项目开发困境
Top100summit 腾讯-周健-服务化与体系化解决大量定制小项目开发困境drewz lin
 
3 G时代移动应用新机遇和新挑战
3 G时代移动应用新机遇和新挑战3 G时代移动应用新机遇和新挑战
3 G时代移动应用新机遇和新挑战sparkwan
 
Cloud client : 达尔文信息云浏览器
Cloud client : 达尔文信息云浏览器Cloud client : 达尔文信息云浏览器
Cloud client : 达尔文信息云浏览器Ying LI
 
[DCTPE2010] 從企劃到開發維護的 Drupal 專案經驗
[DCTPE2010] 從企劃到開發維護的 Drupal 專案經驗[DCTPE2010] 從企劃到開發維護的 Drupal 專案經驗
[DCTPE2010] 從企劃到開發維護的 Drupal 專案經驗Drupal Taiwan
 
[China merge world tour] Coverity Development Testing
[China   merge world tour] Coverity Development Testing[China   merge world tour] Coverity Development Testing
[China merge world tour] Coverity Development TestingPerforce
 
云计算概念介绍2011 03
云计算概念介绍2011 03云计算概念介绍2011 03
云计算概念介绍2011 03Liming Liu
 

Similar to AI-Car: Solution and Routes to accelerate Autonomous Driving's landing from research (20)

海通证券金融云思考与实践(数据技术嘉年华2017)
海通证券金融云思考与实践(数据技术嘉年华2017)海通证券金融云思考与实践(数据技术嘉年华2017)
海通证券金融云思考与实践(数据技术嘉年华2017)
 
迎接云计算大时代 - EasyStack 联合创始人兼CTO 刘国辉
迎接云计算大时代 - EasyStack 联合创始人兼CTO 刘国辉迎接云计算大时代 - EasyStack 联合创始人兼CTO 刘国辉
迎接云计算大时代 - EasyStack 联合创始人兼CTO 刘国辉
 
海量計算的學習歷程分析與雲端資料庫管理系統Sqlmr appliance一體機開發計畫書 20140101
海量計算的學習歷程分析與雲端資料庫管理系統Sqlmr appliance一體機開發計畫書 20140101海量計算的學習歷程分析與雲端資料庫管理系統Sqlmr appliance一體機開發計畫書 20140101
海量計算的學習歷程分析與雲端資料庫管理系統Sqlmr appliance一體機開發計畫書 20140101
 
project for Dapar deepfake researcher in anmerca
project for Dapar deepfake researcher in anmercaproject for Dapar deepfake researcher in anmerca
project for Dapar deepfake researcher in anmerca
 
研華物聯網之無線監控技術發展現況_092111
研華物聯網之無線監控技術發展現況_092111研華物聯網之無線監控技術發展現況_092111
研華物聯網之無線監控技術發展現況_092111
 
03_AI旅宿訂房系統-AI智慧訂房方案
03_AI旅宿訂房系統-AI智慧訂房方案03_AI旅宿訂房系統-AI智慧訂房方案
03_AI旅宿訂房系統-AI智慧訂房方案
 
貫通物聯網每一哩路 with Microsfot Azure IoT Sutie
貫通物聯網每一哩路 with Microsfot Azure IoT Sutie貫通物聯網每一哩路 with Microsfot Azure IoT Sutie
貫通物聯網每一哩路 with Microsfot Azure IoT Sutie
 
從雲端到邊緣 Azure IoT Edge 幫工廠設備長智慧
從雲端到邊緣 Azure IoT Edge 幫工廠設備長智慧從雲端到邊緣 Azure IoT Edge 幫工廠設備長智慧
從雲端到邊緣 Azure IoT Edge 幫工廠設備長智慧
 
达尔文信息云平台
达尔文信息云平台达尔文信息云平台
达尔文信息云平台
 
AI Agent,大模型时代重要落地方向 202310 东吴证券.pdf
AI Agent,大模型时代重要落地方向 202310 东吴证券.pdfAI Agent,大模型时代重要落地方向 202310 东吴证券.pdf
AI Agent,大模型时代重要落地方向 202310 东吴证券.pdf
 
Chap12 嵌入式系统开发模式
Chap12 嵌入式系统开发模式Chap12 嵌入式系统开发模式
Chap12 嵌入式系统开发模式
 
Y20151003 詹文男-物聯網的商機與挑戰
Y20151003 詹文男-物聯網的商機與挑戰Y20151003 詹文男-物聯網的商機與挑戰
Y20151003 詹文男-物聯網的商機與挑戰
 
为什么你需要了解应用云
为什么你需要了解应用云为什么你需要了解应用云
为什么你需要了解应用云
 
Introduction to Huawei's Full-Stack AI Portfolio
Introduction to Huawei's Full-Stack AI PortfolioIntroduction to Huawei's Full-Stack AI Portfolio
Introduction to Huawei's Full-Stack AI Portfolio
 
Top100summit 腾讯-周健-服务化与体系化解决大量定制小项目开发困境
Top100summit 腾讯-周健-服务化与体系化解决大量定制小项目开发困境Top100summit 腾讯-周健-服务化与体系化解决大量定制小项目开发困境
Top100summit 腾讯-周健-服务化与体系化解决大量定制小项目开发困境
 
3 G时代移动应用新机遇和新挑战
3 G时代移动应用新机遇和新挑战3 G时代移动应用新机遇和新挑战
3 G时代移动应用新机遇和新挑战
 
Cloud client : 达尔文信息云浏览器
Cloud client : 达尔文信息云浏览器Cloud client : 达尔文信息云浏览器
Cloud client : 达尔文信息云浏览器
 
[DCTPE2010] 從企劃到開發維護的 Drupal 專案經驗
[DCTPE2010] 從企劃到開發維護的 Drupal 專案經驗[DCTPE2010] 從企劃到開發維護的 Drupal 專案經驗
[DCTPE2010] 從企劃到開發維護的 Drupal 專案經驗
 
[China merge world tour] Coverity Development Testing
[China   merge world tour] Coverity Development Testing[China   merge world tour] Coverity Development Testing
[China merge world tour] Coverity Development Testing
 
云计算概念介绍2011 03
云计算概念介绍2011 03云计算概念介绍2011 03
云计算概念介绍2011 03
 

AI-Car: Solution and Routes to accelerate Autonomous Driving's landing from research