More Related Content Similar to 擴增實境發展與就業趨勢 (20) More from Hui-Ming Hsieh (7) 擴增實境發展與就業趨勢3. 擴增實境簡介
擴增實境(Augmented Reality)
將電腦產生的虛擬物件與現實世界顯示在同一空間裡的一種技
術。
技術特性(Azuma, 1997)
在實際環境中結合實際物件和虛擬的物件(Combines real and
virtual)
可即時地跟使用者進行互動(Interactive in real time)
必需在三度空間(Registered in 3-D)
3
7. 虛擬實境、擴增實境、混合實境
Paul Milgram & Fumio Kishino (1994)之定義
虛擬環境(virtual environments)四周環境皆為虛擬的。
擴增實境周圍環境為真實的。
混合實境(包括擴增實境及擴增虛境的範圍)介於真實環境跟虛擬
環境之間,例如鋼鐵人頭盔上顯示資料又顯示真實環境。
真實環境 、 擴增實境 、 擴增虛擬 、 虛擬實境
7
17. Google Project Glass
E Taiwan->M Taiwan->U Taiwan->?
智慧型行動裝置
Wearable Computing(穿戴式運算)
2014出貨, 1500美元
17
26. 擴增實境發展歷史(續)
AR歷史1
1966年:Ivan sutherland領導開始研發 The Sword of Damocles(達
摩克利斯之劍)這套系統,被普遍認為是 HMD 頭戴式顯示設備以及
增強現實的雛形。
1968年:Ivan完成了整個系統使用HMD來呈現3D圖像
1990年:波音公司的研究員 Tom Caudell 提出了Augmented Reality
「增強現實」這個詞組。隨後的幾年,AR 才慢慢開始在專業領域內
開始展露頭腳。
1992年:美國空軍研發的虛擬幫助系統以及哥倫比亞大學的 KARMA
修理幫助系統。
1997:Azuma發表定義AR領域之概觀,並描述了許多問題
1990s:開始有關於AR起源之研討會,如:International Workshop
、Symposium on Augmented Reality、International Symposium on
Mixed Reality以及Designing Augmented Reality Environments
workshop
1996年:發布Quake, 是一款化石級別 FPS 第一人稱射擊遊戲,擁有
大量的愛好者。此前Magic Leap 出的一個視頻,其實也是在現實場景
中進行一場戰鬥,包括 Hololens 的 demo 中也出現類似的遊戲場景。
26
27. 擴增實境發展歷史(續)
AR歷史2
1999年:由奈良先端科學技術大學院大學的加藤 博一( Kato
Hirokazu)主導開發AR Toolkit。其主要的功能是 Computer tracking
。一般來說基於 marker 的 AR 效果,先需要識別,識別成功之後進行
tracking,這樣,虛擬的物體才能跟著現實的物體同步運動。
2000年:來自 University of South Australia 的 Bruce Thomas, 開發
了一個 ARQuake 的項目,將AR帶到了室外的真實場景。
2005年:第一次運行在了塞班作業系統,就是諾基亞時代的那個塞班
。
2008年:開始運行在 iOS ,包括後續的 Android。不過,人類把AR
效果帶到室外,並不是通過手機實現的。
2014年:Google Glass 在行業內大多數人心目中無疑是里程碑似的存
在。
27
28. 擴增實境發展歷史(續)
AR歷史3
2016年:混合實境Hololens推出。
還有遊戲主機,任天堂的3DS和索尼的PSP,也都有推出了很多
AR遊戲。對於前幾年的移動增強現實。
智慧型手機等行動裝置的不斷更新,帶來更強的性能及可玩性
,也讓 AR 技術有了更多可發揮的餘地。而COOLHOBO目前正
在開發的移動app就包含了AR遊戲互動功能,只需要一部手機
,就能隨時隨地玩AR遊戲。
日本及德國財團Arvika此些資金充足的組織在發展AR,特別是
混合實境系統實驗室。
AR技術在人工智慧、CAD、圖形仿真、虛擬通訊、遙感、娛樂
、模擬訓練等許多領域帶來了革命性的變化。
28
35. Google Project Glass
E Taiwan->M Taiwan->U Taiwan->?
智慧型行動裝置
Wearable Computing(穿戴式運算)
2014出貨, 1500美元
35
46. 擴增實境設備
顯示器-頭戴式 (HMD)
顯示器置於頭頂,提供圖像到使用者眼前。
頭戴式顯示器分為兩類:光學透視、影像透視
Sony and Olympus 已經製造彩色液晶顯示器(LCD)讓消費者
頭戴顯示器來看影像和玩電動遊戲。
優點 : 輕便、便宜; 缺點 :其解析度低、視野小、不支援立體聲
http://www.youtube.com/watch?v=ngMSkhTwsmE
http://www.youtube.com/watch?v=YXnfsCjthuI&NR=1
46
47. 影像透視 (Video See Through)
Video
camera
Video
Graphics
Monitor Combiner
47
48. 光學透視 (Optical See Through)
Real World
Optical Combiners
Virtual images
from monitors
48
49. 擴增實境設備 (續)
顯示器-頭戴式
虛擬視網膜顯示器(virtual retinal display)將直接在視網膜上成
像,由MicroVision開發
優點
高亮度和對比、低功率消耗、景深大
49
50. 擴增實境設備 (續)
顯示器-頭戴式
理想情況下,頭帶AR顯示器不會大於一副太陽鏡。
MicroOptical製作光學眼鏡系列,嵌入光學顯示器到常見的眼
鏡上。目的在讓顯示器因輕便、不顯眼而被使用者遺忘。
重量小於眼鏡本身6克
50
51. 擴增實境設備 (續)
顯示器-手持式
有些AR系統使用手持平板液晶顯示器,其使用一個附加的攝影
機來提供影像透視的擴增。
手持顯示器充當一個窗口或一個放大鏡來顯示重疊於AR的實際
物件。
AR顯示器的問題
沒有足夠的光線、解析度、視野
由於攝影機架於遠離實際眼睛之位置,大多數影像透視顯示器
有視差的錯誤。
成本和重量問題
51
52. 擴增實境設備 (續)
追蹤感應器
準確的追蹤使用者瀏覽方向和位置是AR定位的關鍵。
Rolland等人提出了一個近來追蹤系統的概觀
系統通常採用混合追蹤技術(如磁場和影像感應器)的優勢來彌補個
別追蹤技術的弱點。
系統結合加速度和影像追蹤,即使在快速頭部移動,也能準確的定
位。
http://www.youtube.com/watch?v=MNmrSGjPzfE
http://www.youtube.com/watch?v=81qb_QgD_YU&NR=1
52
53. 擴增實境設備 (續)
環境檢測 (Calibration)
一個有效的AR需要了解使用者和環境中其他物件位置
算圖時需要有真實景色的深度圖來支援遮蔽(Occlusion)
系統使用多台攝影機來即時顯示深度圖
53
54. 擴增實境設備 (續)
環境檢測
AR行動應用部份:
混合型指南針及陀螺儀跟蹤器在戶外
定點提供固定的測量方向及位置。
系統會在標誌性建築物特點條件下的
地方,產生精確的結果。
全球定位系統(GPS)通常採即時追
蹤位置的方式。
限制因素:如,全球定位系統(
GPS)需要在無遮蔽視角條件下較
佳。
從圖中兩個不同的視點觀看,
可看到被標註的行動標籤位
置。
54
64. 擴增實境大廠_Microsoft HoloLens
64
Microsoft HoloLens是Windows Holographic的使用主要設備。
HoloLens是一個Windows 10的智能眼鏡產品。它採用先進的
傳感器、高清晰度3D光學頭置式全角度透鏡顯示器以及環繞
音效。它允許在增強現實中用戶界面可以與用戶透過眼神、語
音和手勢互相交流。其開發代號為「Project Baraboo」。
HoloLens由微軟在2015年1月21日公布,在此之前已經開發了
5年之久,其構想的一部分成為了在2010年發布的Kinect。
HoloLens使用的傳感器是一種高效節能的深度攝像頭,具有
120°×120°的視野。傳感器提供的其他功能包括頭部跟蹤,視
頻拍攝,以及聲音捕捉。除了高性能的CPU和GPU,
HoloLens帶有全息處理器(HPU)這一協處理器用於從所述
的各種傳感器集成數據,並處理諸如空間映射,手勢識別和語
音識別的任務。
65. 擴增實境大廠_Microsoft HoloLens 2
65
2017 年 10 月,微軟正式停產 Kinect,共銷售約 3,500 萬台。
Kinect 技術的繼承者:HoloLens。
Hololens 2在2019年開賣。售價 3,500 美元,微軟已經與合作
夥伴 Trimble 合作推出了一款 HoloLens 2 的 Trimble XR 10
Dynamics 365 Guides 是一款全新的混合實境應用,能夠賦能員
工透過實踐進行學習。
Azure Kinect DK 是一款開發者工具包,它將人工智慧感測器
集成於一個裝置中;其核心是微軟為 HoloLens 2 開發的 TOF
深度感測器、高解析度 RGB 鏡頭,以及一個七麥克風圓形陣
列,進而透過 Azure 開發高級電腦視覺和語音解決方案。價格
為 399 美元。
74. 應用
行動設備
目前在 iPhone 手機上,已經出現了不少的擴增實境 的應
用 ,例如台灣上櫃公司研勤科技旗下產品PAPAGO!衛星導
航系統,在iPhone平台所推出的M8.2導航軟體,就有所謂
的『擴增實境導航』功能。將百萬筆店家資料都放到程式中
做定位搜尋,只要用手機拍下街景,該地相關資訊將顯現在
螢幕上。
工業
目前擴增實境在工業上的應用也已經出現了不少。目前主
要用於大型 器械的維修和製造上。通過為維修人員裝備頭
戴式顯示器,維修人員 可以在維修時輕鬆獲取對他們有用
的很多幫助信息。
74
79. AR應用實例
分為三個領域:手機、教育、合作和商業應用
AR應用在檢查部分
Navab和他的同事利用2D工廠樓層計畫和工業管線結構平面圖
,以C型臂X光機器的實際限制讓機器自動校準攝影機和用實際
物體對準X光圖像(下圖)
AR應用在醫療層面
Fuchs支持腹腔鏡的手術
Weghorst使用AR來幫助
治療帕金森氏症病人。
2D工廠樓層計畫和工業管線結構平面圖,
產生3D管線模型,重疊在工業管線上。
79
83. 行動應用 (續)
Piekarski 正開發使用者互動模式和技術的互動模式建構一個
行動的AR環境
此系統也讓其他戶外用戶看到這些只存在虛擬的軍事仿真器
(如飛機)
結合擴增和虛擬實境的兩種視野
83
89. 職場工作
89
職缺與職稱:
擴增實境AR或虛擬實境VR設計師、
AR/VR機構設計工程師、
<AR/VR>專案管理、
AR/VR Unity Programmer、
AR/VR體感互動工程師、
AR/VR/XR 軟體工程師、
前端工程師 Front-end Engineer (AR/VR)、
Backend Engineer 後端工程師 (AR / VR)
C++ 軟體研發工程師 (AR / VR)
AR/VR產品RF電路設計專員/主管
90. SOHO族、集資創業平台
90
Unity虛擬實境AR設計
518外包網(五花八門的工作項目)
創業的天堂(降低開模、無本起始的好方法!):群眾
集資平台 Indiegogo、Kickstarter(Oculus Rift、
Control VR、Virtuix VR Treadmill )
台灣的集資平台:flyingV (2012,最大綜合型)、嘖嘖
(2012)、weReport(2011)、pressplay、獨立集資、
Hahow、SOS
台灣團隊在國內集資平台上架了大約978個專案,其
中有501件集資成功,比率高達1/2
根據 Kickstarter 的統計 ,這幾年的所有提案中,平
均第一次提案就成功的機率只有 38%,但第二次的
專案,成功機率是 73%––幾乎是第一次的兩倍!
92. 參考資料
影片網址
Human Pacman
http://www.youtube.com/watch?v=A23PYxYpJRg
Magic Land
http://www.youtube.com/watch?v=qMkcQOcvHLA
PS3 video game: The Eye of Judgement
http://www.youtube.com/watch?v=19bBrNvIteU
MXR wIzQubes
http://www.youtube.com/watch?v=WhVdf1y1OXQ
Magic Book
http://www.youtube.com/watch?v=Rl4VU3srOjs
http://www.youtube.com/watch?v=UVhtB-SH5b8
http://www.youtube.com/watch?v=S-G8u-01t0k&feature=related
Machine maintenance
http://www.youtube.com/watch?v=lM9rH5XKWsM&feature=related
ARToolkit 4.4 running on iPhone
http://www.youtube.com/watch?v=5M-oAmBDcZk&feature=related
Lego Augmented Reality
http://www.youtube.com/watch?v=PGu0N3eL2D0
92