Bài trình bày của Mimas về tương tác số

1. MIMAS- MOBILEDAY 2012
19-05-2012

2. Nội dung
• 5+1 Giác quan
• Augmented Reality- Thực tại
tăng cường
• Computer Vision

4. 340 triệu
tweets/ngày
24 h/1 ngày
10,2 triệu
comments /20
phút

5. Công nghệ “Sixth Sense”- Giác quan thứ 6
• Được đề xuất năm 2009, PhD. Pranav Mistry, MIT Media Lab
• Là một “Thiết bị” dùng để “ghi” lên thế giới thực những thông tin
số, cho phép tương tác thông qua cử chỉ.

6. Giác quan thứ 6?

7. Các thành phần
• Camera
• Projector
• Mirror
• Smart phone
• Markers

8. Giác quan thứ 6 - Các thành phần
Camera
• Nhận dạng các đối tượng và theo dõi cử chỉ của người sử dụng
• Hoạt động như con mắt điện tử và gửi dữ liệu tới smart phone

9. Giác quan thứ 6 - Các thành phần
Projector
• Chiếu thông tin được xử lý từ Smart phone lên các bề mặt, vật thể

10. Giác quan thứ 6 - Các thành phần
Color Markers
• Giúp Camera nhận dạng các hành động
• Các chuyển động và thứ tự sắp xếp các Markers là những chỉ dẫn

11. Giác quan thứ 6 – Hoạt động
Camera
Gửi đi xử lý
Thu nhận • Đối tượng
• Cử chỉ
Smart phone
Thông tin
Mirror
Hình ảnh Phản chiếu
Thông tin
trên bề mặt
Projector

12. Giác quan thứ 6 - Ứng dụng
Gọi điện thoại (video) Tra cứu thông tin (video)

13. Giác quan thứ 6 - Ứng dụng
Cập nhật chuyến bay (video) Tăng cường thông tin (video)

14. Giác quan thứ 6 - Ứng dụng
• Chụp ảnh (video)

15. Giác quan thứ 6- Công nghệ liên quan
1. Augmented Reality
2. Gesture Recognition
3. Computer vision
4. Radio Frequency Identification

16. Giác quan thứ 6- Công nghệ liên quan
Augmented Reality
Công nghệ AR cho phép người
dùng hướng điện thoại vào bất kỳ
vật gì, các thông tin liên
quan đến nó lập tức hiện thị.

17. Giác quan thứ 6- Công nghệ liên quan
Gesture Recognition
Thuộc lĩnh vực nghiên cứu của
Ngôn ngữ học và Khoa học máy
Tính.

18. Giác quan thứ 6- Công nghệ liên quan
Computer vision
Bao gồm lý thuyết và các kỹ thuật
liên quan nhằm mục đích tạo ra một
hệ thống nhân tạo có thể tiếp nhận
thông tin từ các hình ảnh thu được
hoặc các tập dữ liệu đa chiều.

19. Giác quan thứ 6- Công nghệ liên quan
RFID
Là công nghệ nhận dạng từ xa thông qua
sóng vô tuyến Radio.

20. Nội dung
• 5+1 Giác quan
• Augmented Reality
Thực tại tăng cường
• Computer Vision

21. THỰC TẠI TĂNG CƯỜNG
21
29/05/11
Thực tại tăng cường là gì?

22. Công nghệ Augmented Reality
- Được biết đến với các ứng dụng AR ĐẾN VỚI VIỆT NAM
dẫn đường thế hệ mới, giúp
người dùng tương tác trực tiếp Năm 2009, Rexona là người đầu tiên
với môi trường xung quanh. mang công nghệ AR đến Việt Nam
nhằm phục vụ cho một game nhỏ.
-Hiện tại đã có bộ plugin cho
môi trường eclipse phát triển Năm 2011, công ty Honda sử dụng
AR trên mobile hệ điều hành công nghệ AR cho chiến dịch quảng
Android hay iOS. cáo chiếc xe Airblade FI 2011
-http://augmentedblog.word
press.com/
-http://Metaio.com

23. Công nghệ Augmented Reality
Trước đây Ngày nay
23
29/05/11

24. AR hoạt động?
Step 3
Điều chỉnh Step 1
camera GPS
Location
Step 2
internet
(GPRS, 3G
)

25. AR hoạt động?
Augmented Reality thực sự hoạt động khi có sự kết
hợp của 3 thành phần:
1. Camera data: Là khung cảnh thực tế mà
camera thu được, được coi là dữ liệu “sống”.
2. Location data: Là dữ liệu trong bộ nhớ hay
dữ liệu trên internet (GPRS, 3G, Cloud).
3. Sensor data: dữ liệu cảm biến

26. Ứng dụng
Công nghệ Augmented Reality có thể áp
dụng vào rất nhiều lĩnh vực khác nhau như:
quân sự, y học, giáo dục, du lịch, sinh học, giải
trí, mobile...Nhưng phần lớn cộng đồng AR tập
trung phát triển vào những chiếc điện thoại
smartphone, iphone.

27. Một số ứng dụng của AR
TagWhat
Wikitude
27
29/05/11

28. Augmented Reality - DEMO
Best Augmented Reality Apps for iPhone, iPad and Android
(video)

29. Augmented Reality - DEMO
iPorsche Remote (video)

30. Nội dung
• 5+1 Giác quan
• Augmented Reality
• Computer Vision

31. Computer Vision – Detection & Recognition
QR-Code

32. Computer Vision – Detection & Recognition
Logo

33. Computer Vision – Detection & Recognition
Face

34. Computer Vision – Detection & Recognition
TEXT

35. Computer Vision- Kỹ thuật xử lý
• Kỹ thuật trích chọn đặc trưng
• Kỹ thuật lưu trữ nâng cao tốc độ

36. Kỹ thuật trích chọn đặc trưng
• Đặc trưng toàn cục: đặc trưng được trích rút trên thông tin của
toàn bộ ảnh, ví dụ như Histogram

37. Kỹ thuật trích chọn đặc trưng
• Đặc trưng cục bộ: được trích rút trên thông tin của từng vùng
ảnh, ví dụ như SIFT, SURF được sử dụng rất nhiều trong các bài
toán nhận dạng ảnh, so sánh ảnh…

38. Kỹ thuật xử lý nâng cao tốc độ
• Tối ưu hóa về lưu trữ và truy xuất dữ liệu
o Vocabulary Tree, Inverted file: nâng cao tốc độ
truy xuất, tìm kiếm đặc trưng…. Đặc biệt cần thiết
khi lượng dữ liệu ảnh tăng lên rất lớn
• Tận dụng sức mạnh của phần cứng
o Multi core CPU
o Bộ xử lý đồ họa chuyên dụng GPU

39. Ứng dụng thực tế
• Nhận dạng logo
• Nhận dạng nhãn rượu
• Môi trường deploy
o Di động: iOS, Android, Windows Phone
o Server: Linux
o Service: PHP webservice & PHP Extension

40. Mô hình triển khai
Wine
(7) iPhone
SocialNetwork (2) PHP Service
Application
API
Wine SN
Database (8)
(3) PHP (4) (9)
Image
Extension VL-Feat GPS
(1) Captu
Based
Database re and
Tables for service
Resize
recognitio
n service
(5) (6)
Vocabul Inverte
ary Tree d Files

42. Logo Detector – Demo (video)

43. Xin chân thành cảm ơn!
Hoàng Anh Việt, hoanganhviet@mimas.com.vn
http://mimasgroup.com