[HCIK 2016] 다중 사용자용 운영체제 FINE 플랫폼 소개와 SKT 협력 사례 발표 SF 영화에서나 볼 수 있었던 화려한 대형 디스플레이의 세계가 빠르게 현실로 다가오고 있습니다. 이제는 Mobile, Desktop 에서 친숙한 개인 사용자 환경을 넘어서 Tabletop, Wall-size display, Smart window 에서 활용될 다중 사용자 컴퓨팅 환경이 새롭게 주목 받게 될 것입니다. 또한 iOS, Android 에서 경험한 바와 같이 SW 플랫폼의 역할이 중요해 질 것입니다. 본 강의에서는 다중 사용자 환경의 전망 및 기존 플랫폼들과의 비교와 함께 새롭게 변화 할 UX 설계의 방향을 제시합니다. 또한 다중 사용자용 운영체제인 FINE 플랫폼을 이용한 SKT와의 협력 사례 소개 및 다가올 컴퓨팅 환경의 기술과 서비스 전망을 소개합니다. Email: junghan@nemoux.net, nemoux00@gmail.com Homepage: www.nemoux.net

1. 다중 사용자용 운영체제 FINE 플랫폼 소개와
SKT 협력 사례 발표
Platform for Next, FINE
NEMO-UX Co-founder
김정한(junghan@nemoux.net)
www.nemoux.net

2. 결과
대규모 국책 과제 선정
SKT 및 여러 기업과 투자 협력
실리콘밸리 투자 활동 등
| Thanks to HCIK 2015
NEMOSHELL
중대형 멀티터치 스크린에 적합한
다중 사용자/서비스를 지원하는
새 로 운 형 태 의 U X 플 랫 폼
By 성균관대 분산컴퓨팅연구실
2

3. | Contents
1. 서론
스타트랙과 모토로라
스타워즈의 BB-8
SF효과
The Era of First Mover
Then What’s the NEXT?
DEMO: Future Concept Video
2 . I n t e r a c t i v e
L a r g e S u r f a c e
3 . F I N E P l a t f o r m 4 . F I N E P l a t f o r m
w i t h S K T
Hype Cycle
– IT기술의 맥박
– Large Display
SUR40
OS on Other Devices
Hint from Smartphone
NEMO-UX Team
보이지 않지만 중요한 것들
Era of GUI
Fine Platform
– Real Multi user
– Open Platform
– Play with Familiar Apps
– Futuristic UX
– Multi Form Factors
– Services
– 사례조사
– Android
– Bumptop
– DEMO: NEMOSHELL
B2B Custom Business
Multi Form Factor
STE-Shell
DEMO: STE-SHELL Prototype
STE-Apps
– App Development Process
DEMO: STE-Chef & STE-BigWheel
DEMO: SKT Tabletop on FINE
DEMO: SKT 5G Global Innovation Center
5. 맺음말
What’s the NEXT Step?
DEMO: Assembly Election
Welcome to Visit Our Booth
3

4. STAR TREK
MAKETH
MOTOROLA
4

5. STAR TREK
MAKETH
MOTOROLA
5

6. 6

7. 7

8. |SF 효과[에쓰에프 효ː과] SF Effect
SF 소설이나 영화에 나온 내용이 현실에 영향을 주고 실제로 이루어지는 현상
스타워즈에서 미래 사용자를 예측하라
SF 영화에서 배우는 UI-UX 디자인
Make it so : Interaction Design Lessons from Science Fiction
Nathan Shedroff, Christopher Noessel 지음
정지훈 옮김
8

9. The Era of 1st Mover
9

10. Then What’s Next?
10

11. | DEMO: Future Concept Video (1 min.)
11
https://youtu.be/EE8Isa0t9r0

12. New Computing Environment
<Interactive Large Surface>
12

13. | What’s the difference?
Large Display Interactive Large Surface
전광판, 디지털 사이니지 기존 용도 등….
단순 전시, 영상출력
유저~디스플레이 간 인터렉션 옵션 유저~디스플레이 간 인터렉션 필수
인터렉션을 강조한 대형 디스플레이
13

14. 14

15. Visibility/Expectations
Time
Technology Trigger
기술 촉발
Peak of Inflated Expectations
부풀려진 기대의 정점
Through of Disillusionment
환멸 단계
Slope of Enlightenment
계몽단계
Plateau of Productivity
생산성 안정 단계
| IT기술의 맥박, Hype Cycle
15

16. | The Hype Cycle of Large Display
Muller-Tomfelde, Tabletops: Interactive Horizontal Displays for Ubiquitous Computing, IEEE Computer Magazine, 2012
16

17. | The Hype Cycle of Large Display
Muller-Tomfelde, Tabletops: Interactive Horizontal Displays for Ubiquitous Computing, IEEE Computer Magazine, 2012
17

18. | Samsung SUR40 (2012)
Multi-touch table-like computer
1080p (FHD) 40-inch LCD display
Developed by Samsung and Microsoft
Honored by CES 2012 Innovations Awards
Availability date: January 2012
Price at launch: $8,400
(sadly isn't exactly tailored for home use, thanks to its exorbitant price tag)
http://www.theverge.com/products/sur40/3388
18

19. 19

20. Feature OS
Mobile
Single User
Single Display
Single Application
Single Input
Android
iOS
Tizen…
Desktop
Single User
Single/Multi Display
Multi Application
Single Input
Windows
Linux
MacOS…
Interactive
Large Surface
Computing
Multi User
Single/Multi Display
Multi Application
Multi Input
?
| OS on Various Devices
20

21. 진정으로 Interactive Large Surface를 사랑하는 OS는 없었다
21

22. | Hint from Smartphone
미국 캘리포니아 벤처기업
안드로이드 탄생
안드로이드
오픈소스 선언
2003
구글,
안드로이드 인수
2005
아이폰 출시
2007
2008
2014
전세계 스마트폰 유저
16억 3900만 명
구글 플레이 등록 앱 개수
140만 개
2015
22

23. 1. 플랫폼의 준비는 HW에 비해 약 5년 정도 빠른 편
2. SW 플랫폼의 역할이 중요해 질 것
- 유저에게 더 넓은, 기회를 제공할 때 더 큰 시장을 개척할 수 있다
3. HW기술 발전 + 특정 HW에 적합한 플랫폼의 탄생=폭발적인 시장 성장
| Hint from Smartphone
23

24. Interactive Large Surface
이제 맞춤형 플랫폼이 필요하다
24

25. NEMO-UX성균관대분산컴퓨팅연구실의박사과정학생들이설립한
Startup Company
25

26. | NEMO-UX Team
성균관대 분산 컴퓨팅 연구실의 박사과정 학생들이 설립 (2012)
Graphics 와UX Platform 분야 전문성을 바탕으로 한 연구개발
SF 매니아인 대표와그의비전을공감하고함께걸어가는팀원들
영화Tron에서영감을얻은UX디자인
26

27. | 보이진 않지만 중요한 것들
컴파일러, OS, 윈도우 시스템 등,
응용 소프트웨어를 실행하기
위한 플랫폼을 제공하고 컴퓨터
하드웨어를 동작, 접근할 수 있도
록 설계된 컴퓨터 소프트웨어.
System Software
OS 위에서 사용자가 직접 사용
하게 되는 소프트웨어. 줄여서 어
플리케이션이라고 부른다.
Application Software
27

28. 오래된 차에
내비게이션 달고
ABS브레이크를 넣고
IVI 시스템을 달고
HID라이트를 달고...
그냥 차를 바꾸는 것이 낫지 않을까?
28

29. | 보이지 않는 것은 변화의 소용돌이로: Era of GUI
X Window System
• 최초이자 현존하는 GUI 시스템
• GUI 시스템의 할아버지
1984
2013
Wayland
• X 를 대체하는 프로젝트
• 오픈 소스, Simple 한 구조
NEMO-UX의 Wayland 사용
기존 시스템과 호환성을 유지하면서
새로운 NUI를 적용하기에 최적의 선택
29

30. FINE PlatformFuturistic Interactive NEMO Experience
SF 영화 속에 등장하는 미래 컴퓨팅 환경
다중 사용자 및 다중 입출력장치를 지원하는
세계 최초의 S/W 플랫폼
30

31. Android, iOS…
APP
Mobile Manager
Touch UI
Windows, Linux, …
APP APP
Desktop
Window
Manager
GUI
(Keyboard &
Mouse)
FINE Platform
Touchtech, Snowflake, …
APP
Touch UI
Surface
Window Manager
APP APP
NUI
| Real Multi-user
Provides support for independent and user-unique usage
by multiple users on a single computing environment.
31

32. | Open Platform
Anybody can make Application via SDK and upload on the NEMO-Store.
32

33. | Play with Familiar Apps
Enables to use not only NEMO style applications but also accustomed applications
like Android, Linux, Unity3D, Etc.
33

34. | Futuristic UX
Vector Graphics
Animation
Physical effects
Like SF movie scene, Fine platform offers futuristic UX environment
based on new vector graphic engine
34

35. | System Architecture
X apps,
Unity3D…
Android
apps Legacy apps NEMO apps
Application
Layer
Toolkit
Layer Toolkits…
X-Backend
Ozone
Wayland-
Backend
GTK+/QT…
Wayland-
Backend
Nemotool
Wayland-
Backend
nemoshell
Shell
Layer
nemocompz
Compositor
Layer
Multi-User
Multi-
Resolution
Window
Management
Multi-Display Multi-SoundMulti-GPU
nemotool
Particle
Effect
Vector
Animation
Graphic Effect
35

36. | Multi Form Factors
Single Display Table Multi Display Table Projection Display Table Wall Display
36

37. F&B
Café
Restaurant
Advertisement
Exhibition
Lounge
Theater
Information
Shopping Mall
Broadcasting(Election)
Smart Study
Nemo Art
Smart Meeting
Team Working
Conference
Retail
Product Display
POP
| Services
37

38. | 사례조사 : Android
10월 Android, Inc 창업,
디지털 카메라를 타겟
수 많은 Linux Kernel 기반 모바일 플랫폼 중의 하나,
특히 위치 정보 및 사용자 경험 강조
2003
2005
8월 Google에 M&A (한화 500억원 추정), 당시 총 인원 8명
앤디 루빈은 모바일 수석 부사장 재직, 재개발 (13’ 사임)
2008
첫 ANDROID 폰 출시 (HTC Dream)
2013
Kitkat 4.4.2 출시
스마트폰 시장 점유율 80% 돌파
초기형 (프로토타입 인수/재개발)
38

39. | 사례조사 : Bumptop
토론토대학 석사, Keepin’It Real 논문
(SIGCHI 2006.04)
Rethink the desktop with BumpTop TED
(2007.03)
2006-2007
2008
Bump Technologies,
SEED FUND 받음 ($1.7M)
2009
4월 버전 1.0 릴리즈, 프로(유료) 버전 제공
10월 버전 1.2 멀티-터치 지원, MAC OS 지원
2010
GOOGLE 인수, M&A
($30M)
2011
Android 3.0 에 일부 기능 흡수
이후 관련 연구 X
39
초기형 (프로토타입 인수/재개발)

40. | 사례조사 : UX관련 기술개발 회사
회사 사례 년도 기술 관련 정보 비즈니스 모델
ANDROID
2005
SW
PLATFORM
UX플랫폼형태의안드로이드
개발인력흡수(한화500억원추정)
초기형(프로토타입인수/재개발)
- 2003년10월스타트업,초기,디지털카메라를타겟스마트폰으로변경
- 2005년8월M&A이후,창업자앤디루빈은모바일수석부사장재직(2013년사임)
SKIA
2005
UX
SOFTWARE
벡터그래픽엔진,개발인력흡수
(인수금미공개)
완성형(라이브러리로활용)
-2D그래픽라이브러리,2005년11월M&A후,ANDROID,CHROME등에활용
BumpTop
2010
UX
SOFTWARE
3D데스크탑환경,개발인력흡수
(인수금$30M)
초기형(프로토타입인수/재개발)
- 2006년토론토대학교석사과정학생이개발,TED홍보와더불어SEEDFUND$1.7M받음
- ANDROID3.0Honeycomb에일부기능적용(Tablet)
OPENED
HAND
2008
UX
SOFTWARE
UX툴킷형태의Clutter,MatchBox
개발인력흡수(인수금미공개)
진행형(오픈소스프로젝트로진행)
- 모바일장비를타겟으로오픈소스윈도우매니저및툴킷개발
- 2002년NOKIA로부터펀딩받아스타트업
- 2008년8월인텔에인수후,오픈소스프로젝트로계속해서진행
40

41. | DEMO: NEMOSHELL Prototype (2014) (1 min.)
41https://youtu.be/LFSrz5A0OZc

42. SKT Tabletop Environment
대화면 Touch Display 상에서 동시에 다수의 사용자가 독립적으로
다양한 Computing 작업을 수행할 수 있는 Surface Computing Device로써,
미래 사회에 보편화될 Computing Everywhere 환경을 선도하는
Futuristic UX를 탑재한 Table Top Device
42

43. | B2B Custom Business
STE-SHELL
STE-APPS
STE-APPS
STE-APPS
STE-APPS
STE-APPS
STE-APPS
FINE
PLATFORM

44. | STE (SKT Tabletop Environment)) shell
개요
Table Top Display 및 Projector 기반 Interactive Table Device에서 다중 사용자가 동시에
Killer Application 및 FINE 플랫폼 기본 앱을 자유롭게 실행시킬 수 있는 시작 메뉴와 윈도우 제
어 기능 등 Interactive 컴퓨팅 환경을 제공
STE Environment
STE-SHELL FINE Platform을 기반으로 개발된 상용 UX 환경으로써, Smartphone 연동을 포함
해 Enterprise 사용자를 위한 다수 App 및 다양한 B2B 고객 군에 소구하는 Entertainment App
을 SF영화와 유사한 Futuristic UX로 구현하였으며, 다양한 Vector 기반의 시각적 효과 및 Form
Factor에 독립적인 Interactive UX를 제공
“다중 사용자 및 다중 입출력장치를 지원하는
세계 최초의 S/W 플랫폼”
44

45. | Multi Form Factor
45

46. STE-Shell
Starting Menu Interface
각종 어플리케이션을 실행시키는 원형의 인터페이스 UX
Edge Interface
앱 사용 시 임의의 순간에 동적으로 필요한 기능을 제공
Particle Effect
유용한 정보를 재미있게 전달하는 텍스트 애니메이션
Touch Feedback
터치에 반응해 나타나는 화려한 애니메이션 효과
Object Selection
앱 이동/확대/축소를 위한 오브젝트 선택 기능
Virtual Keyboard
임의의 순간에 수시로 텍스트 입력 가능
| STE (SKT Tabletop Environment) Shell
46

47. | DEMO: STE-SHELL Prototype (1 min.)
47
https://youtu.be/aIqTEhYl6c8

48. | STE (SKT Tabletop Environment) Apps) shell
STE-Apps
STE- BigWheel
프로모션 행사 시 사용할 수 있는 바퀴형태의 게임
STE- 3D Viewer
3D Mesh파일을 실시간으로 렌더링
STE- Chef
요리 레시피를 선보이는
가정용 테이블탑 어플리케이션
STE- Share
태그 기반 인터랙티브 컨텐츠 공유 기능
STE- Digitizer
문자와 사진을 스캔해 디지털 컨텐츠로 변환
STE- Explore
저장된 컨텐츠를 찾고 실행하는 파일 브라우저
48

49. | Application Development Process) shell
STE-Explorer
Lean software
development
1
Watch SF Movies and Make Ideation
①
② Design Motion Graphics Animation
③ Define Design GuideDevelop application with NEMO-SDK ④
Debug ... ⑤
49

50. | DEMO: STE-Chef & STE-BigWheel (30 sec.)
50
https://youtu.be/uPvhZQX-xC0 https://youtu.be/1nCP2cVdqRU

51. Billiard tabletop: 96 inch. (combined three FHD 55 inch. display)
| DEMO: SKT Tabletop on FINE Platform (1.5 min.)
hell
51https://youtu.be/Y9ycnERkTG4

52. SK텔레콤은 이번 개소식을 통해 성균관대 박사과정 학생들이 설립한 스타트업 ‘NEMO-UX’과 협력한 결과물을 선보였습니다.
양사가 개발중인 ‘테이블탑’은 하나의 대화면 터치 디스플레이에서 다수의 사용자가 동시에 독립적으로 작업을 수행할 수 있는
신개념 컴퓨팅 기기입니다. http://www.zdnet.co.kr/news/news_view.asp?artice_id=20151029144941
| DEMO: SKT 5G Global Innovation Center (20 sec.)
shell
52
https://youtu.be/CWgOZnx63dU

53. MINISHELL누구나 다운 받아 개발할 수 있는
커스텀 플랫폼 제작환경 제공
53

54. • Open Source (MIT License)
• SDK (Software Development Kit)
• Developer Guide
• NEMO-Store
• Visit www.nemoux.net
| Make your Custom Environment! (1 min.)
54
https://youtu.be/bsTKwx_VNcU

55. 55

56. | What is the NEXT Step?
1. IPS (Indoor Position System) 실내 위치기반 솔루션
2. NUI 인터페이스 활용 솔루션 (텐저블 오브젝트, 비전 제스처)
3. IVI (In-Vehicle Infotainment) 솔루션
4. 서비스 솔루션 (선거/레스토랑/키즈 등)
56

57. | DEMO: Assembly Election Prototype (20 sec.)
57
https://youtu.be/FkROVDUlv6Q

58. Developer Designer
| Welcome to visit our booth
| Recruit New Member
58

59. The Future is NOW
59