NCLab 2023 봄 신입생 OT

1. 석사 신입생들을
환영합니다!
NCLAB
송준화 교수

2. AI &
Deep Learning
Mobile-IoT
Systems
Human & Social
Computing
NCLab 주요 연구 분야
NCLAB

3. 연구분야
연구실 사례)
• 세계 최초의 AI기반 Mobile 플랫폼 (프로액티브형 mobile-IoT 플랫폼, MobiSys 2008 첫
발표)
• 최초의 인터랙션 모니터링 플랫폼/최초의 일상몰입형 게임플랫폼/최초의 협동형 모바일 플랫폼/등등등
Life-immersive Socio-Physical Platform
Platforms &Services
of FUTURE
AI & Deep Learning
Human & Social
Computing
IoT/Mobile Systems

4. .
Real-world AI System
• Real world 와의 직접적인 연결,
 Sensor를 통해 physical world로 부터 실시간으로 데이터 생성
 Actuator를 통한 실세계에 직접 개입
• AI의 일상 근접성, 사용자 근접성
• 연속성, 지속성, 실시간성
• Physical computing을 위한 모바일-IoT 시스템의 중요성 부각
• End-to-end 서비스의 관점
 Real world immersion을 위한 accuracy 및 성능
 Seamless integration of “physical world, AI logic, human interaction”
Data-driven AI
• 실제 real world에 직접 연결되기에
부족,
• 기수집된 데이터 셋 활용
• DNN model building 위주
• 모델 성능 중심
• 수학, 통계학, 알고리즘 위주

5. Earable Intelligence Platform
● Intelligence on the Ear
○ Wearable AI의 중요성: AI의 일상 근접성, 사용자 근접성 (Real world AI를 위해서는 AI가 사용자의
가까이에 있어야 함)
○ 이어러블
■ 사용자의 몸에 상시 착용하는 디바이스
■ 이머징 모바일-IoT HW의 대표
■ Human understanding, Sociality, Mobility, Stability
● Can such a TINY device become a platform for AI?
○ 매우 작은 HW, 배터리 제약
○ 다수의 AI 모델, 상시적 동시다발적 수행
…
Surround Sensing
(주변 목소리, 긴급상황 소음, …)
Physiological Sensing
(스트레스 모니터링, 일상 건강관리,
…)
… …

6. … …
고밀집주거공간의 커뮤니티 공간집사 AI: AI for Social
Appropriateness
카이스트 진리관
Sleep-in-peace Hair Dryer, Mindful Vacuum Cleaner, …
Could be a most complex & advanced AI system in the real world!
다수의 사람, 좁은 공간, 불완전한 분리, 익명성 (서로를 모름)  커뮤니티의 삶의 질
공간집사 AI

7. [Platform for Massive Mobile-IoT Social Computing]
밀집한 도시, 반복되는 소음피해!
IoT가 내 단잠을 지켜줄 수 있을까?
잠깐만요!
드라이어 소리가 수면중
인 학우를 깨울 수 있어요
!

8. Elasticizer: Real World AI를 위한 자동 AI 모델 생성기
• Real-world AI: 일상 근접성, 사용자 근접성
• 다양한 기기에서 작동 하게 됨: Mobile AI, Wearable AI, IoT AI 등등등
• 현재 방식은 각 디바이스에 맞는 모델을 각각 개별적으로 수동 생성
• 한 가지 모델을 다양한 하드웨어 특성 및 사용자 요구 사항에
맞게 자동으로 변환하는 시스템
Nokia eSense
이어러블에서
인퍼런스 시간 50ms 이하
Google Pixel 4에서
인퍼런스 시간 200ms
이하
Galaxy Watch 4에서
인퍼런스 시간 100ms 이하
…
…

9. [Platform for Massive Mobile-IoT Social Computing]
IoT 기술, 민주주의의 통로:
진정한 직접 민주주의는 이루어질 수
있을까?
Hivemind: Social Control-and-Use of IoT towards Democratization of Public Spaces (MobiSys ‘21)

10. [Life-immersive Socio-physical Computing]
Wearable Computing, 가장 인간적인 갈등 속으로 파고들다
“우리 엄마가 달라졌어요!”
꼭지 돈 엄마의
괴물같은 표정
Dyadic Mirror: Everyday Second-person Live-view for Empathetic Reflection upon Parent-child Interaction (IMWUT ’20)

11. [Platform for Massive Mobile-IoT Social Computing]
모바일 컴퓨팅, 대규모 군중의 하나된 마음을
그리다!
Card-Stunt as a Service: Empowering a Massively Packed Crowd for Instant Collective
Expressiveness (MobiSys ‘17)

13. [Life-immersive Socio-physical Computing]
소셜 컴퓨팅으로 ‘동네’의 개념을 확장한다:
시골 아이에게 동네 형, 누나를 만들어줄 수
있을까?
교육격차의 문제
소외의 문제
다문화 문제
…

14. https://www.youtube.com/watch?v=p9P9bBwIP54
[Life-immersive Socio-physical Computing]
함께 사는 느낌을 주는 ‘로봇 아바타’
HomeMeld: Co-present Robotic Avatar System for Illusion of Living Together

15. [Life-immersive Socio-physical Computing]
멀리 있는 친구와 함께 !
힘을 전달하는 웨어러블 플랫폼
Pole-with-a-catch: 손맛을 재현하는 대낚시 체험 시스템
“Cheers!” 초시공간 맥주 테이스팅
TimeGlass: Creating the illusion of drinking beer together

16. Deep Learning
Engine
[AI Platform for life-immersive socio-physical computing]
프라이버시를 고려한 딥 러닝 엔진
Occlumency: Privacy-preserving Remote Deep-learning Inference Using SGX

17. https://www.youtube.com/watch?v=aJ924Jdlwik&list=PLubxhb9-l07TLPSTp7qpvBue6sQn0_pEW
[‘특수 상황 앱’ 개발을 위한 VR 기반의 Mobile-IoT 플랫폼]
Empath-D
VR-based Empathetic App Design for Accessibility

18. 이어러블: 모바일-IoT 플랫폼의 승자 18
…
보이시나요? 모든 귀에 이어러블이 있습니
다.

19. +
고혈당, 고혈압, 고지혈, 염증 지수, 심전도, 노인 건강, 스트레스, 우울증, …
새로운 개념의 일상항시형 의료 및 건강관리 서비스를 위한 플랫폼
[귀를 중심으로 확장 가능한 일상·항시적 건강관리 플랫폼]
Earable 기반의 헬스케어 플랫폼
아기늘봄이: 미숙아 무호흡 모니터링 디바
이스
사회성 기반 상시 건강습관 교
정
과음하는 아빠

20. 국제적 지명도
• IoT/모바일 플랫폼 및 소셜 컴퓨팅 분야에서 국제적 명성
• Top conferences (관련 분야 최고 학회)
• ACM MobiSys, ACM SenSys, ACM MobiCom, ACM UbiComp, ACM CSCW, ACM HotMobile, ACM
CHI, ACM IUI, IEEE ISWC, IEEE PerCom, ACM Multimedia, …
• ACM MobiSys: 모바일 시스템 분야 최고의 학회
• ACM MobiSys 2019 General Chair
• 한국기관 최초, 최다 논문
• 한국기관에서 총 22편 중 8편이 우리 연구실 논문 (2021.10)
• ACM SenSys: IoT/임베디드 및 센서 시스템 최고의 학회
• ACM Sensys 2015 General Chair
• 한국기관 최초, 최다 논문
• 한국기관에서 총 12편 중 6편이 우리 연구실 논문 (2021.10)
• ACM UbiComp: 유비쿼터스 컴퓨팅 시스템 분야 최고의 학회
• ACM UbiComp 2014 Program Co-Chair
• ACM CSCW: 소셜 컴퓨팅 분야 최고의 학회
• 한국 기관 최초, 최다 논문
• 한국에서 총 25편 중 8편이 우리 연구실 논문 (2021.10)

21. 국제적 지명도 (졸업생)
• Apple, US: 유충국 박사 (前 IBM Research)
• Nokia Bell Labs, UK: 민철홍 박사
• Telefonica Research, Spain: 박순일 박사
• Amazon, US: 이진원 박사 (前 Qualcomm Research)
• Amazon Alexa, US: 박태우 박사 (前 Michigan State Univ. 교수)
• 서울대 컴퓨터공학과: 이영기 교수
• KOREATECH 컴퓨터공학과: 강승우 교수
• POSTECH 컴퓨터공학과: 황인석 교수 (前 IBM Research)

22. Life-immersive
Socio-physical computing
• https://nclab.kaist.ac.kr
• E3-1 4438호
• 한수경, sookyung@nclab.kaist.ac.kr
저희 연구실에
관심과 흥미가
있으신 분들은:
AI & Deep Learning
Human & Social
Computing
IoT/Mobile Systems
NCLab Open Day: 11/2 (수) 오후 5:00

25. Nokia Bell Labs
Multi-layer 시스템 연구 개척
Dr. Chulhong Min
IBM Research
모바일-IoT 연구 개척
Dr. Inseok Hwang
Dr. Chungkuk Yoo
Qualcomm
상황인지기반 컴퓨팅 개척
Dr. Jinwon Lee
Singapore Management Univ.
인간중심 모바일 컴퓨팅 도입
Prof. Youngki Lee
Michigan State Univ.
게임 중심 SW 연구방법론
Prof. Taiwoo Park
졸업생의 국제적 지명도
Prof. Seungwoo Kang
KOREATECH
University of Oxford
Tsinghua University
Amazon Research
Prof. Cecilia Mascolo
University of Cambridge
Prof. Mahadev Satya.
Carnegie Mellon University
Prof. Nicholas D. Lane
Prof. Yunxin Liu
Dr. Jinwon Lee
University of Helsinki
Prof. Sasu Tarkoma
Nokia Bell Labs, Cambridge Singapore Management Univ.
Prof. Rajesh K. Balan
Prof. Archan Misra
Dr. Fahim Kawsar
Telfonica
전산 언론학 개척
Dr. Souneil Park
국제적 공동연구 네트워크
Dr. Taiwoo Park