A museum gsct2020_f

XR4Art :Augmented Museum
.
디지털 트윈기반 증강 뮤지엄의 가능성
Woontack Woo (禹雲澤), Ph.D.
KAIST ARRC & UVR Lab
Daejeon 34141, Korea
GSCT Colloquium @ KAIST, Sep. 7. 2020
XR as a New Medium

What is Going On?
l우리 사회는 어디로 가고 있나?
컨택트
(Contact)
언택트
(Un-tact)
온택트
(On-tact)
유택트
(U-tact)
그럼 Museum은?
The Last Few Months The Next Few Months
2012-2020 © Woo, KAIST ARRC & UVR Lab., Daejeon 34141, Korea
With Corona+

Content
Museum은 미디엄 또는 플랫폼!
VR/AR 이 돌아 왔다!
VR/AR 어디로 가나? UVR for DNA+X?
DT+XR A-Museum 가능한가?
DT+XR A-Museum, 무엇을 해야 하나?

l박물관(博物館)이란?
§인류에 의해 생산된 가치 있는 (유무형의) 문
화/자연 유산을 수집, 보존, 연구하고 대중에
전시하는 기관?
Museum 이란?
문
화
고고학
미술
민속
역사
종교
민족학
교육
자
연
자연사
지질학
과학
산업
군사

lMuseum 이란? [Woo]
§전시물/공간/스토리를 매개로 과거, 현재, 미래가 공존하는
복합 문화공간 또는 매개 경험을 공유하는 열린 소셜 미디어
이자 플랫폼!
l누가 Museum의 미래를 묻거든?
§Medium의 미래를 보라!
Museum 이란?
Exhibition is communication!
So, the Museum is the medium!
- Woo
Victoria Walsh @ RCA

lDigital Museum: Web and App
§문화유산 및 역사적 컬렉션을 디지털 형식으로 보존하고 표
현 할 수 있는 컴퓨터 및 IT를 활용한 전시 플랫폼
lVirtual Museum: WebVR, CAVE or HMD
§시공간을 초월하여 오감 체험형 감상이 가능한 D-Museum
lAugmented Museum: Mobile or Weable
§현장에서 관심에 따른 관련 정보를 증강하거나 시공간을 초
월하여 새로운 지식/경험을 증강하는 V-Museum
l미래는 DT+XR 연동 A-Museum?
미디어 관점의 Museum?

lYouTube Tour: Van Cogh Museum
Where are We Now?

lVirtual (or 360) Tour: Louvre Museum
Where are We Now?

Curator
온라인 전시
작품관리
Online
Visitor
lBefore, During and After Covid-19
§From offline to online 체험플랫폼! Then, what’s next?
§Curation 저작플랫폼
•Space-telling
•Exhibition
•Tour
•Interaction
•UX sharing
•Etc.
Museum의 현재와 미래?
Curator
DT 저작
작품관리
On/Off-
line
Visitor
디지털 에셋
Web (VR)
Web (VR)
App (XR)Space-
telling

lIoT+DT+XR 개방형 플랫폼의 속성과 지향
§분산성 (de-centralized)
§혁신성 (변혁 transformation)
§확장성 (새로운 기술/기능/서비스 등의)
§플랫폼 상호운용성 (cross-platform interoperability)
lIoT+DT+XR 개방형 플랫폼의 효과
§플랫폼은 IoT/Device 간 호완성/활용 증대
§플랫폼기반 Data/개발환경 공유로 시간/비용 감소
§Edge/Cloud 활용으로 서비스 운용 효율성 확보
§콘텐츠와 응용 호완성 및 경험공유 확산
lA-Museum: IoT+DT+XR의 가능성?
플랫폼 관점의 Museum?

디지털트윈 Where is DT Going?
l다양한 디지털 정보와 현실공간의 결합!
.
.
.
.
.
.
Real/Physical
Virtual/Cyber
Information/
Knowledge
SPACE
TIME
Layers Social networks
(wisdom)

l우리가 사는 세상을 IoT/E, AI, VR/AR로 증강하면,
§정보/지식/경험: Strolling is the new scrolling!
§시공간의 한계를 초월한 소통과 협력
§그래서, 도시/시민/사회 능력의 확장
lUbiquitous VR [Woo’01]
UVR since 2001 [XR-Metaverse]
SPACES (3rd skin)
Intimate/Private Personal
Social
General/public
Real
Space Society
Seamless
Augmentation btw
dual spaces
How to
Link
Seamlessly?
CoI
LINK
U-Content
Virtual space

l디지털트윈 (Digital Twin, ‘03)
§물리 엔티티(Physical Entity)
§가상 엔티티(Virtual Entity)
§디지털 트윈 데이터(DT Data)
§서비스(Service)
§연결(Connection)
§증강(Augmentation)
UVR as a DigiLog Medium
Augments
ThinksSenses
DT
Services
DT DB
Metaverse
Virtual
Entity
Physical
Entity

l새로운 미래, DT with XR [Woo’20]
§HoloLens2 Demo (MS’19)
§Live Map for Digital Twin (FB’19)
§Magicverse (MagicLeap’19)
§AR with DT-Metaverse (KAIST’20)
UVR as a DigiLog Medium
[▲ FACEBOOK ‘LiveMaps’ [▲ MagicLeap ‘Magicverse’]

l가상현실이 주목 받았던 90년대!
l가상증강현실로 돌아왔다! 왜?
증강현실 Where is XR going?
AR1.0 (Desktop, 1990s-)
Augment Real
Objects with Virtual
Content
AR2.0 (Mobile, 2000s-)
Augment Real Space
with Content
AR3.0 (Smart phone, 2010s-)
Augment Real Place
with Dynamic
(Social) Content
AR4.0 (Glass, 2020s-)
Augment Human
with Context-aware
(Social) Content

lHoloLens: Augmented Robot
AR as a DigiLog Medium

lMagic Leap One
Rony Abovitz (CEO)

lHoloLens 2
Alex Kipman

lXR Glasses with 5G, IoT, Edge/Cloud, DT

lXR Glasses with 5G, IoT, Edge/Cloud, DT
powering more than 30 AR and VR headsets,
some of which are standalone devices
incorporating Snapdragon

lNreal Light, Shared Spaces & WebXR
§Qualcomm Snapdragon 845, 855, or 865 smartphones

lApple AR Glasses $499 in 202x?
Tim Cook

lFacebook AR Glasses in 202x?

lNow, XR is Available and Accessible!
lWhat can XR do in Museum?
§It brings artifacts to life
§It is engaging
§It is fun and interactive
§It gives visitors an extra reason to visit – and revisit
Augmented Museum

lMuseum with 360 Images
§MMCA 서울관, 과천관
§스미소니언 자연사 박물관
§영국 자연사 박물관
lInteractive Museum
§Louvre Museum
§퐁피두센터
§CyArk
Where Are We Now?

l전시기획/저작 도구 현황
§ArtSteps & VR-All-Art
§360 VR Museum, 360 Hex
by 데이터킹
§특징
•웹기반 3D 가상 전시 저작
•대상: 큐레이트, 갤러리스트
•용도: 가상전시 및 작품 판매
§보완점
•상호작용적 전시 체험
•현실 뮤지엄과의 연계성
•현장 XR 체험과의 연계성
Where Are We Now?

lIoT+DT+XR기반 A-Museum?
•현실 전시 모니터링
•가상 큐레이션 및 전시 시뮬레이션
•증강현실 전시 및 관객 상호작용/공유 지원
A-Museum with DT 2019 (KAIST)
- 3D 가상 전시 공간 제작
- 가상 큐레이션 기능 구현
- 전시 기획 버전별 저장을 통한
다중 시뮬레이션
가상 전시 콘텐츠 제작
및 시뮬레이션 모듈
- 방문자 프로필 및 행위 정보
- 다중 접속 이용 싱크 관리 및 제어
- 조회기반 사용자 콘텐츠 수집
디지털 트윈 뮤지엄
방문자 정보 처리 모듈
데이터 아카이빙 연동
정보 처리 모듈
1
2
4
전시팀
보존
관리팀
교육
홍보팀
뮤지엄 콘텐츠
제작자
[뮤지엄 디지털 트윈 환경]
소셜 미디어(SNS) 연동 플랫폼
콘텐츠 사용자
겸 2차 창작자
- 클라우드 기반 콘텐츠
수집/관리
- 전시참여자 콘텐츠 수집/처리
- 타임라인 콘텐츠 관리 등
관객 참여형 전시
콘텐츠 제작 모듈 3
미술관 실물 전시 프로그램 및 운영 정책 등 반영
방문객모바일 운영
플랫폼
웹서버 기반
플랫폼
스크린 서비스
플랫폼
- 전시 미디어 매칭 시각화
- 실시간 콘텐츠 감시/연동
- 다중 디바이스 전시미디어
인터랙션

l가상 전시공간 구축: 공간 구석으로부터 (1966~)
§대전광역시 동구 정동 36-11번지 2층
§미국 오순절 교회 소속 선교사 E. 코트(coote)부인 기념관
§1992년까지 교회로 활용하다 문화공간으로 변신

l가상 전시공간 구축
§홈페이지 http://c-art.kaist.ac.kr
A-Museum1.0 2019 (KAIST)

§홈페이지 http://c-art.kaist.ac.kr
개인 PC상
실행파일 다운로드
3D 환경 속 가상 전시
기획 콘텐츠
(작품 선정 및 배치) 저작
C-Arts
Lab
공식
홈페이지
전시기획
시뮬레이션
버전별 제작 및
저장
[Curator’s Mode 접속]
전시기획
시뮬레이션
버전별 관람
버전별
관객 선호도 평가
미술관 실물 전시 및 프로그램 기획, 운영 정책 등 반영
[Viewer’s Mode 접속]

§참여작가: 고종현(회화), 이성희 (사진), 최주희(회화)
§자문
•김민경(대전시립미술관), 박소희(영은미술관), 유현주(평론가)

l시연: 가상 전시공간 구축

lConcept
국공립 기관 DB
Digital
Twin
Real Space
3D 전시 기록 텍스트 3D 어셋 2D 이미지Local
DB
Related
Data
공공데이터 해외 기관 DB
미술 전문잡지학회 논문국내외 저널 신문기사
원격/현장 연구, 저작, 관리
관객 데이터
지능형 추천 및 검색

Web Server
매체별 작품 3D 어셋
(3D Prefab, 위치 및 회전 실시간 반영)
작품 정보
텍스트 저작 데이터
미술관 디지털 트윈 3D 모델
사용자(관리자/큐레이터/관객)별
암호화 데이터
(ID, 가입정보, 로그인, 조회수, 조회시간, 시뮬레이션 저장,
댓글, 공유 등)
Database
전시 기획 시뮬레이션 데이터
(작품 및 공간 디자인 요소, 패널 3D 배치, 작품
정보/캡션/비평 저작, 피드백 등)
공간디자인 요소 3D 어셋
(가벽, 좌대, 조명, 프로젝터, 책걸상 3D Prefab의 위치,
회전, 크기 실시간 반영)
작품 정보
2D 이미지 데이터
작품 연구를 위한 메타데이터
(키워드 기반 학술 논문, 전문 잡지 글 연동)
Real-Time Synchronization
시뮬레이션 저장 후 버전별 관리, 시뮬레이션 동료 및 관객 공유, 피드백
3. 작품 설명 및 비평문 작성(후 3D패널로 배치),
연구 확장을 위한 기능
1. 디지털 트윈 뮤지엄 속 3D 작품, 패널,
공간디자인 요소배치 및 시뮬레이션 저작
2. 3D 작품 카탈로그(좌)스페이스텔링 저작(우)
1. WebVR상의 디지털 트윈 시뮬레이션의
현실 공간 로컬라이제이션(위치 동기화)
2. 모바일 및 HMD AR 기기를 통해
현실 공간 속에서도 전시 시뮬레이션 저작
또는 관람
3. AR 객체 제거기술을 통해 전시중인
공간에서도 다른 전시 시뮬레이션 가능
Web VR
Mobile AR

lKAIST
Vision Hall
§AR Experience
with DT

lA-Museum with DT, What’s Next?
§콘텐츠 메타 데이터 표준화 및 연동
§서사 (Space-telling) 디자인
•입체적 체험 지원: 점을 선으로 면으로!
•전시물, 공간, 콘텐츠, 관람객, 맥락 기반 다양한 서사 제작/소비 지원
§콘텐츠 증강 (Augmentation) 디자인
•학습 자원으로서 전시 관련 정보 제공
•선택한 (스토리에 따른 순서 등) 관람 방법 제공
§상호작용 (Interaction) 디자인
•제공 정보와 개별 해석 사이의 균형
•관람객 콘텐츠 생성 및 소통 지원
§콘텐츠 개인화와 경험 공유
•개인화 체험, 경험의 기록/축적, 경험의 공유
우리는 무엇을 더 해야 하나?

l콘텐츠 메타 데이터 표준화
§CDWA(Categories for the Description of Works of Art)?
XR
Services
…
DB B
DB CDB D
DB E

l콘텐츠 메타 데이터 표준화
§신뢰성
§탐색 가능성 (고유식별자)
§가독/가시성, 확장성
§상호호환성
§사용성
l현황
§Korea? Asia? (2016?)
§Google Art (2004-)
§Europeana (2005-)
•EDM (Europeana Data Model)
•LOD (Linked Open Data)
•RDF (Resource Description Framework)
건축물
미술장식품
메타데이터 구조
(5W1H)
건축물
정보
작품
정보
작가
정보
관련
정보
심의
정보

l뮤지움에서의 서사 (Space-telling)?
§공간을 통해 이야기 하기 & 만들기
•단순한 전시와 감상을 넘어 배우고 즐기는 복합 문화공간
•전시물과 전시공간에 담긴 다양한 이야기(의미) 체험 지원

l증강 뮤지움, 무엇을 어떻게 증강할 것인가?
§가상증강현실: 새로운 경험/공유 플랫폼
§현장에서 관심에 따른 관련 정보를 증강하거나 시공간을 초
월하여 새로운 지식/경험을 증강하는 A-Museum

l뮤지움에서의 상호작용, 스토리 체험과 경험 공유?
§IoT+DT+XR: 새로운 체험/경험공유 플랫폼
우리는 무엇을 해야 하나?
전시
관람객 관람객
순차적 상호작용
Vs. 협력
협력, 공감과 공유
개별
상호작용
개별
상호작용
전시 전시

lIoT+DT+XR 기반 A-Museum
§포스트코로나 시대, 새로운 전시 및 유통 플랫폼
§Museum 전시/체험의 시공간적 확장
§기획/전시의 비용/시공간/물리/심리적 제약 최소화
§사전관람 체험/공유에서 현장 체험/공유로
l아직 남은 숙제는…
§그럼, A-Museum 플랫폼과 생태계 어떻게 가능할까?
§어떻게 지속가능한 참여형 A-Museum 구현할 것인가?
§작가-학예사-관객이 함께 유익한 A-Museum 서비스란?
l그럼 A-Theater 공연, 확장 가능한가?
Take-Home Message

Summary
Museum은 미디엄 또는 플랫폼!
VR/AR 이 돌아 왔다!
VR/AR 어디로 가나? UVR for DNA+X?
DT+XR A-Museum 가능한가?
DT+XR A-Museum, 무엇을 해야 하나?

U-tact 시대, 우리의 선택은?
lA-Museum, Deploy or Die? XR or Extinct!
"Do you want to sell sugared water
for the rest of your life?
Or do you want to come with me and
change the world?“
- Steve Jobs

lARRC/UVR Lab. Members
§Director: Woontack Woo
§2 Ph.D. & 5 MS Researchers
§11(+1) Ph.D. & 7 MS students
§1 visiting student
§1 administration staff
lInternational Collaborators
§T. Kim, Vincent Lepetit,
A. Argyros, K. Kunze,
M. Billinghurst, S. Feiner,
S. Kim, T. Starner, etc.
KAIST ARRC/UVR Lab. 2020
The Ubiquitous VR research aims at
the development of new computing
paradigms for
”DigiLog Life in Smart Spaces”

lMore Information
§Woontack Woo, Ph.D.
•wwoo@kaist.ac.kr
•http://uvr.kaist.ac.kr
•http://arrc.kaist.ac.kr
lSupported by
§과기정통부 IITP/NRF
§문화부 KOCCA
§산업부 KIAT
lRelated Events
§KAIST CT-AR Program. Sep. 2020
“The future is already here. It is just not uniformly distributed”
by William Gibson (SF writer)
Welcome to UVR Era!

A museum gsct2020_f

Recommended

Recommended

More Related Content

Similar to A museum gsct2020_f

Similar to A museum gsct2020_f (20)

More from Woontack Woo

More from Woontack Woo (20)

A museum gsct2020_f