강의 내용 https://sites.google.com/site/heavenlydesigner/lecture/hanyangarchi

1. Real Virtuality & Second Body
신기헌 / 뉴미디어 아티스트, 프리랜서 디렉터

2. 강의에 들어가며

3. 아이덴티티
건축과디자인의언어가‘뉴미디어’와만나며새로운결과물로확장되는과정을경험
이때의‘뉴미디어’는테크놀로지만이아닌현실과가상,물질과비물질을연결하는개념적요소
(건축+디자인+사용자경험+마케팅+교육+사회혁신)x뉴미디어

4. 스펙트럼의 경계
인식의한계를발견하기위한방법은스펙트럼의양쪽끝의경계를경험해보는것
양쪽끝의경계를인식할수있다면그사이의영역은모두자유로운발상의무대
현실의
일상의
아날로그의
물질의
고정된
가상의
일탈의
디지털의
정보의
변화하는

5. ‘가상의’, ‘일탈의’, ‘디지털의’, ‘정보의’, ‘변화하는’
스펙트럼의 경계
최종이 아닌 중간의 목적지

6. 스펙트럼의 경계
Emart Sunny Sale Campaign / 3D Shadow QR Code
http://goo.gl/n2rCa1

7. 스펙트럼의 경계
Emart Sale Navigation - Lighting Coupon
http://goo.gl/O6Ox28

8. 뉴미디어를 경험할 때 우리는 ‘가상’과 ‘현실’을 구분할 수 있는가?
가상과 현실의 경계

9. 가상과 현실의 경계
뉴미디어를경험할때우리는가상과현실을구분할수있는가
Box by Bot & Dolly
http://goo.gl/lP15Ao

10. 가상과 현실의 경계
뉴미디어를경험할때우리는가상과현실을구분할수있는가
현실과가상의혼재속에서사용자들의인식으로부터그경계가사라지는지점을발견
컨텐츠,서비스,사물,시간,공간등이뉴미디어를통해결합
뉴미디어를 통한 ‘가상’과 ‘현실’의 결합

11. 뉴미디어를 통한 경험의 확장

12. 뉴미디어를 통한 경험의확장
가상의,일탈의,디지털의,정보의,변화하는...
앞서의변화는상수가변수로대체되는현상으로이야기될수있음
고정적인것(Fixed) 에서유동적인것(Flexible, Mobile) 으로 빈자리를남겨둠
상수
(Constant)
변수
(Variable)
뉴미디어가가진기본적인속성

13. 여기서의f( )라는것은일종의알고리즘
y를결정하는x가무엇으로부터채워지는지가중요
상수 (Constant)
변수 (Variable)
y = 10
y = f(x)
:
:
뉴미디어를 통한 경험의확장
뉴미디어가가진기본적인속성

14. 채워진공간을비워냄으로써가상공간과의경계면을새롭게정의
y=f(x)를채우는무언가를통해현실공간의물성을가볍게,투명하게,유연하게변형
고정된시간과주기를자유자제로변형하며실시간으로상호작용
뉴미디어를 통한 경험의확장
상수 (Constant)
변수 (Variable)
y = 10
y = f(x)
:
:
뉴미디어가가진기본적인속성

15. 뉴미디어를 통한 경험의확장
현재 우리가 사용하고 있는 뉴미디어
테크놀로지의 발전 속도
+
앞으로 또어떤 미디어와 테크놀로지가 결합될 수있을 것인가

16. 뉴미디어와 테크놀로지의 결합
우리의신체와항상함께하는웨어러블디바이스
1인칭시점에서의일상의관찰과기록,공유 GoogleGlass
http://goo.gl/PXmNV

17. 뉴미디어와 테크놀로지의 결합
현실공간을기반으로스마트폰을통해즐기는증강현실게임
추후GoogleGlass와의결합가능성을보여주는사례 Google Ingress
http://goo.gl/BeW3M

18. 뉴미디어와 테크놀로지의 결합
뉴미디어와현실공간내에서의가상적경험을네트워크를통해연결
자동적으로기록되는게임속경험중일부를선택적으로다시재생하고공유가능 Sony Playstaion4
http://goo.gl/PnQyeh

19. 프로젝션맵핑
라이트페인팅
홀로그램디스플레이
스마트더스트/스마트픽셀
물리적인디지털
.
.
.
뉴미디어를 통한 표현의 확장

20. 뉴미디어를 통한 표현의확장
건축적요소위에덧입혀진빛의시각적연출
3차원적시각경험.시간의흐름,가상의물리적속성을부여
프로젝션 맵핑

21. Omicron by Anti VJ
뉴미디어를 통한 표현의확장 - 프로젝션 맵핑
건축적요소위에덧입혀진빛의시각적연출
3차원적시각경험.시간의흐름,가상의물리적속성을부여
http://goo.gl/Tzje4

22. Sagrada Familia Projection
뉴미디어를 통한 표현의확장 - 프로젝션 맵핑
건축적요소위에덧입혀진빛의시각적연출
3차원적시각경험.시간의흐름,가상의물리적속성을부여
http://goo.gl/9Sh9v1

23. Urban Screen Searchlight
뉴미디어를 통한 표현의확장 - 프로젝션 맵핑
건축적요소위에덧입혀진빛의시각적연출
3차원적시각경험.시간의흐름,가상의물리적속성을부여
http://goo.gl/XyFrwb

24. 뉴미디어를 통한 표현의확장
라이트 페인팅
시간의압축을통해2차원빛의배열을3차원적인빛의배열로시각화

25. McLaren P1 Launch
뉴미디어를 통한 표현의확장 – 라이트페인팅
시간의압축을통해2차원빛의배열을3차원적인빛의배열로시각화
http://goo.gl/sphPX

26. WiFi Light Painting
뉴미디어를 통한 표현의확장 – 라이트페인팅
시간의압축을통해2차원빛의배열을3차원적인빛의배열로시각화
http://goo.gl/ZAu7gJ

27. 홀로그램 디스플레이
물리적매개체가없이특정위치에머무를수있는빛은존재에대한답론
뉴미디어를 통한 표현의확장

28. Leia Display System
뉴미디어를 통한 표현의확장 – 홀로그램디스플레이
물리적매개체가없이특정위치에머무를수있는빛은존재에대한답론
http://goo.gl/U75OnN

29. 스마트 더스트 / 스마트 픽셀
디지털상에정의되어있는빛의정보에상대적위치의속성을부여
뉴미디어를 통한 표현의확장

30. Flyfire by MIT SENSEable City Lab
뉴미디어를 통한 표현의확장 – 스마트더스트 / 스마트 픽셀
디지털상에정의되어있는빛의정보에상대적위치의속성을부여
http://goo.gl/ChjUO

31. 물리적인 디지털
디지털로재정의된현실공간에가상적피드백이더해짐으로써두개의3차원이중첩되는세계
실시간적이고상호작용적이며현실공간과의인지적분리가존재하지않음
뉴미디어를 통한 표현의확장

32. The Digital 3D
뉴미디어를 통한 표현의확장 – 물리적인디지털
디지털로재정의된현실공간에가상적피드백이더해짐으로써두개의3차원이중첩되는세계
실시간적이고상호작용적이며현실공간과의인지적분리가존재하지않음
http://goo.gl/9SFhc

33. 다음 단계의 아날로그와 디지털

34. 다음 단계의아날로그와 디지털
아날로그는연속선상에있는데이터.디지털은일정단위로분절되어있는데이터
아날로그와디지털사이에는해상도라는개념안에서근사치에의해교차되며변환
해상도의극대화는아날로그를넘어서는디지털을가능하게함
아날로그와 디지털의 기본적 순환 구조
좌표 프린트 점
점 스캔 픽셀

35. 오랜 시간에 걸쳐 정의된 공간의 구성 요소들이
디지털과 만나면서 어떻게 재정의 될 수 있는가
다음 단계의아날로그와 디지털
아날로그와 디지털의 새로운 정의

36. 다음 단계의아날로그와 디지털
아날로그와 디지털의 새로운 정의
점 (Dot) 점 (Point, Coordinate) 점 (Pixel)

37. 다음 단계의아날로그와 디지털
현실세계에서우리의눈에보이는점을표시하기위해서는색,지름,두께등의속성이필요
확대된스케일에서볼때점은활용하는매체와도료에의해면을가진도형이나높이를가진구조체
아날로그와 디지털의 새로운 정의
점 (Dot) 점 (Point, Coordinate) 점 (Pixel)

38. 다음 단계의아날로그와 디지털
3차원공간상에약속되어진가상적인위치
절대적인좌표,상대적인좌표
아날로그와 디지털의 새로운 정의
점 (Dot) 점 (Point, Coordinate) 점 (Pixel)

39. 다음 단계의아날로그와 디지털
RGB를통해표현되는색상정보가더해진가상적좌표
현실공간에서는디스플레이장치의일정영역을차지하는공간적형태로해상도의개념이더해짐
확대된스케일에서볼때디스플레이장치는R,G,B의색상소자의조합으로표현되어지는구조적를가짐
아날로그와 디지털의 새로운 정의
점 (Dot) 점 (Point, Coordinate) 점 (Pixel)

40. 다음 단계의아날로그와 디지털
3D스캐닝을통해생성된X,Y,Z/R,G,B로정의되어지는점들의집합
수많은점의집합을하나의매스로인식하여3D객체화
각각의점들에다양한속성을정의하고변형함으로써새로운객체를형상화
아날로그와 디지털의 새로운 정의
Voxel
(Volumetric Pixel)
Point Cloud

41. Unnamed Soundsculpture
다음 단계의아날로그와 디지털
아날로그와 디지털의 새로운 정의 – Point Cloud
http://goo.gl/hgln7

42. Google Project Tango
다음 단계의아날로그와 디지털
아날로그와 디지털의 새로운 정의 – Point Cloud
http://goo.gl/QdMjxH

43. 다음 단계의아날로그와 디지털
물리적인공간과부피를가진디지털적인좌표
Dot가가지는물리적인개념을디지털의개념과결합
Point Cloud가3D Printing과만날때해상도로정의될수있는개념
아날로그와 디지털의 새로운 정의
Voxel
(Volumetric Pixel)
Point Cloud

44. The Invisible Shape of Things Past by ART+COM
다음 단계의아날로그와 디지털
아날로그와 디지털의 새로운 정의 - Voxel
http://goo.gl/kc5edS

45. 다음 단계의아날로그와 디지털
현실의사물을3D Scan하여얻은포인트클라우드데이터
또는3D소프트웨어상에서모델링한데이터를포인트클라우드로변환하여프린트
아날로그와 디지털의 새로운 정의
4D Printing3D Printing

46. 다음 단계의아날로그와 디지털
3D Printing에형상기억등의다른차원의개념과기능이더해진4D Priting의개념
아날로그와 디지털의 새로운 정의
4D Printing3D Printing

47. Self-Assembly Object by Skylar Tibbits
다음 단계의아날로그와 디지털
아날로그와 디지털의 새로운 정의 – 4D Printing
http://goo.gl/k3DE9d

48. Virtual World - Metaverse

49. Augmentation
(증강)
Intimate
(사적인)
Simulation
(재현)
External
(공적인)
Metaverse
Metaverse (Meta + Universe)는3D세계로서의World Wide Web을일컫는용어
현실세계와가상세계가서로유연하게통합되어그경계가모호해지는세상
Augmentation(증강)-Simulation(재현),Intimate(사적인)-External(공적인)의2축에의해4종류로분류

50. Metaverse
Metaverse (Meta + Universe)는3D세계로서의World Wide Web을일컫는용어
현실세계와가상세계가서로유연하게통합되어그경계가모호해지는세상
Augmentation(증강)-Simulation(재현),Intimate(사적인)-External(공적인)의2축에의해4종류로분류
Intimate
(사적인)
External
(공적인)
Augmentation
(증강)
Simulation
(재현)
Augmented
Reality
Lifelogging
Mirror World Virtual World

51. Metaverse
현실세계와가상의데이터가혼합되어지는현실로스마트폰의확산으로이미대중적으로인지되는단계
급진적인상상의영역이기앞서빅데이터중심의서비스영역으로발전
Augmented Reality
(Augmentation + External)
IntimateExternal
Augmentation
Simulation
Augmented
Reality
Lifelogging
Mirror
World
Virtual
World

52. Metaverse
실시간적으로생성되는개인의데이터와현실의세계가만나서결합되는지점
기능보다는감성에초점을둔서비스의영역으로발전
예. Google Glass, Nike Fuelband
Lifelogging
(Augmentation + Intimate)
IntimateExternal
Augmentation
Simulation
Augmented
Reality
Lifelogging
Mirror
World
Virtual
World

53. Metaverse
데이터측면에서의실제세계의재현
예.Microsoft Virtual Earth, Google Street / Earth / Liquid Galaxy
Mirror World
(Simulation + External)
IntimateExternal
Augmentation
Simulation
Augmented
Reality
Lifelogging
Mirror
World
Virtual
World

54. Metaverse
Mirror World (Simulation + External)
Google Liquid Galaxy
http://goo.gl/1fiJlD

55. Metaverse
현실세계의확장으로서의가상적경험
참고.Second Life, Minecraft, World of Warcraft, Oculus VR
Virtual World
(Simulation + Intimate)
IntimateExternal
Augmentation
Simulation
Augmented
Reality
Lifelogging
Mirror
World
Virtual
World

56. Metaverse
Virtual World (Simulation + Intimate)
GTA 4 in VR - Cyberith Virtualizer + Oculus Rift + Wii Mote
http://goo.gl/1lxv4s

57. Virtual Reality에서 Real Virtuality로

58. Virtual Reality에서 Real Virtuality로
가상의 현실을 의미하는 Virtual Reality로부터 Real Virtuality로의 변화
현실을 닮아가는 가상 세계가 아닌 현실의 경계를 넘어서는 가상
Real Virtuality

59. Virtual Reality에서 Real Virtuality로
원하는시간,원하는위치,원하는방향의세상을경험
시간의흐름을거슬러과거와미래가현재와공존
현실세계에서는불가능한다양한상호작용이가능
Real Virtuality에서의 시간과 공간 개념

60. 현실을 넘어서는 가상의 세계
Google Street View Hyperlapse
Virtual Reality에서 Real Virtuality로
http://goo.gl/pgRYm

61. 현실을 넘어서는 가상의 세계
Microsoft Street Slide View
Virtual Reality에서 Real Virtuality로
http://goo.gl/SCg8

62. 현실을 넘어서는 가상의 세계
Microsoft Augmented Reality Maps
Virtual Reality에서 Real Virtuality로
http://goo.gl/XLca

63. 현실을 넘어서는 가상의 세계
Virtual Reality에서 Real Virtuality로
웹을 통해보고 있는 지도의 이미지가 오늘아침에 촬영된 이미지라면?
실시간으로 세상 어느곳의 모습이든 원하는 뷰에서확인할 수 있다면?

64. 현실을 넘어서는 가상의 세계
Virtual Reality에서 Real Virtuality로
현재가 아닌과거 시점의 이미지를 원하는 대로선택할 수 있다면?
완성되지 않은 건축물이 담겨진 미래 시점의 이미지를선택할 수 있다면?

65. 영화 '매트릭스'에서 그리던 세상이 우리를 찾아오는 순간
Virtual Reality에서 Real Virtuality로

66. Main Body에서 Second Body로

67. Main Body에서 Second Body로
디지털로구성된또하나의확장된신체인SecondBody
디지털로구성된공간,혹은사물과실시간으로상호작용하며신체와의관계를재정의
Main Body + Second Body

68. 신체는인식,접속,반응,소통을위한기본적인인터페이스
공간과의상호작용은철저하게우리의신체를기반으로함
Main Body
Main Body에서 Second Body로

69. 나와함께움직이며변화해가는데이터(정체성,관계성,경험,기호등...)의층위
단순히신체를벗어나는대신새로운신체와함께중첩되는것
Second Body
Main Body에서 Second Body로

70. Real Virtuality 세계 속의 Second Body

71. 두개의 세상, 두개의 신체, 하나의 경험
Real Virtuality 세계 속의Second Body
현실이상의시간적,공간적,맥락적경험
일상과일탈을하나로연결하는서비스와컨텐츠경험

72. Ultimate Battlefield Simulator
Real Virtuality 세계 속의Second Body
http://goo.gl/fGvi2

73. Oculus VR
Real Virtuality 세계 속의Second Body
http://goo.gl/rxA9mm

74. Immersive Space
Real Virtuality 세계 속의Second Body
우리가익숙한신체를보다효과적으로활용하여공간에접속
공간은사용자를이해하고적극적으로상호반응
극단적몰입을통해신체가가진감각의최대치를경험

75. Digital Context
Real Virtuality 세계 속의Second Body
문맥적으로고려해야했던제약조건들이인공환경하에언제든통제가능한빈영역으로남겨짐
절차적으로반영되었던과거중심의역사적,사회적이슈들이점점실시간의것들로대체됨

76. Real Time
Real Virtuality 세계 속의Second Body
원래부터실시간이었던세상속에서보다극단적인실시간성을경험
다양한기술이나SNS등의커뮤니티을통해서사람들과실시간적으로이루어지는소통

77. Interactive Storytelling
Real Virtuality 세계 속의Second Body
 자신의아이덴티티가반영된자신만의스토리를형성
 현재의자신과무관한이야기인가그렇지않은지여부가만들어내는몰입의차이

78. Second Body를통해 우리는 무엇을 경험할 수 있을까
Real Virtuality 세계 속의Second Body
Real Virtuality의공간에서 우리의경험은 앞으로 어떻게 변화해갈 것인가

79. 마무리하며...
가상의, 일탈의, 디지털의, 정보의, 변화하는...
뉴미디어와테크놀로지의등장가운데형성되는새로운공간,새로운신체
이러한공간과신체를통해새롭게정의되는세상속에서우리는무엇을만들어갈것인가

80. heavenlydesigner@gmail.com
heavenlydesigner.com
신기헌
https://sites.google.com/site/heavenlydesigner/lecture/hanyangarchi