NS-CUK Seminar: Jul 18th, 2023: The Meaning of ‘Empire’ Seen through the Lexical Network

1
 디지털 인문학 입문
 디지털 인문학 연구 분야와 사례
 텍스트 분석(Text Analysis)
 이미지/영상 분석(Visual Analysis)
 이미지/영상 분석의 정의와 방법
 연구 사례
 영화 데이터 분석
 영화 서사와 ‘숏(shot)’ 간의 상관성 연구
 영화 서사의 갈등의 정량화
 공간 분석(Spatial Analysis)
 네트워크 분석(Network Analysis)

2
디지털 인문학 연구 분야와 사례
• 디지털 인문학 연구 분야
• Yale Digital Humanities
➀Text Analysis ➁Visual Analysis
➂Spatial Analysis ➃ Network Analysis
DH 분야

3
디지털 인문학 연구 분야와 사례 : ➁Visual Analysis
• Visual Analysis의 필요성
• 유튜브(youtube), 인스타그램(Instagram)의 대중화
• 이미지/동영상 데이터 폭증

4
디지털 인문학 연구 분야와 사례 : ➁Visual Analysis의 개념과 방법
• Visual Analysis
• 이미지 혹은 동영상의 내용을 분석하고 처리하는 연구
• 주석 기반(annotation-based) 방식
• 수작업으로 이미지 혹은 동영사의 내용적 의미를 키워드로 입력
• 고비용의 문제가 발생
• 많은 시간이 소요
• 내용 기반(content-based) 방식
• 동영상의 프레임이나 숏(shot)으로부터 색채(color)와 질감(texture), 모양(shape)과 같은
시각적 특징을 추출하여 비디오의 내용을 표현
• 의미를 표현하는데 한계

5
Visual Analysis 사례 : SNS 이미지 분석
• On Broadway Project
• 뉴욕의 브로드웨이 거리에 대한 방대한 시각 데이터를 분석하여 도시를 입체적으로
표현
• 구글 거리 뷰(Google Street View), 인스타그램 사진, 랜드마크 등
시각 데이터 층위
http://on-broadway.nyc/

6
Visual Analysis : 영화 데이터 분석
• 영화 데이터 특징
• 복합 모달리티(modality)
• 이미지+음성+텍스트
• 스토리를 가진 데이터
• 복잡한 고차원적 정보를 포함

7
• 영화 데이터 주요 연구 동향
• 영화 자동 분석
• 영화 요약(summarization)
• 영화 장르 분류(classification)
• 내용 기반의 영화 검색
• 캐릭터 네트워크
• 딥러닝 기반의 영상 콘텐츠 자동 생성
• 대용량 데이터에 대한 기계학습
• 내용 정보와 패턴 인식
• IBM의 왓슨(Watson)
• SF 영화 <Morgan>의 예고편 제작
• 윔블던 경기의 하이라이트 영상 생성
• MCNet/MoCoGan 모델
• 임의 수의 프레임을 관측한 값을 토대로 가상 영상 생성

8

9
• 영화 데이터 분석이란 무엇인가?
• 스토리를 전개하기 위해 이미지를 어떻게 배치하고 결합하는가?
• 촬영, 편집, 조명, 색채…
• 숏(shot)과 스토리 간의 상관성

10

11
• 영화 서사와 ‘숏(shot)’ 간의 상관성 연구
• 영화 데이터 분석의 기본 단위 ‘숏(shot)’
• ‘숏(shot)’이란 무엇인가?
• 카메라가 작동하기 시작해서 멈출 때까지 한 번의 카메라 조작에 의해 기록되는 것
• 영화의 시각적 언어이자 서사의 기본 단위 ‘숏’
• 서사적 기능을 갖고 있음
• 스토리를 전달
• 카메라 위치와 거리에 따라 샷의 종류는 다양함
• ‘이미지 시스템(image system)’
• 이미지와 편집 패턴, 숏 구성과 특정 감독의 이념적 경향을 분석하여 영화를 체계적
으로 이해하는 것＂”(구스타보 메르카도 저, 『필름메이커의 눈』)
• 영화 속 숏의 패턴과 반복적 사용
Visual Analysis : 영화 데이터 분석 사례

12
• 데이비드 와크 그리피스(David Wark Grffith, 1875-1948)
• 다양한 크기의 ‘숏‘을 통해 스토리를 전달
• 숏의 적절한 병치를 통해 내러티브를 전개
• 인물의 얼굴과 행위를 롱 숏, 미디엄 숏, 클로즈업
등으로 분할
영화 <국가의 탄생>(1915)

13
• ‘숏(shot)’의 종류
➀카메라와 피사체
간의 거리에 따른
구분
➁카메라의 앵글에
따른 구분

14
• ‘숏(shot)’의 종류 : ➀ 카메라와 피사체 간의 거리에 따른 구분
숏의 종류 개념
익스트림 클로즈업
(Extreme Closeup)
• 얼굴의 일부분, 눈이나 입과 같은 특정 부분을 화면 가득
히 담아내는 것
• 극도의 긴장과 갈등을 표현
클로즈업(Closeup) • 피사체의 크기를 확대하여 얼굴 전체나 작은 사물들을 화
면 가득히 찍는 것
• 인간의 내면적인 정서를 강렬하게 반영
미디엄숏
(medium shot)
• 사람의 무릎이나 허리 위에서 얼굴까지 잡아 찍는 것
• 안정감
롱숏(long shot) • 사람의 몸 전체 뿐만 아니라 그를 둘러싼 주변까지 적당
히 담을 수 있는 것
• 주변 환경 강조
익스트림 롱숏
(Extreme long shot)
• 한 시퀀스(sequence, 이야기의 한 덩어리)의 첫 부분에서
주위 배경이나 상황을 설명할 때 사용되는 구축숏

15
• 숏의 종류와 예시
• 영화 <옛날 옛적 서부에서>(1968)
익스트림 클로즈업(extreme close up) 클로즈업(close up)
익스트림 롱 숏(extreme long shot)

16
• 숏의 크기와 예시
미디엄숏(medium shot)(영화 <스토커>(2013) 미디엄숏(long shot)(영화 <미저리>(2013)

17
연습 문제
• 숏의 종류를 분류해 보기

18
• ‘숏(shot)’의 종류 : ➁카메라의 앵글에 따른 구분
• 로우 앵글(Low Angle) : 카메라가 피사체 밑에서 위로 올려 보듯 촬영
영화 <어벤저스>
영화 <미저리>
• 인물의 도도함, 권력 의지
• 관객 혹은 피사체를 바라보는 인물에게 두려움
이나 공포, 불안감을 조성

19
• 하이 앵글(High Angle) : 카메라가 피사체 위에서 내려다 보는 것
영화 <사이코>
영화 <스토커>
• 인물의 무기력함
• 인물의 불안한 심리

20
• 로우 앵글과 하이 앵글의 교차
• 주인공(프로타고니스트)과 반대자(안타고니스트)의 권력 관계와 힘의 방향
영화 <케이프 피어>

21
• F.Brodbeck의 씨네메트릭스(Cinemetrics)
• 씨네메트릭스란 영화의 특징을 시각화하기 위해 영화 데이터를 측정하는 것
• 영화의 숏(shot)의 길이와 색상, 움직임 등을 추출하여 숏의 특징 값을 정한 후 숏들
을 원형으로 누적한 ‘fingerprint’
• 다양한 장르의 영화들을 비교
• 같은 감독이 연출한 영화들을 비교
• https://www.youtube.com/watch?v=Ais61jFb83M
영화 <2001:space odyssey> 영화 <alien> 영화 <annie hall> 영화 <casablanca>

22
• F.Brodbeck의 씨네메트릭스(Cinemetrics)
• https://cinemetrics.site/?selection=Metropolis,
Visual Analysis : 영화 데이터 분석 방법과 사례

23
• F.Brodbeck의 씨네메트릭스(Cinemetrics) 사이트 경험하기
• 사이트에 접속하여 스탠리 큐브릭(Stanely Kubrick) 감독의 영화들의 ‘fingerprint’ 비교
• 숏의 길이와 색깔 움직임
연습 문제

24
• 갈등의 정량화 연구 : 논문 <영화 속 갈들의 정량화 연구 : 등장인물의 얼굴면적 비교를 중
심으로>
• 갈등이란 무엇인가?
• 갈등은 서사를 추동하는 동력
• “서사를 구성하는 것은 갈등“(서사학자 H.Porter Abbot)
• 서사는 두 인물 간에 촉발된 갈등에 의해 시작되고 그것의 해소를 거쳐 종결
(closure)
• 갈등은 주인공(프로타고니스트)와 상대 주인공(안타고니스트)가 벌이는 힘의 경합
• 갈등과 등장인물의 얼굴 면적
• 등장인물의 얼굴의 의미
• 영화는 얼굴의 표현과 형태에만 집중
• 예를 들어 클로즈업을 통해 인물의 내면을 연출

25
• 갈등과 등장인물의 면적
• 갈등과 얼굴 면적 간의 상관성
• 주인공과 상대주인공 간의 갈등을 분석하기 위해 두 인물이 함께 등장하는 장면으로
부터 두 인물 간의 얼굴 면적을 측정 및 비교
• 특정 장면에서 두 인물이 등장했을 때, 관객은 그들 사이의 갈등, 경합의정도, 국
면 등을 이해하기 위해 인물의 대사나 화면 속에서 벌어지는 사건을 참조
• 감독의 의도에 따라 특정 장면에서는 주인공(무엇)이 자주 클로즈업(어떻게)되고, 어
떤 장면에서는 주인공과상대주인공이 롱 숏으로 담길 수 있음
• 인물의 얼굴 면적이 크게 측정될수록 해당 숏은 클로즈업, 그 반대인 경우는 롱 숏

26
• 얼굴 면적 측정 방법
• 갈등과 얼굴 면적 간의 상관성 여부를 분석하기 위해 할리우드 영화 10편을 선정
• 킹스 스피치(The King’s), 크레이머 대 크레이머(Kramer vs. Kramer), 월 스트리트
(Wall Street), 굿 윌 헌팅(Good Will Hunting), 레인맨(Rain Man)
• 로미오와 줄리엣(Romeo and Juliet), 케이프 피어(Cape Fear), 미저리(Misery), 인썸
니아(Insomnia)(2002), 다크 나이트(The Dark Knight)
• 선정된 영화로부터 주인공과 상대주인공이 함께 등장하는 장면을 추출
• 해당 장면들로부터 숏을 검출
• 각각의 숏으로부터 시작, 가운데, 끝의 3개의 프레임을 추출
• 측정할 얼굴 영역은 얼굴의 앞, 옆 그리고 뒷모습까지 포함

27
• 갈등의 정량화 연구
• 영화 속 주요 인물들의 얼굴 면적 크기 측정

28
• 내러티브의 갈등을 어떻게 정량화 할 수 있을까?
• FaceMarker 소프트웨어 개발
• 영화 속 인물들의 얼굴 면적을 정량화

29
FaceMarker 소프트웨어

30
• 3개의 프레임들로부터 얼굴면적을 검출한 후
에 평균하여 숏의 얼굴 면적으로 계산
• 측정할 얼굴 면적은 1차로 직접 수작업으로
영역을 직사각형으로 표시
• 2차로 다른 사람에 의해 검증, 수정하는 2단계
의 과정을 거쳐 오류를 최소화

31
• 얼굴 면적 측정 결과 분석 예시
• 얼굴 면적값을 그래프로 표현
• 영화 <킹스 스피치>의 평균면적 그래프
• 주인공 ‘조지 6세’ vs. 상대 주인공 ‘라이오넬’
• 그래프의 상승 구간은 얼굴 면적값이 높은 구간으로 갈등의 발생 또는 고조와 관련
• ①로 표시된 부분은 주인공 조지 6세가 말더듬이 치
료를 위해 상대주인공 라이오넬을 찾아간 장면
• 첫 만남에서부터 둘은 호칭 문제로 신경전을 벌이는
데, 클로즈업을 통해 조지 6세의 불편한 감정과 불안
한 심리를 보여주며 언어치료를 두고 라이오넬과의
갈등의 시작을 알림
• ②로 표시된 부분은 조지 6세가 연설을 준비하는 장
면으로 말더듬이를 극복하고 성공적인 연설을 마칠
것인가에 대한긴장감이 최고조로 도달하는 장면으
로 조지 6세의 얼굴을 클로즈업하여 긴장감을 연출

32
영화 별 얼굴평균면적 그래프
영화 <케이프 피어>
영화 <다크 나이트>
영화 <미저리>
영화 <인썸니아>

33
영화 별 얼굴평균면적 그래프
영화 <로미오와 줄리엣> 영화 <월 스트리트>
영화 <레인 맨>
영화 <굿 윌 헌팅>

34
과제
• 10편의 영화 중 한 편을 감상한 후 면적 그래프의 상승 구간/하강 구간과 서사와의 상관성
을 분석하기

NS-CUK Seminar: Jul 18th, 2023: The Meaning of ‘Empire’ Seen through the Lexical Network

Recommended

Recommended

More Related Content

More from ssuser4b1f48

More from ssuser4b1f48 (20)

NS-CUK Seminar: Jul 18th, 2023: The Meaning of ‘Empire’ Seen through the Lexical Network