1. 부득이한 사정으로 늦으시는 분들을 위해
너그러운 마음으로 기다리시는 시간입니다.
• 잠시 후, 2:13에 시작합니다.
• 발표자료는 향후 NDC페이지 또는 http://bit.ly/ndc2015ars 에서 내려받으실 수
있습니다. 혹시라도 기록이 필요하신 분들은 사진은 이 장만 찍어두시고,
마음 편히 발표에 참여해주시면 감사하겠습니다.
2. 비정형 데이터 분석으로 바라보는 온라인 게임 운
영
부제 : 유저들의 머릿속을 들여다 볼 수 있는 다양한 기법들
아르스 프락시아
발표 : 정성영
분석 : 이동주
3. 청중 체크
1. 오늘 오신 분들은 어떤 분들이신가요?
2. 데이터 분석에 있어서 어느 정도 관심과 전문성을 갖고 계신 분들인가요?
4. 목차
1. 비정형 데이터 분석이 뭔가요?
2. 왜 비정형 데이터 분석이 좋은가요?
3. 비정형 데이터 분석해보기
4. 온라인 게임 분석 사례
5. QnA
5. 발표자 소개
1. 비정형 데이터 분석이 뭔가요?
정성영 Paul Jung
• 데이터분석 컨설팅 조직 Ars Praxia 이사
• NPD/NBD 담당
• 엔씨, 웹젠, 엔트리브 등 게임 개발 프러덕션
• 키워드 : 데이터 기반 의사결정, 애자일 개발,
린스타트업, 다둥이 아빠
6. 정형 데이터 vs. 비정형 데이터
(Structured data vs. Unstructured data)
1. 비정형 데이터 분석이 뭔가요?
7. 1. 센티멘탈 분석 : 라이엇 게임즈
1. 비정형 데이터 분석이 뭔가요?
Source : GDCvault.com
8. 1. 센티멘탈 분석 : 라이엇 게임즈
1. 비정형 데이터 분석이 뭔가요?
Source : GDCvault.com
9. 2. 디퓨젼 네트워크 : 라이엇 게임즈
사진!
1. 비정형 데이터 분석이 뭔가요?
Source : GDCvault.com
10. 3. 인덱스 개발 : MIT BPP
전세계 50여개구의 주요 상품의 가격을
매일 인터넷으로 검색해서 빅데이타 분석을 통해서
인플레이션 예측을 해주는 MIT 연구진들이 만든 서비스.
이 데이타 기반의 분석을 보면 아르헨티나는
정부가 발표한 물가지수가 조작되었다는 것. 지못미
1. 비정형 데이터 분석이 뭔가요?
12. 에스노그래픽 조사 (Ethnographic research)
• Understanding how customers use your product
• Looking deep into their behavior and reaction helps
understanding what your customers want in your
product
1. 비정형 데이터 분석이 뭔가요?
13. 대표적 사례 : 하인즈 케첩
• Casey Keller 최초로 자사 제품이 일반 고객 환경에서 어
떻게 쓰이는지 알기 위해 조사를 진행
• 실제 고객의 문제를 발견후 제품에 반영
1. 비정형 데이터 분석이 뭔가요?
14. 디지털 에스노 : Selfiecity 프로젝트
• 인스타그램에 사용자들이 올린 셀카 사진 수 천장을
가공/분석하여 지역별, 남녀 별, 시간대 별 사회인류
학적 통찰을 발견함
1. 비정형 데이터 분석이 뭔가요?
15. 디지털 에스노 : 유한킴벌리 NPD
• 영유아 엄마들 커뮤니티 과거글 3년치 수집/분석
• 약 500만 건 글을 형태소 분석
• 주요 키워드 도출 / 해석 / 신제품 기획
1. 비정형 데이터 분석이 뭔가요?
16. 5. 의미망 (Semantic network analysis) :
일베 커뮤니티 분석
1. 비정형 데이터 분석이 뭔가요?
18. 목차
1. 비정형 데이터 분석이 뭔가요?
2. 왜 비정형 데이터 분석이 좋은가요?
3. 비정형 데이터 분석해보기
4. 온라인 게임 분석 사례
5. QnA
19. 비정형 데이터 분석의 가치
2. 왜 비정형 데이터 분석이 좋은가요?
Features : 고객들이 실제 원하는 것을 알게 될 때
• 제품의 USP 우선순위화 및 내부 설득
• 마케팅 컨셉 인사이트
• 브랜드 모니터링 및 대응
Values : 게임 산업에는 어떤 가치를 줄 수 있는가?
• 유저들과 호흡하는 라이브 개발
• 런칭전 FGT 정성평가 및 확인
20. 목차
1. 비정형 데이터 분석이 뭔가요?
2. 왜 비정형 데이터 분석이 좋은가요?
3. 비정형 데이터 분석해보기
4. 온라인 게임 분석 사례
5. QnA
21. 3. 비정형 데이터 분석 해보기
• 데이터 수집!
• 자연어 처리!
데이터
수집!
/가공!
• 핵심 네트워크
추출!
• 네트워크 시각
화!
네트워
크 구축!
• 네트워크 분
석 : 중앙성 분
석!
• 네트워크 해
석 : 키워드와
연결관계 및
원문 중심으로!
네트워
크 분석!
/해석!
22. DEMO
3. 비정형 데이터 분석 해보기
Steve Jobs' 2005 Stanford Commencement Address!
23. 3. 비정형 데이터 분석 해보기
잡스가 하고 싶었던 말 :
(beweeness centrality / b=0.401367)
1. 저는 많은 것을 포기했습니다.
2. 그걸 통해 내가 사랑하는 일을 찾았습니다.
3. 당신도 선택하세요.
24. Where to start :
Books, Coursera, Visualization tools
3. 비정형 데이터 분석 해보기
25. 목차
1. 비정형 데이터 분석이 뭔가요?
2. 왜 비정형 데이터 분석이 좋은가요?
3. 비정형 데이터 분석해보기
4. 온라인 게임 분석 사례 : 넥슨 아틀란티카
5. QnA
26. 4. 온라인게임 분석 사례 : 버즈량 분석
아틀란티카 팬 커뮤니티들을 대상으로 유저 담론의 양을 분석함:
• 게임 외부 환경변화에 따라 총 4개 구간으로 구분될 수 있으며, 각 구간 초반에 대규모 업데이트로 버즈량이 상승
• 한게임 퍼블리싱 기간에 버즈량이 가파르게 감소
• 넥슨의 개발사(엔도어즈) 인수, 넥슨 퍼블리싱 이후 상승폭이 있으나 대체로 감소 추세
• 여타 온라인 MMORPG처럼 장기적으로 유저의 이탈과 관심 감소가 발생하는 추세
47.
Rank
Phase 1
Keyword
Eigenvector
Centrality
1
용병
0.89
2
조합
0.63
3
정보
0.54
4
영입
0.29
5
정리
0.25
6
녹차한잔
0.22
7
초보자
0.22
8
분석
0.19
9
레벨
0.17
10
초반
0.15
게임 초창기는 용병을 조합하는 방법과 영입 관련 정보에 대한 관심이 높음
주요 키워드: 용병, 조합, 정보, 영입
49. 4. 온라인게임 분석 사례 : 의미망 분석
업데이트로 추가된 신규 용병 정보와 새로운 조합 방법, 그리고 초보자에게 유용한 정보에 대해 관
심이 높음
주요 키워드: 용병, 조합, 정보, 영입, 초보자, 신규
Rank
Phase 1
Keyword
1
용병
2
조합
3
정보
4
영입
5
정리
6
녹차한잔
7
초보자
8
분석
9
레벨
10
초반
Phase 2
Keyword
Eigenvector
Centrality
용병
0.78
정보
0.64
레벨
0.46
초보자
0.45
신규
0.36
조합
0.26
아틀란티카
0.21
B급
0.19
정리
0.18
C급
0.18
51. 4. 온라인게임 분석 사례 : 의미망 분석
전략TBS와 관련된 시스템 업데이트로, 이를 공략하기 위한 정보에 대해 관심이 높으며 용병 조합
과 관련된 정보는 줄어듬
주요 키워드: 용병, 조합, 정보, 영입, 초보자, 신규, 전략TBS, 업데이트, 공략
Phase 2
Keyword
용병
정보
레벨
초보자
신규
조합
아틀란티카
B급
정리
C급
Phase 3
Keyword
Eigenvector
Centrality
전략TBS
0.61
정보
0.60
업데이트
0.52
공략
0.51
패치
0.45
초보자
0.27
스킬
0.24
화공
0.22
포인트
0.20
본지
0.17
Rank
Phase 1
Keyword
1
용병
2
조합
3
정보
4
영입
5
정리
6
녹차한잔
7
초보자
8
분석
9
레벨
10
초반
53. 4. 온라인게임 분석 사례 : 의미망 분석
무기, 마법, 잠재력 관련 정보에 관심이 높음. 용병 조합 관련 단어가 사라지고, 용병 없이 미궁을
솔로플레잉 할 수 있는 아지(아틀지팡이)에 대한 관심이 높음
주요 키워드: 용병, 조합, 정보, 영입, 초보자, 신규, 전략TBS, 업데이트, 공략, 마법, 잠재력, 아지, 미궁
Phase 2
Keyword
용병
정보
레벨
초보자
신규
조합
아틀란티카
B급
정리
C급
Phase 3
Keyword
전략TBS
정보
업데이트
공략
패치
초보자
스킬
화공
포인트
본지
Rank
Phase 1
Keyword
1
용병
2
조합
3
정보
4
영입
5
정리
6
녹차한잔
7
초보자
8
분석
9
레벨
10
초반
Phase 4
Keyword
Eigenvector
Centrality
정보
0.75
마법
0.54
정리
0.44
잠재력
0.34
신규
0.31
아지
0.31
용병
0.30
미궁
0.26
사냥
0.25
군단
0.22
54. 4. 온라인게임 분석 사례 : 의미망 분석
정리:
• 각 구간에서 “조합, 초보자, 영입”의 주요 지표가 버즈량과 높은 상관관계가 높음.
• 게임 초창기에 비해 용병 조합 관련 담론이 감소하였음.
55. 4. 온라인게임 분석 사례 : 의미망 분석
주요 원문 확인:
-신규/복귀 유저는 “게임 중반에서 용병, 조합 관련 질문”을 하는 반면,
-올드 유저가 “다른 게임 요소가 더 중요하니 광렙하라고 조언”하는 모습이 관찰됨.
56. 4. 온라인게임 분석 사례 : 의미망 분석
신규/복귀 유저 “여러 용병을 육성하고 상황에 맞게 조합해보기 원함”,
올드 유저 “신규/복귀 유저를 하루빨리 성장시키기 위해 도와주고 싶음”.
이 두 집단의 니즈가 미스매치되는 원인으로 “용병 활용도의 고착화”가 예상됨
57. 4. 온라인게임 분석 사례 : 의미망 분석
1. 아틀란티카는 캐릭터를 조합하는 타 게임보다 주로 사용하는 용병이 편향됨
2. 아틀란티카는 크루세이더 퀘스터보다 게임 내에 조합 가능한 캐릭터가 3배 많음에도 불구하
고, 주요 지표가 낮은 구간이 2배로 나타남.
(Eigenvector Centrality가 0.1이하)
두 게임에서, 2015년
상반기 동안 유저가 사
용하는 캐릭터의 관계를
네트워크로 작성.
58. QnA
Takeaway:
1. 기존 센티멘트/네트워크 분석 방식 외에도
다양한 비정형 데이터 분석 기법이 존재.
2. 특히 의미망 분석은 고객의 숨겨진 생각을 발견
하고 이해하며 우선순위를 매겨주기에 게임 운영
에 도움이 되는 분석.
3. 직접 해보자, 생각보다 쉽다.
감사합니다.
Editor's Notes
현재 비정형 데이터 분석 스타트업 아르스프락시아(久 트리움)의 디렉터로 재직중이다. 과거 엔씨소프트, 웹젠, 엔트리브소프트 등에서 프로덕션 매니저로 다 수 온라인 게임의 프러덕션에 참여했으며, 2009년 ZOYI를 공동 창업하여 소셜광고플래폼을 사업전략을 총괄했다. 데이터 기반 의사결정, 애자일 개발, 린스타트업 등의 키워드에 관심이 많아 다양한 강연/워크샵 등을 진행하고 있으며 '균형잡힌 행복한 성장'이라는 표어를 중심으로 사랑하는 아내와 함께 다섯 아이를 양육하고 있다.
NC, Neople : 테러리스트 착출
신용평가 까지 가능
코카콜라
문화기술지(文化記述誌 ethnography) 또는 민속지학(民俗誌學), 민족지학(民族誌學)은 인간 사회와 문화의 다양한 현상을 정성적, 정량적 조사기법을 사용한 현장 조사를 통해 기술하여 연구하는 학문의 분야이다. 문화기술지는 어떤 시스템이 가지고 있는 각 부분을 정확히 이해하는 것을 통해 전체 시스템의 총체적 연구 성과를 거둘 수 있다는 생각에 기반을 두고 있다.
일반적으로 다섯 살 아이들은 마흔 살 장년보다 케첩을 60퍼센트나 더 많이 먹는다. 하인즈는 아이들이 쉽게 다룰 수 있는 용기를 만들 필요성을 느꼈다. 네 살배기는 저녁으로 무엇을 먹을지 정할 수 없다. 하지만 케첩을 얼마나 먹을지는 혼자서 정할 수 있다. 케첩이 자신에게 맞춰 음식을 먹는 경험을 제공하는 셈이었다. 결국 하인즈는 물렁한 플라스틱을 써서 쉽게 쥐어짤 수 있는 원뿔형 용기를 개발했다. 그 결과 새 용기를 쓰는 가정에서 케첩 소비가 최대 12퍼센트나 늘었다.
“엄마들이 자주 찾는 대형 인터넷 카페가 많아요. 그곳에서 엄마들이 서로 주고받는 내용을 빅데이터로 분석해보니 육아와 행복이 일상 속에서는 잘 어울리지 않고 있다는 것을 알게 됐어요. 엄마가 육아를 하며 일상에서 느끼는 감정 중 90%는 부정적인 것이더라고요.”
유한킴벌리의 모멘트캠 프로젝트는 빅데이터 분석 기술의 도움을 받았습니다. 엄마들이 자주 찾는 대형 인터넷 카페를 선정해 3년치 게시물을 끌어모으는 과정이 출발점이었죠. 유한킴벌리가 엄마들의 속마음을 엿본 셈입니다.
약 500만건의 게시물에서 유한킴벌리가 형태소 분석으로 뽑아낸 키워드는 무엇이었을까요. 퍽 무거운 단어들이 많았습니다. 책임감이 불러오는 압박, 육아에 대한 두려움 등. 아이와 하루를 보내는 엄마의 일상은 뜻밖에 부정적인 감정으로 뒤덮여 있었지요. 아이를 키우는 일, 보통 일은 아니니까요. 일상에서 엄마들이 겪는 어려움이 그만큼 크다는 뜻이기도 합니다.
정진향 유한킴벌리 디지털마케팅팀 팀장은 “아이가 예쁜 짓을 하는 모습을 캡처해 엄마가 일상 속에서 행복을 느끼는 순간을 찾아보자는 아이디어에서 모멘트캠을 만들게 됐다”라고 부연했습니다.
모멘트캠의 작동 원리는 간단합니다. 모멘트캠은 두 개가 한 세트로 구성돼 있습니다. 하나는 엄마가 갖고, 다른 하나는 아이에게 채웁니다. 두 카메라에 똑같이 렌즈가 달려 있는데, 카메라와 카메라 사이가 가까워지면 자동으로 녹화를 시작합니다. 엄마와 아이 사이의 거리가 3m 이내로 가까워지면 녹화가 시작됩니다.
Ars Praxia 고유의 자연어 처리 솔루션을 활용한 형태소 분석 및 추출
명사(NN), 동사(VV), 형용사(VA), 관형사(MD), 부사(MA)를 구분하고 분석에 활용할 명사와 형용사 중심으로 키워드 세트를 추출
난 많은 걸 포기한 사람. 그리고 그걸 통해서 내가 사랑하는 이릉ㄹ 찾은 사람. 당신도 선택해라