Causal Inference KR 커뮤니티에서 진행한 발표입니다.
프로덕트 개발 조직의 데이터 분석가로 일하며 진행했던 인과추론 분석을 회고하는 내용입니다.
자료 조회가 안되실 경우 https://drive.google.com/file/d/1GAuAqggoxbX50EEwdzTaV4z4G0j8pLRf/view?usp=sharing 를 확인해주세요.
1. 인과추론에 빠져드는 이유
2. A/B 테스트의 현실, 왜 안된다고 할까?
3. 실험이 예상치 못한 지표를 침해했다
4. 기능을 늘리는 게 MAU 성장에 도움이 될까?
Causal Inference KR 커뮤니티에서 진행한 발표입니다.
프로덕트 개발 조직의 데이터 분석가로 일하며 진행했던 인과추론 분석을 회고하는 내용입니다.
자료 조회가 안되실 경우 https://drive.google.com/file/d/1GAuAqggoxbX50EEwdzTaV4z4G0j8pLRf/view?usp=sharing 를 확인해주세요.
1. 인과추론에 빠져드는 이유
2. A/B 테스트의 현실, 왜 안된다고 할까?
3. 실험이 예상치 못한 지표를 침해했다
4. 기능을 늘리는 게 MAU 성장에 도움이 될까?
Investasi Dahsayat 2011, profit sampai dengan 350 % dalam 100 hari kerja. Segera ambil langkah anda sekarang, bergabunglah bersama tim kami. info : www.lexus-100.blogspot.com sponsor ID:2645418
2008 KPMA 논문 발표
http://projectresearch.co.kr/2011/03/02/peter%EA%B0%80-%EC%A0%9C%EC%95%88%ED%95%98%EB%8A%94-enterprise-2-0-%ED%98%91%EC%97%85-%ED%99%98%EA%B2%BD-enterprise-2-0-%EA%B4%80%EB%A0%A8-%EB%85%BC%EB%AC%B8-pt-%EC%A0%95%EB%A6%AC/
1. 28회 결과 보고
주제 : IT의 가치 극대화 방안
(IT 패러다임의 환상, 현실 그리고 기회)
연구소 2009. 3. 26
2. 사전 설문조사 결과
응답자 특성 현황
업종
80%
60%
48. 3%
40%
20. 0%
20% 13. 3%
10. 0%
8. 3%
0%
인터넷 IT 금융 대학/교육 정부/공공 기타
(은행/보험/증권 (유통/제조/대학 등)
카드/캐피탈/기타)
[Base : 60 ]
2
3. 사전 설문조사 결과
응답자 특성 현황
담당 업무 직책
80% 80%
60% 60% 53%
40% 40%
32%
22% 20% 20% 22%
20% 20%
13%
7% 5% 7%
0% 0%
IT IT IT 홍보/ 기타 임원급 부장급 차장/ 대리/ 기타
기획 컨설팅 관리 마케팅 과장급 사원급
/운영
[Base : 60 ]
3
4. 사전 설문조사 결과
현재 근무 부서
Q. 귀하께서는 현재 어느 부서에서 근무하고 계십니까?
80%
72%
60%
40%
20%
13% 13%
2%
0%
IT 부서 현업 부서 IT/현업 기타
복합부서
[Base : 60 ]
4
5. 사전 설문조사 결과
가상화 솔루션 도입 목적
Q. 귀사에서 가상화 솔루션을 도입하고자 하는 주된 목적은 무엇입니까?
100%
92% 1순위 1+2+3순위
82%
77%
80%
60%
43%
40%
40%
27%
23%
20%
8%
5% 3%
0%
서버통합을 통한 자원 관리효율 비즈니스 및 기업 경쟁력 서비스 연속성
투자비 절감 향상 서비스 유연성 향상 (DR/BCP)
[Base : 60]
5
6. 사전 설문조사 결과
가상화 솔루션 도입 시 향후 활용 분야
Q. 귀사에서 가상화 솔루션을 도입한다면 향후 활용 분야는?
60%
40% 37%
23%
20% 18%
13%
8%
0%
Mission Critical Non-Mission Critical 애플리케이션 애플리케이션 비즈니스 연속성
서비스 서비스 개발환경 테스트 환경 및 재해복구
[Base : 60]
6
7. 사전 설문조사 결과
가상화 솔루션 도입 시 고려사항
Q. 귀사에서 가상화 솔루션 도입 시 가장 중요하게 고려하는 사항은 무엇입니까?
60%
40%
32%
30%
25%
20%
13%
0%
0%
안정성 성능 운영/관리 제반 비용 조직/정책/법규적
효율성 (TCO) 문제
[Base : 60]
7
8. 사전 설문조사 결과
가상화 솔루션 만족도
Q. 가상화 솔루션을 이미 도입하셨다면 귀사의 만족도는?
77%
60%
40%
20%
20%
2% 2%
0%
0%
대단히 만족스럽다 보통이다 불만족하다 매우
만족스럽다 불만족하다
[Base : 60]
8
9. 사전 설문조사 결과
가상화 솔루션 불만족 이유
Q. 위 4번의 질문 중 불만족인 이유는 무엇입니까?(서술)
실제 상황을 그대로 재연할 수 있는 가상화가 존재할까요?
성능에 대한 검증이 미흡
제반 비용차원에서 비용가중화
높은 구매 및 라이센스 비용
생각만큼 비용절감 효과가 미흡하고 아직 가상화의 운영이 이론적이고 실제 운영을 위해 솔루션들의 기능 및 기술이 미흡
[Base : 60]
9
10. 사전 설문조사 결과
기술 아키텍처 표준화 정립/관리 수준
Q. 귀사의 기술 아키텍처 표준화 정립/관리 수준은 어느 정도입니까 ?
60%
40%
33%
32%
22%
20%
8%
5%
0%
매우 높다 높다 보통이다 미흡하다 매우 미흡하다
[Base : 60]
10
11. 사전 설문조사 결과
기술 아키텍처 표준화 수립과정 고려사항
Q. 귀사의 기술 아키텍처 표준화 수립과정에서 우선 고려사항은 무엇입니까?
60%
50%
40%
27%
20%
20%
2% 2%
0%
정부규제 기존 Legacy와의 통합 선진사례 최신기술동향 안정성/생산성
[Base : 60]
11
12. 사전 설문조사 결과
기술 아키텍처 표준화 수립 후 운영 시 문제점
Q. 귀사의 기술 아키텍처 표준화 수립 후 운영 시 발견되는 문제점은 무엇입니까?
60%
45%
40%
25%
20% 17%
12%
2%
0%
지속적인 표준화 표준화에 대한 신기술과의 기타
관리 미흡 담당자/팀 부재 이해 부족 괴리
[Base : 60]
12
13. 사전 설문조사 결과
어플리케이션 프레임워크 도입계획
Q. 귀사에서는 어플리케이션 프레임워크를 도입할 계획을 가지고 있습니까?
60%
43%
40%
27%
20%
13%
10%
7%
0%
이미 1년 이내 2년 이내 3년 이내 도입계획 없음
도입하였음
[Base : 60]
13
14. 사전 설문조사 결과
어플리케이션 프레임워크 도입 목적
Q. 귀사에서 어플리케이션 프레임워크를 도입하고자 하는 주된 목적은 무엇입니까?
60%
40%
22% 20%
20%
20% 17%
8%
5% 7%
2%
0%
안정적인 업무 컴포넌트 개발 생산성 유지보수 비용 절감 개발 표준화 시스템 기타
시스템 구축 재사용 증대 증대 용이성 증대 성능 보장
[Base : 60]
14
15. 사전 설문조사 결과
어플리케이션 프레임워크 문제점
Q. 어플리케이션 프레임워크의 가장 큰 문제점은 무엇이라고 생각하십니까?
60%
40%
35% • 지속적인 관리 및 통제 어려움
• Application Framework 검
25% 토하지 않은 상태임
20% 17%
8% 8% 7%
0%
프레임워크의 기능 개발의 어려움 요구성능 높은 도입 및 기타
낮은 안정성 커스터마이징의 (적용방법 미달성 유지 비용
어려움 숙달 기간 필요,
생산성 저하 등)
[Base : 60]
15
16. 사전 설문조사 결과
RIA(Rich Internet Application) 도입계획
Q. 귀사에서는 RIA(Rich Internet Application)를 도입할 계획을 가지고 있습니까?
60%
52%
40%
20%
13% 13% 13%
8%
0%
이미 1년 이내 2년 이내 3년 이내 도입계획 없음
도입하였음
[Base : 60]
16
17. 사전 설문조사 결과
RIA(Rich Internet Application) 문제점
Q. RIA(Rich Internet Application)의 가장 큰 문제점은 무엇이라고 생각하십니까?
60%
40%
• 투자 타당성 확보 어려움
28%
27%
20%
20%
15%
10%
0%
개발 및 유지보수의 표준 미흡 높은 개발 비용 요구성능 미달성 기타
어려움
[Base : 60]
17
19. 사전 설문조사 결과
SaaS 도입 계획
Q. 귀사에서는 Software 비용절감을 위해 SaaS를 도입할 계획을 가지고 있습니까?
70%
60%
40%
20% 17%
5% 5%
3%
0%
이미 1년 이내 2년 이내 3년 이내 도입계획 없음
도입하였음
[Base : 60]
19
20. 사전 설문조사 결과
SaaS 활성화 저해 요소
Q. 귀사에서 SaaS의 활성화 저해가 되는 요소는 무엇이라고 생각하십니까 ?
60%
•인식 부족
•기업문화
•운영 경험부족
•도입의 필요성 미인식
40%
28%
20%
20% 17% 18%
17%
0%
안정성 기능 보안 제반비용 기타
(커스터마이징 (TCO)
포함)
[Base : 60]
20
21. 사전 설문조사 결과
Cloud Computing 도입 계획
Q. 귀사는 Cloud Computing을 언제쯤 본격적으로 도입할 것이라고 생각하십니까 ?
60%
40%
33%
25%
22%
20% 17%
3%
0%
이미 3년 이내 5년 이내 5년 이상 도입하지 않음
도입중
[Base : 60]
21
22. Y-talk 이슈
Y talk 토론이슈(1)
새로운 IT 패러다임으로 콘솔리데이션, 애플리케이션 프레임워크, 클라우드 컴퓨팅 등 세 가지를 선정한 이유가 궁금합니다.
PC 통합 혹은 PC 가상화 혹은 네트워크 컴퓨팅, 씬클라이언트는 어떻게 변화, 발전해갈까요?
SW 아키텍쳐를 효율화 시켜 운영하기 위해서는 IT조직은 어떻게 구성하고 유지해야 하는지?
ITA/EA
합리적인 IT통합 방안
SI 프로젝트에서 Application Framework을 적용해서 일반 개발자이 맘대로 개발하지 않도록 표준화의 틀에 넣어 좀 더 개발을
단순화시키는 것이 가능한가? 그것이 올바른 길인가?
신기술의 도입과 기존 IT구조의 개선
클라우드 컴퓨팅과 그리드 서버의 차이는 무엇인가요?
향후 아웃소싱의 방향성
IT 극대화의 방법론?
일반기업체IT부서의 IT 인력의 생산성관리방안
우리나라 기업문화에서 Cloud Computing이 자리잡기 위한 과제는?
EA를 구축하면 어떤면에서 IT의 가치가 높아질수 있는가?
가상화기술의 현실적인 로드맵
22
23. Y-talk 이슈
Y talk 토론이슈(2)
가상화란 것이 실현 가능한 기술인지요?
IT투자가치 극대화 방안
금융 IT 방향
융복합사업에서의 정보시스템감리와 유사활동과의 조화방안
요즘과 같은 경제상황에서 일반 기업의 경우 IT가 어떻게 경영에 도움이 될 수 있을지에 대한 방법 (단순 비용절감에 대한 고민도
좋지만 향후를 대비해서 어떤 준비가 필요한지... 등)
IT의 발전방향에 대해 용도별로(기업내부, 물류, 일반)등으로 자세하게 다루어 주셨으면 합니다.
IT 거버넌스 ,EA
ITA/EA 수행사례
차세대 사업에서 신기술을 접목을 통한 이상적인 미래 시스템을 구축하고자 합니다. 하지만, 신기술 적용 및 개발방법론의
문제점으로 인한 사업의 차질이 발생하고 있습니다. 가장 합리적인 구축방안은 무엇일지 토론이 되었으면 합니다. ex) Java 적용 - >
주문 속도 개선 및 안정성 확보 미흡 SOA/CBD개발방법론 - > 개발 공수 증대 및 현업과 협업의 어려움
Consolidation을 하면 정말 비용이 절감이 되는 것인가요?
IT 아웃소싱 방법론 및 효과 측정방안
클라우딩 컴퓨팅을 실현할 수 있는 그리드 컴퓨팅 기술의 계층적인 분석 및 기술의 가능성
효과적인 ITA 수립을 위한 접근방법 및 주요 아젠다
IT 패러다임이 현업에ㅡ적용되기 위해 필요한 것들은?
23
24. Y-talk 이슈
Y talk 토론이슈(3)
요구사항 분석 방법
ITSM과 프로젝트와의 통합 관리 운영 방안
불황기에서의 업종별 고객 이슈를 듣고 싶습니다. 그리고 불황기에서의 IT와 SW 제품들의 생존 전략은 어디에 있는지에 대해서도..
알참 세미나가 부탁 드립니다.
클라우드 컴퓨팅
정보화 수준 평가 방법론 및 ROI평가
국내 Cloud computing의 기업 비즈니스 사례
1. 클라우딩 컴퓨팅과 New business model
2. Service Science & 차세대 ( 클라우딩 컴퓨팅, 그리드 컴퓨팅, 시멘틱웹) IT 산업의 service strategy
Greed IT와 Cloud Computing과의 관계
가상화를 통한 IT 인프라 통합에 대한 방향성 수립에 도움을 주시면 고맙겠습니다
가상화 관련 이슈 및 현재 업종별 도입상황
효과적인 아웃소싱 관리 방법
IT를 통하여 기업의 가치를 극대화 시킬수 있는 방안은 무엇인가? IT투자의 ROI를 경영진과 공유할 방안은 무엇인가?
클라우딩 컴퓨팅에 관한 실제 기업의 적용방안
기관 규모에 따른 운영비용 대비 효과
24
25. Y-talk 이슈
Y talk 토론이슈(4)
Application Framework 에 관한 전반적인 사회동향과 활용방안에 관해 좀 더 많은 정보가 교환되었으면 좋겠습니다.
IT의 경쟁력을 표현하는 방법, 변천사
ea의 효과?
뉴IT정책
UML(객체지향설계)
Framework 활용방안
IT 가치
25