빅데이터 기술전문가

1. 작성자 | 소속팀 / 상위부서 | 2011.10
빅데이터 기술전문가
유예림 주다은
경기빅데이터전문가과정-분석

2. 빅데이터 기술자가 나오게된 배경
웹 2.0: Platform as a Web
-데이터와 API 를 통한 다양한 서비스 증가
-오픈 API 플랫폼 및 As-a-Service 증가
예) API billion club 탄생

3. 3
1.데이터를 얼마나 많이 분석할 것인가,
2. 얼마나 빨리 저장할 것인가

4. Responsibilities 주요 업무
1. 디자인, 설계, 인스톨, 테스트, 데이터
management 시스템 유지 보수
2. 기초 데이터 프로시져, 가이드라인, 기준
(standards) 보수
3. 새로운 데이터 management 시스템과 소프트웨어
엔지니어링 도구들을 하나의 스트럭쳐(structure)
에 통합
4. 커스텀화된 소프트웨어 구성품들을 만들거나
(specialised UDFs) 분석 어플리케이션 생성

5. Skills 기술
+
=
+ +DB 디자인 데이터 수집 데이터
웨어하우징
데이터 변형

6. Tools 사용도구

7. Tools
사용도구
*맵리듀스(MapReduce):
대용량 데이터를 분산 처리하기 위한 목적으
로 개발된 프로그래밍 모델
*몽고DB(MongoDB):
크로스 플랫폼 도큐먼트 지향 DB 시스템이
다. NoSQL데이터베이스로 분류된다.
*SQL(Sructured Query Language):
데이터베이스에서 정보를 얻거나 갱신하
기 위한 표준화된 언어로서 대화형으로 이용
하거나, 또는 프로그램 내에 삽입하여 쓸 수
있는 언어

8. Career Path 출세 과정
Senior
Data
Engineer
BI
Architect
Data
Architect
Data
Engineer

9. 9
References
1. https://www.analyticsvidhya.com/wp-content/uploads/2015/10/infographic.jpg
2. https://www.slideshare.net/kimsubo/kth-26523988
3. https://www.slideshare.net/Channy/overview-bigdata-tech-update-2014
4. http://www.edaily.co.kr/news/NewsRead.edy?SCD=JH41&newsid=02719126602
811544&DCD=A00804&OutLnkChk=Y
5. http://tip.daum.net/openknow/38981929
6. http://terms.naver.com/entry.nhn?docId=3386313&cid=58370&categoryId=58370

10. 감사합니다.