빅데이터 플랫폼 Splunk 6.2 인트로

O r i g i n a l i n E v e r y t h i n g
WWW.MOTREX.CO.KR
Splunk 6.2 소개
2015. 01
SP컨설팅팀 연준명 팀장
junnyah@gmail.com

WWW.MOTREX.CO.KR
차목 회사 소개
주요 사례
Splunk Solution 소개
03
02
01

WWW.MOTREX.CO.KR
회사 소개01

4COPYRIGHT ⓒ 2015 MOTREX ALL RIGHTS RESERVED.
회사 소개01
2004년에 설립되어 2006년에 첫 제품을 발표한 이래 100 여 개국에서 비즈니스를 하고 있는 Splunk는 기계가 생성하는
데이터를 수집, 분류, 분석을 원활하게 지원하여 IT운영, 보안, 규격준수, 애플리케이션 관리, 비즈니스 분석 등의 분야에서
혁신을 이끌어왔습니다.
Splunk 일반 현황 및 연혁
회사
• 글로벌 HQs:
 샌프랜시스코(AMER)
 런던(EMEA)
 홍콩(APAC)
• 직원수 1,300명
• 연매출 3,000억 이상 (YoY
+52%)
• 나스닥 상장 : SPLK
제품
• 무료 트라이얼에서 대규모
확장
• 스플렁크 제품:
 Splunk Enterprise
 Splunk Cloud
 Hunk
 Splunk MINT
 Premium Apps
고객
• 고객사: 8,400+
• 고객사: 300+ (한국)
• 국가기준: 100개국+
• 중소기업, 대기업
그룹 계열사
• 포춘 100대 기업: 75+
• 최대 라이센스:
 400+ TB/일

회사 소개01
Splunk는 고속 성장을 배경으로 2012년 4월에 NASDAQ에 상장하였으며, 패스트 컴퍼니 및 가트너, SC 매거진 등 다양한
평가 기관으로부터 빅데이터 및 보안, IT 운영 부문에서 상위권의 평가를 받고 있습니다.
Splunk 대외 기관 평가
LEADER
#1 Worldwide
#3 Worldwide
Best SIEM North America
Best Enterprise
Security Solution EMEA
Big Data
Innovator#1
Most
Innovative#4
2014 SIEM Magic Quadrant
2012 Security Market Growth
2012 IT Operations Market Growth

WWW.MOTREX.CO.KR
Splunk Solution 소개02

가장 빠르게 성장하고 있으며 복잡하지만 큰 가치를 가지고 있는 빅데이터의 한 형태인 머신 데이터는 사용자의 행동, 사이버
보안 위협, 애플리케이션의 동작 방식, 서비스 수준, 사기성 활동과 사용자 경험 등 다양한 이력을 담고 있지만 과거의
방법론으론 분석하는 것이 쉽지 않습니다.
머신 데이터란?
빅데이터의 원천은 ‘머신’
용량(Volume) | 속도(Velocity) | 다양성(Variety) | 다변성(Variability)
GPS,
RFID,
웹 서비스,
하이퍼바이저,
이메일, 메신저,
클릭스트림, 모바일,
통신, IVR, 데이터베이스,
센서, 컴퓨터 통신, 서버, 스토리지,
보안 장비, 데스크탑, 네트워크, 제조 설비

머신 데이터에서 얻을 수 있는 통찰력은 IT부서와 업무부서 전반에 걸쳐 전략적 관심 영역(strategic priorities)에 특별한
‘가치’를 전달합니다. 머신 데이터에 대해 더 향상된 가시화가 가능하다면 효율적이면서 광범위한 영역에 걸친 요구사항을
식별하고 지원할 수 있게 되며 이로 인해 사업적 경쟁적 우위를 선점할 수 있게 됩니다.
머신 데이터의 가치
지속적 애플리케이션
개발 및 배포
클라우드 및 모바일
체널 확장
‘소프트웨어 정의 인프라’로
안정적 이동
새로운
사업 영역의 확장
핵심 애플리케이션
100% 가동시간 보장
사일로(Silo) 관리가 아닌
서비스 관리
외부 위협(APT)의
식별 및 중화
사기 방지 활동
경쟁적 우위 선점을 위한 통찰력 제공
핵심
경쟁우위

Splunk의 목표는 머신 데이터를 접근하기 쉽고, 사용하기 쉽게 하여 머신 데이터로부터 충분한 가치를 찾아낼 수 있도록
도와드리는데 있습니다.
Splunk의 목표
모두에게 머신 데이터에 대한
접근성과 사용성 그리고 가치를 제공

Splunk의 강점은 대규모 데이터 수집 및 인덱싱을 제공하며, 이를 통한 강력한 검색 능력 및 UI 상에서 현업도 사용할 수 있는
손쉬운 대시보드 작성을 통해 신속하게 실시간 통찰력을 제공하는 데 있습니다.
Power of Splunk
제약 없는
데이터 수집 능력
무엇이든
검색하고 분석
실시간
운영 인텔리전스

Splunk의 고객사들은 포춘 100대 기업에서부터 중소기업, 서비스 제공사 그리고 정부 기관까지 다양하며 서비스 수준 향상, IT
운영 비용 절감, 보안 위협 감소, 품질 향상 등 사례 기반의 검증된 가치를 제공 받고 있습니다.
검증된 가치 제공
가동 시간
향상으로
매줄 증가
사기 방지로
불필요한
지출 감소
빠른 신제품
출시로
시장 선점
센서데이터를
이용한
연비 최적화
SLA
미충족 손실의
절감
APT 공격의
예방과
정보 보호
$11.0 M $25.0 M $10.0 M $200+ M $1.8 M $1.0 + B
$11.0 M
(약 121억원)
$25.0 M
(약 275억원)
$10.0 M
(약 110억원)
$200+ M
(약 2,200억원)
$1.8 M
(약 19.8억원)
$1.0 + B
(약 1조원)
석유/가스
산업
통신
서비스
운수
서비스
금융
서비스
하이테크
제조
온라인
서비스
다양한 업종과 사례 기반의 검증된 가치 제공

Splunk는 100여 개 국, 8,400여 고객사를 통해 검증된 솔루션으로 고객들은 Splunk를 통해 이전에 파악하지 못했던 다양한
문제들을 발견하고 이에 대한 해답을 스스로 찾을 수 있는 능력을 갖게 되었습니다.
전세계 8,400+ 고객사
교육
헬스케어
기술
에너지 및 공공
제조
통신
클라우드 및 온라인 서비스
정부기관
유통
금융 및 보험
미디어
여행 및 레저
포춘 100대 기업의 4분의 3이 도입

Splunk는 수분 내에 설치가 가능하고 바로 데이터를 수집해서 분석할 수 있는 단일 플랫폼 솔루션입니다. 이를 통해 신속하게
가치를 실현할 수 있는 검증된 제품입니다.
Splunk 선택 이유
신속한 가치 실현
(FAST TIME-TO-VALUE)
단일 플랫폼, 다양한 활용
(ONE PLATFORM, MULTIPLE USE CASES)
계층과 영역을 초월하는 통합된 시각화
(VISIBILITY ACROSS STACK, NOT JUST SILOS)
단순한 ‘조회’가 아닌 ‘해답’ 제공
(ASK ANY QUESTION OF DATA)
데이터의 종류, 형태, 규모와 무관
(ANY DATA, ANY SOURCE)

Splunk는 데이터의 형태에 상관 없이 수집하고, 검색하는 시점에 스키마를 적용하여 유연하게 데이터를 분석 처리하며, 수평적
확장을 통해 데이터를 분산 저장/ 분산 검색함으로써 빅데이터 분석을 가능하게 해줍니다.
데이터 처리 방식
정형 데이터
RDBMS
SQL 검색
Schema at Write Schema at Read
기존방법 Splunk
ETL 유니버셜 인덱싱
Volume Velocity Variety
비정형 데이터

Splunk는 일 수 GB에서 수백 TB에 달하는 데이터를 처리하는데 사용합니다. 단일 소스 뿐만 아니라 수 만개의 데이터 소스로
부터 안정적으로 데이터를 실시간 수집하고 인덱싱합니다. 데이터가 수집되고 나면 사용자는 검색 및 분석을 통해 보고서를
만들고 그 결과를 시각화하거나 대시보드를 작성하고 다른 사용자들과 쉽게 공유할 수 있습니다.
Splunk 개요
원시 데이터 그대로 수집 : 위치, 형태, 규모에 상관 없이!
온라인
서비스 웹
서비스
서버
보안 GPS
위치정
보
스토리
지
데스크탑
네트워크
상용
애플리케이
션
사용자
애플리케이
션
메시징
통신
온라인
장바구니
웹접속기록
데이터베이
스
에너지
측정센서
고객센터
통화기록
무선단말기
RFID
자체호스팅
프라이빗
클라우드
퍼블릭
클라우드
어떠한 질문도 OK!
애플리케이션 개발
보안, 규정 준수,
사기 방지
IT 운영
비즈니스 분석
업종 데이터 및
사물 인터넷

Splunk는 On-premises 모델의 Splunk Enterprise, 하둡 데이터 관리 및 분석을 위한 Hunk, 클라우드 방식의 Splunk Cloud,
모바일 앱 관리를 위한 Splunk Mint 등의 제품 라인업을 구성하고 있습니다.
제품 라인업
메인프레임
데이터
VMware
머신데이터 플랫폼
Exchange PCI보안
DB Connect 모바일포워더
Syslog / TCP /
etc.
센서 및 제어
시스템
다양한 앱 생태계
Stream
개발자
플랫폼
보고
및 분석
사용자
대시보드
모니터링
및 경고
유연한
검색

설치하고 설정만 하면 바로 사용할 수 있는 500개 이상의 무료/유료 앱을 지원합니다.
다양한 무료/유료 앱 제공
서버,스토리지
및 네트워크
서버 가상화 운영체제
사용자
애플리케이션
비즈니스
애플리케이션
클라우드
서비스
Web Intelligence
모바일
애플리케이션
Stream
네트워크
트래픽 분석
ID 및 접근 통제경계 방어 이메일
페이로드
분석
보안 분석
위협 인텔리전스 엔드포인트
행위 분석
DLP 클라우드 보안
엔드포인트
변경 추적

Splunk는 IT 운영부터 보안 및 비즈니스 영역에 이르기까지 데이터 분석이 필요한 모든 분야와 모든 사용자에게 신속한 결과를
제공합니다.
적용 분야
문제의 근원 파악
핵심 문제 해결
선제적 모니터링
및 실시간 경고
더 좋은 품질로
더 빨리 코드 개발
클라우드 앱 및
인프라 모니터링
모바일 앱
트러블슈팅
사용자 및 사용율 분석
보안 및
규정준수 보고
인시던트 조사
및 포렌직
알려진 위협의
실시간 모니터링
알려지지 않은
위협의 발견
사기
감지
내부
위협
사용자 경험 제품 분석 업무 분석디지털 마케팅
원격 진단
및 예방 정비
운영
효율화
장치 사용량
및 사용자 분석
IT
운영
애플리케이션
관리
비즈니스
분석
업종 데이터
사물 인터넷
보안, 규정준수
및 사기방지
품질 분석예지정비 사용자 위치 분석 오류 모니터링설비 생산량 분석

Splunk Enterprise 6.2 새로운 기능
Splunk Enterprise 6.2 주요 기능
빠른 데이터
수집 정의
유연한 확장성
및 중앙 관리
다수 사용자를 위한
강력한 분석 기능
데이터 입력 위저드
진보된 필드 추출기
검색 헤드 클러스터링
분산관리 콘솔
인스턴스 피벗
이벤트 패턴 탐지
사전 정의 패널

데이터 수집부터 저장 및 검색을 위한 핵심 엔진과 사용자 및 개발자 인터페이스 지원, 다양한 기 개발된 컨텐츠까지 데이터
처리 전 과정을 지원하는 아키텍처를 제공합니다.
아키텍처
데이터 수집
인덱싱
Search Processing Language
핵심 기능
입력 설정, 다양한 앱 등
SDK콘테츠
코어 엔진
사용자 및 개발자 인터페이스
웹 프레임워크
REST API

유연한 확장성을 제공하여 고객의 요구에 따라 스토리지와 네트워크가 허용하는 한도 내에서 수집 데이터 용량을 확장해 갈 수
있는 아키텍처를 제공합니다. 또한 Query를 실행하는 Search Head, 데이터를 저장하는 Indexer, 데이터를 수집하는
Forwarder 등을 필요에 따라 분산 배치할 수 있습니다. 데이터 저장 용량은 Indexer node를 늘려 손쉽게 확장 시킬 수
있습니다.
Auto load-balanced forwarding to as many Splunk Indexers as you need to index terabytes/day
Offload search load to Splunk Search Heads
데이터가 저장되고 검색되는
Indexer Node는 고객 요구에 따
라 선형적으로 분산 확장 가능
수집할 서버에 Splunk
Forwarder를 설치하여
데이터 수집 Point를 손쉽게
늘려갈 수 있음
Search Head는 동시 사용자가 많
거나 동시 실행되는 검색 부하에 따
라 수평적으로 확장 가능함
수평적 확장성

데이터 수집 전 미리 보기 기능을 통해 문제해결과 새로운 Source Type을 테스트하기 위해 어떻게 데이터가 처리되는지 파악할
수 있습니다. 따라서 인덱싱 전략을 세우기 위해 어떻게 데이터가 수집되어지는가를 미리 알 수 있습니다. 또한 이벤트를 자동
인식해서 가상의 열을 생성하고 모든 항목을 세분화해서 정밀하게 Indexing하여 검색을 용이하게 합니다.
주요 기능 – 데이터 미리 보기
Preview Properties
Preview Index Raw Data
모든 항목을 세분화 정밀하게 색인
이벤트 자동 인식

데이터 간 관계를 정의하거나 데이터의 접근 방법 및 의미를 알려 주는 의미 기반 데이터 모델을 손쉽게 작성할 수 있습니다.
이러한 데이터 모델은 지속적 신뢰적인 분석을 위한 데이터 셋 전반에 걸친 신뢰성 높은 단일 View를 제공합니다.
주요 기능 – 데이터 모델
UI 상에서 구조적인
데이터 모델을 손쉽게
작성 가능

누구나 데이터 모델을 이용하여 사용 가능한 Drag & Drop 인터페이스 기반의 피벗 기능을 제공함으로써 검색 언어를 사용하지
않고도 복잡한 쿼리나 보고서를 쉽게 생성할 수 있습니다. 클릭 한번으로 차트나 시각화 생성하고 필드 값 변경 시 동적
업데이트를 이용해 정확한 데이터를 사용할 수 있습니다.
주요 기능 – 피벗
피벗을 이용한
데이터 분석 및
시각화

하나의 검색 창을 통해 쉬운 검색 언어를 사용하여 방대한 데이터를 간편하게 검색하고, 다양한 이벤트를 자유로이 추출해 전자
메일 , SNMP, RSS나 이동전화 문자로 통보할 수 있습니다. 이러한 실시간 검색 기능을 바탕으로 실시간 통지 및 리포트 체계를
구현하고, 문제 발생을 즉각 인지할 수 있습니다.
주요 기능 – 검색 및 경보
이벤트 및 알람 생성
전자메일
SNMP /
RSS
문자 통보

주요 기능 – 다양한 컨트롤 제공
Sparkline View in Table
Timeline View
Search Window
Field List
Raw Data
Visualization Edit
Save Search Edit
Alert Edit
Dashboard
Controls

주요 기능 – 최신의 차트 지원

인덱싱 데이터에서 장애, 변경, 성능, 메시지, 주문 등의 다양한 데이터를 실시간으로 처리하여 타 시스템의 API나 특별한
Script를 연계하여 다양한 용도의 시스템과 쉽게 연동하는 기능을 제공합니다. 연동 가능한 시스템은 UNIX, Windows, ERP,
CRM, Groupware, NMS, SMS, Help Desk, Change Management, Business Intelligence System, Decision Support
Systems, Oracle, Informix, DB2 등의 IT 시스템 이외에도 설비나, 타 Legacy시스템과의 연계도 용이합니다.
주요 기능 – 타 시스템 연동
Splunk IT 데이터 검색
사용자 정의 데이터
검색 조건
Universal
인덱스 데이터
전체 운용 데이터
Terabytes
RAW
DATA
시스템
연동
Application
연동
Database
연동
외부 시스템 연동
OS, UNIX,
Windows
ERP, CRM
Buss Intel
Oracle,
Informix, DB2
Scripts
API

Splunk는 다양한 분석 툴과 연동되어 동작할 수 있습니다.
“Odata for Splunk” app은 Odata를 지원하는 Excel, Tableau 등의 툴이 Splunk에 접속할 수 있도록, Open Data Protocol
endpoint를 제공합니다.
주요 기능 – 분석 툴 연동
Analyst
Plug-insMicrosoft Rep
orts
Protovis
GoogleViz

마법사 형식의 대시보드 생성
Splunk는 웹 인터페이스를 통해 간단히 대시보드로 만드는 기능을 제공합니다. 아래의 그림과 같이,
사용자의 Query를 즉시 Visualization 시키고, 이 결과를 위저드에서 간단히 세 단계의 설정을 거쳐 손쉽게 대시보드를
만들어낼 수 있습니다
주요 기능 – 대시보드 마법사

검색, 차트, 리포트, 대시보드, 알람 등에 대한 공유 및 엑세스 권한 관리 제공
Splunk내에서 정의된 모든 Knowledge Object, Search, Chart, Dashboard, Alert등은 소유권자 및 공유 여부, 실행자의
소유 권한 등에 따라 안전하게 관리됩니다. 사용자에게 주어질 수 있는 Role은 60개 이상의 세부 조절점의 조합으로 새롭게
정의해 만들 수 있습니다.
Authentication
모든 사용자에 대한 접속 및 실행 권한 제어
Flexible Role
60가지 이상의 조절점을 포함한 Role based access
Directory Integration
사용자 및 조직을 Active Directory 또는 LDAP과 연동 가능
Auditing
관리 체계 모니터링 및 Splunk 엑세스 감사 추적
데이터 무결성 보장
Digital Forensic을 위한 수집 데이터의 무결성 제공
주요 기능 - 보안

WWW.MOTREX.CO.KR
주요 사례03

주요 사례03
Operational Intelligence
Narayan Bharadwaj
Director, Product Management
높은 서비스 수준 제공
비즈니스 측면의 사용 통계 및 분석
제공
신규 서비스 제안: 대 고객 이메일
캠페인 분석
Ty Prikkhi
Senior Operations Manager
장애 빈도 감소로 연간 $1.3M
ROI 제공
용량 산정 및 유지보수 계획
데이터 제공
분단위 채널, 시장, 디바이스 별
경영진 대시보드 제공

주요 사례03
보안 및 사기 감지
사전예방적 취약점 평가, 보안사고
경감 계획, 보안사고 경향 분석, 보안
아키텍처, 사고 탐지 및 대응 가능
사용자 행동 및 시스템 전반의 중앙
집중화된 뷰 제공Dave Schwartzburg
Computer Security Incident
Response Team
모든 데이터를 이용하여 지난 30 일, 90 일 전체 기간을
분석하여 새로운 부정 행위 패턴을 특정
패턴이 출현 때마다 실시간 경고를 생성
- 부정 행위 시행자를 실시간으로 감시 - $ 5M, 7M, 8M 등
이체 시도 확인
- 스플렁크가 부정 실시자가 다녔던 모든 기초 요소를 조사
- 다음 접속 시 부정 행위 패턴을 이해하기 위해 시간을
기준으로 작업을 상관 분석하게 됨

주요 사례03
IPS 모니터링

주요 사례03
전력 모니터링
도쿄 전력은 도쿄 지역의 주요 법인은 2011 년 3 월 11 일
대지진으로 인한 전력 부족 때문에 소비 전력을 절감 필요
보유 장치의 전체 소비 전력을 줄이기 위해 해제해야 할
장치가 있는지 확인이 필요
전원 및 각 멀티 탭의 소비 전력 또는 작업 공간의 최저치를
예상 하는 것이 곤란하였음
모니터 솔루션은 소비자 수준에서 실시간 가시성을 제공함
SYSEnergy는 빌딩 자동화 (BA)와 에너지 사용량의 공장
자동화 (FA)의 분석을 제공하는 업체
에너지 절약의 결정을 신속하고 효율적으로 실행 가능해짐
사용 경향 분석과 인텔리전스 상관 분석은 에너지 낭비의
소스를 식별함
모니터 서버 룸의 에너지 효율을 향상시키기 위해 사용함

주요 사례03
발전 모니터링
현대중공업 - 해외 발전소 RMS 도입 이유
전 세계 발전소 센서 데이터를 수집, 분석, 모니터링하기 위함
효과 - 전 세계 발전소 센서 데이터를 실시간으로
수집, 분석, 모니터링하고 안정적인 운영을 할 수 있게 됨
Infrautil은 각 32개의 디젤 발전기로 이루어진 여러 긴급
발전소의 자동 제어 및 모니터링을 위해 개발
각 지역별 가격 변동 관제를 위한 국가 전력 시장을 실시간
모니터링
가격이 지정된 임계 값을 초과 / 아래로 이동하면 긴급
발전소는 그 지역의 그리드에 전력 공급을 중단 / 시작하게
명령

주요 사례03
그룹웨어 웹 로그 – DB – 네트워크 데이터 연동한 상관 분석
그룹웨어 접속현황 분석

주요 사례03
이메일 송/수신 내역 분석하여 기밀 문서나 중요 정보 유출 감시
정보 유출 감시

주요 사례03
프로젝트 관리 DB 연동하여 쉽게 데이터 분석 화면 작성 (EIS)
외부 DB 연동

주요 사례03
서울 교통 관제 센터 버스 카드 데이터를 이용한 노선 분석
서울 버스 분석

주요 사례03
해외 – 일간 POS Web Request 발생량
웹 분석

주요 사례03
IT를 넘어 세계로
개인 행동 추적
홍수 모니터링 및 경고
건강 및 안전
자동차 원격 센서
NextGen Airliner 지원
상업적 수송
홈 에너지 관리
건물 전력 소비
전력 및 에너지

주요 사례03
국내 적용 고객사 +200

WWW.MOTREX.CO.KR
Q & A

(150-972) 서울시 영등포구 경인로 775 에이스하이테크시티 | 오토모티브 : 1동 1404호 , 컨버전스 : 1동 1103호
대표전화 070. 4892. 6100 (오토모티브) , 6200 (컨버전스) | 대표팩스 02. 6280. 1170
Automotive Div. 1-1404 , Convergence Div. 1-1103 | Ace Hi-Tech City Bldg., #775, Kyoungin St., Yeongdeungpo-gu, Seoul, Korea 150-972
TEL. 070. 4892. 6100 (Automotive) , 6200 (Convergence) | FAX. 02. 6280. 1170
WWW.MOTREX.CO.KR
Original in Everything
THANK YOU

빅데이터 플랫폼 Splunk 6.2 인트로

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Viewers also liked

Viewers also liked (20)

Similar to 빅데이터 플랫폼 Splunk 6.2 인트로

Similar to 빅데이터 플랫폼 Splunk 6.2 인트로 (20)

빅데이터 플랫폼 Splunk 6.2 인트로