Junhee Shin Solutions Architect Confluent

1. 클라우드 네이티브를 위한
Confluent Cloud
Junhee Shin(jshin@confluent.io)
Solutions Architect
September 2022

2. Data in Motion
우리가 살아가는 세상은
실시간 데이터로 빠르게
움직이고 있습니다.

3. 3
실시간 이벤트 처리 서비스는
우리 삶에 있어서 더 이상 특별한
서비스가 아닌 매우 당연한 것이
되어 버렸습니다.

4. 풍부한 프론트엔드
고객 경험
4

5. 실시간
백엔드 운영
5

6. 6
비즈니스 경쟁력을 위해 빠르게 진화하는 IT

7. 7
비즈니스 경쟁력을 위해 빠르게 진화하는 IT
 INFRA: Hybrid Cloud Platform

8. 8
비즈니스 경쟁력을 위해 빠르게 진화하는 IT
 INFRA: Hybrid Cloud Platform
 APP: Cloud Native Application

9. 9
비즈니스 경쟁력을 위해 빠르게 진화하는 IT
 INFRA: Hybrid Cloud Platform
 APP: Cloud Native Application
 DATA: Real Time Event Stream

10. 정답은 클라우드 네이티브 서비스입니다.
Storage Data Warehousing Databases
Self-managed
hardware and
software
Fully managed
services
10
Amazon S3 Blob storage
Snowflake
BigQuery
Cloud Storage

11. Confluent는 100만 시간 이상 축적된 전문 지식을 기반으로 10,000개 이상의 클라우드
네이티브 Apache Kafka 클러스터를 효율적이고 효과적으로 관리하고 운영합니다.
11
Resilient
Infinite
Elastic
Run Consistently
Run Anywhere
Stream Governance
Stream Processing
120+ Connectors
Run Unified
클라우드의 장점을 활용하도록 완전히
관리되고 재설계된 Apache Kafka
Kafka 그 이상의 완전한 데이터 스트리밍
플랫폼을 위한 모든 필수 도구 제공
온프레미스에서 클라우드 및 클라우드
전반에 걸친 플랫폼으로 데이터를
실시간으로 연결
Cloud Native Complete Everywhere
Built by the founders of Apache Kafka®
Confluent Cloud
Apache Kafka® 설립자가 구축한 클라우드 네이티브 데이터 스트리밍 플랫폼

12. Confluent는 유일한 완전 관리형 Kafka 서비스를 제공합니다.
완전 관리형 SaaS는 사용하기 쉽고 안정적인 서비스를 제공합니다.
자체 관리형 IaaS 호스팅된 클라우드 서비스 완전 관리형 SaaS
Scaling Scaling Scaling
Load balancing Load balancing Load balancing
Partition placement Partition placement Partition placement
Logical Storage Logical Storage Logical Storage
Broker settings Broker settings Broker settings
Zookeeper Zookeeper Zookeeper
Kafka patching Kafka patching Kafka patching
JVM JVM JVM
O/S O/S O/S
VMs VMs VMs
Servers Servers Servers
프로바이더
관리
기능
제품 사용
편이성
Confluent Cloud
타사 Kafka
Cloud Services
Apache Kafka
12

13. Open Source Kafka
모든 단계의 운영 부담
CONFLUENT CLOUD
자동화된 운영으로 효율적인 성장 가능
sizing provisioning
infra
monitoring
upgrades
software
patches
topic
monitoring
cluster
expansion
connectors
non-Java
clients
sizing
provisioning
software
patches
infra
monitoring
upgrades
topic
monitoring
cluster
expansion
connectors
non-Java
clients
수동 작업
(적을수록 좋음)
자동화된 제품 기능
(많을수록 좋음)
PLAN DEPLOY OPERATE SCALE PLAN DEPLOY OPERATE SCALE
선택의 자유(Confluent Platform/Confluent Cloud)
커미터 기반 Kafka 전문성 및 엔터프라이즈급 기술 지원
오픈 소스 Kafka
사내 Kafka 지원 전문 지식 필요
Confluent는 Kafka 여정 전반에 걸쳐 클라우드 네이티브 경험을
제공합니다. Cloud Native Self managed Custom

14. Confluent 인증 정보
Confluent는 다양한 산업군과
기관에서 요구하는 보안, 규정 준수
및 개인 정보 보호에 대한 기업
고객의 요구 사항을 지원하도록
설계되었습니다.
엔터프라이즈 등급 보안
• Confluent는 고객 데이터를 안전하게 보호하도록 설계된
계층형 보안 제어를 구현합니다.
• Confluent의 보안 포털을 통해 보안 백서와 규정 준수
인증(ISO, SOC 2)을 확인 할 수 있습니다.
출처: https://www.confluent.io/ko-kr/trust-and-security/

15. ...몇 개월 몇일이 아닌 수 분 만에 배포, 운영 및 확장 가능
진정한 클라우드 네이티브로 재설계된 Kafka
15
Months Minutes
Weeks
Open Source
Apache Kafka
엔터프라이즈급 지원 없는
자체 개발 및 유지 관리
Self-managed
Kafka Services
전문화 되지 않은 기본 툴을 이용한
수동 작업
Confluent
Cloud
완전 관리형, 탄력성,
오버헤드가 없는 자동화된 제품
기능

16. Cloud Native
클라우드의 장점을 활용할 수 있도록 완벽하게 관리되고 재설계된 Apache Kafka®
애플리케이션 및 분석 기능을
제공하는 Kafka의 복원력
보장
스트리밍 데이터 기록 액세스
및 저장
스트리밍 요구 사항에 맞게
리소스 확장 및 축소
필요할 때마다 Kafka 항목 내에서 무한
스토리지를 사용할 수 있으며 사용할 때만
청구
Kafka 스토리지를 수동으로
프로비저닝하려면 세부적인 계획과 기능
간 조정 필요
99.99% 가동 시간 SLA*, 다운타임 없이
Kafka 업그레이드 및 패치 제공.
HA 및 Fail-Over를 위한 추가 인프라 및
리소스, 정책 개발/구현에 FTE 필요,
까다로운 업그레이드/패치 필요
탄력적으로 확장되는 클러스터를
완벽하게 즉각적으로 프로비저닝
Kafka 클러스터의 크기 조정, 프로비저닝,
확장 및 유지보수를 수동으로 수행
Confluent Cloud
Self-managed Kafka
“Confluent를 사용하기 이전에는 재구축이 필요한 브로커에 운영 중단이 발생하면 개발자가 해결하는 데 최대 3일이 걸릴 수 도 있었습니다. 이제
Confluent가 모든 것을 처리하므로 개발자는 새로운 기능과 애플리케이션을 구축하는 데 집중할 수 있습니다.”
— Jon Vines, Software Development Team Lead at AO.com
16
*Multi-zone Cluster에서 99.99%의 가동 시간 SLA 사용 가능

17. Complete
완벽한 데이터 스트리밍 플랫폼을 위한 모든 필수 툴로 Kafka 그 이상을 누리십시오.
모든 데이터 스트림 관리 및
보안
스트림 처리 배포 및 실시간 앱
빌드
모든 시스템과 연결
완벽하게 관리되는 ksqlDB에서 몇 개의
SQL 문만으로 실시간 데이터 스트림 즉시
처리
스트림 처리 사용 사례를 위한 새로운
인프라의 사용자 지정 크기 조정,
프로비저닝 및 확장
즉시 사용할 수 있는 스트림 거버넌스,
관리 및 모니터링, 엔터프라이즈급 보안 툴
커스텀으로 구축 및 유지 관리된 거버넌스,
보안, 네트워킹 및 규정 준수 기능
120개 이상의 커넥터를 통해 클러스터를
모든 소스/싱크 시스템 또는 앱과 즉시
통합
모든 소스 및 싱크 시스템과의 통합을
수동으로 구축하는 데 몇 개월 소요되며,
시간이 지남에 따라 지원 및 유지 관리 에
많은 투자 필요
Confluent Cloud
Self-managed Kafka
“Confluent를 사용하면 보다 원활한 백엔드 환경을 구축하여 원하는 내용을 빠르고 쉽게 변경할 수 있습니다.”
— Sean Schade, Platform Architect at Care.com 17

18. Everywhere
온프레미스에서 클라우드 및 하이브리드 클라우드 전반에 걸쳐 제공되는 플랫폼을 통해 실시간으로
데이터 연결
빠르고 안전하게 클라우드로
전환
클라우드와 온프레미스에서
데이터 환경 통합
모든 클라우드
프로바이더에서 신속하고
일관된 구현
데이터를 완벽하게 미러링하는 Cluster
Linking 및 전역적으로 연결된
클러스터를 통해 모든 환경에서 모든
실시간 데이터에 액세스
모든 클라우드 또는 온프레미스 환경에서
작동하지만 수동 마이그레이션과 데이터
이동을 느리게 하는 긴 프로세스로 둘
사이에는 정상적으로 작동하지 않음
Confusent Platform과 하이브리드
Kafka 서비스를 통해 온프레미스
클러스터와 클라우드 클러스터 간에
클라우드로 연결되는 브리지 구축
Kafka 및 다운스트림 워크로드를
클라우드로 단방향 마이그레이션하는
다년간의 프로젝트
AWS, Azure 및 Google Cloud에서 완전
관리형 서비스로 Confluent를 신속하게
프로비저닝
Kafka를 구축하고자 하는 각 CSP의
컴퓨팅, 스토리지 및 네트워킹 전문가 필요
Confluent Cloud
“클라우드 네이티브의 민첩한 회사로의 전환에는 오픈 소스 Apache Kafka에서 대규모 마이그레이션이 필요했습니다. Confluent를 통해
우리는 이제 모든 환경에서 실시간 데이터 공유를 지원하고 하이브리드 클라우드 로드맵을 위한 명확한 경로를 볼 수 있습니다.”
— Justin Dempsey, Senior Manager, Software Development, Cloud and Information Services, SAS
18
Self-managed Kafka

19. Confluent Cloud는 클라우드 서비스 제공업체 및 파트너
모두의 신뢰를 받고 있습니다.
주요 서비스와 직접 통합 통합 운영 및 과금 경험 완벽히 인증된 기술 파트너
Kinesis
Redshif
t
Dynamo
DB
SQS
Cloud-
watch
S3
통합 과금 경험
AWS, GCP 및 Azure Marketplace를
통해 직접 거래하여 번거러움을 제거하고
기존 커밋을 소진하며 새롭고 풍부한
디지털 프런트 엔드 고객 경험을 제공
통합 보안 및 관리
기본 암호화, 사설 네트워킹 및 싱글
사인온을 통해 신뢰할 수 있는
엔터프라이즈 등급 보안을 제공합니다.
AWS PrivateLink 또는 Azure Private
Link를 통해 동일하고 안전한 네트워크
설정하고 완전 관리형 커넥터를 사용하여
기존 AWS CloudWatch 모니터링을
Confluent로 확장
Cloud
Storag
e
BigQue
ry
Cloud
Functio
ns
Cloud
Spanner
Datapro
c
Bigtable
Blob
Storag
e
Synaps
e
ADLS
Azure
Event
Hub
Cosmos
DB
Azure
Functio
ns
Strategic
Alliance
3X in
a row!
AWS Native Services
GCP Native Services
Azure Native Services
ISV Services

20. Replicator
/Cluster Linking
OT data for IoT
App Messages
App Logs
DBs
JDBC / CDC
connectors
Connect & Offload
120개 이상의 Confluent Pre-built Connector를
활용하여 OT 데이터 및 Application 데이터, DB
데이터를 포함한 기존 온프레미스 서비스에서 가치 있는
데이터를 지속적으로 수집
Modernize
애플리케이션을 시장에 출시하는 데 있어 민첩성을
높이고 가치 창출 활동에 집중하여 TCO 절감하고 OT
데이터를 분석하여 품질/장애율 개선 및 예측 가능한 물류
체인 구축
Bridge
여러 환경에서 일관된 이벤트
중심 아키텍처를 사용하는
하이브리드 클라우드
스트리밍
Data Streams
Apps
ksqlDB
Sink
Connectors
Amazon S3
Azure Blob Storage
Azure Power BI
Amazon Athena
AWS Lambda
AWS Redshift
Sensor Data
Facility Data
온프레미스에서 하이브리드 클라우드로의 전환 가속화
On-prem Multi Cloud
Bridge to Hybrid Cloud
Google BigQuery

21. Confluent Cloud Customers

22. Confluent Cloud Demo

24. Conclusion

25. Confluent는 Apache Kafka 그 이상입니다.
Complete: 완전한 데이터 스트리밍 플랫폼을 위한 모든 필수 도구를 사용하여 Apache Kafka를 넘어서십시오.
엔터프라이즈 등급 보안
RBAC | Audit Logs | Encryption |
BYOK | Private Networking
스트림 거버넌스
Schema Registry | Schema
Validation | Stream Lineage |
Stream Catalog
완전한 Engagement Model
Data in Motion Blueprint
비즈니스 케이스 근거
TCO | ROI | Risk
GUI 기반 관리 및 모니터링
Cloud UI | Metrics API |
Control Center | Health+
유연한 DevOps 자동화
Admin REST APIs | Terraform APIs |
Confluent for K8s | Ansible Playbooks
규모에 따른 효율적인 운영 운영 환경에 필수적인 기능 비즈니스 성공을 위한 파트너십
풍부한 Pre-built 생태계
Connectors | Non-Java Clients |
REST Proxy | MQTT Proxy
스트림 프로세싱
ksqlDB
개발 생산성 극대화
High Availability
99.99% SLA | Multi-AZ Clusters | Multi-Region Clusters
Infinite Storage
Infinite Storage | Tiered Storage
Elastic Scalability
Expand | Shrink | Self-Balancing Clusters
Cloud Native: 클라우드의 장점을 최대한 활용하도록 완벽하게 관리되고 재설계된 Apache Kafka©
Everywhere: 온프레미스에서 클라우드 및 하이브리드 클라우드 전반에 걸쳐 제공되는 플랫폼을 통해 실시간으로 데이터 연결
Hybrid and Multi-cloud
Cluster Linking | Replicator
Self-managed software
Kubernetes | VMs | Bare Metal
Fully managed cloud service
AWS | Azure | GCP
커미터 중심의 전문성 교육 풍부한 파트너
프로페셔널 서비스
엔터프라이즈 지원
OPERATOR
DEVELOPER ARCHITECT EXECUTIVE

26. Confluent Cloud는 TCO 절감과 가속화된 가치 실현
시간으로 ROI를 극대화합니다.
총 소유 비용(TCO) 절감
인프라 비용, 개발 및 운영
오버헤드, 다운타임 위험 감소로
60% 이상 더 비용 효율적으로
운영
가치 실현 시간 단축
Confluent Cloud 시작 후
1주일 이내에 Kafka 배포,
운영 및 확장
비즈니스 성공을 위한
재능 확보
유능하고 경험이 풍부한
엔지니어의 인프라 관리의
부담을 줄여 새로운
비즈니스의 사용 사례에
집중해, 조직이 목표를 달성
Source 26

27. Confluent Cloud로 시작해 보세요!
Confluent Cloud 무료 체험,
지금 신청하세요!
신규 가입하면 60일 동안 400달러 무료 사용 가능
Live Lab에 가입하세요!
https://www.confluent.io/ko-kr/
get-started/
https://bit.ly/3rc1QB8