Consul 紹介

1. Copyright © 2018 HashiCorp
HESS - Consul
HashiCorp Japan
Senior Solution Engineer
伊藤仁智

2. s
Copyright © 2017 HashiCorp
2
Consulとは？

3. Consulとは
● Service mesh solution
○ Control plane + Data plane
● Health checking
● KV Store
● Secure service communication
● Multi-datacenter

4. s
Copyright © 2017 HashiCorp
4
なぜ Service mesh

5. LOREM IPSUM DOLOR SIT AMET ULLAM 5© 2019 HashiCorp
サービス間通信の爆発的増加

6. サービスとは
● IPアドレス
○ 192.168.1.26
● Port
○ 80 (HTTP)

7. もしIPアドレスがなかったら？
▪ どうやってサービスはお互いをみつける？
▪ どうやってサービス同士はセキュアにお互いをコネクトする？

8. Web-App Order Processing
Web-AppはOrder Processingと通信する必要がある
どうやってサービスはお互いをみつける？

9. Web-App Order Processing
xxx.xxx.xxx.153
Load Balancer VIP
xxx.xxx.xxx.163
Load Balancer VIP
DNS Entries
Web-app.internal.mycompany > xxx.xxx.xxx.153
Order-process.internal.mycompany > xxx.xxx.xxx.163
どうやってサービスはお互いをみつける？

10. Web-App
xxx.xxx.xxx.153
Load Balancer VIP
▪ リクエストのロードバランシング
▪ サーキットブレーカー
▪ ヘルシーなノードへのルーティング
▪ サービスIPをインスタンスIPで仮想化（VIP)
どうやってサービスはお互いをみつける？
サービスに変更が加わるたびに構成を更新しないといけない

11. Web-App Order Processing
xxx.xxx.xxx.153
Load Balancer VIP
xxx.xxx.xxx.163
Load Balancer VIP
App チーム
Network チーム
どうやってサービスはお互いをみつける？
▪ NetworkチームとAppチームの2層によるデプロイ

12. Web-App Order Processing
xxx.xxx.xxx.153
Load Balancer VIP
xxx.xxx.xxx.163
Load Balancer VIP
Order-History
App チーム Network チーム
デプロイしてください
ネットワーク設定更新しました
xxx.xxx.xxx.173
Load Balancer VIP

13. Web-App Order ProcessingOrder-History
App チーム Network チーム
デプロイしてください
ネットワーク設定更新しました
Web-App Order-history Order processing
web-app.service.consul order-history.service.consul order-processing.service.consul
ConsulによるService discovery

14. Web-App Order ProcessingOrder-History
App チーム Network チーム
デプロイしてください
ネットワーク設定更新しました
Web-App Order-history Order processing
web-app.service.consul order-history.service.consul order-processing.service.consul
Mobile-access
ConsulによるService discovery

15. Example
# dig @127.0.0.1 -p 8600 -t SRV web.service.consul
;; ANSWER SECTION:
Web.service.consul. 0 IN SRV 1 1 80 consul-dc1-srv2.node.dc1.consul.
Web.service.consul. 0 IN SRV 1 1 80 consul-dc1-srv1.node.dc1.consul.
Web.service.consul. 0 IN SRV 1 1 80 consul-dc1-srv3.node.dc1.consul.
;; ADDITIONAL SECTION:
consul-dc1-srv2.node.dc1.consul. 0 IN A 192.168.43.102
consul-dc1-srv2.node.dc1.consul. 0 IN TXT "consul-network-segment="
consul-dc1-srv1.node.dc1.consul. 0 IN A 192.168.43.101
consul-dc1-srv1.node.dc1.consul. 0 IN TXT "consul-network-segment="
consul-dc1-srv3.node.dc1.consul. 0 IN A 192.168.43.103
consul-dc1-srv3.node.dc1.consul. 0 IN TXT "consul-network-segment="
Consul Service Discovery

16. Web-App Order-History
?
どうやってサービス同士はセキュアにお互いをコネクトする？
● アクセス制御
Firewall

17. Web-App Order Processing
xxx.xxx.xxx.153
Load Balancer VIP
xxx.xxx.xxx.163
Load Balancer VIP
Order-History
App チーム Network チーム
デプロイしてください
ネットワーク設定更新しました
xxx.xxx.xxx.173
Load Balancer VIP
Firewall チーム
Firewall更新してください
Firewall設定終わ
りました

18. Microservice Firewalls - ???

19. Web-App Order ProcessingOrder-History
さらに・・・

20. Web-App Order ProcessingOrder-History
App チーム
Deplyed
Traffic Pattern Configured
Firewall チーム
Network チーム Cloud チーム

21. Web-App Order ProcessingOrder-History
Web-App Order-history Order processing
web-app.service.consul order-history.service.consul order-processing.service.consul
Consulによるサービス間通信の制御

22. Web-App
localhost:xxxx
Order-History
localhost:xxxx
xxx.xxx.xxx.xxx:20000 xxx.xxx.xxx.xxx:20000
▪ Intentions
▪ Certificate Management
▪ ACLs
Consulによるセキュアなサービス間通信の制御

23. CODE EDITOR
services {
name = “web-app"
port = 9090
connect {
sidecar_service {
port = 20000
proxy {
local_service_address = "127.0.0.1"
local_service_port = 9090
upstreams {
destination_name = “order-processing”
local_bind_port = 8003
}

25. Web-App
Order-Data
Cust-Data
Order-Process
Front End
Social
Payment

26. Web-App
Order-Data
Cust-Data
Order-Process
Front End
Social
Payment

27. Web-App
Order-Data
Cust-Data
Order-Process
Mesh Gateway
Front End
Social
Payment
Mesh Gateway

28. s
Copyright © 2017 HashiCorp
28
まとめ

29. Copyright © 2018 HashiCorp
AW
S
Private
cloud
Azur
e
GC
P
Alibab
a
DB JAR
Lambda C# node.js
container
モノリシック → マイクロサービス
Web
DB
DB
DB
Big query
Payment
Web
Service 1
Service 2
ホストベース → サービスベース
Payment Web
DB
Service 1 Service 2
Big query

30. Copyright © 2018 HashiCorp
AW
S
Private
cloud
Azur
e
GC
P
Alibab
a
DB JAR
Lambda C# node.js
container
全てのアプケーションをコネクトする - Connect
Service
Discovery
Web
DB
DB
DB Big queryPayment
Web
▪ サービスの登録・カタログ化
▪ DNSとHTTPインターフェース
▪ ヘルスチェック
Service 1
Service 2
redis.service.consulpayment.service.consul web.service.consul bq.service.consul

31. Copyright © 2018 HashiCorp
AW
S
Private
cloud
Azur
e
GC
P
Alibab
a
DB JAR
Lambda C# node.js
container
全てのアプケーションをコネクトする - Connect
Service
Segmentation
Web
DB
DB
DB Big queryPayment
Web
Service 1
Service 2
X
▪ サービス間のAuthorization
▪ サイドカープロキシ
▪ mTLSコネクション
$ consul intention create -deny web '*'
Created: web => * (deny)
$ consul intention create -allow web app
Created: web => app (allow)
$ consul intention create -allow web db
Created: web => db (allow)

32. Copyright © 2018 HashiCorp
AW
S
Private
cloud
Azur
e
GC
P
Alibab
a
DB JAR
Lambda C# node.js
container
全てのアプケーションをコネクトする - Connect
Web
DB
DB
DB Big queryPayment
Web
• K/Vストアで設定を保管
• リアルタイムでの設定変更
– 設定ファイル
– 環境変数
• サービスのリロードやリスタートを実行
• Eventドリブンで様々なタスクを実行
Service 1
Service 2
Service
Configuration
K/V
Config
Config
Config
Config

33. s
Copyright © 2017 HashiCorp
33
Consul Enterprise

34. © 2018 HashiCorpOPEN SOURCE AND ENTERPRISE
Compare
Packages
34

35. Thank you.
hello@hashicorp.co
m
www.hashicorp.co
m

36. Copyright © 2018 HashiCorp
HESS - Nomad
HashiCorp Japan
Senior Solution Engineer
伊藤仁智

37. s
Copyright © 2017 HashiCorp
37
Run

38. Copyright © 2018 HashiCorp
様々なアプリケーション - Run
38
Application
Platform

39. Copyright © 2018 HashiCorp 39
Application
Platform
AW
S
Private
cloud
Azur
e
GC
P
Alibab
a
DB JAR
Lambda C# node.js
container
様々なアプリケーション - Run
密結合 → 疎結合

40. Copyright © 2018 HashiCorp
What is Nomad?
40
● Workload orchestrator
○ 様々なワークロードのデプロイとマネージメント
● Single binary
○ 容易にNomadクラスタを構築
● Infrastructure-as-code
○ Developerによる宣言的なデプロイの記述
● Hashicorp Ecosystem
○ Service discoveryのためにConsulと連携
○ シークレット管理のために Vaultと連携

41. Copyright © 2018 HashiCorp
Usecase
41
● Container Orchestration + Scheduler
○ First-class Docker workflow + Consul/Vault
● Legacy Application Deployment
○ Legacy/JARs/OS command/etc
● Microservices
○ 細かく分割されたMicroservice（API）のデプロイと管理（ Consul)
● Batch processing workloads
○ ハイパフォーマンス＋スケーラブルな Batch処理の実行
● multi-region/multi-cloud federated deployments
○ どこへでもデプロイ（ Bare metal/VMware/OpenStack/AWS/Azure/etc)

42. Copyright © 2017 HashiCorp 42
ユーザー Nomad
Servers
JobをSubmit
Nomad
Clients
AppのDeploy・Update
Bin
Packing
様々なアプリケーション - Run

43. Copyright © 2017 HashiCorp
43

44. Copyright © 2018 HashiCorp ⁄
Declarative Job Specification
job "my_job" {
datacenters = ["us-west-1", “us-east-1"]
type = "service"
group "web" {
count = 5
task "frontend" {
driver = "docker"
config { image = "hashicorp/web-frontend" }
resources {
cpu = 500 # MHz
memory = 128 # MB
network {
mbits = 100
}
}

45. Copyright © 2017 HashiCorp
Single Binary - Client/Server Deployment
Topology
45
▪ シングルバイナリ
– ClientもしくはServerモードで起動
– Zero Dependency
▪ サーバーがタスクスケジューリングのControl Planeを担う
▪ サーバーはRAFTにより、Leader electionやReplicationを行う
– Raft algorithmはConcensus Protocolを利用
▪ クラスタ管理はLocal/WAN Gossipプロトコルを利用

46. Copyright © 2017 HashiCorp
Nomad Million Container Challenge
46
• 1,000 Jobs
• 1,000 Tasks per Job
• 5,000 Hosts on GCE
• 1,000,000 Containers
• 5 Nomad Servers
• 266秒で全てのJob submitを
完了
• 370秒で全てのコンテナが
Running状態に
https://www.hashicorp.com/c1m

47. Copyright © 2018 HashiCorp
Core Value Proposition
47
Nomadの特徴
• API-driven Automation (CLIとGUIもあります)
• Self-service Deployments
• Increased Efficiency and Reduced Cost (Bin packing)
• Simplicity / Ease of use
• Linux/Windows/MacOS上で動作
• Scalability and High performance
• Rolling/Canary/Immutable updateに対応
• HashiCorp Synergy

48. Copyright © 2017 HashiCorp
Personas and Packaging
48
Open Source Enterprise Add-on module
Run Any Application
Individuals
Collaboration & Operations
Teams
Governance
Organizations
Flexible Job Scheduling Automated Upgrades Namespaces
Extensible Drivers Enhanced Read Scalability Resource Quotas
Multi-region Deployment Redundancy Zones Sentinel Policies
Consul, Vault Integration Preemption
Access Control
Web UI Support w/ SLA Support w/ SLA

49. Thank you.
hello@hashicorp.co
m
www.hashicorp.co
m