Cloud Foundry / Lattice Deep Talksで発表した資料です

1. Latticeの深掘り話

2. Kazuto Kusama
@jacopen

3. Cloud Foundryベースの
PaaS開発・運用
しごと

4. Lattice

5. Latticeとは
• コンテナ管理システム
• スケジューリング
• 動的ルーティング
• 死活監視
• ログ収集
• Docker image互換
• 次期Cloud Foundry(Diego)の
サブセット

6. CFとLatticeの関係は？

8. コンテナを動かす仕組み

9. 動的ルーティングの仕組み

10. ログ収集・ストリーミングの仕組み

11. スケジューリングの仕組み

12. この組み合わせが
Lattice

13. • APIの提供
• マルチテナント機能
(ユーザー管理・認証認可)
• アプリケーションの
ライフサイクルマネジメント
(Buildpack etc…)
• その他PaaSに必要な機能

14. フルセットで、Cloud Foundry

15. これだけではつまんないので
DEMO

16. デモでやったことの説明

17. Receptor
Cell
Cell
Cell
app
ltc create
Job Scheduling

18. Receptor
Cell
Cell
Cell
app
ltc scale app
app

19. Cell
Cell
Cell
app A
app A
app B
End User
Router
appA.example.com
appB.example.com
Dynamic routing

20. Cell
Cell
Cell
app A
app A
Helth monitoring
Self healing

21. Dockerコンテナの管理といえば

22. Kubernetesの特徴
• Dockerコンテナをマルチホストで
管理する仕組み
• コンテナを使いやすくする仕組みが充実
• Pod
• Service
• Replication Controller
• 使いこなすには、これら独自概念の理解が
必要

23. Kubernetesの特徴
• Dockerコンテナをマルチホストで
管理する仕組み
• コンテナを使いやすくする仕組みが充実
• Pod
• Service
• Replication Controller
• 使いこなすには、これら独自概念の理解が
必要
• ロゴが青い

24. Latticeの特徴
• Webアプリを動かすコンテナを
マルチホストで管理する仕組み
• Docker imageにも対応(後で説明)
• コンテナへのアクセスはHTTPのみ
• 独自概念の理解はあまり必要が無い

25. Latticeの特徴
• Webアプリを動かすコンテナを
マルチホストで管理する仕組み
• Docker imageにも対応(後で説明)
• コンテナへのアクセスはHTTPのみ
• 独自概念の理解はあまり必要が無い
• ロゴが緑

26. 徐々に深くみていくよ

27. LatticeはDocker対応！

28. LatticeはDocker対応！
Docker image

29. DEMO

30. gardenって何？

31. Cellの中身
Cell
rep
exector
garden
garden-backend
Container Container Container Container Container Container
Container Container Container Container Container Container
Container Container
Container Container

32. Cellの中身
Cell
rep
exector
garden
garden-backend
Container Container Container Container Container Container
Container Container Container Container Container Container
Container Container
Container Container
rep
コンテナを動かすための
オークションに参加
exector
repからのコンテナ起動/
削除指示を受け取る
garden-backend
コンテナを動かす仕組み

33. exector
garden-linux
Container Container Container Container
Container Container Container Container
exector
garden-windows
Container Container Container Container
Container Container Container Container
exector
garden-xxxx
Container Container Container Container
Container Container Container Container
exector-garden間はインターフェースが定められており、
それを満たしていればバックエンドはさまざまな実装が可能。
Lattice標準ではgarden-linux

34. http://lattice.cf/docs

35. Garden
• Gardenは、Pluggableなコンテナのバックエンドを実現する仕組み
• Garden-backendはGardenインターフェースを備えたバックエンド
• Lattice標準のGarden-backendであるGarden-linuxは、
Docker imageを利用することが出来る
• よってLatticeは、標準でDocker image互換となる
将来的には、libcontainerを使ってよりDockerに近い環境を実現する
backendや、Windowsコンテナのbackend、rktのbackendなどが出るか
もしれない

36. 疑問
• Pluggableなのは良いとして、なんで標準がgarden-linuxとい
う独自の仕組みなの？
最初からDockerをバックエンドにすればいいんじゃないの？

37. 歴史的経緯

38. • 元々Cloud FoundryはWardenという
独自のコンテナでアプリを動かしていた
• Garden-linuxはWardenのGolang実装
• Garden-linuxでは次期Cloud Foundryでも
利用するため、互換性を担保する必要があ
る

39. ダイナミックルーティングの
仕組み

40. Cell
Cell
Cell
app A
app A
app B
End User
gorouter
appA.example.com
appB.example.com
Dynamic routing

41. Cell
Cell
Cell
app A
app A
app B
gorouter
appA.example.com
appB.example.com
実現するには、gorouterがアプリの
ルート一覧を持っていないといけない

42. Cell
Cell
Cell
app A
app A
app B
各Cell内のコンテナに関する情報は
etcdに集約される

43. Cell
Cell
Cell
app A
app A
app B
Route-emitterがetcdから
route情報を読み出して
Route
Emitter

44. Cell
Cell
Cell
app A
app A
app B
NATSというメッセージングバスに
流し直します
Route
Emitter
NATS

45. Cell
Cell
Cell
app A
app A
app B
gorouterはNATS経由で
route情報を取得
Route
Emitter
NATS
gorouter
gorouter
gorouter

46. DEMO

47. Cell
Cell
Cell
app A
app A
app B
こうしたほうが早いんじゃない？
gorouter
gorouter
gorouter

48. 歴史的経緯

49. • gorouterは元々Cloud Foundry向けに
作られたもの
• Cloud FoundryはNATS経由で疎結合に
結びつくアーキテクチャ
• よってgorouterへはNATS経由で情報を
送る必要がある
• 将来的にはこのあたりを解消する予定もあ
るらしい(vulcandみたいな仕組みになる？)

50. Latticeのコンポーネント

51. brain
Cell
Latticeの基本構造
Cell

52. brain
Cell
まあ、いっぱいあります
Rep
executor
warden linux
Cell
Rep
executor
warden linuxgorouter
route-emitter
doppler
traffic controller
metron
gnatsd
etcd consul
auctioneer
converger
auctioneer
converger

53. 重要なのは、etcd

54. Cell
Rep
executor
warden linux
Cell
auctioneer
converger
rep
コンテナを動かすための
オークションに参加
オークション情報はetcd
auctioneer
動かす必要のある
コンテナをオークション
にかける
converger
動作中のコンテナが
正しい数存在するか
チェック

55. Cell
Rep
executor
warden linux
Cell
auctioneer
converger
doppler
ログやメトリクスを集約metron
ログやメトリクスを
収集するエージェント
brain
doppler
traffic controller
metron
metron
traffic controller
WebSocketでユーザーにログを
ストリーミング

56. 実は、consulも活用

57. Cell
Cell
brain
auctioneer
converger
auctioneer
converger
route-emitter
brain
route-emitter
複数同時に動いては困る
コンポーネントのロック

59. brain
Cell
結構複雑
Rep
executor
warden linux
Cell
Rep
executor
warden linuxgorouter
route-emitter
doppler
traffic controller
metron
gnatsd
etcd consul
auctioneer
converger
auctioneer
converger

60. 歴史的経緯

61. 参考情報
• Lattice http://lattice.cf/
• Cloud FoundryでDockerも.NETも。新しいDiegoの仕組み入門 http://www.slideshare.net/jacopen/diego-
45603123
• Diego Design Notes https://github.com/cloudfoundry-incubator/diego-design-notes