CF Tokyo Meetup #3で発表した資料です。CFのC2C機能でコンテナ間通信できるようになりました

1. Cloud Foundry
Container-to-Container
Networking

2. Pivotal Japan - Platform Architect
Kazuto Kusama
@jacopen

3. Microserviceしてますか？
Four Blair Services Pvt. Ltd. https://commons.wikimedia.org/wiki/File:Services4.png

4. 機能ごとにソフトウェアを細分化
開発チームも機能単位

5. いままでのCFだと･･･
appA appB appC appD appA appD
`
Router
DB MQ
Cell Cell Cell
HTTPのエンドポイントが
Router経由になってしまう

6. コンテナ間で直接通信したい！
appA appB appC appD appA appD
Router
DB MQ
Cell Cell Cell

7. そこで

8. Container-to-Container
Networking

9. Container-to-Container Networking
• Cloud Foundryでコンテナ間通信を可能にする新機能
• 最近GAになりました！
• 最新版は1.1.0
• Pivotal Cloud Foundryだと1.11から
GAとして提供

10. 利用方法
• BOSHでcf-networking-releaseをセットアップ
https://github.com/cloudfoundry-incubator/cf-networking-release
• UAAでnetwork.adminのscopeを有効化
• ドキュメントはこちら
https://docs.cloudfoundry.org/devguide/deploy-apps/cf-
networking.html

11. さっそくDEMO

12. ざっくりとした仕組みの説明

13. Architecture
https://github.com/cloudfoundry-incubator/cf-networking-release/blob/develop/docs/diagram.png
青: 元からある仕組み
緑: 新しく追加された仕組み
赤: 差し替え可能

14. https://github.com/cloudfoundry-incubator/cf-networking-release/blob/develop/docs/diagram.png

15. CNI
• Container Network Interface
• CNCF(Cloud Native Computing Foundation)によって
策定されている、コンテナネットワーキングのための
仕様
• Cloud Foundryの他、KubernetesやMesos、rkt
･･･要はDocker以外 😛 で使われている

16. Container Runtime
Container Network Interface
Loopback
Plugin
Bridge
Plugin
PTP
Plugin
MAC VLAN
Plugin
3rd-party
Plugin

17. Silk
• CNI準拠のContainer Networking fabric
• VXLANを使ってホスト間の通信を行う
• Flannelにインスパイアされて作られている
• 初期はFlannelを利用。etcdが嫌でRDBを使うように
作り直したらしい

20. Garden-runc
Garden External Networker
CF Wrapper CNI Plugin
Silk CLI Plugin
Linux
コンテナランタイム
Garden External Networker API
CNI API
Legacy Networking
NetIn(NAT from Host)
NetOut(Application Security Group)
Silk
daemon
Silk
Controller
diego cell
IPAM
iptables
netlink
などなど設定

21. Garden-runc
Garden External Networker
CF Wrapper CNI Plugin
Silk CLI Plugin
Linux
コンテナランタイム
Garden External Networker API
CNI API
Legacy Networking
NetIn(NAT from Host)
NetOut(Application Security Group)
Silk
daemon
Silk
Controller
diego cell
IPAM
iptables
netlink
などなど設定
Silk controllerが
Cellにsubnetを
払い出す Wrapper Pluginが
Port forwardingや
ASGを設定
veth pairの作成
etc...

22. cf allow-access myapp backend-app --port 7000 --protocol tcp
Policyの設定
AgentがPolling
iptablesに反映

23. ここが足りないC2C Networking
• Service Discovery欲しい･･･
• 今のところはEurekaやamalgam8を使って実現

24. Next Steps
• App Identity for external services
• Bandwidth limiting
• logging enhancement
• support port ranges
• https://www.pivotaltracker.com/n/projects/1498342

25. まとめ
• CFのC2C Networking機能はMicroservicesやるのに便利
• CNIに準拠したSilkを利用。必要に応じて置き換え可能
• 足りない機能はあれど、今後いろいろ実装される予定