1.
Copyright © MIRACLE LINUX CORPORATION. All rights reserved.
関係者外秘
クラウド運用の
ベストプラクティスを考える
2016/12/01
ミラクル・リナックス株式会社
テクニカル・アライアンス部
熊谷 理那

2.
Copyright © MIRACLE LINUX CORPORATION. All rights reserved.
関係者外秘
2
“クラウド”の利用拡大

3.
Copyright © MIRACLE LINUX CORPORATION. All rights reserved.
関係者外秘
3
“オンプレ”運用から”クラウド”運用へのシフト
静的な運用設計
初期費用＞運用費用
動的な運用設計
運用費用＞初期費用
使用するツール知識
時間経過で安定化
様々なツール知識
時間経過で変化
オンプレの障害対応 クラウドの障害対応
オンプレの運用設計 クラウドの運用設計

4.
Copyright © MIRACLE LINUX CORPORATION. All rights reserved.
関係者外秘
4
“クラウド”な運用課題例 1/2
構成管理
リソース・
コスト最適化
リソース監視
コスト可視化
クラウドではコストやリソース
の最適化は最重要の課題
・大規模な監視
・リソースの可視化
・構成変更の自動化

5.
Copyright © MIRACLE LINUX CORPORATION. All rights reserved.
関係者外秘
5
“クラウド”な運用課題例 2/2
プロフェッショナル オペレーター
コミュニケーション
!!!
ドキュメント
ナレッジ・ベース
検知
対応
インシデント→対応→ドキュメント作成→ナレッジ蓄積
を動的かつ高速に行う必要あり

6.
Copyright © MIRACLE LINUX CORPORATION. All rights reserved.
関係者外秘
6
局所的なソリューション(OSSツール)

7.
Copyright © MIRACLE LINUX CORPORATION. All rights reserved.
関係者外秘
7
OpenStack共同検証ラボ

8.
Copyright © MIRACLE LINUX CORPORATION. All rights reserved.
関係者外秘
8
OpenStack共同検証ラボ
{ OpenStack } + { OSS }
“クラウド”の運用を想定してOSSを組合せ
ベストプラクティスを探求する
・構築済みOpenStack環境を提供
→成果はGithub等で公開

9.
Copyright © MIRACLE LINUX CORPORATION. All rights reserved.
関係者外秘
9
OpenStack共同検証ラボ : MLの例

10.
Copyright © MIRACLE LINUX CORPORATION. All rights reserved.
関係者外秘
10
OpenStack共同検証ラボ : MLの例
・ 各テナント毎にZabbix Serverを配置し、Agent経由で監視。
・ OpenStack用監視テンプレートを適用。
Customer
VM
ZBX agent
Customer
VM
ZBX agent
ZBX sever
VM
Customer
VM
ZBX agent
Customer
VM
ZBX agent
ZBX sever
VM
Customer
VM
ZBX agent
Customer
VM
ZBX agent
ZBX sever
VM
A
B
C

11.
Copyright © MIRACLE LINUX CORPORATION. All rights reserved.
関係者外秘
11
OpenStack共同検証ラボ : MLの例
Zabbix
Nagios
fluentd
Redmine
ssh
イベント管理
変更管理
リリース管理
インシデント管理
問題管理
Zabbix
稼働監視
リソース監視
障害判定
自動起票
エスカレーション
ステータス管理
ホスト管理
資源／資産管理
設定管理
一括変更
ログ管理
リソース状況参照
イベント通知
インシデント登
録
リモートコマンド 問題切り分け
状況表示
イベント管理
イベント通知
サービスデスク

12.
Copyright © MIRACLE LINUX CORPORATION. All rights reserved.
関係者外秘
12
OpenStack共同検証ラボ : MLの例
アプリ
ゲストOS
アプリ
ゲストOS
仮想マシン 仮想マシン
HyperVisor
Zabbix
Nagios
Fluentd
Ceilometer
libvirt
Zabbix
Nagios
Fluentd
ゲストOS、アプリの
リソース、ログ
仮想マシンリソース
物理マシン、OpenStack
のリソース、ログ
複数の監視サーバを統合してイベントを管理
複数の監視ソフトで取得した情報を統合管理
複数の管理対象のリソースを縦串、横串で確認
監視ソフトの違い、環境の違いを意識せず、一括でグラフ表示、イベント表示
監視サーバ、監視対象を問わずグラフを並べて表示

13.
Copyright © MIRACLE LINUX CORPORATION. All rights reserved.
関係者外秘
13
OpenStack共同検証ラボ : MLの例
統合監視とインシデント管理を統合
障害検知後、自動でインシデント起票
対応状況、ステータスなどが追跡可能で、詳細な現象、対応履歴が参照可能
長く利用することで、独自のナレッジベースとして活用できる
インシデント発行
ステータス通知
メール通知
2014/10/21 03:02:22 ! XXさんがステータスを対処済みに変更しました
2014/10/21 02:51:06 ホストAで障害が復旧しました
2014/10/21 02:32:19 ! XXさんがステータスを対処中に変更しました
2014/10/21 02:16:25 担当にXXさんが割り当てられました
2014/10/21 02:16:23 ホストAで障害が発生

14.
Copyright © MIRACLE LINUX CORPORATION. All rights reserved.
関係者外秘
14
OpenStack共同検証ラボ : MLの例
OpenStack監視
テンプレート
Zabbixのイベント
を集約・表示
Hatoholからチケット
を自動で発行