第8回oss運用管理勉強会 Zabbix入門＆Zabbix3.0先取り紹介

2. Copyright © 2015 TIS Inc. All rights reserved. 自己紹介池田　大輔 TIS株式会社 OSS推進室 @ike_dai https://www.facebook.com/ikedai 　 Zabbix,AWS,fluentd,Chef,JobScheduler... 名前所属 Twitter Facebook 興味 AWS、VMware監視用プラグイン『HyClops for Zabbix』開発 (http://tech-sketch.github.io/hyclops/jp/ ) 技術評論社HP : http://gihyo.jp/book/2014/978-4-7741-6288-1 Amazon : http://www.amazon.co.jp/dp/4774162884 Zabbix-JobScheduler連携用プラグイン『HyClopsJM』開発 (http://tech-sketch.github.io/hyclops_jm/jp/ ) 2

3. Copyright © 2015 TIS Inc. All rights reserved. 3 本日のアジェンダ Zabbix入門　- Zabbixの概要紹介　- Zabbixの監視の仕組み　- 監視→検知→通知　- Zabbixで監視できること　- 視覚化　- Zabbixの特長 Zabbix3.0紹介　- GUIの変化　- 通信の暗号化　- パッシブチェック、LLDディスカバリルールの手動実行　- LLD機能の強化　- SMTP認証機能　- パーセンタイル関数の実装　- 障害レポートフィルタリング機能改良

7. Copyright © 2015 TIS Inc. All rights reserved. 7 Zabbixの監視の仕組み -監視処理- Zabbix Server(C) Apache Zabbix Frontend(PHP) ポーラープロセストラッパープロセスポーラープロセスポーラープロセスポーラープロセストラッパープロセストラッパープロセストラッパープロセス内部処理の機能毎に複数のプロセスが稼働 HistoryCacheValueCache 　DB PostgreSQL MySQL Oracle 監視設定監視結果 DBへのボトルネック解消のため内部ではメモリを有効活用

8. Copyright © 2015 TIS Inc. All rights reserved. 8 Zabbixで管理するデータの構造ホストグループテンプレートホストアイテムトリガーグラフ割当アイテムトリガーグラフ・・・・・・アクションアクションアイテムトリガーグラフホストグループ：Linux ホスト：Server1 テンプレート：LinuxServerテンプレートアイテム：CPU使用率トリガー：CPU使用率が5分間平均80%以上アクション：管理者にアラートメール送信例ホスト

9. Copyright © 2015 TIS Inc. All rights reserved. 9 監視→検知→通知の仕組み監視検知通知１：監視アイテム定義　をもとに監視処理２：トリガー定義　をもとに監視結果を評価例)アイテム◯◯の最後の値(last関数の結果)が xxであるなら障害とみなす {hostname:item[].last()}>100 ３：トリガー評価結果からイベント生成４：アクション実行条件にマッチするイベントが発生を起因としてアクション実行例)トリガー△△が障害なら□□さんにメール通知５：アクション実行条件にマッチしないイベント発生を起因としてリカバリメッセージ送信例)トリガー△△が障害状態でないなら□□さんに復旧メール通知

10. Copyright © 2015 TIS Inc. All rights reserved. 10 Zabbixで監視できること snmp server snmp server SNMP Trap SNMP ssh server ssh server Zabbix Agent 仮想化HV Cloud ODBC JMX Java アプリ仮想環境API クラウドAPI SSH接続による内部コマンド実行監視 ZabbixAgent による内部監視 (リソースやログ等) ODBCによるDB監視 Zabbix Java Gatewayによる Java監視外部チェックスクリプト監視によるAPI監視 Zabbix Server エージェントレス監視 (ICMP ping監視やポート監視) DB

11. Copyright © 2015 TIS Inc. All rights reserved. 11 Zabbix Agent監視 Zabbix Server Zabbix Agent リソース情報　(CPU、Memory、Disk、NWなど) ファイル情報プロセス・サービス情報ログ情報その他任意の値 Zabbix独自プロトコル 10050/TCP 10051/TCP パッシブ型アクティブ型パッシブ/アクティブいずれかの方式でZabbix Serverに監視情報を連携

13. Copyright © 2015 TIS Inc. All rights reserved. 13 Zabbix Agent監視 (アクティブ型) Zabbix Server Zabbix Agent 監視アイテムリスト送付依頼リクエスト 10051/TCP 必要な監視結果を送付 [{"response":"success","data":[{ 　　　"key":"agent.version", 　　　"delay":3600, 　　　"lastlogsize":0, 　　　"mtime":0 }]}] [{"request":"agent data","data":[{ 　　　"host":"localhost", 　　　"key":"agent.version", 　　　"value":"2.2.9", 　　　"clock":1437971657, 　　　"ns":143002465 }]}] trapper

14. Copyright © 2015 TIS Inc. All rights reserved. 14 SNMPポーリング/SNMPトラップ監視 Zabbix Server SNMP 161/UDP SNMPポーリング監視 SNMP Agent OID 認証情報 (SNMPv1,v2,v3対応) SNMPトラップ監視 SNMP Trap 162/UDP traphandler (SNMPTT) snmptrapd Zabbix Server 整形済みトラップ情報例) 11:30:15 2011/07/27 .1.3.6.1.6.3.1.1.5.3 Normal “Status Events” localhost - ZBXTRAP 192.168.1.1 Link down on interface 2. Admin state: 1. Operational state: 2

15. Copyright © 2015 TIS Inc. All rights reserved. 15 ログ監視 Zabbix Server Zabbix AgentZabbix独自プロトコル 10051/TCP アクティブ型テキストログ Windowsイベントログ最後に監視した際のログファイルの更新時刻、ファイルサイズ(イベントログはイベントID) を元に追記部分のみ監視正規表現で監視したいログの行を指定監視アイテムキー設定 logrt[“filepath”,”Error”] 監視されるログの例: 「Error: process A is down.」

16. Copyright © 2015 TIS Inc. All rights reserved. 16 【参考】ログ監視の活用例 Zabbixログ監視フィルタリングの仕組み LogItem “Apache Access Log 4xx” Item key: log[logfile, “s4([0-9]){2}s”] [監視対象ログ] 10.3.xx.xx - - [14/Apr/2015:17:30:50 +0900] "POST /zabbix HTTP/1.1" 200 944 "-" "Mozilla/5.0 (Windows NT 6.1)" 10.1.xx.xx - - [14/Apr/2015:17:33:23 +0900] "POST /zabbix HTTP/1.1" 400 944 "-" "Mozilla/5.0 (Windows NT 6.1)" 10.2.xx.xx - - [14/Apr/2015:17:34:52 +0900] "POST /zabbix HTTP/1.1" 400 944 "-" "Mozilla/5.0 (Windows NT 6.1)" CountItem “4xx log count” [アイテムで抽出されたログ] 10.1.xx.xx - -略... 400 944 "-" "Mozilla/5.0 (Windows NT 6.1)" 10.2.xx.xx - -略... 400 944 "-" "Mozilla/5.0 (Windows NT 6.1)" Trigger “Access Log 4xx from 10.2.xx.xx” Trigger condition: log[logfilename, “s4([0-9]){2}s”].regexp( “^10.2”) Item key: count(“host:log[logfile, “s4([0-9]){2}s”]”,60) 計算アイテムを活用すればログ発生数のカウンティングも可

18. Copyright © 2015 TIS Inc. All rights reserved. 18 Windows監視 Zabbix Server Zabbix Agent ・Windowsイベントログ・WMI(Windows Management Instrumentation) ・パフォーマンスカウンタ Windowsサーバも内部の詳細な状況の監視が可能 C:>typeperf -qx Process Process(UdaterUI)% Processor Time Process(chrome)% Processor Time perf_counter[“Process(chrome)% Processor Time”]

25. Copyright © 2015 TIS Inc. All rights reserved. 25 大規模環境向けの分散監視 Zabbix Server Target Server Target Server Target Server Target Server Zabbix Proxy Target Server Target Server Target Server Target Server 拠点A(例:オンプレミス環境) 拠点B(例:クラウド環境) 管理下の対象機器のみ監視管理下の対象機器のみ監視同期設定情報監視結果運用担当者 1拠点で統合的に管理 DB DB

26. Copyright © 2015 TIS Inc. All rights reserved. 26 外部連携【外部→Zabbix】 Zabbix API Zabbix Server 外部ツールコマンドプログラム HTTP GET/POST Request Response Zabbix設定 Zabbix監視結果できること Zabbixの設定　　　　：　Create/Read/Update/Delete Zabbixでの監視結果　：　Read Zabbixfrontend

29. Copyright © 2015 TIS Inc. All rights reserved. 29 Zabbixサポートポリシー LTS版(5年サポート)は2.0系、2.2系、3.0系(次期リリース版) 2.4系はポイントリリース偶数番号(1.9系、2.1系、2.3系等)は開発版 ※Zabbix社 Zabbix サポート期間とリリースポリシー引用 (http://www.zabbix.com/jp/life_cycle_and_release_policy.php ) ● 長期間安定して動かしっぱなしにしたい場合はLTS版を ● 最新機能をいち早く使いたい場合はポイントリリース版を　 → ポイントリリース版を使う場合は随時アップデートに対応を

33. Copyright © 2015 TIS Inc. All rights reserved. 33 通信の暗号化対応 Zabbix Server Zabbix Proxy Zabbix Agent Zabbix Agent・・・ Zabbix Agent Zabbix Agent・・・ internet 暗号化不要なところは平文通信の選択も可各コンポーネント間のTLS v1.2を使った暗号化通信サポートこれまでは・・・ VPNを通して対応したり stunnelを間に挟んで暗号化したり参考:Zabbixモジュール間の通信を暗号化する (http://www.slideshare.net/takeshiyamane9/zabbix-stunnel)

37. Copyright © 2015 TIS Inc. All rights reserved. 37 LLD機能の強化 {"data":[ { "{#TESTRULE.NAME}":"Item No.1", "{#TESTRULE.KEY}":"item.key1", "{#TESTRULE.UNIT}":"bytes", "{#TESTRULE.APPLICATION}":"mem" }, { "{#TESTRULE.NAME}":"Item No.2", "{#TESTRULE.KEY}":"item.key2", "{#TESTRULE.UNIT}":"%", "{#TESTRULE.APPLICATION}":"cpu" }, { "{#TESTRULE.NAME}":"Item No.3", "{#TESTRULE.KEY}":"item.key3", "{#TESTRULE.UNIT}":"bps", "{#TESTRULE.APPLICATION}":"disk" } ]}

45. THANK YOU