Download free for 30 days
Sign in
Upload
Language (EN)
Support
Business
Mobile
Social Media
Marketing
Technology
Art & Photos
Career
Design
Education
Presentations & Public Speaking
Government & Nonprofit
Healthcare
Internet
Law
Leadership & Management
Automotive
Engineering
Software
Recruiting & HR
Retail
Sales
Services
Science
Small Business & Entrepreneurship
Food
Environment
Economy & Finance
Data & Analytics
Investor Relations
Sports
Spiritual
News & Politics
Travel
Self Improvement
Real Estate
Entertainment & Humor
Health & Medicine
Devices & Hardware
Lifestyle
Change Language
Language
English
Español
Português
Français
Deutsche
Cancel
Save
Submit search
EN
Uploaded by
Takeo Noda
PDF, PPTX
976 views
Zabbixで学ぶ統計解析入門
監視ツールと時系列データ。そこから見る統計解析入門。
Data & Analytics
◦
Related topics:
Data Analytics Insights
•
Read more
0
Save
Share
Embed
Embed presentation
Download
Download as PDF, PPTX
1
/ 22
2
/ 22
3
/ 22
4
/ 22
5
/ 22
6
/ 22
7
/ 22
8
/ 22
9
/ 22
10
/ 22
11
/ 22
12
/ 22
13
/ 22
14
/ 22
15
/ 22
16
/ 22
17
/ 22
18
/ 22
19
/ 22
20
/ 22
21
/ 22
22
/ 22
More Related Content
PDF
PostgreSQL 15の新機能を徹底解説
by
Masahiko Sawada
PPTX
PostgreSQLのロール管理とその注意点(Open Source Conference 2022 Online/Osaka 発表資料)
by
NTT DATA Technology & Innovation
PDF
Zabbix最新情報 ~Zabbix 6.0に向けて~ @OSC2021 Online/Fall
by
Atsushi Tanaka
PPTX
Apache Spark on Kubernetes入門(Open Source Conference 2021 Online Hiroshima 発表資料)
by
NTT DATA Technology & Innovation
PPTX
モノリスからマイクロサービスへの移行 ~ストラングラーパターンの検証~(Spring Fest 2020講演資料)
by
NTT DATA Technology & Innovation
PDF
Zabbixで学ぶ統計解析入門
by
Takeo Noda
PDF
PostgreSQLバックアップの基本
by
Uptime Technologies LLC (JP)
PDF
AWSのログ管理ベストプラクティス
by
Akihiro Kuwano
PostgreSQL 15の新機能を徹底解説
by
Masahiko Sawada
PostgreSQLのロール管理とその注意点(Open Source Conference 2022 Online/Osaka 発表資料)
by
NTT DATA Technology & Innovation
Zabbix最新情報 ~Zabbix 6.0に向けて~ @OSC2021 Online/Fall
by
Atsushi Tanaka
Apache Spark on Kubernetes入門(Open Source Conference 2021 Online Hiroshima 発表資料)
by
NTT DATA Technology & Innovation
モノリスからマイクロサービスへの移行 ~ストラングラーパターンの検証~(Spring Fest 2020講演資料)
by
NTT DATA Technology & Innovation
Zabbixで学ぶ統計解析入門
by
Takeo Noda
PostgreSQLバックアップの基本
by
Uptime Technologies LLC (JP)
AWSのログ管理ベストプラクティス
by
Akihiro Kuwano
What's hot
PDF
S13 Oracle Database を Microsoft Azure 上で運用する為に~基本事項とベストプラクティス
by
Microsoft Azure Japan
PDF
Kinesis + Elasticsearchでつくるさいきょうのログ分析基盤
by
Amazon Web Services Japan
PDF
アーキテクチャから理解するPostgreSQLのレプリケーション
by
Masahiko Sawada
PPTX
祝!PostgreSQLレプリケーション10周年!徹底紹介!!
by
NTT DATA Technology & Innovation
PDF
A5 SQL Mk-2の便利な機能をお教えします
by
ester41
PDF
PostgreSQL13でのレプリケーション関連の改善について(第14回PostgreSQLアンカンファレンス@オンライン)
by
NTT DATA Technology & Innovation
PDF
Where狙いのキー、order by狙いのキー
by
yoku0825
PPTX
どうやって決める?kubernetesでのシークレット管理方法(Cloud Native Days 2020 発表資料)
by
NTT DATA Technology & Innovation
PDF
PGOを用いたPostgreSQL on Kubernetes入門(PostgreSQL Conference Japan 2022 発表資料)
by
NTT DATA Technology & Innovation
PPTX
WiredTigerを詳しく説明
by
Tetsutaro Watanabe
PDF
OpenStack入門 2016/06/27
by
株式会社 NTTテクノクロス
PDF
統計情報のリセットによるautovacuumへの影響について(第39回PostgreSQLアンカンファレンス@オンライン 発表資料)
by
NTT DATA Technology & Innovation
PDF
Apache Spark超入門 (Hadoop / Spark Conference Japan 2016 講演資料)
by
NTT DATA OSS Professional Services
PDF
OAuth 2.0のResource Serverの作り方
by
Hitachi, Ltd. OSS Solution Center.
PPTX
はじめてのElasticsearchクラスタ
by
Satoyuki Tsukano
PDF
Azure Database for PostgreSQL 入門 (PostgreSQL Conference Japan 2021)
by
Keisuke Takahashi
PDF
Docker Compose 徹底解説
by
Masahito Zembutsu
PPTX
本当は恐ろしい分散システムの話
by
Kumazaki Hiroki
PDF
PostgreSQL13でのpg_basebackupの改善について(第13回PostgreSQLアンカンファレンス@オンライン)
by
NTT DATA Technology & Innovation
PDF
2025年現在のNewSQL (最強DB講義 #36 発表資料)
by
NTT DATA Technology & Innovation
S13 Oracle Database を Microsoft Azure 上で運用する為に~基本事項とベストプラクティス
by
Microsoft Azure Japan
Kinesis + Elasticsearchでつくるさいきょうのログ分析基盤
by
Amazon Web Services Japan
アーキテクチャから理解するPostgreSQLのレプリケーション
by
Masahiko Sawada
祝!PostgreSQLレプリケーション10周年!徹底紹介!!
by
NTT DATA Technology & Innovation
A5 SQL Mk-2の便利な機能をお教えします
by
ester41
PostgreSQL13でのレプリケーション関連の改善について(第14回PostgreSQLアンカンファレンス@オンライン)
by
NTT DATA Technology & Innovation
Where狙いのキー、order by狙いのキー
by
yoku0825
どうやって決める?kubernetesでのシークレット管理方法(Cloud Native Days 2020 発表資料)
by
NTT DATA Technology & Innovation
PGOを用いたPostgreSQL on Kubernetes入門(PostgreSQL Conference Japan 2022 発表資料)
by
NTT DATA Technology & Innovation
WiredTigerを詳しく説明
by
Tetsutaro Watanabe
OpenStack入門 2016/06/27
by
株式会社 NTTテクノクロス
統計情報のリセットによるautovacuumへの影響について(第39回PostgreSQLアンカンファレンス@オンライン 発表資料)
by
NTT DATA Technology & Innovation
Apache Spark超入門 (Hadoop / Spark Conference Japan 2016 講演資料)
by
NTT DATA OSS Professional Services
OAuth 2.0のResource Serverの作り方
by
Hitachi, Ltd. OSS Solution Center.
はじめてのElasticsearchクラスタ
by
Satoyuki Tsukano
Azure Database for PostgreSQL 入門 (PostgreSQL Conference Japan 2021)
by
Keisuke Takahashi
Docker Compose 徹底解説
by
Masahito Zembutsu
本当は恐ろしい分散システムの話
by
Kumazaki Hiroki
PostgreSQL13でのpg_basebackupの改善について(第13回PostgreSQLアンカンファレンス@オンライン)
by
NTT DATA Technology & Innovation
2025年現在のNewSQL (最強DB講義 #36 発表資料)
by
NTT DATA Technology & Innovation
Viewers also liked
PDF
手作業なしの安定環境実現に向けたZabbix活用方法紹介+Zabbix2.4最新機能紹介
by
Daisuke Ikeda
PDF
Tech circle#13 zabbix3.0ハンズオン lld
by
Daisuke Ikeda
PDF
2.0~2.2~2.4~3.0 zabbixの進化を紐解く zabbix便利機能紹介-
by
Daisuke Ikeda
PDF
Elasticsearchと機械学習を実際に連携させる
by
nobu_k
PPTX
Zabbix 3.0 の予測機能のための数学的理解
by
真乙 九龍
PDF
Zabbix3.0でどう変わるか
by
Atsushi Tanaka
PDF
ZabbixによるAWS監視のコツ
by
ShinsukeYokota
PDF
第8回oss運用管理勉強会 Zabbix入門&Zabbix3.0先取り紹介
by
Daisuke Ikeda
手作業なしの安定環境実現に向けたZabbix活用方法紹介+Zabbix2.4最新機能紹介
by
Daisuke Ikeda
Tech circle#13 zabbix3.0ハンズオン lld
by
Daisuke Ikeda
2.0~2.2~2.4~3.0 zabbixの進化を紐解く zabbix便利機能紹介-
by
Daisuke Ikeda
Elasticsearchと機械学習を実際に連携させる
by
nobu_k
Zabbix 3.0 の予測機能のための数学的理解
by
真乙 九龍
Zabbix3.0でどう変わるか
by
Atsushi Tanaka
ZabbixによるAWS監視のコツ
by
ShinsukeYokota
第8回oss運用管理勉強会 Zabbix入門&Zabbix3.0先取り紹介
by
Daisuke Ikeda
Similar to Zabbixで学ぶ統計解析入門
PDF
Zabbix-jp study #4 20111020 session2
by
Hitoshi Yoshida
PDF
Zabbix入門
by
Takeo Noda
PDF
運用の現場での監視運用ツールの活用
by
真治 米田
PDF
Zabbix最新情報 @OSC 2017 Tokyo/Fall
by
Atsushi Tanaka
PDF
Zabbix 2.2の新機能とZabbixオフィシャルサービスの紹介
by
Kodai Terashima
PDF
第2回 OSS運用管理勉強会 運用あるある(Zabbix)
by
真治 米田
PPT
OSC tokyo fall 2011 - 統合監視ソフトウェアZabbixの機能紹介とリアルタイムデモ
by
takanori suzuki
PDF
Jubatus: 分散協調をキーとした大規模リアルタイム機械学習プラットフォーム
by
Preferred Networks
PDF
【Tech circle】zabbix3.0ハンズオン
by
隼人 渡邉
PDF
時系列分析による異常検知入門
by
Yohei Sato
PDF
Zabbix 1.8の概要と新機能
by
Kodai Terashima
PDF
オープンソースでシステム監視!統合監視ソフトウェア"Zabbix 1.8"の新機能とデモ
by
Kodai Terashima
PDF
Zabbix 1.8の概要と新機能
by
Kodai Terashima
PDF
Tokyo r15 異常検知入門
by
Yohei Sato
PDF
オープンソースでシステム監視!統合監視ソフトウェアZABBIXの機能と利用事例のご紹介
by
Kodai Terashima
PPTX
Zabbix概論
by
真乙 九龍
PDF
Zabbix 4.0のご紹介 @OSC 2018 Tokyo/Fall
by
Atsushi Tanaka
ODP
Zabbix study
by
Tomohiro Ikeda
PDF
Zabbix社内勉強会資料-Zabbix2.0新機能紹介編-
by
Daisuke Ikeda
PDF
Zabbixを徹底活用してみよう ~4.2の最新情報もご紹介~
by
Daisuke Ikeda
Zabbix-jp study #4 20111020 session2
by
Hitoshi Yoshida
Zabbix入門
by
Takeo Noda
運用の現場での監視運用ツールの活用
by
真治 米田
Zabbix最新情報 @OSC 2017 Tokyo/Fall
by
Atsushi Tanaka
Zabbix 2.2の新機能とZabbixオフィシャルサービスの紹介
by
Kodai Terashima
第2回 OSS運用管理勉強会 運用あるある(Zabbix)
by
真治 米田
OSC tokyo fall 2011 - 統合監視ソフトウェアZabbixの機能紹介とリアルタイムデモ
by
takanori suzuki
Jubatus: 分散協調をキーとした大規模リアルタイム機械学習プラットフォーム
by
Preferred Networks
【Tech circle】zabbix3.0ハンズオン
by
隼人 渡邉
時系列分析による異常検知入門
by
Yohei Sato
Zabbix 1.8の概要と新機能
by
Kodai Terashima
オープンソースでシステム監視!統合監視ソフトウェア"Zabbix 1.8"の新機能とデモ
by
Kodai Terashima
Zabbix 1.8の概要と新機能
by
Kodai Terashima
Tokyo r15 異常検知入門
by
Yohei Sato
オープンソースでシステム監視!統合監視ソフトウェアZABBIXの機能と利用事例のご紹介
by
Kodai Terashima
Zabbix概論
by
真乙 九龍
Zabbix 4.0のご紹介 @OSC 2018 Tokyo/Fall
by
Atsushi Tanaka
Zabbix study
by
Tomohiro Ikeda
Zabbix社内勉強会資料-Zabbix2.0新機能紹介編-
by
Daisuke Ikeda
Zabbixを徹底活用してみよう ~4.2の最新情報もご紹介~
by
Daisuke Ikeda
Zabbixで学ぶ統計解析入門
1.
Copyright © Xchange
Solutions All right reserved. KIXS Vol.000 インフラLTの祭典 Zabbixで学ぶ統計解析入門 株式会社エクスチェンジ ソリューションズ 野田 健夫 2016.08.26
2.
2 Copyright © Xchange
Solutions All right reserved. こんにちは! 野田 健夫(のだたけお) https://twitter.com/nodatakeo https://www.facebook.com/nodatakeo 株式会社エクスチェンジ ソリューションズ
3.
3 Copyright © Xchange
Solutions All right reserved. 今日の内容 1. これまでの監視ツール遍歴 2. Zabbixについて 1. Zabbixの主な機能 2. Zabbixで収集するデータ 3. Zabbixの概略図 3. 時系列データの検査を行うトリガー関数群 1. 移動平均 2. 予測値・予測到達時間 4. まとめ
4.
4 Copyright © Xchange
Solutions All right reserved. これまでの監視ツール遍歴 2004~2009年ごろ:BigBrother / Hobbit / Xymon http://xymon.sourceforge.net/
5.
5 Copyright © Xchange
Solutions All right reserved. これまでの監視ツール遍歴 2008~2012年ごろ:Nagios https://www.nagios.org/
6.
6 Copyright © Xchange
Solutions All right reserved. これまでの監視ツール遍歴 2012年~現在 :Zabbix http://www.zabbix.com/jp/
7.
7 Copyright © Xchange
Solutions All right reserved. Zabbixの主な機能 収集したデータに閾値を設定して異常監視 を行い、通知。 サーバやネットワークの状態をデータ化し、 保存。 収集したデータをもとにグラフ化。
8.
8 Copyright © Xchange
Solutions All right reserved. Zabbixで収集するデータ CPU使用率 ディスク使用率 ディスクI/O LoadAverage プロセス数 ポート状態 などなど すべて 時系列のデータ としてDBに 保存される。
9.
9 Copyright © Xchange
Solutions All right reserved. Zabbix障害検知の概略図 データ収集項目 アイテム トリガー アクション データ 検知閾値 トリガーに対して メディア処理 メディア メール・ SMS連携設定 ホスト ウェブ ページアクセス テンプレート ユーザー データ収集に関する設定 アラートに関する設定
10.
10 Copyright © Xchange
Solutions All right reserved. 監視における異常検知とのせめぎあい Big Brother Nagios Zabbix フラップ検知機能で抑止 フラップ検知機能はない。 短時間に障害と復旧を 繰り返すことをフラッ ピングという。Nagios では過去21回分の変化 率で測定。 ※特になし トリガー関数で対応 データを保存してい るから関数で分析で きる。
11.
11 Copyright © Xchange
Solutions All right reserved. 時系列データの検査を行うトリガー関数群 avg 移動平均 last 最終値 diff 差異検知 nodata データなし検知 count 期間回数 forecast 予測値 timeleft 予測到達時間 v3.0より追加
12.
12 Copyright © Xchange
Solutions All right reserved. avg: (単純)移動平均(SMA) avg (sec|#num,<time_shift>) 書式: 引数 sec|#num 必須。秒数(sec)もしくは直近の件数(#num) <time_shift> 任意。過去にずらす秒数 例: {Template OS Linux:system.cpu.util[,iowait].avg(5m)}>20 Disk I/O overload
13.
13 Copyright © Xchange
Solutions All right reserved. 移動平均とは 単純移動平均 (Simple Moving Average; SMA) は、株価や温度変化の傾向など時系列 データの幅広い分野で使われている分析手法。 毎分取得するようなデータだと5分平均、10分 平均の値がよく使われている。 移動平均をとることで瞬間的な外れ値が発生し ても平滑化され誤検知を避けることができる。
14.
14 Copyright © Xchange
Solutions All right reserved. 移動平均の代表例: Load Average ・1分平均 ・5分平均 ・15分平均 平均をとる期間が長いほど平滑化される (=変化を平均化してなめらかにするフィルター) Load Averageは、 移動平均を行った実行待ちプロセス数。
15.
15 Copyright © Xchange
Solutions All right reserved. forecast: 予測値 forecast (sec|#num,<time_shift>,time,<fit>,<mode>) 書式: 引数 sec|#num 必須。何時間(sec)もしくは直近の件数(#num) <time_shift> 任意。過去にずらす秒数 time 必須。何時間後のデータを予測するか。 <fit> 任意。予測モデル。linear, polynomialN, exponential, logarithmic, powerを指定できる。デフォルトは、linear。 <mode> 任意。予測で出力する値。value,max,min,delta,avg。デ フォルトは、value。
16.
16 Copyright © Xchange
Solutions All right reserved. forecast: 予測モデル fit x = f(t) linear x = a + b*t polynomialN x = a + a *t + a *t + … + a *t exponential x = a*exp(b*t) logarithmic x = a + b*log(t) power x = a*tb 0 1 2 n n2 線形近似 一変数多項式近似(n≦6) 指数近似 対数近似 累乗近似 linear logarithmic polynominalN exponential power
17.
17 Copyright © Xchange
Solutions All right reserved. forecast: 予測値 mode 予測結果 value f(now + time) max maxnow <= t <= now + time f(t) min minnow <= t <= now + time f(t) delta max - min avg average of f(t) (now <= t <= now + time) 時間経過後の予測値 期間内予測値の最小値 期間内予測値の最大値ー最小値 予測値の移動平均 期間内予測値の最大値 例: {Zabbix server:vfs.fs.size[/,free].forecast(1h,0,24h,linear,value)}<0 Run out of disk space on Zabbix server (forecast)
18.
18 Copyright © Xchange
Solutions All right reserved. timeleft: 予測到達時間 timeleft (sec|#num,<time_shift>,threshold,<fit>) 書式: 引数 sec|#num 必須。何時間(sec)もしくは直近の件数(#num) <time_shift> 任意。過去にずらす秒数 threshold 必須。到達値。 <fit> 任意。予測モデル。linear, polynomialN, exponential, logarithmic, powerを指定できる。デフォルトは、linear。 ※予測モデルはforecastと同じ 例: {Zabbix server:vfs.fs.size[/,free].timeleft(1h,0,0,linear)}<24h Run out of disk space on Zabbix server (timeleft)
19.
19 Copyright © Xchange
Solutions All right reserved. 予測値をグラフに表示するには? http://www.zabbix.com/jp/whats_new.php
20.
20 Copyright © Xchange
Solutions All right reserved. トリガー関数はアイテムの計算でも使える グラフに予測値を含めたいときは、予測値用のアイテムを追加す る。 アイテムタイプ「計算」を選択することで、トリガー関数をアイ テムにおいても使うことが可能。 使い方は、第1引数にアイテムキー名を追加。 データ型は、「数値(浮動小数点)」を指定するなど適宜要調整。 データ量が少ない場合は、-1になってしまうので注意。 forecast (“アイテムキー名”, sec|#num,<time_shift>,time,<fit>,<mode>) forecast("Zabbix server:vfs.fs.size[/,free]", 1h,0,24h,linear,value) 例:
21.
21 Copyright © Xchange
Solutions All right reserved. まとめ 監視における時系列データ解析は、変化を検知するの が基本。 予測検知は、ディスクなどリソース計画にも役立つ。 予測モデルは線形近似以外はあまり使われない。 予測検知するためには、検知のためのモデル作りが重 要。データ収集→解析→の流れでいくと可視化の拡張 (GrafanaとかKibanaなど)についても注目。
22.
22 Copyright © Xchange
Solutions All right reserved. 参考: Grafana/Kibana https://grafana.net https://www.elastic.co/jp/products/kibana
Download