【Hinemos World 2013】A-3：Hinemos運用Hacks ～マニュアルにないノウハウを公開します（株式会社クニエ）

Hinemos運用Hacks
～マニュアルにないノウハウを公開します

2013.11.15
株式会社クニエ

アジェンダ

1.
2.
3.
4.
5.

会社紹介
WebAPIの活用のコツ
監視有効・無効化
Hinemosジョブの動的起動
QUNIE流カスタム監視
5.1 HTTP監視
5.2 Windowsサービス監視
5.3 レポーティング
6. まとめ

© 2013 QUNIE CORPORATION. All rights reserved.

会社紹介

1.
2.
3.
4.
5.

会社紹介
5.1 HTTP監視
6. まとめ


会社プロフィール
株式会社クニエは、ザカティーコンサルティング株式会社とNTTデータビジネスコンサルティング株式会社が
経営統合し、2009年7月1日より新しくスタートいたしました。

■ 会社名

株式会社クニエ

■ 設立

２００９年７月１日

■ 株主

株式会社 NTTデータ・コンサルティング（１００％）

■ 資本金

９５百万円

■ 従業員数

３００名

■ 代表取締役社長

高木真也

■ 事業内容

経営戦略・企業変革を実現するためのコンサルティングサービスの提供

■ URL

www.qunie.com

■ 所在地

本社
大阪オフィス
名古屋オフィス
福岡オフィス


（英文 QUNIE CORPORATION）

〒107-0051
〒530-0003
〒461-8605
〒812-0011

東京都港区元赤坂1-2-7 赤坂Kタワー
大阪市北区堂島3-1-21 NTTデータ堂島ビル
名古屋市東区葵1-20-6 NTTデータ葵ビル
福岡市博多区博多駅前1-17-21 NTTDATA博多駅前ビル

ITインフラ関連サービスメニュー


クニエのパートナーシップ

HinemosはNTTデータが開発主体となって
いるオープンソースの統合運用管理ツー
ルです。クニエはHinemosのソリューシ
ョンパートナーです。

クニエは Amazon Web Services の
APNコンサルティングパートナーです。

クニエはSAPのサービスパートナーです。



1.
2.
3.
4.
5.

会社紹介
5.1 HTTP監視
6. まとめ


HinemosではWebサービスAPIを利用することができます。(以降WebAPIと表記)
Hinemos WebAPIを利用する事により、人手を介さず (スクリプト等から)Hinemosマネージ
ャに対する操作が可能となります。

別のアプリケーション

WebサービスAPI
WEBサービスクライアント
（スクリプトなど）

Hinemos Manager
（Version4.0以降）


スケジューラ
(cronなど)

Hinemos

WebAPI 操作の種類
 例えばジョブ操作
• ジョブの実行
・・・・・・・・・・ runJob
• ジョブ実行履歴の取得・・・・・ getJobHistoryList
• ジョブスケジュールの設定・・・ setScheduleStatus
などの操作がWebAPIにより実行可能
ジョブ

監視

カレンダ－

監視設定

アクセス制御

通知

収集項目

メンテナンス

メールテンプレート

リポジトリ

一括制御

性能管理

VM管理

ジョブマップ

ノードマップ

クラウド


WebAPI スクリプト
QUNIEでは、ジョブ操作、監視、カレンダー、監視設定等の主要なWEBサービス機能を操
作するPythonスクリプト用意しています。
保守契約の
カスタマーへ提供
Hinemos Manager 168個のPythonスクリプトを用意（2013年11月時点）
Version4.0.x
ジョブ

監視

カレンダ－

監視設定

アクセス制御

通知

収集項目

メンテナンス

メールテンプレート

リポジトリ

一括制御

性能管理

VM管理

ジョブマップ

ノードマップ

クラウド


WebAPI プラスα

WebAPI

プラスα

Pythonスクリプト

運用効率化



1.
2.
3.
4.
5.

会社紹介
5.1 HTTP監視
6. まとめ


システムメンテナンス等で一部のサーバへの監視を一時的に無効にしたい

本番機

本番機
一部のサーバを
監視停止

検証機

Hinemos
Manager

開発機

HinemosAgent


検証機

Hinemos
Manager

開発機

HinemosAgent

監視有効・無効化監視停止の方法
Hinemosで監視を無効にするには以下の方法あります。

方法

単位

カレンダの実行例外

カレンダー

△

対象の監視項目を無効化

監視項目

△

監視スコープから割当て除外

監視項目

○

ノードの管理対象フラグをオフ

ノード

◎

【凡例】特定のサーバだけの監視を無効化する時
◎：適格
○：適格（但し、状況による）
△：不適格

監視有効・無効化カレンダの実行例外
カレンダの実行規則と実行例外の機能を利用することで監視の有効、無効を制御します。
監視用カレンダ
0:00

11/23

0:00

11/24
6:00

21:00

0:00

カレンダ実行規則
実行例外期間はこのカレンダを参照する
全ての監視設定が停止する。

カレンダの実行例外
全てのサーバの監視が無効


カレンダ実行例外

特定のサーバの
監視を無効

監視有効・無効化監視項目の有効・無効
各監視項目を有効・無効することで、監視の有効・無効を制御します。
このサーバのみ
監視を無効化したい

関係のないサーバへ
影響あり

Ping監視
Ping監視

Ping監視
Ping監視
無効化

Ping監視

Ping監視

Hinemos
Manager

各種監視設定を
有効・無効

Ping監視

Hinemos
Manager

特定のサーバの監視
を有効・無効

監視有効・無効化監視スコープから除外
監視用のスコープからノードを「割当て」、「割当て解除」をすることで監視の有効・無効を
制御します。
監視スコープ群

監視有効・無効にしたいノード群

PING監視用
スコープ

リソース監視用
スコープ

プロセス監視用
スコープ

HTTP監視用
スコープ

シスログ監視用
スコープ

カスタム監視用
スコープ

スコープ
割当て

スコープ
割当て解除

「スコープ数」×「対象ノード数」の
数だけ操作が必要

監視有効・無効化ノード管理対象チェック
ノードの管理対象のチェックをオン・オフすることで監視の有効・無効を制御します。
このサーバのみ
監視を無効化したい

チェックをはずすと
Hinemos管理対象外

Hinemos
Manager

Hinemos
Manager

ノード単位で柔軟に対応可能

監視有効・無効化監視用ノードとジョブ用ノードの登録
各サーバごとに、監視用とジョブ用のノード登録をする。
WebAPIより監視用ノードの管理対象のチェックをオン・オフし監視のみを制御する。

監視用
ノード

Python
スクリプト

ジョブ用
ノード
Hinemos Agent


Hinemos Manager

監視有効・無効化スクリプト
Repository_setValid.py [-H MANAGERHOST] [-U USER] [-w PASSWORD]
[-F FACILITYID] [-V VALID{True|False}]


監視有効・無効化まとめ

WebAPI

プラスα

ノード管理対象フラグ
「オン」・「オフ」スクリプト

監視用ノード
ジョブ用ノード

運用効率化
・監視有効・無効化ジョブ
・監視無効化でもジョブ実行が可能



1.
2.
3.
4.
5.

会社紹介
5.1 HTTP監視
6. まとめ


 Hinemosではジョブで定義するコマンドの引数は固定
 JP1ではジョブで定義するコマンドの引数の値を柔軟に設定が可能

JP1
定義済み
ジョブ

JOB [マクロ変数]

コマンド
実行

ajsentry –c パラメータ

ジョブ
実行

JOB [マクロ変数]


Hinemosジョブの動的起動 Hinemosではどうするか？

ジョブ実行
WebAPI経由でジョブを実行

ジョブ実行Pythonスクリプト
動的パラメータ設定
システムジョブ変数を利用します

実行契機情報


Hinemosジョブの動的起動実行契機情報
WebAPI経由でジョブを実行した時、システムジョブ変数「実行契機情報」へ任意の値をセッ
トすることができます。

ジョブ実行方法

実行契機情報の値

手動実行

Hinemosユーザ

スケジュール実行

スケジュール名

WebAPI経由

任意の値


Hinemosジョブの動的起動パラメータ引き渡し
WEBサービス経由でジョブを実行した時、システムジョブ変数「実行契機情報」へは
任意の値をセットすることができます。

ジョブ実行スクリプト
Job_runJob.py ...
-j Z100N000J001
-i hogehoge

システムジョブ変数[TRIGGER_INFO]
にスクリプトで指定した値が
引き継がれます

Hinemos
Manager


Hinemosジョブの動的起動スクリプト
Job_runJob.py [-H MANAGERHOST] [-U USER] [-w PASSWORD] [-u JOBUNITID]
[-j JOBID] [-i TRIGGERINFO] [-t TRIGGERTYPE]


Hinemosジョブの動的起動ジョブの集約
同じ処理に対してパラメータの数だけジョブを作成しているような場合
動的起動の仕組みを利用してジョブ数を集約します。

仮想OS停止
ジョブネット
サーバA
バックアップ
サーバB
バックアップ

スナップ
ショット
仮想OS起動

サーバC
バックアップ
サーバD
バックアップ

対象サーバの数だけジョブネット
を作成

仮想OS停止
ジョブネット
バックアップ

スナップ
ショット
仮想OS起動

・ジョブネットを1つ作成しAPIより実行
・対象サーバをパラメータで指定

Hinemosジョブの動的起動まとめ

WebAPI

プラスα

ジョブ実行スクリプト

システムジョブ変数
の活用

運用効率化
・ジョブの動的実行
・ジョブ数の集約も可能


1.
2.
3.
4.
5.

会社紹介
5.1 HTTP監視
6. まとめ


Hinemosの標準機能にはない監視機能をカスタム監視として実装し、Qunieテンプレートと
して提供しています。

Hinemos標準にない監視
簡易レポート機能



HTTP監視

1.
2.
3.
4.
5.

会社紹介
5.1 HTTP監視
6. まとめ


HTTP監視
Hinemosの標準機能はHTTPのステータス監視に対応していません

HTTP監視(標準機能)
HTTPコマンド
(http://xxx.xxx.xxx)

HTTP Request
HTTP Response

応答時間
Hinemos Manager

文字列
ステータス

ステータスはカスタム監視で

監視対象

HTTP監視 curlコマンド

HTTPステータス監視のコマンド
curl -I http://#[HTTPINT_URL] -k 2>&1 | awk '/^HTTP¥//{printf("HTTP_STATUS,%s¥n",$2)}'

特徴
ワンライナー

ノード変数の活用

スクリプトの配置・管理不要

監視の追加が簡単

運用の負担を軽減

Windowsサービス監視

1.
2.
3.
4.
5.

会社紹介
5.1 HTTP監視
6. まとめ


Windowsサービス監視
Hinemosの標準機能ではエージェント毎にWinRMの設定が必要になります。

Windowsサービス監視(標準機能)
サービスの問い合わせ

Windows Remote
Management

ステータスの取得

WinRMの有効化
Hinemos Manager

監視対象ノードごとに必要

監視対象

Qunie流カスタム監視でシンプルに

Windowsサービス監視 scコマンド

Windowsサービス監視のコマンド
sc ¥¥#[NODE_NAME] query #[SERVICE_020] | findstr "RUNNING" 1>&2 1>nul &&
echo #[SERVICE_020]_STATUS,0||
echo #[SERVICE_020]_STATUS,1&& sc ¥¥#[NODE_NAME] query #[SERVICE_020] 1>&2

特徴
ワンライナー

ノード変数の活用

スクリプトの配置・管理不要

監視の追加が簡単

運用の負担を軽減

Windowsサービス監視エージェントレス対応
Windowsサービスのカスタム監視はエージェントレス対応です。
カスタム監視（監視対象上で実行）
②コマンド実行

①コマンド実行情報の送信
SCコマンド

③コマンド実行
結果を取得

④コマンド実行結果の転送
HinemosManager

HinemosAgent

カスタム監視（単一のエージェントで実行）
②コマンド実行

①コマンド実行情報の送信
SCコマンド

④コマンド実行結果の転送
HinemosManager

③コマンド実行
結果を取得

HinemosAgent

監視対象

レポーティング

1.
2.
3.
4.
5.

会社紹介
5.1 HTTP監視
6. まとめ


レポーティング
カスタム監視を利用して簡易的なレポーティング機能が実現できます。

各種監視結果
・各種リソース
監視結果
・カスタム監視結果
等々

一日一回メールで
通知してほしい

Hinemos Manager

Qunie流カスタム監視

レポーティング仕組み
各種監視結果をシスログへ出力し、シスログの情報をメール通知します。
Hinemos
Manager

監視対象
①リソース監視等の各種監視

シスログ
②監視結果をマネージャのシスログ
へ出力
③ジョブにてフラグファイル作成(1日1回)
カスタム監視 ④カスタム監視にて、フラグファイル

が存在する時、シスログの内容を抽
出しメール通知する


レポーティングシスログへ出力
ログエスカレーション通知により、監視結果をシスログへ出力します。

ログエスカレーション通知
Hinemos Manager

任意のノード上のSyslogサー
バへ通知内容を転送する機
能です

シスログ

・自身のシスログへ出力
・監視結果のみを出力する
シスログファイルを別途作成


レポーティングレポーティング用カスタム監視
シスログの内容をコマンド実行時の標準エラーへ出力します
レポーティング用

カスタム監視コマンド

if [ -f /opt/qunie/status/FLAGFILE ];
then echo "REPORTSTS,0" ;
grep -h "`date +"%Y/%m/%d"`" /var/log/hinemos-#[NODE_NAME]-Report.log* 1>&2;
rm -f /opt/qunie/status/FLAGFILE;
else echo "REPORTSTS,1" ;
fi
カスタム監視のオリジナルメッセージ
#[ORG_MESSAGE]
[実行コマンド]
echo “key,value”;
grep [検索語句] /var/log/xxxx.log 1>&2
[STDOUT]
REPORTSTS,0
[STDERR]


シスログの内容を
標準エラーへ渡すことで
レポーティング機能を実現

レポーティングメール内容
レポート内容


まとめ

1.
2.
3.
4.
5.

会社紹介
5.1 HTTP監視
6. まとめ


まとめ

WebAPI

カスタム監視

Hinemos基本機能を制御する
スクリプト群とノウハウ

標準にない監視を実現

QUNIEテンプレートの一部です


まとめ

QUNIEテンプレート
初期構築
運用支援
 一定の共通設計
 効率的なサポート
 操作ドキュメントの整備
 トラブルの共有
 ナレッジの反映
 ナレッジの共有
運用サイクルを
 作業の標準化
効率的、効果的に支えます  定期的な最適化
 有効な初期設定
 運用変化に合わせた設
 トラブルの少ない導入
定支援
.....
.....

運用管理でお困りのことが
ございましたらご相談ください

付録：クニエの関連ソリューション・サービス
1. クラウド関連のサービス・ソリューション
2. Hinemos クラウドサービス運用管理ソリューション for Amazon Web Services
3. Hinemos SAP連携ソリューション


クラウド関連のサービス・ソリューション
クニエは先進のクラウド技術に取組み、オープンソースソフトウェアなどを活用し企業のIT環境の最適化を支援しています。

基盤構築

最適なインフラ
バックアップ
DR

移行

サーバ
データベース
SAP

パブリック
クラウド

運用管理

Hinemos 監視
Hinemos ジョブ管理

セキュリティ

クラウド環境暗号化 ProtectV
WAF InfoCage SiteShell

インターフェース

ETL Talend

システムイニシアティブ支援
アセスメント

仮想プライ
ベートクラウ
ド

クラウドサービス運用管理ソリューション for Amazon Web Services
HinemosによるAmazon Web ServicesのEC2/EBS/S3で構成されるリソース群の運用管理を実現します。
監視機能の他、テンプレート化したバックアップ、サーバ制御機能もご提供いたします。

Amazon Web Services
EC2

EC2
EBS

S3

EC2
EBS

EBS

コントロール
•監視
•リソースコントロール
•バックアップ
•課金アラート
Amazon EC2 API / Hinemos WebAPI

QUNIEフレームワーク
クラウドサービス運用管理ソリューション for Amazon Web Services
クラウド管理オプション


機能活用
•バックアップ
・Storage Gateway
•災害対策

Hinemos SAP連携ソリューション
クニエのHinemos SAP連携ソリューションは、監視管理、ジョブ制御の機能を提供します。
双方の機能を併せ持つ、Hinemosの特徴を生かし、運用の効率性を高めることと、大幅なコスト削減の両立
を実現します。

Hinemos環境への追加構築設定としてご提供いたします。
よって、SAPオプションとしての追加ライセンス費用は発生しません。


本件に関するお問い合わせ先
シニア・テクノロジー・アーキテクト

TEL
HP
E-MAIL

: 03（5785）2292
: http://www.qunie.com
: info@qunie.com

阪⽥

義浩

Yoshihiro Sakata

sakatay@qunie.com
（直通）Tel: 080-7003-7682

Fax 03-5785-2293

シニア・テクノロジー・コンサルタント

芦⽥

剛⼠

Satoshi Ashida

ashidas@qunie.com
（代表）Tel: 03-5785-2292


Fax 03-5785-2293

【Hinemos World 2013】A-3：Hinemos運用Hacks ～マニュアルにないノウハウを公開します（株式会社クニエ）

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Viewers also liked

Viewers also liked (20)

Similar to 【Hinemos World 2013】A-3：Hinemos運用Hacks ～マニュアルにないノウハウを公開します（株式会社クニエ）

Similar to 【Hinemos World 2013】A-3：Hinemos運用Hacks ～マニュアルにないノウハウを公開します（株式会社クニエ） (20)

More from Hinemos

More from Hinemos (20)

【Hinemos World 2013】A-3：Hinemos運用Hacks ～マニュアルにないノウハウを公開します（株式会社クニエ）