02_運用コスト削減に向けた情報管理を！最新Hinemos ver.6.2の全体像

© 2019 NTT DATA INTELLILINK Corporation
運用コスト削減に向けた情報管理を！
最新Hinemos ver.6.2の全体像
NTTデータ先端技術株式会社

2© 2019 NTT DATA INTELLILINK Corporation
1. Hinemos ver.6.2製品コンセプト
2. 運用コスト削減に向けた情報管理を！
新機能とユースケース
3. 動作要件
4. おわりに

© 2019 NTT DATA INTELLILINK Corporation 3
Hinemosの実現する攻めの運用の強化

Hinemosとは
エンタープライズシステム運用管理に必要な幅広い機能を備えた
統合運用管理ソフトウェア
自動化
監視・性能
収集・蓄積

自動化監視・性能収集・蓄積
統合運用管理を実現する機能をワンパッケージで提供
・収集…サーバ機器、端末、OS、MW、AP
などのありとあらゆるデータを収集
・蓄積…収集したデータを管理、活用
・監視…収集したデータをもとに、システムの
稼動状況を確認し、異常を検知
・性能…蓄積されたデータに対して、グラフを
用いて分析
・構築自動化…環境構築の一連の作業を定型化
し、複数環境に対し一括で実行
・業務自動化（ジョブ管理）…システム運行に
必要な様々な処理を一元的に管理・実行
・運用自動化（Runbook Automation）…確
認・判断作業も含めた運用プロセス自動化

①構成情報の収集・管理の強化

運用管理を行うためには
収集・蓄積監視・性能自動化
リポジトリアカウント通知カレンダ
共通基本
相互連携相互連携
利用利用利用
統合運用管理には、コアとなる共通機能、が必要であり、
この共通機能の利便性が、運用性の向上に大きく影響します

リポジトリ機能システム構成の管理
リポジトリ
DB
ノード登録
分
類
スコープ設定
多段階層の
グルーピングが可能
ノードの複数所属
が可能
監視・ジョブ実行対象
にスコープ指定が可能
テンプレート化が容易に
個々のノードに紐づかない、スコープ単位
での監視・ジョブ定義が可能に
監視・ジョブ設定数を集約
10,000ノードあっても1スコープに集約す
れば1設定で監視・ジョブが可能に
設計がシンプルに
論理的なグループ単位での監視・ジョブ設
計が、そのまま設定に反映できる
オンプレ・VM・クラウド上の管理対象（ノード）を自動検出し、
利用用途でグループ化（スコープ）して設計も運用もシンプルに
ノードサーチ
IPレンジ指定による機器の
自動登録
仮想マシン自動検出
専用APIを使った自動登録

リポジトリ機能システム構成の管理
リポジトリ
DB
Hypervisor Hypervisor
DC DC DC DC
リージョンリージョン
オンプレ環境仮想化環境クラウド環境
ターゲット
自動検出
インフラ構成
自動検出
動的に変更するインフラ構成はHinemos
に任せ、論理的なシステム構成に
注力して設計・運用ができる

リポジトリ機能マシン構成の管理
ノード情報取得ノード情報活用
リポジトリ
DB
◆変更履歴の確認とアラート ◆構成情報の検索と見える化
PKG
Ver.1
PKG
Ver.1
PKG
Ver.2
PKG
Ver.2
変更時にアラート
過去時点の状態を確認
RedHat And Tomcat 5
検索条件
GUI表示
CSV出力リポジトリ登録
構成変更のサイクルを実現
対象特定⇒構成変更⇒結果確認のサイクルを
全てHinemosだけで実現
早急な脆弱性点検が可能に
定期・不定期に発生する脆弱性問題に対する
点検が検索するだけで実現
構成情報の管理工数削減
初期作成後、メンテナンスが漏れがちな構成
情報もHinemosが自動で取得
デバイス情報だけではなく、パッケージ情報・プロセス情報まで
取得し、履歴管理とデータ活用により運用効率化を実現
デバイスサーチ
監視に必要なデバイス情報
の取得
構成情報取得
パッケージ・プロセス情報
を含めた構成情報の取得
活
用
New

運用が振り回される導入パッケージの脆弱性・不具合
◆不定期に発生する高い脆弱性問題
日時タイトル
2018/8/23 Apache Struts 2 の脆弱性 (S2-057) に関する注意喚起
2018/8/9 ISC BIND 9 サービス運用妨害の脆弱性 (CVE-2018-5740) に関する注意喚起
2018/7/23 Apache Tomcat における複数の脆弱性に関する注意喚起
2018/5/22 ISC BIND 9 の脆弱性に関する注意喚起
2018/4/17 Spring Frameworkの脆弱性（CVE-2018-1271）について
2018/4/13 Spring Data Commonsの脆弱性に関する注意喚起
2018/4/10 Spring Frameworkの遠隔コード実行の脆弱性(CVE-2018-1270)の対応について
2018/1/17 ISC BIND 9 の脆弱性に関する注意喚起
◆定期に確認が必要な脆弱性問題
定期・不定期に発生する脆弱性・不具合には必ず対応が求められる
◆運用中に見つかる業務影響のある不具合
今は正常
だが
１ヶ月後に
異常
例）Tomcatのメモリリーク
JMX監視によるヒープサイズの将来予測

パッケージ管理の対応の難しいポイント
・クリティカル度によって即時・即日の判断が求められる
緊急性
計画困難
一定頻度
・不定期、かつ、内容により判断が必要となり計画化が難しい
・一定量の工数の確保が確実に必要となる

パッケージのバージョンアップ作業のフロー
作業の迅速化と信頼性の向上に向けたステップが必要
対象特定事前評価変更実施結果確認検知
リスク
診断
構成情報から
対象を特定し
影響度を判断
検証環境にて
作業手順を評
価確認
本番環境にて
構成変更を
実施
作業評価と
サービス影響
を確認
迅速な判断と安全な作業実施
そして
それを実現する構成情報のメンテナンスが重要に
迅速な特定作業ミス回避様々な実行契機作業漏れの回避
リスクの影響
度の確認（机
上の範囲）
監視の予兆や
配信サービス
で気づき

パッケージ管理の運用コスト削減の肝
迅速な対象特定と結果確認が実現できると運用コスト削減に繋がる
◆環境変更の操作自体は機能・ツールが充実
◆環境の分散・サイロ化が構成情報の管理を複雑化
パッケージの配布
NEW
設定ファイルの置換配布
差分チェック
host=node001
ip=192.168.0.2
パッケージの更新
host=node001
ip=192.168.0.1
あるDCの環境2000台を1回の実機確認にかかる稼動
1台3分とし、2000台に実施
3分×2000台 = 6000分 = 100時間 ≒ 4.1日
エクセル＆人手の作業での限界

運用コスト削減に向けた情報管理とアクション連携
ハードウェア
ファームウェア/BIOS関連
CPU情報
メモリ情報
ディスク情報
OS
OS種類
OSバージョン
適用パッチ
設定情報
仮想環境
仮想化技術の種類
仮想化ソフトウェア名
バージョン
クラウド環境
クラウドの種類
インスタンス情報
リソース情報
ミドルウェア
バージョン
適用パッチ
設定情報
OSパッケージ
バージョン
適用パッチ
設定情報
ログ
ログファイル
NWパケット
センサデータ
パフォーマンス
リソース値
応答時間
ログ件数
アプリケーション
バージョン
適用パッチ
利用ライブラリ
システム
構成情報管理
・現在の構成
・変更履歴
自動取得
パッケージの配布
NEW
設定ファイルの置換配布
差分チェック
host=node001
ip=192.168.0.2
パッケージの更新
host=node001
ip=192.168.0.1
＋シームレスなアクション連携
リポジトリ
DB

①パッケージ・プログラム情報の自動収集
パッケージ情報
プロセス情報
OS・HWデバイス情報
ユーザ任意情報
・OS・ホスト名
・CPU・メモリ・ディスク
・ネットワーク
・ファイルシステムWindowsパッケージ情報：
プログラム Linuxパッケージ情報：
RPM/deb
Hinemosエージェントによる
低負荷な情報収集
自動取得
・ユーザ定義コマンドの実行結果
OSパッケージ管理以外で個別にインストールした
パッケージ・プログラム情報も管理対象に
マシン構成情報である、パッケージ・プログラム情報を自動的に
収集して、リポジトリDBに蓄積・管理
New
リポジトリ
DB

②パッケージ・プログラム情報の履歴管理
AP
サーバ
#3
AP
サーバ
#2
AP
サーバ
#1
Web
サーバ
#2
Web
サーバ
#1
マシン構成情報は過去から現在までの状態を蓄積・管理し、
バージョンなどの構成の変化を契機としてユーザに通知
AP PKG
5.0.20
AP PKG
5.0.20
AP PKG
5.0.20
WebPKG
2.0.10
WebPKG
2.0.10
時刻
AP PKG
5.0.20
AP PKG
5.0.20
AP PKG
5.0.20
WebPKG
2.0.10
WebPKG
2.0.10
AP PKG
5.0.21
AP PKG
5.0.20
AP PKG
5.0.21
WebPKG
2.0.10
WebPKG
2.0.10
AP PKG
5.0.21
AP PKG
5.0.20
AP PKG
5.0.21
WebPKG
2.0.10
WebPKG
2.0.10
AP PKG
5.0.21
AP PKG
5.0.20
AP PKG
5.0.21
WebPKG
2.0.10
WebPKG
2.0.11
syslog構成情報が変わったタイミングで
ユーザに通知
PKG更新漏れが
無いか？このPKG更新は
申請がない
New

③パッケージ・プログラム情報の検索と見える化
AP
サーバ
AP PKG
5.0.20
AP PKG
5.0.20
AP PKG
5.0.21
AP PKG
5.0.21
AP PKG
5.0.22
時刻21日 22日 23日 24日 25日
過去時点を指定して検索が可能
検索ダイアログ
検索結果
◆GUI上で一覧表示 ◆CSVファイル出力 ◆スコープ作成
過去の任意の時点でのマシン情報が検索可能、かつ、
検索結果はCSV出力や他機能と連携用にスコープ作成が可能
New

具体的なユースケース
リスク
診断
セキュリティ
配信サービス
CVE-2019-xxxx
パッケージ名：
hogehoge
対象バージョン： 1.5
以下…
脆弱性情報
今は正常
だが
１ヶ月後に
異常
セキュリティアナウンス運用中のアラート
CVEからリスク判断アラート内容からリスク判断
例）Tomcatのメモリリーク
JMX監視によるヒープサイズの将来予測

リスク
診断
脆弱性対象ノードの検索
①検証環境用のスコープ作成
②本番環境用のスコープ作成
③チェック用CSVファイル出力
検証環境PKG01グループ
検証ノード#51
検証ノード#72
本番環境PKG01グループ
本番ノード#51
本番ノード#72
検証環境用本番環境用

リスク
診断
検証ノード#51
検証ノード#72
本番ノード#51
本番ノード#72
パッケージ
配布
パッケージ
更新
プロセス
停止
プロセス
起動
サービス
状態確認
承認承認
承認
ジョブ
環境高構築
ジョブ
コマンド
ジョブ
コマンド
ジョブ
コマンド
ジョブ
監視
ジョブ
承認
ジョブ
パッケージ更新ワークフロー
実行対象に
検証環境用スコープを指定
Hinemosで
完結
証跡取得
承認
定型化

リスク
診断
検証ノード#51
検証ノード#72
本番ノード#51
本番ノード#72
パッケージ
配布
パッケージ
更新
プロセス
停止
プロセス
起動
サービス
状態確認
承認承認
承認
ジョブ
環境高構築
ジョブ
コマンド
ジョブ
コマンド
ジョブ
コマンド
ジョブ
監視
ジョブ
承認
ジョブ
パッケージ更新ワークフロー
あとは自動的にマシン構成情報が更新されます
対象切替のみ
メンテナンス
日起動
深夜起動
システム連動

②オペレーションサポート機能の強化

運用オペレーションの課題と変遷
①完全手作業によるオペレーション
②オペレーションの自動化
③ユーザ判断も含めた
イベントドリブン型オペレーション
計画実行型（PDCA）では運用完全自動化が限界に
・ターゲットシステムの変化
・運用改善サイクルの実施
イベントドリブン型（OODA）運用改善へ
・知識集約と定型化
・柔軟なユーザ判断も可能な運用
ターゲットシステムが簡易に変更する中、完全自動化が困難なた
め、知識を集約しつつ柔軟なオペレーションが可能な基盤が必要

オペレーションの自動化とは
発生イベントからの機械的な処理連動、システム連携は、
通知機能を使って簡易に実現可能
サーバ機器のダウン
プロセスのダウン
業務の終了
PING
監視
プロセス
監視
ログファ
イル監視
パトライト
鳴動コマンド
プロセス
再起動
サービス
死活監視
コマンド起動
ジョブ起動
メール送信
通報
復旧フロー
システム連携
GUIで設定するだけ＆抑制機能あり

①イベント情報・監視履歴画面の拡張
ユーザ拡張イベント
レイアウトカスタマイズ
監視履歴[イベント]ビューにユーザ定義列を追加可能
・最大40項目
・編集可/不可を設定可
・デフォルト値の設定可
・APIで投入
・イベントカスタムコマンドで
使用可
リッチクライアント、Webクライアントの単位で
列の表示順・幅を指定可能
レイアウト設定
表示に反映必要最低限の列のみ表示
見たい順に列の並び替えが
簡単に実現
イベント情報を拡張して、より多くの情報を保持することが可能
New

②イベント情報を使ったユーザー操作と履歴管理
①Hinemosプロパティでコマンド定義
②イベント選択
③コマンド選択＆実行
⑤実行履歴の保存
インシデント管理
システム
問題管理
システム
ユーザ操作による
イベント情報のシステム連動が容易に
④実行結果の確認
ユースケース
イベント情報を利用したユーザ判断を伴った操作が可能
New

③ジョブ機能の同時実行制御キュー

ジョブ管理におけるHinemosの特徴
Hinemosのメリットは、スコープ指定ができるため、
物理構成を意識しない論理的な構成で設計・設定が可能
Webサーバ
Webサーバ#1
Webサーバ#2
APサーバ#1
DBサーバ
DBサーバ#1
DBサーバ#2

ジョブの同時実行制御の拡張
ノード単位から複数のジョブを跨った単位での同時実行制御へ
ノード単位の同時実行制御
業務AP
Hinemosエージェント
バッチAP#1
バッチAP#2
バッチAP#3
バッチAP#4
多
重
度
を
指
定
拡
張
ノード単位
ジョブ単位
（単一ノードで実行）
ジョブ単位
（複数ノードで実行）
ジョブネット単位
複数のジョブネット
・ジョブを跨った単位
同時実行制御の単位の拡充

①同時実行制御キュー
ジョブA
ジョブB
ジョブネットC
同時実行制御キューQ1
同時実行制御キューQ2
同時実行数５
同時実行数１
or
キューの状態を可視化
◆ジョブ同時実行制御イメージ
同時実行制御キューの導入により、ジョブを跨った同時実行制御
が可能になります。
New
ジョブという論理的な
定義で制御が可能に

ジョブ管理の多彩な機能拡充の歴史
他社製品からのジョブ定義移行も実現できる多彩な機能拡充を実施
バージョン主な機能追加・改善
Hinemos ver.3.2 • ジョブのアクセス制御
• ジョブセッション管理の改善
• 起動コマンドの制約緩和
Hinemos ver.4.0 • 「Hinemos ジョブマップ（TM)」機能
• Hinemosエージェント通信機構の改善
（Webサービス化）
• ジョブ機能の性能改善（表示/登録の高速化、
同時実行数の向上）
Hinemos ver.4.1 • ジョブ種別（参照ジョブ）
• 実行契機（ファイルチェック）
• ビュー（スケジュール予定）
• エージェント単位の多重度実行制御
• 編集モード
• 内部時刻リセット
• 日跨ぎ対応（48時間カレンダ）
• スケジュールの繰り返し実行対応（最小実行
間隔を5分へ）
• ジョブ終了方法の改善（実行中のジョブに対
し、シグナル送信で終了可能に）
• ジョブ実行優先度
• ジョブの状態の詳細化
• ジョブの待ち条件の改善（先行ジョブのリ
ターンコードを利用可能に）
• ジョブ機能の性能改善（表示/登録の高速
化）
バージョン主な機能追加・改善
Hinemos ver.5.0 • ジョブの繰り返し実行
• ジョブのテスト実行
• Hinemosエージェント停止時のジョブス
テータス遷移（危険に遷移）
• コマンドの標準出力/標準エラー出力を通知
に利用可能
• コマンドにノードプロパティを利用可能
• ジョブの実行時間を表示
• ノード変数をジョブ変数に利用可能
• ジョブの条件改善（「セッション開始後の時
間」を追加）
• ジョブスケジュールの繰り返し間隔の改善
Hinemos ver.6.0 • RBA対応
• Hinemos時刻の追加（運用時刻の設定）
• スクリプト配布機能
• 承認ジョブの追加
• 監視ジョブの追加
• OS環境変数定義
• ランタイムジョブ変数の追加
• 順次リトライの動作改善
Hinemos ver.6.1 • 実行時間予測による終了遅延検知
• セッションを跨いだイベント連携
• 待ち条件のIf-Else対応
• 条件指定の繰り返し実行
Hinemos ver.6.2 • キュージョブによるジョブ同時実行制御
Hinemos ver.6.2新機能

動作要件

Hinemosの基本構成
管理DB
運用管理サーバ
(Hinemosマネージャ)
管理対象システム
(Hinemosエージェント)
運用管理端末
(Hinemosクライアント)
設定追加・変更
結果の表示
稼動監視
ジョブ実行指示
ログ送信
トラップ送信
 Hinemosは３つのコンポーネントから構成

Hinemos ver.6.2の動作環境
コンポーネント動作環境提供方法
Hinemosマネージャ RHEL/CentOS 7 GitHub
RHEL/CentOS 6 ご契約者向けサイト
Windows Server 2019(*1), 2016, 2012R2 ご契約者向けサイト
Amazon Linux2 ご契約者向けサイト
Hinemosエージェント RHEL/CentOS/OracleLinux 7, 6, 5 GitHub
Windows Server 2019, 2016, 2012R2, 2012, 2008R2,
2008
GitHub
Windows 10, 8.1, 8, 7 GitHub
Amazon Linux/Amazon Linux2 GitHub
Solaris 11,10 HP-UX 11i v3, AIX 7.2, 7.1 ご契約者向けサイト
SLES 15, 12, 11 GitHub
Ubuntu 16.04 LTS, 18.04LTS GitHub
Hinemosクライアント
(リッチクライアント)
Windows Server 2019(*1), 2016, 2012R2, 2012,
2008R2
GitHub
Windows 10, 8.1, 8, 7 GitHub
Hinemosクライアント
(Webクライアント)
Internet Explorer, Firefox, Chrome
（サポート対象ブラウザ）
GitHub
（※1） Hinemos ver.6.2.2対応予定

Hinemos Windows版マネージャ
• データベースは、Windowsにおいて信頼性が高いSQL Serverを採用
• スクリプトは、PowerShellを採用
• Hinemosマネージャの起動・停止・異常時はWindowsイベントログ
にメッセージを出力
• タスクトレイで状態確認や再起動などが可能
Windows Server
JVM
Program
SQL Server PowerShell
RHEL / CentOS
JVM
Program
PostgreSQL bash
Windows版マネージャ Linux版マネージャ
 ALL Windows環境で安定運用するためWindows対応をリリース

HinemosのVM・クラウド環境の動作サポート
 様々なVM・クラウド環境上でHinemosの動作をサポート
Amazon Web Services(AWS)
Microsoft Azure(Azure)
BizホスティングCloudn(Cloudn)
Managed Cloud Platform(MCP)
BizホスティングEnterpriseCloud(BHEC)
IIJ GIO(IIJ GIO)
ニフクラ(NIFCLOUD)
Google Cloud Platform(GCP)
IBM Cloud
VMware vSphere vCenter/ESXi
Hyper-V
KVM
XEN
クラウド環境VM環境
新しいVM・クラウド環境にも
随時対応します
オンプレミス環境からVM・クラウド環境に移行した場合でも
安心してHinemosが使えるように動作サポートを推進します。

バージョン互換性
 Ver.6よりバージョン互換性の対応を進めます。
ver.6.2
マネージャ
ver.6.0
エージェント
接続可能
Ver.6.0エージェントの
機能範囲で利用可
機能範囲で利用可
新バージョンの新機能を利用したい場合に
管理対象サーバに導入したHinemosエージェントをそのままで
Hinemosマネージャのみのバージョンアップで対応できます。
ver.6.2
エージェント
ver.6.1
エージェント
機能が全て利用可

おわりに

まとめ
• オンプレ・仮想化・クラウドの運用管理を効率化する
Hinemosに、新たに運用コスト削減に向けた新機能を追加
しました
• 構成情報の収集・管理の強化により、パッケージ管理の効
率化を実現します
• オペレーションサポート機能の強化により、より柔軟なオ
ペレーションをサポートします
• ジョブ機能の進化により、旧来システムからの移行や、
ユーザ目線でのジョブ設計が、より簡易になります
• 是非、新しいHinemos ver.6.2をご利用ください。

02_運用コスト削減に向けた情報管理を！最新Hinemos ver.6.2の全体像

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Similar to 02_運用コスト削減に向けた情報管理を！最新Hinemos ver.6.2の全体像

Similar to 02_運用コスト削減に向けた情報管理を！最新Hinemos ver.6.2の全体像 (20)

More from Hinemos

More from Hinemos (6)

Recently uploaded

Recently uploaded (11)

02_運用コスト削減に向けた情報管理を！最新Hinemos ver.6.2の全体像