1. Copyright © GREE, Inc. All Rights Reserved.Confidential
GREEにおける
Sumo Logic活用事例

2. Copyright © GREE, Inc. All Rights Reserved.Confidential
自己紹介
• 反田 光洋
• グリー株式会社
• 開発本部インフラストラクチャ部
• モニタリングシステムの構築 / 運用

3. Copyright © GREE, Inc. All Rights Reserved.Confidential
アジェンダ
• 環境の変化にともなう課題
• ログ収集基盤の要件
• Sumo Logic採用の理由
• 課題の解決
• ログの収集と保管
• 柔軟なログ参照権限管理
• マネージドでスケーラブルなログ収集基盤
• ログ分析機能によるログの有効活用

4. Copyright © GREE, Inc. All Rights Reserved.Confidential
環境の変化にともなう課題
• 組織の多様化、開発拠点の増加 (2015年)
• 多様な雇用形態、兼務など
• リスク対策としてより厳密な権限管理が必要
• オンプレミスからクラウドへ (2016-2017年)
• 20を超えるサービス
• 数千台のオンプレミスサーバ
• 約1年でAWSへ全面移行
• クラウド環境への適応が必要

5. Copyright © GREE, Inc. All Rights Reserved.Confidential
ログ収集基盤の要件
• インスタンスのライフサイクルとは独立したログ保管
• 組織構造とは独立した柔軟な権限管理
• クラウド環境に適したスケーラビリティ
• 運用不要なマネージドサービス
• サービス運用に必要なログ分析機能

6. Copyright © GREE, Inc. All Rights Reserved.Confidential
Sumo Logic採用の理由
• 海外子会社での利用実績
• エンタープライズ向けのセキュリティ機能
• クラウド環境への適応性
• 高度なログ分析機能

7. Copyright © GREE, Inc. All Rights Reserved.Confidential
課題
1.ログの収集と保管
2.柔軟なログ参照権限管理
3.マネージドでスケーラブルなログ収集基盤
4.ログ分析機能によるログの有効活用

8. Copyright © GREE, Inc. All Rights Reserved.Confidential
ログの収集と保管
• ピークタイムにあわせてインスタンス台数をスケール
• インスタンス内にあるログは1日以内に消えてしまう
• インスタンスとは独立したログ保管領域が必要
• アクセスログは量が多すぎるため、S3にのみ保管
• エラーログなど調査に必要なログはSumo Logicに保管

9. Copyright © GREE, Inc. All Rights Reserved.Confidential
組織構造とは独立した柔軟な権限管理
• Role-Based Access Controlを利用
• 権限管理と分析に適したSource Categoryを設計
• 1ログエントリごとにメタデータを設定
• サービス名、ログ用途、ログ出力元、ログ種別
• 例: Service_Application_PHP_Error
• 社内の認証システムとSAMLで連携
• 権限付与の承認申請フローを整備
• 認証システムで権限を集中管理

10. Copyright © GREE, Inc. All Rights Reserved.Confidential
マネージドでスケーラブルなログ収集基盤
• ゲームリリースなどにより、突発的にログが増加する
• インスタンス台数規模で数倍になることもある
• ログ受信側のキャパシティプランニングが困難
• ログ収集基盤自体の信頼性が必要
• 自社運用による信頼性向上には限界がある

11. Copyright © GREE, Inc. All Rights Reserved.Confidential
ログ収集基盤の全体構成

12. Copyright © GREE, Inc. All Rights Reserved.Confidential
マネージドでスケーラブルなログ収集基盤
• On-Demand Capacityを有効活用
• 一時的なログ送信量の増加に対応
• 一日単位の送信可能量の数倍〜10倍程度までは送信可能
• fluentdを併用することでログの欠損防止
• ログの分析性能もSumo Logic内でスケール

13. Copyright © GREE, Inc. All Rights Reserved.Confidential
ログ分析機能によるログの有効活用
• Parse Operators
• ログ読み込み時にパースして値を抽出
• ログ送信前のパース不要
• 元のログ出力フォーマットのまま送信できる
• MySQLのスロークエリログをグラフ化して傾向分析

14. Copyright © GREE, Inc. All Rights Reserved.Confidential

15. Copyright © GREE, Inc. All Rights Reserved.Confidential
ログ分析機能によるログの有効活用
• LogReduce
• タイムスタンプなどの違いを認識しログを要約
• エラーログの出力傾向を調査

16. Copyright © GREE, Inc. All Rights Reserved.Confidential
ログ分析機能によるログの有効活用
• Live Tail
• 全てのインスタンスのログに対してtail –fできる
• コードのリリース直後のログ監視に利用

17. Copyright © GREE, Inc. All Rights Reserved.Confidential
まとめ
• 柔軟な権限管理により、組織の課題に対応できた
• サービスの運用体制をクラウド環境に適応できた
• 収集したログを有効活用できる基盤が整った

18. Copyright © GREE, Inc. All Rights Reserved.Confidential