SlideShare a Scribd company logo
1 of 19
© RecoChoku Co.,Ltd. Proprietary and Confidential
2017/01/26
Mackerel x Twilio
~レコチョクの場合~
© RecoChoku Co.,Ltd. Proprietary and Confidential
自己紹介
22017/2/1 22017/2/1
名前 伊藤 智之
部署 プラットフォーム推進部 基盤グループ
経歴 もともとは営業職。IT業界は、10年ちょい。。。
主に運用周りの設計や業務を担当
名前 鷹箸 兼介
部署 システム事業部 ミュージック・アーキテクトグループ
経歴 元Sierでシステム設計・構築・運用を主に担当
レコチョクに来てからはAWSの運用周りを担当
© RecoChoku Co.,Ltd. Proprietary and Confidential 32017/2/1 32017/2/1
・レコチョクについて
・監視システムについて
・Mackerel x Twilio
・まとめ
アジェンダ
© RecoChoku Co.,Ltd. Proprietary and Confidential 42017/2/1 42017/2/1
レコチョクについて
© RecoChoku Co.,Ltd. Proprietary and Confidential 5
(デバイス
=
ソフトウェア)インターネット× ×
× 音楽
レコチョクはどんなIT企業か?
© RecoChoku Co.,Ltd. Proprietary and Confidential 6
http://techblog.recochoku.jp/
外部に向けたエンジニア活動
© RecoChoku Co.,Ltd. Proprietary and Confidential 72017/2/1 72017/2/1
監視システムについて
© RecoChoku Co.,Ltd. Proprietary and Confidential 82017/2/1 82017/2/1
・プラットフォーム:AWS
・AWSアカウント:100over
※システム単位でアカウント作成
・ネットワーク構成:スター型でVPC Peering
・利用コンポーネント:
EC2:1000over、ELB:200over、 RDS:100over etc
レコチョクシステムについて
© RecoChoku Co.,Ltd. Proprietary and Confidential
①
92017/2/1 92017/2/1
システムA
監視項目: ①web監視
②ログ監視
③Cloudwacth Alarm監視
システム担当者
監視委託会社
②
③
HUB
既存の監視概要図
© RecoChoku Co.,Ltd. Proprietary and Confidential 102017/2/1 102017/2/1
・監視設定依頼申請の手間とリードタイム問題
・監視ツール混在状態
-グラフ確認 Cloudwatch
-アラート通知は、zabbix & Cloudwatch
・Zabbix自体の監視
・システム毎の属人化と監視レベルのばらつき
・監視コストの最適化
既存の課題
© RecoChoku Co.,Ltd. Proprietary and Confidential
①
112017/2/1 112017/2/1
システムA
システム担当者
②
③
監視項目:①web監視 → 外形監視
②ログ監視 → マカレルエージェント監視
③Cloudwacth Alarm監視 → AWSインテグレーション
Twillio
Mackerel導入後の監視概要図
organization A
© RecoChoku Co.,Ltd. Proprietary and Confidential 122017/2/1 122017/2/1
・監視設定依頼申請の手間とリードタイム問題
⇒システム担当で完結
・監視ツール混在状態
⇒Mackerelで一元管理
・Zabbix自体の監視
⇒Mackerelからの監視実装
・システム毎の属人化と監視レベルのばらつき
⇒Mackerelの利用ガイドラインを策定
・監視コストの最適化
⇒Mackerel x Twilio 連携して・・・ ここについて、掘り下げます!
Mackerel導入後の変化
© RecoChoku Co.,Ltd. Proprietary and Confidential 132017/2/1 132017/2/1
Mackerel x Twilio 連携して・・・
© RecoChoku Co.,Ltd. Proprietary and Confidential
重要度高
サービス影響あり
電話とSlack
重要度低
サービス影響なし
Slackのみ
Mackerel x Twilio 連携して・・・
142017/2/1
• zabbixで架電通知してたのでMackerelでもやりたかったが出来なかった
• 通知先がメールやSlack等だけだと障害を取りこぼす可能性がある
これがしたい
© RecoChoku Co.,Ltd. Proprietary and Confidential
Mackerel x Twilio 連携して・・・
152017/2/1
Git
Shell
Twilio 各設定
Mackerel上で
の設定内容
User A
User B
User C
TwiML
UserA
UserB
UserC
TwiML
Shell
TwiMLTwiML
TwiML
© RecoChoku Co.,Ltd. Proprietary and Confidential
Mackerel x Twillio 連携して・・・
162017/2/1
①メトリクス送信
②アラート検知
③TwiMLファイ
ル読み込み
④TwiML実行
⑤一定時間TwiML
ファイル読み込み
⑥架電通知開始
⑦順次発信
© RecoChoku Co.,Ltd. Proprietary and Confidential 172017/2/1 172017/2/1
まとめ
© RecoChoku Co.,Ltd. Proprietary and Confidential 182017/2/1 182017/2/1
まだまだ、導入システムが少ない!!
横展開の加速化、横断的に導入をリード!!
監視レベルの標準化
監視コスト最適化
Mackerel導入で、既存課題は潰し込めた!!!
今後の展開
© RecoChoku Co.,Ltd. Proprietary and Confidential
要望的な・・
192017/2/1
 Twilio
• ローテーションの柔軟性
• 発信者番号の通知(非通知みたいになる)
 Mackerel
• アラート内容のパラメータをTwilioに渡して欲しい
• アラート自動閉塞の設定
• Dashboard作る際にサジェストを出して欲しい
• AWSインテグレーションの対象が少ない
• メトリクスの保持期間延長
• スマホアプリ作って欲しい

More Related Content

What's hot

#recotech_レガシーなシステムから立て直すためにしたこと
#recotech_レガシーなシステムから立て直すためにしたこと#recotech_レガシーなシステムから立て直すためにしたこと
#recotech_レガシーなシステムから立て直すためにしたことrecotech
 
Amazon SageMaker の紹介 + デモ
Amazon SageMaker の紹介 + デモ Amazon SageMaker の紹介 + デモ
Amazon SageMaker の紹介 + デモ recotech
 
Global Azure Bootcamp 2019@Tokyo資料【ExpressRoute構築でハメられた】
Global Azure Bootcamp 2019@Tokyo資料【ExpressRoute構築でハメられた】Global Azure Bootcamp 2019@Tokyo資料【ExpressRoute構築でハメられた】
Global Azure Bootcamp 2019@Tokyo資料【ExpressRoute構築でハメられた】Dai Iwai
 
クラウド運用3足の草鞋151102
クラウド運用3足の草鞋151102クラウド運用3足の草鞋151102
クラウド運用3足の草鞋151102Keiichi Hashimoto
 
Introduction of Azure Database for MySQL / PostgreSQL
Introduction of Azure Database for MySQL / PostgreSQLIntroduction of Azure Database for MySQL / PostgreSQL
Introduction of Azure Database for MySQL / PostgreSQLKuniteru Asami
 
Amazon Kinesis Streams デモ
Amazon Kinesis Streams デモAmazon Kinesis Streams デモ
Amazon Kinesis Streams デモrecotech
 
Ansible はじめてみました
Ansible はじめてみましたAnsible はじめてみました
Ansible はじめてみましたTakeshi Kuramochi
 
フロントエンドエンジニアとしてAWS re:invent に行ってきました
フロントエンドエンジニアとしてAWS re:invent に行ってきましたフロントエンドエンジニアとしてAWS re:invent に行ってきました
フロントエンドエンジニアとしてAWS re:invent に行ってきましたToshiro Shimizu
 
自動構築と自動テスト〜インフラのコード化とクラウドの優位性
自動構築と自動テスト〜インフラのコード化とクラウドの優位性自動構築と自動テスト〜インフラのコード化とクラウドの優位性
自動構築と自動テスト〜インフラのコード化とクラウドの優位性azumakuniyuki 🐈
 
JAZUG 9周年イベント 懇親会ライトニングトーク
JAZUG 9周年イベント 懇親会ライトニングトークJAZUG 9周年イベント 懇親会ライトニングトーク
JAZUG 9周年イベント 懇親会ライトニングトークDai Iwai
 
最近のたまおきの取り組み 〜OpenStack+αの実現に向けて〜 - OpenStack最新情報セミナー(2017年3月)
最近のたまおきの取り組み 〜OpenStack+αの実現に向けて〜  - OpenStack最新情報セミナー(2017年3月)最近のたまおきの取り組み 〜OpenStack+αの実現に向けて〜  - OpenStack最新情報セミナー(2017年3月)
最近のたまおきの取り組み 〜OpenStack+αの実現に向けて〜 - OpenStack最新情報セミナー(2017年3月)VirtualTech Japan Inc.
 
『Zerto7.5』新機能全貌紹介! 統合/分析機能強化で、より最適なレプリケーションが可能に!
『Zerto7.5』新機能全貌紹介! 統合/分析機能強化で、より最適なレプリケーションが可能に!『Zerto7.5』新機能全貌紹介! 統合/分析機能強化で、より最適なレプリケーションが可能に!
『Zerto7.5』新機能全貌紹介! 統合/分析機能強化で、より最適なレプリケーションが可能に!株式会社クライム
 
ACE 第6回定例会 ショートプレゼン
ACE 第6回定例会 ショートプレゼンACE 第6回定例会 ショートプレゼン
ACE 第6回定例会 ショートプレゼンYui Ashikaga
 
Arukasの運用事例と、末永くインフラ運用していくためのTips(SRE Tech Talks #2)
Arukasの運用事例と、末永くインフラ運用していくためのTips(SRE Tech Talks #2)Arukasの運用事例と、末永くインフラ運用していくためのTips(SRE Tech Talks #2)
Arukasの運用事例と、末永くインフラ運用していくためのTips(SRE Tech Talks #2)さくらインターネット株式会社
 
ケガしないためのAws新サービスとre inventの過ごし方 株式会社アイディーエス_外木場さま
ケガしないためのAws新サービスとre inventの過ごし方 株式会社アイディーエス_外木場さまケガしないためのAws新サービスとre inventの過ごし方 株式会社アイディーエス_外木場さま
ケガしないためのAws新サービスとre inventの過ごし方 株式会社アイディーエス_外木場さまABEJA, inc.
 
110903 jazug lt_tanaka_pub
110903 jazug lt_tanaka_pub110903 jazug lt_tanaka_pub
110903 jazug lt_tanaka_pubTakayoshi Tanaka
 
OpenStackってどうよ?
OpenStackってどうよ?OpenStackってどうよ?
OpenStackってどうよ?Satoshi Konno
 
Riot.jsを用いたweb開発 takusuta tech conf #1
Riot.jsを用いたweb開発   takusuta tech conf #1Riot.jsを用いたweb開発   takusuta tech conf #1
Riot.jsを用いたweb開発 takusuta tech conf #1Keisuke Imai
 

What's hot (20)

#recotech_レガシーなシステムから立て直すためにしたこと
#recotech_レガシーなシステムから立て直すためにしたこと#recotech_レガシーなシステムから立て直すためにしたこと
#recotech_レガシーなシステムから立て直すためにしたこと
 
Amazon SageMaker の紹介 + デモ
Amazon SageMaker の紹介 + デモ Amazon SageMaker の紹介 + デモ
Amazon SageMaker の紹介 + デモ
 
Global Azure Bootcamp 2019@Tokyo資料【ExpressRoute構築でハメられた】
Global Azure Bootcamp 2019@Tokyo資料【ExpressRoute構築でハメられた】Global Azure Bootcamp 2019@Tokyo資料【ExpressRoute構築でハメられた】
Global Azure Bootcamp 2019@Tokyo資料【ExpressRoute構築でハメられた】
 
クラウド運用3足の草鞋151102
クラウド運用3足の草鞋151102クラウド運用3足の草鞋151102
クラウド運用3足の草鞋151102
 
Introduction of Azure Database for MySQL / PostgreSQL
Introduction of Azure Database for MySQL / PostgreSQLIntroduction of Azure Database for MySQL / PostgreSQL
Introduction of Azure Database for MySQL / PostgreSQL
 
Amazon Kinesis Streams デモ
Amazon Kinesis Streams デモAmazon Kinesis Streams デモ
Amazon Kinesis Streams デモ
 
ACI + Ansible
ACI + AnsibleACI + Ansible
ACI + Ansible
 
161218 cybozu SRE
161218 cybozu SRE161218 cybozu SRE
161218 cybozu SRE
 
Ansible はじめてみました
Ansible はじめてみましたAnsible はじめてみました
Ansible はじめてみました
 
フロントエンドエンジニアとしてAWS re:invent に行ってきました
フロントエンドエンジニアとしてAWS re:invent に行ってきましたフロントエンドエンジニアとしてAWS re:invent に行ってきました
フロントエンドエンジニアとしてAWS re:invent に行ってきました
 
自動構築と自動テスト〜インフラのコード化とクラウドの優位性
自動構築と自動テスト〜インフラのコード化とクラウドの優位性自動構築と自動テスト〜インフラのコード化とクラウドの優位性
自動構築と自動テスト〜インフラのコード化とクラウドの優位性
 
JAZUG 9周年イベント 懇親会ライトニングトーク
JAZUG 9周年イベント 懇親会ライトニングトークJAZUG 9周年イベント 懇親会ライトニングトーク
JAZUG 9周年イベント 懇親会ライトニングトーク
 
最近のたまおきの取り組み 〜OpenStack+αの実現に向けて〜 - OpenStack最新情報セミナー(2017年3月)
最近のたまおきの取り組み 〜OpenStack+αの実現に向けて〜  - OpenStack最新情報セミナー(2017年3月)最近のたまおきの取り組み 〜OpenStack+αの実現に向けて〜  - OpenStack最新情報セミナー(2017年3月)
最近のたまおきの取り組み 〜OpenStack+αの実現に向けて〜 - OpenStack最新情報セミナー(2017年3月)
 
『Zerto7.5』新機能全貌紹介! 統合/分析機能強化で、より最適なレプリケーションが可能に!
『Zerto7.5』新機能全貌紹介! 統合/分析機能強化で、より最適なレプリケーションが可能に!『Zerto7.5』新機能全貌紹介! 統合/分析機能強化で、より最適なレプリケーションが可能に!
『Zerto7.5』新機能全貌紹介! 統合/分析機能強化で、より最適なレプリケーションが可能に!
 
ACE 第6回定例会 ショートプレゼン
ACE 第6回定例会 ショートプレゼンACE 第6回定例会 ショートプレゼン
ACE 第6回定例会 ショートプレゼン
 
Arukasの運用事例と、末永くインフラ運用していくためのTips(SRE Tech Talks #2)
Arukasの運用事例と、末永くインフラ運用していくためのTips(SRE Tech Talks #2)Arukasの運用事例と、末永くインフラ運用していくためのTips(SRE Tech Talks #2)
Arukasの運用事例と、末永くインフラ運用していくためのTips(SRE Tech Talks #2)
 
ケガしないためのAws新サービスとre inventの過ごし方 株式会社アイディーエス_外木場さま
ケガしないためのAws新サービスとre inventの過ごし方 株式会社アイディーエス_外木場さまケガしないためのAws新サービスとre inventの過ごし方 株式会社アイディーエス_外木場さま
ケガしないためのAws新サービスとre inventの過ごし方 株式会社アイディーエス_外木場さま
 
110903 jazug lt_tanaka_pub
110903 jazug lt_tanaka_pub110903 jazug lt_tanaka_pub
110903 jazug lt_tanaka_pub
 
OpenStackってどうよ?
OpenStackってどうよ?OpenStackってどうよ?
OpenStackってどうよ?
 
Riot.jsを用いたweb開発 takusuta tech conf #1
Riot.jsを用いたweb開発   takusuta tech conf #1Riot.jsを用いたweb開発   takusuta tech conf #1
Riot.jsを用いたweb開発 takusuta tech conf #1
 

Viewers also liked

Mackerelによる
簡単サーバー管理入門と発展形
Mackerelによる
簡単サーバー管理入門と発展形Mackerelによる
簡単サーバー管理入門と発展形
Mackerelによる
簡単サーバー管理入門と発展形Shinji Tanaka
 
レコチョクのサービス群を支えるApiたち
レコチョクのサービス群を支えるApiたちレコチョクのサービス群を支えるApiたち
レコチョクのサービス群を支えるApiたちrecotech
 
Swaggerを利用した新規サービス開発
Swaggerを利用した新規サービス開発Swaggerを利用した新規サービス開発
Swaggerを利用した新規サービス開発recotech
 
Mackerelに触れる前にサーバー監視について考えてみよう
Mackerelに触れる前にサーバー監視について考えてみようMackerelに触れる前にサーバー監視について考えてみよう
Mackerelに触れる前にサーバー監視について考えてみようgu4
 
Oracle racからaurora my sqlへの移行
Oracle racからaurora my sqlへの移行Oracle racからaurora my sqlへの移行
Oracle racからaurora my sqlへの移行recotech
 
TISMatsuriLT MackerelとZabbix
TISMatsuriLT MackerelとZabbixTISMatsuriLT MackerelとZabbix
TISMatsuriLT MackerelとZabbixDaisuke Ikeda
 
脆弱性スキャナVulsを使ってDevSecOpsを実践!
脆弱性スキャナVulsを使ってDevSecOpsを実践!脆弱性スキャナVulsを使ってDevSecOpsを実践!
脆弱性スキャナVulsを使ってDevSecOpsを実践!Takayuki Ushida
 
Internet Week 2016 脆弱性スキャナによる対策支援の課題 Vuls
Internet Week 2016 脆弱性スキャナによる対策支援の課題 VulsInternet Week 2016 脆弱性スキャナによる対策支援の課題 Vuls
Internet Week 2016 脆弱性スキャナによる対策支援の課題 VulsKota Kanbe
 
#recotech_AWS移行してみたけどぶっちゃけどうよ。
#recotech_AWS移行してみたけどぶっちゃけどうよ。#recotech_AWS移行してみたけどぶっちゃけどうよ。
#recotech_AWS移行してみたけどぶっちゃけどうよ。recotech
 
ブログとメディアとコンテンツの話
ブログとメディアとコンテンツの話ブログとメディアとコンテンツの話
ブログとメディアとコンテンツの話MOHRI Taroh
 
新はてなダイアリーの裏側
新はてなダイアリーの裏側新はてなダイアリーの裏側
新はてなダイアリーの裏側Yasuhiro Onishi
 
サーバ監視ことはじめ
サーバ監視ことはじめサーバ監視ことはじめ
サーバ監視ことはじめAkihiko Horiuchi
 
DBの闇を書くにはこの余白は狭すぎる
DBの闇を書くにはこの余白は狭すぎるDBの闇を書くにはこの余白は狭すぎる
DBの闇を書くにはこの余白は狭すぎるSoudai Sone
 
Awsをちゃんと使ってみた 監視編
Awsをちゃんと使ってみた   監視編Awsをちゃんと使ってみた   監視編
Awsをちゃんと使ってみた 監視編Yoichi Toyota
 
sensuのちょっと進んだ使い方
sensuのちょっと進んだ使い方sensuのちょっと進んだ使い方
sensuのちょっと進んだ使い方正貴 小川
 
WIZY企画の裏側
WIZY企画の裏側WIZY企画の裏側
WIZY企画の裏側recotech
 
Dynamic Inventory: no more host lists!
Dynamic Inventory: no more host lists!Dynamic Inventory: no more host lists!
Dynamic Inventory: no more host lists!SATOSHI TAGOMORI
 
ビズリーチの新サービスとMackerel
ビズリーチの新サービスとMackerelビズリーチの新サービスとMackerel
ビズリーチの新サービスとMackerelKimiya Sato
 
Slerがawsで運用してきた話
Slerがawsで運用してきた話Slerがawsで運用してきた話
Slerがawsで運用してきた話Sato Shun
 

Viewers also liked (20)

Mackerelによる
簡単サーバー管理入門と発展形
Mackerelによる
簡単サーバー管理入門と発展形Mackerelによる
簡単サーバー管理入門と発展形
Mackerelによる
簡単サーバー管理入門と発展形
 
レコチョクのサービス群を支えるApiたち
レコチョクのサービス群を支えるApiたちレコチョクのサービス群を支えるApiたち
レコチョクのサービス群を支えるApiたち
 
Swaggerを利用した新規サービス開発
Swaggerを利用した新規サービス開発Swaggerを利用した新規サービス開発
Swaggerを利用した新規サービス開発
 
Mackerelに触れる前にサーバー監視について考えてみよう
Mackerelに触れる前にサーバー監視について考えてみようMackerelに触れる前にサーバー監視について考えてみよう
Mackerelに触れる前にサーバー監視について考えてみよう
 
Oracle racからaurora my sqlへの移行
Oracle racからaurora my sqlへの移行Oracle racからaurora my sqlへの移行
Oracle racからaurora my sqlへの移行
 
TISMatsuriLT MackerelとZabbix
TISMatsuriLT MackerelとZabbixTISMatsuriLT MackerelとZabbix
TISMatsuriLT MackerelとZabbix
 
脆弱性スキャナVulsを使ってDevSecOpsを実践!
脆弱性スキャナVulsを使ってDevSecOpsを実践!脆弱性スキャナVulsを使ってDevSecOpsを実践!
脆弱性スキャナVulsを使ってDevSecOpsを実践!
 
Internet Week 2016 脆弱性スキャナによる対策支援の課題 Vuls
Internet Week 2016 脆弱性スキャナによる対策支援の課題 VulsInternet Week 2016 脆弱性スキャナによる対策支援の課題 Vuls
Internet Week 2016 脆弱性スキャナによる対策支援の課題 Vuls
 
#recotech_AWS移行してみたけどぶっちゃけどうよ。
#recotech_AWS移行してみたけどぶっちゃけどうよ。#recotech_AWS移行してみたけどぶっちゃけどうよ。
#recotech_AWS移行してみたけどぶっちゃけどうよ。
 
ブログとメディアとコンテンツの話
ブログとメディアとコンテンツの話ブログとメディアとコンテンツの話
ブログとメディアとコンテンツの話
 
新はてなダイアリーの裏側
新はてなダイアリーの裏側新はてなダイアリーの裏側
新はてなダイアリーの裏側
 
サーバ監視ことはじめ
サーバ監視ことはじめサーバ監視ことはじめ
サーバ監視ことはじめ
 
DBの闇を書くにはこの余白は狭すぎる
DBの闇を書くにはこの余白は狭すぎるDBの闇を書くにはこの余白は狭すぎる
DBの闇を書くにはこの余白は狭すぎる
 
KOWAZA for mackerel
KOWAZA for mackerelKOWAZA for mackerel
KOWAZA for mackerel
 
Awsをちゃんと使ってみた 監視編
Awsをちゃんと使ってみた   監視編Awsをちゃんと使ってみた   監視編
Awsをちゃんと使ってみた 監視編
 
sensuのちょっと進んだ使い方
sensuのちょっと進んだ使い方sensuのちょっと進んだ使い方
sensuのちょっと進んだ使い方
 
WIZY企画の裏側
WIZY企画の裏側WIZY企画の裏側
WIZY企画の裏側
 
Dynamic Inventory: no more host lists!
Dynamic Inventory: no more host lists!Dynamic Inventory: no more host lists!
Dynamic Inventory: no more host lists!
 
ビズリーチの新サービスとMackerel
ビズリーチの新サービスとMackerelビズリーチの新サービスとMackerel
ビズリーチの新サービスとMackerel
 
Slerがawsで運用してきた話
Slerがawsで運用してきた話Slerがawsで運用してきた話
Slerがawsで運用してきた話
 

Similar to Mackerel x Twilio ~レコチョクの場合~

Jazug-8th: Azure AKS & FIWARE & Robot
Jazug-8th: Azure AKS & FIWARE & RobotJazug-8th: Azure AKS & FIWARE & Robot
Jazug-8th: Azure AKS & FIWARE & RobotNobuyuki Matsui
 
Trac Lightningの社内標準化と継続的な運用のために
Trac Lightningの社内標準化と継続的な運用のためにTrac Lightningの社内標準化と継続的な運用のために
Trac Lightningの社内標準化と継続的な運用のためにKaoru NAKAMURA
 
JNSA西日本支部 技術研究WG AWSを使ったセキュアなシステム構築
JNSA西日本支部 技術研究WG AWSを使ったセキュアなシステム構築JNSA西日本支部 技術研究WG AWSを使ったセキュアなシステム構築
JNSA西日本支部 技術研究WG AWSを使ったセキュアなシステム構築Tomo-o Kubo
 
zabbixを使ったクラウド環境の監視とツール連携
zabbixを使ったクラウド環境の監視とツール連携zabbixを使ったクラウド環境の監視とツール連携
zabbixを使ったクラウド環境の監視とツール連携NHN テコラス株式会社
 
Setta soft layersummit(公開用)_creationline
Setta soft layersummit(公開用)_creationlineSetta soft layersummit(公開用)_creationline
Setta soft layersummit(公開用)_creationlinechenree3
 
Setta soft layersummit(公開用)_creationline
Setta soft layersummit(公開用)_creationlineSetta soft layersummit(公開用)_creationline
Setta soft layersummit(公開用)_creationlinesoftlayerjp
 
インフラチームとCCoEの関係.pptx
インフラチームとCCoEの関係.pptxインフラチームとCCoEの関係.pptx
インフラチームとCCoEの関係.pptxssuser5c7ee4
 
Internet of Toilet / Jaws festa 2016
Internet of Toilet / Jaws festa 2016Internet of Toilet / Jaws festa 2016
Internet of Toilet / Jaws festa 2016Godai Nakamura
 
運用管理のプロが教えるHinemos活用法~JBossやPostgreSQLを対象としたミドルウェア監視オプションやクラウド型Hinemosを使って~
運用管理のプロが教えるHinemos活用法~JBossやPostgreSQLを対象としたミドルウェア監視オプションやクラウド型Hinemosを使って~運用管理のプロが教えるHinemos活用法~JBossやPostgreSQLを対象としたミドルウェア監視オプションやクラウド型Hinemosを使って~
運用管理のプロが教えるHinemos活用法~JBossやPostgreSQLを対象としたミドルウェア監視オプションやクラウド型Hinemosを使って~hinemos_atomitech
 
AWSで動画共有サイトを作成して全社に公開
AWSで動画共有サイトを作成して全社に公開AWSで動画共有サイトを作成して全社に公開
AWSで動画共有サイトを作成して全社に公開ToruKubota4
 
くま(Kuma)でメッシュなマイクロサービス
くま(Kuma)でメッシュなマイクロサービスくま(Kuma)でメッシュなマイクロサービス
くま(Kuma)でメッシュなマイクロサービスssuser6b3f181
 
SkyWay国内唯一のCPaaS
SkyWay国内唯一のCPaaSSkyWay国内唯一のCPaaS
SkyWay国内唯一のCPaaSKensaku Komatsu
 
【Tech-Circle #3 & OCDET #7 SDS勉強会】 Ceph on SoftLayer
【Tech-Circle #3 & OCDET #7 SDS勉強会】 Ceph on SoftLayer【Tech-Circle #3 & OCDET #7 SDS勉強会】 Ceph on SoftLayer
【Tech-Circle #3 & OCDET #7 SDS勉強会】 Ceph on SoftLayerNobuyuki Matsui
 
【CTO Night&Day 2018】CTOとしてエンジニアに対して責任を持ち続けること
【CTO Night&Day 2018】CTOとしてエンジニアに対して責任を持ち続けること【CTO Night&Day 2018】CTOとしてエンジニアに対して責任を持ち続けること
【CTO Night&Day 2018】CTOとしてエンジニアに対して責任を持ち続けることLIFULL Co., Ltd.
 
Dockerコミュニティ近況
Dockerコミュニティ近況Dockerコミュニティ近況
Dockerコミュニティ近況Akihiro Suda
 
Jaws serverless 1026_kyoso
Jaws serverless 1026_kyosoJaws serverless 1026_kyoso
Jaws serverless 1026_kyosoRyosuke Izumi
 
5W1Hで考えるCCoE.pptx
5W1Hで考えるCCoE.pptx5W1Hで考えるCCoE.pptx
5W1Hで考えるCCoE.pptxTomoaki Tada
 
Zabbixをもっと便利に!安全に!
Zabbixをもっと便利に!安全に!Zabbixをもっと便利に!安全に!
Zabbixをもっと便利に!安全に!Takashi Matsunaga
 

Similar to Mackerel x Twilio ~レコチョクの場合~ (20)

Jazug-8th: Azure AKS & FIWARE & Robot
Jazug-8th: Azure AKS & FIWARE & RobotJazug-8th: Azure AKS & FIWARE & Robot
Jazug-8th: Azure AKS & FIWARE & Robot
 
Trac Lightningの社内標準化と継続的な運用のために
Trac Lightningの社内標準化と継続的な運用のためにTrac Lightningの社内標準化と継続的な運用のために
Trac Lightningの社内標準化と継続的な運用のために
 
JNSA西日本支部 技術研究WG AWSを使ったセキュアなシステム構築
JNSA西日本支部 技術研究WG AWSを使ったセキュアなシステム構築JNSA西日本支部 技術研究WG AWSを使ったセキュアなシステム構築
JNSA西日本支部 技術研究WG AWSを使ったセキュアなシステム構築
 
zabbixを使ったクラウド環境の監視とツール連携
zabbixを使ったクラウド環境の監視とツール連携zabbixを使ったクラウド環境の監視とツール連携
zabbixを使ったクラウド環境の監視とツール連携
 
Setta soft layersummit(公開用)_creationline
Setta soft layersummit(公開用)_creationlineSetta soft layersummit(公開用)_creationline
Setta soft layersummit(公開用)_creationline
 
Setta soft layersummit(公開用)_creationline
Setta soft layersummit(公開用)_creationlineSetta soft layersummit(公開用)_creationline
Setta soft layersummit(公開用)_creationline
 
インフラチームとCCoEの関係.pptx
インフラチームとCCoEの関係.pptxインフラチームとCCoEの関係.pptx
インフラチームとCCoEの関係.pptx
 
Internet of Toilet / Jaws festa 2016
Internet of Toilet / Jaws festa 2016Internet of Toilet / Jaws festa 2016
Internet of Toilet / Jaws festa 2016
 
運用管理のプロが教えるHinemos活用法~JBossやPostgreSQLを対象としたミドルウェア監視オプションやクラウド型Hinemosを使って~
運用管理のプロが教えるHinemos活用法~JBossやPostgreSQLを対象としたミドルウェア監視オプションやクラウド型Hinemosを使って~運用管理のプロが教えるHinemos活用法~JBossやPostgreSQLを対象としたミドルウェア監視オプションやクラウド型Hinemosを使って~
運用管理のプロが教えるHinemos活用法~JBossやPostgreSQLを対象としたミドルウェア監視オプションやクラウド型Hinemosを使って~
 
インフラチームの歴史とこれから
インフラチームの歴史とこれからインフラチームの歴史とこれから
インフラチームの歴史とこれから
 
AWSで動画共有サイトを作成して全社に公開
AWSで動画共有サイトを作成して全社に公開AWSで動画共有サイトを作成して全社に公開
AWSで動画共有サイトを作成して全社に公開
 
くま(Kuma)でメッシュなマイクロサービス
くま(Kuma)でメッシュなマイクロサービスくま(Kuma)でメッシュなマイクロサービス
くま(Kuma)でメッシュなマイクロサービス
 
SkyWay国内唯一のCPaaS
SkyWay国内唯一のCPaaSSkyWay国内唯一のCPaaS
SkyWay国内唯一のCPaaS
 
【Tech-Circle #3 & OCDET #7 SDS勉強会】 Ceph on SoftLayer
【Tech-Circle #3 & OCDET #7 SDS勉強会】 Ceph on SoftLayer【Tech-Circle #3 & OCDET #7 SDS勉強会】 Ceph on SoftLayer
【Tech-Circle #3 & OCDET #7 SDS勉強会】 Ceph on SoftLayer
 
【CTO Night&Day 2018】CTOとしてエンジニアに対して責任を持ち続けること
【CTO Night&Day 2018】CTOとしてエンジニアに対して責任を持ち続けること【CTO Night&Day 2018】CTOとしてエンジニアに対して責任を持ち続けること
【CTO Night&Day 2018】CTOとしてエンジニアに対して責任を持ち続けること
 
Dockerコミュニティ近況
Dockerコミュニティ近況Dockerコミュニティ近況
Dockerコミュニティ近況
 
OpenStack環境の継続的インテグレーション
OpenStack環境の継続的インテグレーションOpenStack環境の継続的インテグレーション
OpenStack環境の継続的インテグレーション
 
Jaws serverless 1026_kyoso
Jaws serverless 1026_kyosoJaws serverless 1026_kyoso
Jaws serverless 1026_kyoso
 
5W1Hで考えるCCoE.pptx
5W1Hで考えるCCoE.pptx5W1Hで考えるCCoE.pptx
5W1Hで考えるCCoE.pptx
 
Zabbixをもっと便利に!安全に!
Zabbixをもっと便利に!安全に!Zabbixをもっと便利に!安全に!
Zabbixをもっと便利に!安全に!
 

Mackerel x Twilio ~レコチョクの場合~

  • 1. © RecoChoku Co.,Ltd. Proprietary and Confidential 2017/01/26 Mackerel x Twilio ~レコチョクの場合~
  • 2. © RecoChoku Co.,Ltd. Proprietary and Confidential 自己紹介 22017/2/1 22017/2/1 名前 伊藤 智之 部署 プラットフォーム推進部 基盤グループ 経歴 もともとは営業職。IT業界は、10年ちょい。。。 主に運用周りの設計や業務を担当 名前 鷹箸 兼介 部署 システム事業部 ミュージック・アーキテクトグループ 経歴 元Sierでシステム設計・構築・運用を主に担当 レコチョクに来てからはAWSの運用周りを担当
  • 3. © RecoChoku Co.,Ltd. Proprietary and Confidential 32017/2/1 32017/2/1 ・レコチョクについて ・監視システムについて ・Mackerel x Twilio ・まとめ アジェンダ
  • 4. © RecoChoku Co.,Ltd. Proprietary and Confidential 42017/2/1 42017/2/1 レコチョクについて
  • 5. © RecoChoku Co.,Ltd. Proprietary and Confidential 5 (デバイス = ソフトウェア)インターネット× × × 音楽 レコチョクはどんなIT企業か?
  • 6. © RecoChoku Co.,Ltd. Proprietary and Confidential 6 http://techblog.recochoku.jp/ 外部に向けたエンジニア活動
  • 7. © RecoChoku Co.,Ltd. Proprietary and Confidential 72017/2/1 72017/2/1 監視システムについて
  • 8. © RecoChoku Co.,Ltd. Proprietary and Confidential 82017/2/1 82017/2/1 ・プラットフォーム:AWS ・AWSアカウント:100over ※システム単位でアカウント作成 ・ネットワーク構成:スター型でVPC Peering ・利用コンポーネント: EC2:1000over、ELB:200over、 RDS:100over etc レコチョクシステムについて
  • 9. © RecoChoku Co.,Ltd. Proprietary and Confidential ① 92017/2/1 92017/2/1 システムA 監視項目: ①web監視 ②ログ監視 ③Cloudwacth Alarm監視 システム担当者 監視委託会社 ② ③ HUB 既存の監視概要図
  • 10. © RecoChoku Co.,Ltd. Proprietary and Confidential 102017/2/1 102017/2/1 ・監視設定依頼申請の手間とリードタイム問題 ・監視ツール混在状態 -グラフ確認 Cloudwatch -アラート通知は、zabbix & Cloudwatch ・Zabbix自体の監視 ・システム毎の属人化と監視レベルのばらつき ・監視コストの最適化 既存の課題
  • 11. © RecoChoku Co.,Ltd. Proprietary and Confidential ① 112017/2/1 112017/2/1 システムA システム担当者 ② ③ 監視項目:①web監視 → 外形監視 ②ログ監視 → マカレルエージェント監視 ③Cloudwacth Alarm監視 → AWSインテグレーション Twillio Mackerel導入後の監視概要図 organization A
  • 12. © RecoChoku Co.,Ltd. Proprietary and Confidential 122017/2/1 122017/2/1 ・監視設定依頼申請の手間とリードタイム問題 ⇒システム担当で完結 ・監視ツール混在状態 ⇒Mackerelで一元管理 ・Zabbix自体の監視 ⇒Mackerelからの監視実装 ・システム毎の属人化と監視レベルのばらつき ⇒Mackerelの利用ガイドラインを策定 ・監視コストの最適化 ⇒Mackerel x Twilio 連携して・・・ ここについて、掘り下げます! Mackerel導入後の変化
  • 13. © RecoChoku Co.,Ltd. Proprietary and Confidential 132017/2/1 132017/2/1 Mackerel x Twilio 連携して・・・
  • 14. © RecoChoku Co.,Ltd. Proprietary and Confidential 重要度高 サービス影響あり 電話とSlack 重要度低 サービス影響なし Slackのみ Mackerel x Twilio 連携して・・・ 142017/2/1 • zabbixで架電通知してたのでMackerelでもやりたかったが出来なかった • 通知先がメールやSlack等だけだと障害を取りこぼす可能性がある これがしたい
  • 15. © RecoChoku Co.,Ltd. Proprietary and Confidential Mackerel x Twilio 連携して・・・ 152017/2/1 Git Shell Twilio 各設定 Mackerel上で の設定内容 User A User B User C TwiML UserA UserB UserC TwiML Shell TwiMLTwiML TwiML
  • 16. © RecoChoku Co.,Ltd. Proprietary and Confidential Mackerel x Twillio 連携して・・・ 162017/2/1 ①メトリクス送信 ②アラート検知 ③TwiMLファイ ル読み込み ④TwiML実行 ⑤一定時間TwiML ファイル読み込み ⑥架電通知開始 ⑦順次発信
  • 17. © RecoChoku Co.,Ltd. Proprietary and Confidential 172017/2/1 172017/2/1 まとめ
  • 18. © RecoChoku Co.,Ltd. Proprietary and Confidential 182017/2/1 182017/2/1 まだまだ、導入システムが少ない!! 横展開の加速化、横断的に導入をリード!! 監視レベルの標準化 監視コスト最適化 Mackerel導入で、既存課題は潰し込めた!!! 今後の展開
  • 19. © RecoChoku Co.,Ltd. Proprietary and Confidential 要望的な・・ 192017/2/1  Twilio • ローテーションの柔軟性 • 発信者番号の通知(非通知みたいになる)  Mackerel • アラート内容のパラメータをTwilioに渡して欲しい • アラート自動閉塞の設定 • Dashboard作る際にサジェストを出して欲しい • AWSインテグレーションの対象が少ない • メトリクスの保持期間延長 • スマホアプリ作って欲しい

Editor's Notes

  1. 正式にTwilio連携してなかったから結構作り込みしないと出来なかった。以上