JAWS-UG OSAKA #13 Operation JA

1. 開発が運用はじめました
∼ Operation JAWS ∼
JAWS-UG OSAKA 第13回勉強会
オペレーション
じょうず
JAWS-UG
2015 / 05 / 23 (Sat)
at Motex

2. 森 大樹
（もり だいき）
業務系＋勢い系エンジニア
大阪生まれ大阪育ちの浪速っ子
今、AWSを利用したシステムの
開発と運用をやってます
facebook : /areaz.daiki
twitter : @areaz_
hobby：スノボ（アルペンボーダー）
お酒（毎日コンビニで購入）
→C3(Can Convinience Club)会長
Who am I ?

3. AWSとの出会い

4. 2011
このへん

5. Amazon
EC2
Elastic
IP
Elastic Load
Balancing
Amazon
RDS
Amazon
S3
至ってシンプルなもの
開発してるとき

6. 開発してるとき
ニャーscpコマンド cpコマンド
/etc/init.d/tomcat start

7. 自分でやるしかない
対処しないの？
開発してるとき
このままでは事故発生

8. 開発してるとき
/etc/init.d/tomcat start
ニャーUpload using MACRO

9. 開発してるとき
Amazon
EC2
Elastic
IP
Elastic Load
Balancing
Amazon
RDS
Amazon
S3
スケーリングしても
大丈夫な作りに。
手動スケーリングのみ対応
AMI
ニャー

10. Develop
Operation
Turning
Point

11. この後、
開発しながら運用が
諸事情？により、
運用側へ・・・

12. 何したらいい？

13. • サーバ動いてる？
• システムでエラー出てない？
• 性能落ちてない？

15. - オープンソースソフトウェア
- マルチプラットフォーム対応
- 多数の監視機能をデフォルトの機能として提供
- 独自のカスタムスクリプトで監視機能を拡張
- 収集した監視データをRDBSに長期保存可能
- 複数データを利用したカスタムグラフの作成
- システム全体のステータスを表示するダッシュボード
- サーバなどをネットワークマップを作成・表示
- 監視データの表示/設定をWebインタフェースから可能
- メールやSMS、Jabberプロトコルで障害通知

17. なんとなく
名前が
カッコよかったから
なぜ

18. MySQL
AmazonLinux
サーバ構成
Web
Server
App
Server
Batch
Server

19. • サーバの稼働状態
• サーバのリソース
(CPU/Memory/Disk)
• アプリケーションログ
• OSログ(EventLogなど)

20. 開発が監視するの？
準備完了。監視開始！

21. んな訳ない。

22. どうしたらいい？

23. やっぱり、こうなる。

24. • システムの動きを知らない
• エラーを解決できない
• 初めてのクラウド
問題発生

25. と、いうことで・・・

26. 運用してるとき
全く、手順通りいかず
いざ、手順評価
急遽、手順書作成

27. あかんパターン。

30. 作り直しました。

31. 問題発生 その２
• すごいコストがかかってる
• 手順通り、監視してない
• Zabbix
• リリース失敗・・・
が動いてない

32. 問題発生 その２
• すごいコストがかかってる
スモールスタートじゃない

33. 問題発生 その２
• すごいコストがかかってる
スモールスタートじゃない
MS SQL
MS SQL

34. 問題発生 その２
• すごいコストがかかってる
インスタンスタイプの変更
DB on Instance
を
RDS
複数サーバ
を
ひとまとめに
Future

35. 問題発生 その２
• 手順通り、監視してない
1. 発生数が多い
2. 勝手な思い込み
3. 手順が複雑
手順を簡易化

36. ステータス取得 サーバ切り替え
実行 実行

37. 問題発生 その２
• Zabbix
発生数が多い
監視項目が増加
DB
監視アイテムが蓄積できない
が動いてない
の容量不足

38. 盲点
ディスク 増量
1. 監視項目の見直し
2. 保存期間の見直し
3. RDSの監視(DiskSize)

39. •リアルタイムログ取得
•遠隔サービス起動停止
EC2 instance contents
EC2 instance contents

40. 問題発生 番外編
• 聞いてないよ・・・
仕様検討時に決定
なんでそんな作りなの？
じゃ、俺が変える！

41. できるわけがない！

44. 僕が
一番感じたこと

45. Develop( ) VS Operation( )開発者 運用者

46. • 開発者の思い
–
–
–
• 運用者の思い
–
–
–

47. じゃ、どうするの？

48. Develop( ) VS Operation( )開発者 運用者

49. 一緒に、やろう

50. •運用を考えた設計
一緒にやろう
•運用を考えた実装
•運用を考えた評価

51. 一緒に、やろう

52. •一緒に検討
開発と運用の共存
•一緒に設計
•一緒に評価
•一緒にリリース
•一緒に運用

53. 開発と運用
関係ない！
一緒にやろ！

54. Develop( ) VS Operation( )開発者 運用者

56. Information

57. AWS Summit Tokyo 2015
グランドプリンスホテル新高輪
（国際館パミール、飛天）
来場無料（要事前登録）
2015-06-02 ∼ 03
http://www.awssummit.tokyo/

58. LT登壇者募集！JAWS-UG勉強会
【AWS Summit Tokyo 2015】
グランドプリンスホテル新高輪
（国際館パミール、飛天）
2015-06-03 19:00-20:30

59. 登壇予定はありませんたぶん・・・

60. ご静聴
ありがとうございました