gumi study#18

1. Auto scalingを
一年間運用してみた
株式会社gumi!
西村 遊

2. 自己紹介
❖
西村 遊!
❖
gumi入社してもうすぐ2年!
❖
sysopチーム サーバ構築・運用!
❖
好きなAWSサービス：AutoScaling

3. AutoScaling
実運用で使ってますか？

4. gumiで1年間利用してみた結果
※構想期間含む

5. 導入したアプリでの
サーバー構築コストはほぼ0
!
障害時の再作成コストも0

6. 同じ構成のサーバーを作成する
仕事がなくなる！！！

7. でも

8. 大切なのはAutoScalingの
設定ではない

9. 起動したAMIを
どう使える状態にするか

10. AutoScalingでサーバー構築コストが
ほぼ０
!
手を触れずにサービスインまで
いけるようにAMI+仕組みを作ろう
!
というお話

11. 目次
❖
起動からサービスインまでの作り込み!
❖
gumiで運用中の2パターン!
Scaduled Scale Out!
Auto Healing!
❖
実際に運用してみて

12. 起動からサービスインまでの作り込み
❖
AutoScalingはAMIベース!
!
❖
AMIは取得時点のスナップショットなので、!
更新分をどう持ってくるかを考える!
!
❖
ここを考えないとアプリケーション側で不整合が起こる

14. AutoScalingGroupの設定に!
ELBを指定しなければ接続されないが、!
急な削除時に上手く外れてから削除されなかった為、!
設定している。

15. AMIには!
gitからリポジトリ取得!
スクリプト起動!
までの処理を入れておく

18. gitサーバー負荷軽減の為

21. 目次
❖
起動からサービスインまでの作り込み!
❖
gumiで運用中の2パターン!
Scaduled Scale Out!
Auto Healing!
❖
実際に運用してみて

22. Scaduled Scale Out
http://aws.clouddesignpattern.org/index.php/CDP:Scheduled_Autoscaling
%E3%83%91%E3%82%BF%E3%83%BC%E3%83%B3

23. リクエスト数のパターンは一週間ほぼ同じ。!
さすがに深夜帯のアクセス数は少ない。
と
を同じ台数にしておくのはもったいなーい
の時間はインスタンスを減らしている

24. 目次
❖
起動からサービスインまでの作り込み!
❖
gumiで運用中の2パターン!
Scaduled Scale Out!
Auto Healing!
❖
実際に運用してみて

25. Auto healing
❖
AutoScalingGroupではdesired-capacityの数に!
インスタンス台数が調整される。!
※desired-capacityは以下の範囲内で設定!
min size =< desired-capacity =< max size
❖
突然の死があってもインスタンスが再作成される!
❖
spotインスタンスと組み合わせれば、spot価格高騰で削
除されても、再作成される

26. Auto Healing
ELB配下の一部をspotインスタンスで用意し、Auto scaling Groupは分ける!
!
spotインスタンスが全滅してもアプリケーション的には耐えられる台数にしておく!
!
※c1.xlargeをspotインスタンスでたてると$0.192/hなので!
オンデマンド価格$0.740/hと比べて3分の1以下

27. Auto Healing
spotpriceの高騰で!
＿人人人人人人＿!
＞ 突然の死 ＜!
￣Y^Y^Y^Y^Y￣

28. Auto Healing
新たなインスタンスが起動
spotpriceが同額or以下に戻ったら!
リクエストが受け付けられ

29. Auto Healing
もとどおり

30. Auto Healing
こっちのグループでも、何らかの理由で!
インスタンスが削除されたら同じことが起きる

31. !
再作成コスト0

32. 目次
❖
gumiで運用中の2パターン!
Scaduled Scale Out!
Auto Healing!
❖
AMIの作り込み!
❖
実際に運用してみて

33. spot priceの変動は激しい

34. どんどん激しくなっている
※EC2 Classicでc1.xlargeインスタンスの場合
このときのスパイクは$1.5ぐらい

35. launch configを書き換えて
上限を上げても
※書き換えできないので正確には入れ替え
c1.xlargeの通常価格 $0.74/h!
!
spot priceスパイク最大値 $1.5/h!
約2倍で設定している人が多そう。
さすがに3倍なら大丈夫だろう。!
$2.3 で設定

36. さらに激しく
※EC2 Classicでc1.xlargeインスタンスの場合
11月後半からボーダーは$2.3へ
gumiがボーダーを上げてしまった！？

37. 頻度も価格も高くなってく
※EC2 Classicでc1.xlargeインスタンスの場合
一ヶ月の間に20回以上落ちた…!
Maxが$2.9の時代到来

38. その度にAuto Healing
新たなインスタンスが起動
spotpriceが同額or以下に戻ったら!
リクエストが受け付けられ

39. 内部的にはこんな処理が走る

40. zone 1cを避ければなんとか
※EC2 Classicでc1.xlargeインスタンスの場合
大きく変動があるのは!
zone 1cのみ

41. ならなかった
※EC2 Classicでc1.xlargeインスタンスの場合
zone 1cは!
更なる高みへ
zone 1bも安心できない時代へ

42. spotインスタンス運用の
限界を感じた
※EC2 Classicでc1.xlargeインスタンスの場合
通常の3倍の!
価格がかかる
priceが戻っては上がりの!
繰り返しが発生
入札価格はいたちごっこ

43. ❖
スポットインスタンス + AutoScaling構成はやめた!
!
❖
コストメリットは大きいが、肝心のピーク時に死んでいると困る!
!
❖
現在は時間単位のスケーリング（Scaduled Scale Out）のみ
まだまだ価格遷移激しいのでボーダー上げたの
は!
gumiではなかった

44. まとめ

45. AutoScalingでサーバー構築コストが
ほぼ０
!
手を触れずにサービスインまで
いけるようにAMI+仕組みを作ろう

46. spot priceの価格上昇に
gumiは関与していない！
※多分
一時期設定した価格が上限値となってpriceが変動していたのは偶然です…

47. ご清聴ありがとうございました