2017/08/25 Serverless Meetup Fukuoka

2. 2017/08/25
株式会社Fusic 平田 哲
ピタゴラなんとかスイッチを
作って破壊した話

3. Fusic Co., Ltd.
自己紹介
3
平田 哲（HIRATA, Satoshi）
id: debility
‘Kiban Unit’ as Fusic Co., Ltd.
http://fusic.co.jp/
Fukuoka.pm
Program, Server, Network, and “Nomikai”
Splatoon2 Main Weapon: N-ZAP85
icon: © mutsuking

4. Fusic Co., Ltd.
何の話か
4
マネしてはいけないサーバレスの話
それを改善した話
スライド70枚超えたのでがんばります

5. Fusic Co., Ltd.
要件
5
「定期的にAPI経由でデータを取得して、いい
感じに整形して、RDSに保存したい」

6. Fusic Co., Ltd.
要件
6
「定期的にAPI経由でデータを取得して、いい
感じに整形して、RDSに保存したい」
「かしこまり」

7. Fusic Co., Ltd.
想定
7

8. Fusic Co., Ltd.
問題発生
8
「あれ、私のリクエスト多すぎ。。。？」

9. Fusic Co., Ltd.
問題発生
9
「あれ、私のリクエスト多すぎ。。。？」
「実行時間足りなさそう。。。」
※ AWS Lambdaは5分の時間制限がある

10. Fusic Co., Ltd.
問題発生
10
「あれ、私のリクエスト多すぎ。。。？」
「実行時間足りなさそう。。。」
※ AWS Lambdaは5分の時間制限がある
「並列でがしがしリクエスト投げていいですか」

11. Fusic Co., Ltd.
問題発生
11
「あれ、私のリクエスト多すぎ。。。？」
「実行時間足りなさそう。。。」
※ AWS Lambdaは5分の時間制限がある
「並列でがしがしリクエスト投げていいですか」
「だめです」
「」

12. Fusic Co., Ltd.
仕方ないので
12
put json

13. Fusic Co., Ltd.
仕方ないので
13
put json event
(put object)

14. Fusic Co., Ltd.
仕方ないので
14
put json event
(put object)
API

15. Fusic Co., Ltd.
仕方ないので
15
put json event
(put object)
API
data

16. Fusic Co., Ltd.
仕方ないので
16
put json event
(put object)
API
data
put json

17. Fusic Co., Ltd.
仕方ないので
17
put json event
(put object)
API
data
put json
(n回繰り返し)

18. Fusic Co., Ltd.
仕方ないので
18
event
(put object)
data
put json
API
put json

19. Fusic Co., Ltd.
そのままじゃ怖い
19
何かミスってたら
無限ループしそう

20. Fusic Co., Ltd.
ので
20

21. Fusic Co., Ltd.
breakerを追加
21
event
(put object)
put json

22. Fusic Co., Ltd.
breakerを追加
22
event
(put object)
put json
check
breaker

23. Fusic Co., Ltd.
breakerを追加
23
event
(put object)
put json
check
breaker

24. Fusic Co., Ltd.
最終形
24
event
(put object)
put json
check
breaker
data
API
put json

25. Fusic Co., Ltd.
理想(再掲)
25

26. Fusic Co., Ltd.
結果
26

27. Fusic Co., Ltd.
結果その2
27

28. Fusic Co., Ltd.
どうしてこうなった
28
http://imgcc.naver.jp/kaze/mission/USER/20121215/13/10
85203/17/640x355xa7ad18ad7d894eecd5f9239b.jpg

29. Fusic Co., Ltd.
さっき見たスライド
29

30. Fusic Co., Ltd.
さっき見たスライド
30

31. Fusic Co., Ltd.
さっき見たスライド2
31

32. Fusic Co., Ltd.
ある日
32

33. Fusic Co., Ltd.
ある日
33
×ものすごく大量

34. Fusic Co., Ltd.
問題発生
34
1. Lambdaがめっちゃエラーになる

35. Fusic Co., Ltd.
問題発生
35
1. Lambdaがめっちゃエラーになる
2. faultlineにめっちゃリクエストが飛ぶ

36. Fusic Co., Ltd.
問題発生
36
1. Lambdaがめっちゃエラーになる
2. faultlineにめっちゃリクエストが飛ぶ
3. faultlineが落ちて通知が大量に来る

37. Fusic Co., Ltd.
問題発生
37
1. Lambdaがめっちゃエラーになる
2. faultlineにめっちゃリクエストが飛ぶ
3. faultlineが落ちて通知が大量に来る
4. それでもfaultlineに投げ続ける

38. Fusic Co., Ltd.
問題発生
38
1. Lambdaがめっちゃエラーになる
2. faultlineにめっちゃリクエストが飛ぶ
3. faultlineが落ちて通知が大量に来る
4. それでもfaultlineに投げ続ける
作ってて良かったブレーカー。

39. Fusic Co., Ltd.
結果
39

40. Fusic Co., Ltd.
結果
40
実行回数: 約463万回
処理時間: 約930万秒

41. Fusic Co., Ltd.
結果
41
実行回数: 約463万回
処理時間: 約930万秒
※ 無料枠が320万秒

42. Fusic Co., Ltd.
結果
42
実行回数: 約463万回
処理時間: 約930万秒
※ 無料枠が320万秒
➜ あわせて$13程度の課金発生

43. Fusic Co., Ltd.
改善したい
43
・実行回数上限を定めておくとか

44. Fusic Co., Ltd.
改善したい
44
・実行回数上限を定めておくとか
・そもそも方式を変えるとか

45. Fusic Co., Ltd.
改善したい
45
・実行回数上限を定めておくとか
・そもそも方式を変えるとか
・Step Functionsとか使うといいのでは

46. Fusic Co., Ltd.
改善したい
46
・実行回数上限を定めておくとか
・そもそも方式を変えるとか
・Step Functionsとか使うといいのでは
・並列化できないのならcronとかでいいので
は

47. Fusic Co., Ltd.
改善したい
47
・実行回数上限を定めておくとか
・そもそも方式を変えるとか
・Step Functionsとか使うといいのでは
・並列化できないのならcronとかでいいので
は

48. Fusic Co., Ltd.
AWS Step Functions
48

49. Fusic Co., Ltd.
AWS Step Functions
49
こういうのを
JSONで定義して
実行できて
視覚的に管理できる

50. Fusic Co., Ltd.
こういうのが
50

51. Fusic Co., Ltd.
こうなった
51

52. Fusic Co., Ltd.
JSON定義
52

53. Fusic Co., Ltd.
繰り返し処理(再掲)
53
put json event
(put object)
API
data
put json
(n回繰り返し)

54. Fusic Co., Ltd.
同じことをやっている個所
54

55. Fusic Co., Ltd.
同じことをやっている個所
55

56. Fusic Co., Ltd.
Choiceを使う
56

57. Fusic Co., Ltd.
Choiceを使う
57

58. Fusic Co., Ltd.
Lambda側
58

59. Fusic Co., Ltd.
Breakerは？
59
event
(put object)
put json
check
breaker
data
API
put json

60. Fusic Co., Ltd.
コンソールから停止できる
60

61. Fusic Co., Ltd.
その他改善事項
61
エラー処理を集約

62. Fusic Co., Ltd.
改善した部分
62

63. Fusic Co., Ltd.
改善した部分
63
・処理の進行が見える化できた

64. Fusic Co., Ltd.
改善した部分
64
・処理の進行が見える化できた
・「誰が見ても」視覚的に分かりやすくなった

65. Fusic Co., Ltd.
改善した部分
65
・処理の進行が見える化できた
・「誰が見ても」視覚的に分かりやすくなった
・各Lambdaが疎結合になった

66. Fusic Co., Ltd.
改善した部分
66
・処理の進行が見える化できた
・「誰が見ても」視覚的に分かりやすくなった
・各Lambdaが疎結合になった
・Lambdaの実装量が減った

67. Fusic Co., Ltd.
改善した部分
67
・処理の進行が見える化できた
・「誰が見ても」視覚的に分かりやすくなった
・各Lambdaが疎結合になった
・Lambdaの実装量が減った
・担保する挙動が減ったため

68. Fusic Co., Ltd.
改善していない部分
68
・Step課金なので費用は増えた

69. Fusic Co., Ltd.
改善していない部分
69
・Step課金なので費用は増えた
(状態遷移1回あたり 0.000025 USD)

70. Fusic Co., Ltd.
改善していない部分
70
・Step課金なので費用は増えた
(状態遷移1回あたり 0.000025 USD)
・暴走(無限ループとか)は別の対策を用いる
必要がある

71. Fusic Co., Ltd.
改善していない部分
71
・Step課金なので費用は増えた
(状態遷移1回あたり 0.000025 USD)
・暴走(無限ループとか)は別の対策を用いる
必要がある
・そもそもの複雑さが改善していない

72. Fusic Co., Ltd.
改善していない部分
72
・Step課金なので費用は増えた
(状態遷移1回あたり 0.000025 USD)
・暴走(無限ループとか)は別の対策を用いる
必要がある
・そもそもの複雑さが改善していない
・要件が要件なのでしょうがない

73. Fusic Co., Ltd.
まとめ
73
・ピタゴラ的な作りで頑張ることはできる
・ただしつらい

74. Fusic Co., Ltd.
まとめ
74
・ピタゴラ的な作りで頑張ることはできる
・ただしつらい
・AWS Step Functionsを使うと捗る
・ただし金はかかる

75. Fusic Co., Ltd.
まとめ
75
・ピタゴラ的な作りで頑張ることはできる
・ただしつらい
・AWS Step Functionsを使うと捗る
・ただし金はかかる
・要件大事

76. Fusic Co., Ltd.
まとめ
76
・ピタゴラ的な作りで頑張ることはできる
・ただしつらい
・AWS Step Functionsを使うと捗る
・ただし金はかかる
・要件大事
・LTで直前の発表とネタがかぶるとつらい

77. Fusic Co., Ltd.
ご清聴ありがとうございました。