Download to read offline
Uploaded bygree_tech
海外展開と負荷試験
GREE Tech Conference 2021 で発表された資料です。 https://techcon.gree.jp/2021/session/Session-6
![[VP of Engineering Meetup] エンジニアのパフォーマンスを最大化させる組織活性化施策とは](https://cdn.slidesharecdn.com/ss_thumbnails/vpofe-171128065408-thumbnail.jpg?width=640&height=640&fit=bounds)
海外展開と負荷試験
- 1.
- 2. グリーエンターテインメント株式会社 エンジニア部 所属 役職：エンジニアマネージャー 2017年ファンプレックス株式会社入社 サーバーエンジニアとして、いくつかのネイティブアプリの開発に参加 チーフエンジニアとして、エンジニアのスケジュール調整や育成も経験 現在は運営タイトルのエンジニアマネージャーとして エンジニアのマネジメントやアサイン調整を担当 自己紹介 加藤 雅（かとう まさし）
- 3.
- 4.
- 5. 本日のアジェンダ ● 開発内容やインフラ構成の紹介 ● 負荷試験の概要 ●負荷試験で発生した事例の紹介 ● リリース後の結果 ● まとめ
- 6.
- 7.
- 8. ● クラウドサービス ○ AmazonWeb Services ● インフラ構成 ○ LAMP（Linux, Apache, MySQL, PHP） ● 分析ツール ○ Google Cloud BigQuery インフラ構成
- 9.
- 10.
- 11.
- 12. Q1.開発期間はどのくらいでしょう？ ● ３ヶ月 ● ６ヶ月 ●９ヶ月 ● １２ヶ月
- 13. 開発期間はどのくらいでし ょう？ ⓘ Start presentingto display the poll results on this slide.
- 14. Q1.開発期間はどのくらいでしょう？ ● ３ヶ月 ● ６ヶ月 ●９ヶ月 ● １２ヶ月
- 15. 開発期間6ヶ月(2020年) 6月 7月 8月9月 10月 11月 12月 1月 α版開発期間 β版開発期間 RC版開発期間 ソフトローンチ グローバル ローンチ
- 16. 開発期間6ヶ月(2020年) 6月 7月 8月9月 10月 11月 12月 1月 α版開発期間 β版開発期間 RC版開発期間 ソフトローンチ グローバル ローンチ ・開発環境構築 ・各種最適化
- 17. 開発期間6ヶ月(2020年) 6月 7月 8月9月 10月 11月 12月 1月 α版開発期間 β版開発期間 RC版開発期間 ソフトローンチ グローバル ローンチ ・翻訳対応 ・LQA ・開発環境構築 ・各種最適化
- 18. 開発期間6ヶ月(2020年) 6月 7月 8月9月 10月 11月 12月 1月 α版開発期間 β版開発期間 RC版開発期間 ソフトローンチ グローバル ローンチ ・本番環境構築 ・負荷試験 ・翻訳対応 ・LQA ・開発環境構築 ・各種最適化
- 19. 開発期間6ヶ月(2020年) 6月 7月 8月9月 10月 11月 12月 1月 α版開発期間 β版開発期間 RC版開発期間 ソフトローンチ グローバル ローンチ ・本番環境構築 ・負荷試験 ・翻訳対応 ・LQA ・開発環境構築 ・各種最適化 ・翻訳対応 ・LQA ・開発環境構築 ・各種最適化 ・限定地域にリリース
- 20. 開発期間6ヶ月(2020年) 6月 7月 8月9月 10月 11月 12月 1月 α版開発期間 β版開発期間 RC版開発期間 ソフトローンチ グローバル ローンチ ・本番環境構築 ・負荷試験 ・翻訳対応 ・LQA ・開発環境構築 ・各種最適化 ・翻訳対応 ・LQA ・開発環境構築 ・各種最適化 ・全世界リリース！ ・限定地域にリリース
- 21. 開発期間6ヶ月(2020年) 6月 7月 8月9月 10月 11月 12月 1月 グローバル ローンチ ・全世界リリース！ α版開発期間 β版開発期間 RC版開発期間 ソフトローンチ ● 日本国内でのリリースとは異なるアクセス状況が見込まれる ● グローバルに最適化した本番環境の準備が重要になる
- 22. 開発期間6ヶ月(2020年) 6月 7月 8月9月 10月 11月 12月 1月 α版開発期間 β版開発期間 RC版開発期間 ソフトローンチ グローバル ローンチ ・本番環境構築 ・負荷試験 ・翻訳対応 ・LQA ・開発環境構築 ・各種最適化 ・翻訳対応 ・LQA ・開発環境構築 ・各種最適化 ・全世界リリース！ ・限定地域にリリース
- 23.
- 24. ● 最適化した本番インフラ構成の動作検証 ● インフラ構成のボトルネックの洗い出し ●分析ツールや監視ツールの機能テスト 負荷試験を実施する理由
- 25. ● 使用したツール ○ JMeter ●選定理由 ○ Webに情報が多い ○ セットアップが簡単 ○ 他プロダクトでの実績あり 負荷試験の準備
- 26. 負荷試験のシナリオ ● シナリオとは ○ ある操作や処理の一連の流れ ○チュートリアルなどの想定されるリクエストフロー
- 27. 負荷試験のシナリオ ● シナリオとは ○ ある操作や処理の一連の流れ ○チュートリアルなどの想定されるリクエストフロー ● どの程度の負荷が掛かるかの事前確認 ● インフラ構成のボトルネックを洗い出す
- 28. 負荷試験の実行シナリオ ● リセマラフロー ○ チュートリアル完了までの各API ●クエスト周回 ○ いくつかのクエストを周回実行する ● アリーナの対戦相手更新 ○ 対戦相手更新を実行する
- 29.
- 30. 負荷試験で発生した事例の紹介 ● 負荷試験実施時のlocalhostのmemcached挙動 ● localhostで使用していたmemcachedが高負荷の数値を示す ●インフラ構成時のPIDファイル設定ミスにより、キャッシュデータが 正しく生成されていなかった ● 挙動的には正常に動いているように見え、負荷試験実施まで検知できず
- 31. 負荷試験で発生した事例の紹介 ● 負荷試験実施時のlocalhostのmemcached挙動 ● localhostで使用していたmemcachedが高負荷の数値を示す ●インフラ構成時のPIDファイル設定ミスにより、キャッシュデータが 正しく生成されていなかった ● 挙動的には正常に動いているように見え、負荷試験実施まで検知できず ● localhostの設定を見直し、データが正しく生成されることを確認
- 32. 負荷試験で発生した事例の紹介 ● シナリオ実行サーバーの調整 ● シナリオを実行しても、サーバーに負荷をうまい具合にかけられない ●シナリオ実行サーバーのメモリ不足やjavaのGC影響により、高負荷が掛からない状態
- 33. 負荷試験で発生した事例の紹介 ● シナリオ実行サーバーの調整 ● シナリオを実行しても、サーバーに負荷をうまい具合にかけられない ●シナリオ実行サーバーのメモリ不足やjavaのGC影響により、高負荷が掛からない状態 ● シナリオ実行サーバーのスペックアップ(c4.2xlarge => m4.2xlarge) ● javaのGC周りの設定見直し ● シナリオ実行サーバー側もCPUなどをモニタリングできるように対応
- 34. 負荷試験で発生した事例の紹介 ● 負荷試験中のサーバー費用に関して ● 試験中は、リリース想定の台数やインスタンスクラスで稼働させる ●原因調査や土日などで、試験を実施していない間は費用かからないように調整が必要
- 35. 負荷試験で発生した事例の紹介 ● 負荷試験中のサーバー費用に関して ● 試験中は、リリース想定の台数やインスタンスクラスで稼働させる ●原因調査や土日などで、試験を実施していない間は費用かからないように調整が必要 ● 試験期間の中でも、実施期間/調査期間などスケジュール割りを行っておく
- 36.
- 37.
- 38. 負荷試験を行ったことで得たこと ● ウェブサーバーの台数の最適化 ○ 初期に想定していた台数の1/4の台数で調整 ●サーバーの潜在能力の確認 ○ 理論値でどの程度の接続数まで耐えられるか
- 39.
- 40.
- 41.
- 42.
- 43. Q2.運営初月のリソースダウンロード量は何バイト？ （CDNのダウンロード量） ● 3GB ● 3TB（3,000GB） ●3PB（3,000,000GB） ● 3EB（3,000,000,000GB）
- 44. 運営初月のリソースダウン ロード量は何バイト？ ⓘ Start presentingto display the poll results on this slide.
- 45. Q2.運営初月のリソースダウンロード量は何バイト？ （CDNのダウンロード量） ● 3GB ● 3TB（3,000GB） ●3PB（3,000,000GB） ● 3EB（3,000,000,000GB）
- 46.
- 47.
- 48.
- 49.
- 50. ● 負荷試験を行う大切さ ● 蓄積されてきた知見の重要性 ●グローバル展開の可能性 まとめ
- 51. ● 負荷試験を行う大切さ ● 蓄積されてきた知見の重要性 ●グローバル展開の可能性 まとめ グリーエンターテインメントHPの TECH BLOG でも紹介しています！ https://gree-entertainment.com/topics/3235/
- 52.
- 53.