Download to read offline
【公開用】モバイルオンラインゲーム開発を支える早く、安く、使いやすいサーバインフラ構築
- 2. 自己紹介 CEDEC+KYUSHU講演履歴 2018 大規模モバイルオンラインゲームを支えるソフトウェアアーキテクチャ開発とその使用例 2019 大規模モバイルオンラインゲームにおける安定運用のための仕組み 2020ソースコードレビューのススメ 2021 個人情報の保護となりすまし対策 ～KLabのゲーム内通貨の払戻のシステムの場合～ ２０２２ 表も裏もすべて見せます！ KLab謹製大規模オンラインゲームの リアルタイムチャットマイクロサービス 2023 大規模モバイルオンラインゲーム開発における チーム組成とワークフロー最適化 山田 雅人 KLab 株式会社 サーバリーダー KLabGames事業本部 エンジニアリング本部 技術広報グループ
- 3. 自己紹介 ● 2016年インフラエンジニアとして入社 ● オンプレミス/AWSを用いたインフラの構築・運用を担当 ●現在はモバイルオンラインゲーム用インフラの新規開発に従事 髙橋 慶充 KLab 株式会社 インフラエンジニア エンジニアリング本部 インフラグループ
- 4.
- 5. 5 ミッション：「世界と自分をワクワクさせろ」 ビジョン：「エンターテインメントで、世界中のユーザーをひとつにつなげる」 社会に感動と喜びを提供できるような、サービス・技術を創造しています。 設立 2000年8月1日 資本金 61億8134万円(2024年9月末現在) 株式公開市場東京証券取引所･プライム市場（3656） 代表者 代表取締役社長CEO 森田 英克 代表取締役副会長 五十嵐洋介 所在地 本社（東京都港区、六本木ヒルズ森タワー） 大阪事業所、福岡事業所、仙台事業所 主要関連会社 可来软件开发（上海）有限公司 （KLab China Inc.） 株式会社グローバルギア 従業員数 正社員 415名(2024年9月末現在) 主力：ゲーム事業 アニメ、コミック、ゲームなど、 世界中で人気の高いIPを原作とした モバイルオンラインゲームを 国内外に展開。 現在155の国と地域で配信 その他： スマートフォン関連のアプリケーション、 サービス及びサーバインフラの企画、 開発、提供、新規事業開拓など 会社紹介：KLab(クラブ)株式会社
- 6.
- 7. 本日のアジェンダ 1. はじめに 2. 開発環境の用途 3.開発用Web APIサーバへのニーズ 4. 最新システムの紹介 5. 最新システムとニーズの答え合わせ 6. まとめ
- 8. 本日のアジェンダ 1. はじめに 2. 開発環境の用途 3.開発用Web APIサーバへのニーズ 4. 最新システムの紹介 5. 最新システムとニーズの答え合わせ 6. まとめ
- 9. 規模感の話 • 人数：100人未満 • 開発用サーバ環境数：250環境 •開発用サーバ費用：75,000円/月 大体こんな感じでやってます。 はじめに
- 10.
- 11.
- 12.
- 13.
- 14. 共用：200環境 • 毎日ROMのビルドと一緒にサーバのデプロイ • 一日最低2回(5-10回の時もある) •ビルド単位でサーバは独立 ROMに対してサーバは1対1 惜しみなくサーバを占有します
- 15. 個人：50環境 • 占有してコーディングやコンテンツ作り用 • 作業中に他人の成果確認用 •並行して別の作業をしたい時用 なんとなく今の環境使いたくない程度で 新しいサーバが使える気軽さ
- 16. よくあるサーバインフラとの比較 共用サーバ(10台ぐらい) – VM/EKS/ECSを使っていくつか環境を用意 コンテナ onローカルマシン – Dockerなどでローカルマシンでコンテナを動かす
- 17. 共用サーバ メリット • ネットワーク越しのサポートがしやすい • 非エンジニアにも使いやすい デメリット •個人の作業が他人に影響しやすい • 気軽に環境を量産できない
- 18. 共用サーバ メリット • ネットワーク越しのサポートがしやすい • 非エンジニアにも使いやすい デメリット •個人の作業が他人に影響しやすい • 気軽に環境を量産できない
- 19.
- 20.
- 21.
- 22. 共用サーバ メリット • ネットワーク越しのサポートがしやすい • 非エンジニアにも使いやすい デメリット •個人の作業が他人に影響しやすい • 気軽に環境を量産できない
- 23.
- 24.
- 25.
- 26.
- 27. 共用サーバ メリット • ネットワーク越しのサポートがしやすい • 非エンジニアにも使いやすい デメリット •個人の作業が他人に影響しやすい • 気軽に環境を量産できない
- 28.
- 29.
- 30.
- 31.
- 32.
- 33.
- 34. 共用サーバ メリット • ネットワーク越しのサポートがしやすい • 非エンジニアにも使いやすい デメリット •個人の作業が他人に影響しやすい • 気軽に環境を量産できない
- 35.
- 36.
- 37.
- 38.
- 39.
- 40.
- 41.
- 42. 共用サーバ メリット • ネットワーク越しのサポートがしやすい • 非エンジニアにも使いやすい デメリット •個人の作業が他人に影響しやすい • 気軽に環境を量産できない
- 43. コンテナ on ローカルマシン メリット •個人の作業が他人に影響しにくい • 費用が安い デメリット • 非エンジニアには操作が難しい • ネットワーク越しのサポートがしづらい
- 44. コンテナ on ローカルマシン メリット •個人の作業が他人に影響しにくい • 費用が安い デメリット • 非エンジニアには操作が難しい • ネットワーク越しのサポートがしづらい
- 45.
- 46.
- 47.
- 48.
- 49.
- 50.
- 51. コンテナ on ローカルマシン メリット •個人の作業が他人に影響しにくい • 費用が安い デメリット • 非エンジニアには操作が難しい • ネットワーク越しのサポートがしづらい
- 52.
- 53.
- 54. コンテナ on ローカルマシン メリット •個人の作業が他人に影響しにくい • 費用が安い デメリット • 非エンジニアには操作が難しい • ネットワーク越しのサポートがしづらい
- 55.
- 56. コンテナ on ローカルマシン メリット •個人の作業が他人に影響しにくい • 費用が安い デメリット • 非エンジニアには操作が難しい • ネットワーク越しのサポートがしづらい
- 57.
- 58.
- 59.
- 60. コンテナ on ローカルマシン メリット •個人の作業が他人に影響しにくい • 費用が安い デメリット • 非エンジニアには操作が難しい • ネットワーク越しのサポートがしづらい
- 61. 比較してみると 共用サーバ VS コンテナon ローカルマシン 一長一短あります。 なのでイイ感じに組み合わせて使うことになりそう →両方のメリットを兼ね備えたものにしたい
- 62. なんとかメリットだけを享受したい • ネットワーク越しのサポートがしやすい • 非エンジニアにも使いやすい •個人の作業が他人に影響しにくい • 費用が安い
- 63.
- 64.
- 65. 本日のアジェンダ 1. はじめに 2. 開発環境の用途 3.開発用Web APIサーバへのニーズ 4. 最新システムの紹介 5. 最新システムとニーズの答え合わせ 6. まとめ
- 66.
- 67. KLabのゲーム開発フロー 1. プロトタイプ作成 a. 十分にゲームの面白さを検証 2.コア機能開発 a. ゲームのサイクルを確認 3. 量産開発 a. ゲーム全体を作り上げていく 4. 仕上げ a. ローンチできるようにブラッシュアップする 試行錯誤つよめ 再現性重視
- 68. KLabのゲーム開発フロー 1. プロトタイプ作成 a. 十分にゲームの面白さを検証 2.コア機能開発←この辺りで必要になる a. ゲームのサイクルを確認 3. 量産開発 a. ゲーム全体を作り上げていく 4. 仕上げ a. ローンチできるようにブラッシュアップする
- 69.
- 70.
- 71.
- 72.
- 73.
- 74.
- 75.
- 76.
- 77.
- 78.
- 79.
- 80.
- 81. 開発環境の新旧比較 開発環境 (作業用) 開発環境 (テスト) 検収環境 本番環境 コンテンツを 素早く作る 作ったものを 順次テスト 最終確認 遊んでもらう 開発環境検収環境 本番環境 コンテンツ作り テスト 最終確認 遊んでもらう 旧 新
- 82.
- 83. 本日のアジェンダ 1. はじめに 2. 開発環境の用途 3.開発用Web APIサーバへのニーズ 4. 最新システムの紹介 5. 最新システムとニーズの答え合わせ 6. まとめ
- 84. 開発用Web APIサーバへのニーズ 1. スケジュール 2.職種 3. 費用
- 85. 開発用Web APIサーバへのニーズ 1. スケジュール 2.職種 3. 費用
- 86.
- 87.
- 88.
- 89.
- 90.
- 91.
- 92.
- 93.
- 94.
- 95.
- 96. 成果物をデイリーで共有できる リポジトリの最新状態を毎日展開する • 最新クライアント • 最新アセット •最新サーバ 都度独立した環境に展開される →以前のものとの比較ができる
- 97.
- 98. 開発用Web APIサーバへのニーズ 1. スケジュール 2.職種 3. 費用
- 99. いろいろしたい VS 安定環境が欲しい CLエンジニア プランナー アーティスト 安定環境が欲しい プログラムの 試行錯誤したい SVエンジニアインフラ エンジニア 破壊的変更をしたい テスター
- 100. いろいろしたい VS 安定環境が欲しい CLエンジニア プランナー アーティスト 安定環境が欲しい プログラムの 試行錯誤したい SVエンジニアインフラ エンジニア 破壊的変更をしたい テスター 無理！
- 101. いろいろしたい VS 安定環境が欲しい CLエンジニア プランナー アーティスト 安定環境が欲しい プログラムの 試行錯誤したい SVエンジニアインフラ エンジニア 破壊的変更をしたい テスター 分割！
- 102.
- 103.
- 104.
- 105.
- 106.
- 107. わかりやすいといえばWebやChat Web UI/Chat UI GithubActionsSlack Bot Bot
- 108.
- 109.
- 110.
- 111. 開発用Web APIサーバへのニーズ 1. スケジュール 2.職種 3. 費用
- 112. 費用面 • 一人当たり1000円未満 • 定額使い放題 •管理コストが安い
- 113. 一人当たり1000円未満 • Docker Team＝$9/月 •t3.micro = $24/月 これ以下に何とかしたい ��
- 114.
- 115.
- 116. ニーズのまとめ 1. スケジュール – 機能ごとに独立した環境 –毎日独立した環境に展開 2. 職種 – 作業者個人ごとに独立した環境 – 試行錯誤しやすい環境 – 非エンジニアにもわかりやすいUI – 独立した環境を素早く提供できること 3. 費用 – 一人当たり数百円程度に抑えられること – 定額使い放題 – 管理コストが安いこと
- 117. 1. スケジュール – 機能ごとに独立した環境 –毎日独立した環境に展開 2. 職種 – 作業者個人ごとに独立した環境 – 試行錯誤しやすい環境 – 非エンジニアにもわかりやすいUI – 独立した環境を素早く提供できること 3. 費用 – 一人当たり数百円程度に抑えられること – 定額使い放題 – 管理コストが安いこと ニーズのまとめ
- 118. ニーズを整理してみた 1. 早い – 試行錯誤しやすい環境 –独立した環境を素早く提供できる 2. 安い – 一人当たり1000円以内に抑えられる – 定額使い放題 – 管理コストが安い 3. 使いやすい – 独立した環境 – 非エンジニアにもわかりやすいUI
- 119.
- 120. 本日のアジェンダ 1. はじめに 2. 開発環境の用途 3.開発用Web APIサーバへのニーズ 4. 最新システムの紹介 5. 最新システムとニーズの答え合わせ 6. まとめ
- 121.
- 122.
- 123.
- 124.
- 125.
- 126.
- 127.
- 128.
- 129.
- 130.
- 131.
- 132.
- 133.
- 134.
- 135.
- 136.
- 137.
- 138.
- 139.
- 140.
- 141.
- 142.
- 143.
- 144.
- 145.
- 146.
- 147.
- 148. インフラ費用内訳 Web APIサーバ兼 Github ActionsRunner EC2 × 2台 t3.xlarge ストレージ150GiB KVS ElastiCache × 1台 cache.t2.medium RDB Aurora × 1台 db.t3.medium 合計 75,000円
- 149.
- 150.
- 151.
- 152. bind mountの使用目的 1. 素早いゲームロジックの更新 2.ホストマシンでオペレーションできる
- 153. bind mountの使用目的 1. 素早いゲームロジックの更新 2.ホストマシンでオペレーションできる
- 154.
- 155.
- 156.
- 157.
- 158. bind mountの使用目的 1. 素早いゲームロジックの更新 2.ホストマシンでオペレーションできる
- 159.
- 160.
- 161.
- 162.
- 163.
- 164.
- 165.
- 166.
- 167.
- 168.
- 169.
- 170.
- 171.
- 172.
- 173.
- 174.
- 175.
- 176.
- 177.
- 178.
- 179.
- 180.
- 181.
- 182.
- 183. 本日のアジェンダ 1. はじめに 2. 開発環境の用途 3.開発用Web APIサーバへのニーズ 4. 最新システムの紹介 5. 最新システムとニーズの答え合わせ 6. まとめ
- 184. 1. 早い • 試行錯誤しやすい環境 –ゲームロジックの更新を数秒で反映 – 開発者で環境を気軽に作ってすぐ壊せる • 独立した環境を素早く提供できる – 45秒で独立した仮想環境を提供
- 185. 2. 安い • 一人当たり1000円以内に抑えられる –一人当たり750円 • 定額使い放題 – 75,000円で400環境まで使い放題 • 管理コストが安い – リモートサーバなのでオンラインサポート可能 – 開発者でできる環境の作成とデプロイ – コンテナ隠蔽で非SV/インフラエンジニアが楽
- 186. 3. 使いやすい • 独立した環境 –論理的に独立した仮想環境 • 非エンジニアにもわかりやすいUI – オペレーションはGithub ActionsのWeb UIで
- 187. 本日のアジェンダ 1. はじめに 2. 開発環境の用途 3.開発用Web APIサーバへのニーズ 4. 最新システムの紹介 5. 最新システムとニーズの答え合わせ 6. まとめ
- 188. まとめ 開発用のWeb APIサーバには • 本番と異なるニーズがある •工夫次第でゲームの開発のスピードは上がる • コスパの高い手段がある 💡
- 189.
- 190.
- 191.