大規模通信制御信号 ETLシステムにおける 大幅なコスト削減・意識改革の取り組み

1. Copyright 2024 NTT DOCOMO, INC. All rights reserved.
~第1回 AWSコスト削減 天下⼀武道会LT~
⼤規模通信制御信号
ETLシステムにおける
⼤幅なコスト削減・意識改⾰の取り組み
2024.2.1
株式会社NTTドコモ
R&Dイノベーション本部 サービスイノベーション部
ビッグデータ基盤担当
⼩澤 遼

2. 1
本⽇のトピックス
• ドコモが開発する⼤規模通信制御信号ETLシステムの概要
• AWSコストの課題
• ⼤幅なコスト削減・意識改⾰の取り組み
• まとめ & 宣伝

3. 2
⾃⼰紹介
⼊社: 2021年(新卒3年⽬)
業務：4G, 5Gに関する⼤規模通信制御信号ETLシステムに関する研究開発・運⽤
好きなAWSサービス: Lambda, Athena, S3, Cost Explorer
興味のある技術領域: 並列分散処理, ETL処理, リアルタイム処理
re:Invent2023
現地参加しました︕
やる気はあるので
コミュニティ活動や運営
等へお誘いください︕
株式会社 NTTドコモ
R&Dイノベーション本部
サービスイノベーション部
ビッグデータ基盤担当
⼩澤 遼
(OZAWA Ryo) AWS Certification

4. 3
AWSコスト
約50%削減！
課題と取り組みを共有します

5. 4
⼤規模通信制御信号ETLシステム(MINADEN)
⽇本全国の4G, 5G基地局の通信制御信号をリアルタイムで加⼯するシステム
基地局
ユーザ(スマホ)
受信部 多数の処理部 分析基盤
(DWH)
NW分析
・NW品質改善
・障害対応
・etc…
.
.
対象ユーザ数
約8,500万⼈
送信基地局数
約60,000局
⼊⼒データ量 リアルタイム性
データ発⽣から3分半で出⼒
約170TB/day
運⽤するEC2台数は
数百台規模で国内トップクラス

6. 5
AWSコストの課題
• 扱うリソースが多く, とにかく費⽤が⾼額
• コスト監視とコストの意識化ができておらず, 不要な費⽤が発⽣していた

7. 6
EC2-Savings Plansの駆使とGravitonへの移⾏(合算で58%削減)
「Graviton(ARM)への移⾏ (21%削減)」
「Savings Plans(SP)の駆使 (47%削減)」
c4.4xlarge(旧式)
$0.58
(43%引) $0.37
(47%引)
c6g.4xlarge(新世代)
$0.26
(62%引)
$0.49
(52%引)
RIは, 割引率が⾼いが
ファミリー固定.
(数年間固定)
Compute Savings Plans(SP)
Reserved Instances(RI)
SPは格安タイプに乗り換
え可能. 定期的なアーキテ
クチャ最適化の良い機会︕
0
0.5
1
c6i.4xlarge c6g.4xlarge
21%削減！
(1hあたりの費⽤($))
l CPU使⽤率, メモリ使⽤量のパフォーマンス向上
l 数百台規模で移⾏し, コスト削減の効果⼤！

8. 7
コスト監視の強化
Slack上に各処理部のコスト情報を提⽰するアプリを開発
特定の処理部と
期間を指定
サービス毎に料⾦の
詳細とグラフを表⽰.
(要コスト配分タグ)
コスト急増を⾃動検知.
処理部とAWSサービス
を特定して通知.
監視の強化とリソースの消し忘れを撲滅

9. 8
コストを⾒る会の開催とEC2⾃動停⽌アプリの導⼊(20%削減)
不要なリソースを発⾒し
1度に数百万円削減したことも・・・ 不要リソースの撲滅に直結
タグ付けを徹底し, 識別.
⽉に1度コストを⾒る会
を開催.
コストの意識化を推進.
夜間に不要な
リソースを⾃動停⽌

10. 9
コストの監視と意識化による効果
l 数百台規模のEC2コストを28〜50%削減
l EBS, S3, CloudWatch, Athena等の最適化
全ては監視と意識化によるコストの明確化から始まった
処理内容の割に
コスト⾼すぎないかね︖
アプリとインフラの
リファクタリングをしてみた︕
パフォーマンスが向上したし,
SPだから乗り換えもできた︕

11. 10
宣伝①
u ドコモ開発者ブログを運営しております (https://nttdocomo-developers.jp/)
u ドコモお台場ラボを運営しております (https://docomo-openlab.jp/)
p 技術イベント等で, ご利⽤いただけます. 第2回は, ぜひドコモお台場ラボへ︕︕
p 会員登録&来館予約をするだけで誰でも今⽇から利⽤可能

12. 11
宣伝②:ドコモ・クラウドパッケージの提供
➔ 資料ダウンロード・お問い合わせは https://nttdocomo.cloud/から︕
✓ ドコモのパブリッククラウド（Amazon Web Services / Google Cloud / Azure）活⽤ノウハウを詰め込んだガイドライン
✓ これまでのべ300社以上のお客様に対して販売の実績あり
コスト最適化ガイドライン・コスト削減デザインパターンもあります︕

13. 12
>>WE WANT YOU！
NTTドコモで
データ・クラウドエンジニアとしての
市場価値を上げたい⽅は
ぜひお声がけください！！