Rescale Night #1 のマイクロソフトのスライドです。

1. Rescale Night
@ Tokyo #1
マイクロソフト
グローバルブラックベルト
HPC Tech Lead
田中 洋
hirost@microsoft.com

3. 稼働中
アナウンス済み / 構築中
米国中部
Iowa
米国東部
Virginia
米国政府
Virginia
米国中北部
Illinois
米国政府
Iowa
米国中南部
Texas
南ブラジル
Sao Paulo
西ヨーロッパ
Netherlands
北中国 *
Beijing
南中国 *
Shanghai
東日本
Tokyo, Saitama
西日本
Osaka
南インド
Chennai
東アジア
Hong Kong
東南アジア
Singapore
東南オーストラリア
Victoria
東オーストラリア
New South Wales
中央インド
Pune
カナダ東部
Quebec City
カナダ中部
Toronto
西インド
Mumbai
ドイツ北東**
Magdeburg
ドイツ中部 **
Frankfurt
北ヨーロッパ
Ireland
米国東部2
Virginia
イギリス
2 Regions
US DoD
East TBD
US DoD
West TBD
* Operated by 21Vianet ** Data Stewardship by Deutsche Telekom
30 の地域でサービス中、36の地域まで拡大予定
世界最大のインフラストラクチャ
中央韓国
Seoul
南韓国
TBD
米国中西部
Utah
米国西部
California
米国西部2
California
 100カ所以上のデータセンター
 ネットワーク網が全世界で第 2 位の規模
 AWS の 2 倍、Google 6 倍の地域サポート
(2016年 10月 11日 現在)
https://azure.microsoft.com/en-us/regions/
イギリス
2 Regions
フランス中部
TBD
フランス南
TBD

4. Container Service
VM Scale Sets
Virtual Machines
Batch
App Service
Service Fabric
Cloud Services
Azure Functions

5. EngineeringInsight
Timeline
Cloud Computing,
2012
Windows HPC
on Azure,
2014
GPU on Azure,
2016 8月(プレビュー開始)
Hシリーズリリース (9/26)
Linux RDMA
(InfiniBand)
on Azure,
2015 7月
ネットワークの高速化
より大規模なクラ
スターサポート

6. CAE 向けに最適なクラウドHPC Microsoft Azure
全世界36か所(IB付きは6か所)
のDCのリソースで必要なとき
に、必要なリソースを迅速に確
保して、高並列計算を効率的に
実行することができます。
CAE基盤に必要なRDMA、
InfiniBandインターコネクトを
用意。GPUインスタンスでプリ
/解析/ポスト処理までクラウド
で一貫した産業利用を可能に!
HPE社との包括的なアライアン
ス – FC（フレキシブルキャパシティ）
Redhat社との包括的なアライ
アンス - CCSP
オンデマンドに利用 CAEに最適なハードウェア グローバルアライアンス
Azure HPC の取り組み
Windows と
Linux の
サポート
高速な
InfiniBand、
GPUサポート
多くの
パートナー企業
セキュリティと専用線
による接続性
• Redhat社と唯一、かつ包括的
なアライアンス RHEL、JBOSS
などCCSP認証、一貫サポート
• HPE社との包括的なアライアン
ス – FC（フレキシブルキャパ
シティ）のリリース
• Altair、ANSYS社などCAE ISV各
社と連携
• 日本での契約、裁判所の管轄も日
本国法準拠
• 地域ニーズに応じたDCロケーショ
ンの提供。日本では東日本・西日
本の提供。広域災害に正式に対応
• 専用線接続 ExpressRoute によるセ
キュアな接続を提供
• A8/A9 QDR InfiniBandインスタンス
をリリース済み
• HaswellベースFDRのHシリーズイ
ンスタンスをリリース
• NVIDIA Tesla K80/M60搭載GPUイン
スタンス Nシリーズをリリース
（プレビュー）
• Windows HPC Packを開発メーカー
として提供
• Linux ディストリビューション各
社と連携（Redhat、Novel、
Canonical）

7. マイクロソフトのパートナーシップ
Hardware & Software
Infrastructure
Big Compute
Marketplace
Certified
Applications
Visualization

8. Marketplace 上の HPC ソリューション
https://azure.microsoft.com/ja-jp/marketplace/

9. Dv2
Dシリーズ
Version2
CPU進化
SSD搭載・CPU進化
D
Azure インスタンスラインナップ
G
大容量メモリ・
SSD搭載
NC
NVIDIA GPU K80
計算用途、
InfiniBand搭載
（NC24r）
高CPU・
低メモリ
計算用途
F
最速CPU、
InfiniBand
FDR搭載
H
最大6TB SSD搭載
DB用途
L
低価格・汎用
A
Aシリーズ
version2登場 –
11月予定
Av2
NVIDIA GPU
M60搭載
可視化用途
NV

10. HPC インスタンス (A8 - A11)
スペック A8 A9 A10 A11
コア数 8 16 8 16
CPU Xeon E5-2670 2.6 GHz – Sandy Bridge
メモリ
DDR 3
56 GB
DDR 3
112 GB
DDR 3
56 GB
DDR 3
112 GB
標準データ
ディスク
384 GB HDD 384 GB HDD 384 GB HDD 384 GB HDD
フロント
ネットワーク
10G bps Ethernet
バックエンド
ネットワーク
QDR InfiniBand with RDMA N/A
リージョン 米国東部・西部・北中部・中南部、北ヨーロッパ・西ヨーロッパ、東日本

11. HPC v2 インスタンス: Hシリーズ
スペック H16r H16mr H8 H8m H16 H16m
コア数 16 16 8 8 16 16
CPU Xeon E5-2667 v3 3.2 GHz - Haswell
メモリ
DDR 4
112 GB
DDR 4
224 GB
DDR 4
56 GB
DDR 4
112 GB
DDR 4
112 GB
DDR 4
224 GB
標準データ
ディスク
2.0 TB SSD 2.0 TB SSD 1.0 TB SSD 1.0 TB SSD 2.0 TB SSD 2.0 TB SSD
フロントネッ
トワーク
40G bps Ethernet
バックエンド
ネットワーク
FDR InfiniBand with RDMA N/A

12. 検証事例: STAR-CCM+
 標準モデル「ル・マン」を使用。
（1億400万セル)
 1024コア (= 64ノード) までの
スケーラビリティを確認。
 Cent OS 7.1 + Intel MPI,
並列ファイルシステム Lustre を構成。
https://blogs.technet.microsoft.com/jpitpro/2016/05/18/microsoft-azure-%E3%81%A7-star-ccm-%E3%81%AE%E4%BD%BF%E7%94%A8%E3%81%8C%E5%8F%AF%E8%83%BD%E3%81%AB/

13. 検証事例: OpenFOAM
 Azure は InfiniBand の効果で多ノード時の
スケーラビリティが良好。
 6ノード時にへこんでいるのは、全ケースに
おいて1回ずつしか実行できず、外れ値を
排除できなかったため。
http://www.pccluster.org/ja/event/%E5%AE%9F%E7%94%A8%E3%82%A2%E3%83%97%E3%8
3%AA%E9%83%A8%E4%BC%9A%EF%BC%9AOpenFOAMBenchmarkTest-v2.pdf

14. 14
Storage /
Workspace
CONSUME
WorkstationsCompute
Source: Alex Herrera, Jon Peddie Research
CREATE
On the road
Main office
Satellite officeDesign review /
walk-through
Manufacturing
3D print / prototype

15. 可視化用GPUインスタンス: NVシリーズ
スペック NV6 NV12 NV24
コア数 6 12 24
CPU Xeon E5-2690 v3 - Haswell
GPU
1 x M60 GPU
(1/2 物理カード)
2 x M60 GPU
(1 物理カード)
4 x M60 GPU
(2 物理カード)
メモリ 56 GB 112 GB 224 GB
標準データ
ディスク
380GB SSD 680GB SSD 1.44 TB SSD
ネットワーク Azure Network Azure Network Azure Network
プレビュー価格
（GAの50％ OFF?）
63.24円/hour
GRIDライセンス込
126.48円/hour
GRIDライセンス込
252.96円/hour
GRIDライセンス込

16. 世界最高レベルのディープラーニング技術
ImageNet で最高評価
28.2
25.8
16.4
11.7
7.3 6.7
3.5
ILSVRC 2010
NEC America
ILSVRC 2011
Xerox
ILSVRC 2012
AlexNet
ILSVRC 2013
Clarifi
ILSVRC 2014
VGG
ILSVRC 2014
GoogleNet
ILSVRC 2015
ResNet
ImageNet Classification top-5 error (%)
2015年、マイクロソフトは、エントリーした５分野すべてで１位を獲得
(ImageNet classification, ImageNet localization, ImageNet detection, COCO detection, and COCO segmentation)

17. 計算用途GPUインスタンス: NCシリーズ
スペック NC6 NC12 NC24 NC24r
コア数 6 12 24 24
CPU Xeon E5-2690 v3 - Haswell
GPU
1 x K80 GPU
(1/2 物理カード)
2 x K80 GPU
(1 物理カード)
4 x K80 GPU
(2 物理カード)
4 x K80 GPU
(2 物理カード)
メモリ 56 GB 112 GB 224 GB 224 GB
標準データ
ディスク
380GB SSD 680GB SSD 1.44 TB SSD 1.44 TB SSD
フロントエンド
ネットワーク
Azure Network
バックエンド
ネットワーク
N/A
FDR InfiniBand
with RDMA
プレビュー価格
（GAの50％ OFF?）
57.12円/hour 115.26円/hour 229.5円/hour 258.06円/hour

18. Azure HPC for CAE の Web サイト
できました!
Visit!! https://simulation.azure.com/

19. Tech SummitでAzure上のHPC/CAE利用について話します!
HPC/CAE on Azureの始め方
CAE、N・Hシリーズについてデモ用意します!
http://microsoft-events.jp/mstechsummit/session/#CLD-017
11/2
Day2
14:25-15:15
@Room3