VDIインフラとしてのサーバGPUの検証結果について

1. Copyright © NHN Techorus Corp.
2016/04/20
NHN テコラス株式会社
テクニカルスペシャリスト 大木幸生
失敗しない 「VDIインフラ」 と 「HDI」 の可能性

2. Page 2
会社紹介
社名 NHN テコラス株式会社
設立 2007.04
拠点 本社、大阪、浜松、福岡
資本金 21億円
事業内容 データセンター事業
クラウド事業
マネージド事業
セキュリティ事業
コマース支援事業
広告支援事業
従業員数 342人(2016.01末)
届出電気通信事業者
ICANN公式レジストラ
APNIC Member
バックボーン（プライベートピアは含まず）
190Gbps
サーバ数（稼働台数）
10,000台以上
iDC（運用拠点）
国内iDC ：3箇所
国外iDC ：1箇所
合計 ：4箇所

3. Page 3
自己紹介
大木 幸生 oogi@nhn-techorus.com
データホテル事業本部
テクニカルスペシャリスト
入社 2001年1月
担当サービス メール配信、ＣＤＮ、動画配信
クラウドゲーミング
H/W評価・選定

4. Page 4
クラウドゲーミングから ＶＤＩ へ
2010/05 NHN Japan に JOIN
2010/08 クラウドゲーミング プロジェクトスタート
2011/02 Hangame で βテスト開始
2011/10 携帯キャリア様とLTE端末向けサービス開始
2012/06 「クラウドゲーミング・プラットフォーム by ubitus」発表
2012/06 Interop Tokyo 2012 出展
2013/06 Interop Tokyo 2013 出展
Best of Show Award クラウドプラットフォーム グランプリ受賞
VDI との共用検討開始
2013/06 アミューズメントゲームのクラウドサービス開始
2015/02 某社様、通信事業者様とIPV6の有効性確認リリース

5. Page 5
機器選定
ＧｅFｏｒｃｅ Ｑｕａｄｒｏ Ｔｅｓｌａ
導入済み1Uサーバ + GPU からスタート
S2050

6. Page 6
クラウドゲーミング 零号機
ＧｅFｏｒｃｅ
CPU X5650 * 2
GPU NVIDIA GeForce GTX 560Ti * 1
Direct3D

7. Page 7
ユーザーの ＶＤＩ への期待と懸念
期待
・ワークステーション購入費用削減
・メンテナンスコスト削減
・ワーキングスペースの効率化
・ワークステーションオンディマンド環境の提供
懸念
・アプリケーションのパフォーマンス・レスポンス
・回線帯域・コスト

8. Page 8
失敗した ＶＤＩ インフラ
Ｈａｒｄｗａｒｅ Ｃｏｍｐａｔｉｂｉｌｉｔｙ Ｌｉｓｔ を確認しましょう
Geforce は GPU Passthrough できません
急遽 ＧＲＩＤ で構築

9. Page 9
ｖＧＰＵプロファイル
カード GPU数 プロファイル 主用途 フレー
ムバッ
ファ
仮想
画面
数
最大仮
想GPU
数
GRID K1 4
K180Q
エントリーデザイ
ナー
4096 4
2560
x
1600
4
K140Q パワーユーザー 1024 2
2560
X
1600
16
GRID K2 2
K280Q デザイナー 4096 4
2560
X
1600
4
K240Q
デザイナー/
パワーユーザー
1024 2
2560
X
1600
8

10. Page 10
サーバGPUの検証結果について
ベンダーの推奨方式だけだと、ワークステーション比でのコスト削減が難しい。
• コスト面を考慮して、NVIDIAのコンシューマ向けGPUを利用したクラウド化を検証したが、
仮想化ミドルウェアとの相性が悪い。
• NVIDIAのQuadro以上のGPUを利用する方法もあるが、コストが高く、クラウド化での利
用よりも購入したほうが安い。
回線環境に大きく依存するため、WiFi等の無線環境では使用感に影響が有る。
• GPUのクラウド利用時にはネットワーク帯域に大きく依存する。
5-10Mbps/clientの実行帯域が必須
➡ 通常時はその3倍の利用帯域の確保が必要
➡ 実習室40名程度が同時接続する場合、 常時400Mbpsの回線帯域が必須

11. Page 11
サーバGPUの仮想化パフォーマンスについて
メーカー推奨値ではなく、想定環境または実環境で検証し
授業等で耐えられるのかという視点での判断が必要。
• GPUパススルー方式(＝占有)なら、仮想化環境上で利用可能なことは認識済み(NIDIA
やCitrixでも推奨)。しかしそれだとサーバGPUのメリットは少ない。
• vGPUだと、使用する「ソフトウエア」のGPU利用率だけでなく、扱う「データサイズ」でも
差異があることが判明。
検証例）データサイズの大小による操作感の違い
➡大サイズデータ（500MB）： 表示遅延あり、快適に利用できない
➡中サイズデータ（150MB）： 表示遅延あり、ただし、許容できるレベル
➡小サイズデータ（ 50MB）： ほぼ表示遅延なし、スムースで快適
・導入メリットは
1. 設計業務におけるリモート環境との協調作業が可能
2. モバイルデバイスを活用した設計モデルの表示やプレゼンが可能
3. 製品設計の知的財産の保護

12. Page 12
HDI という選択肢
「HDI」 = Hosted Desktop Infrastructure
ハイパーバイザーを使わない VDI

13. Page 13
HDI のための Moonshot
1 シャーシ（4.3U)あたり45 枚のカートリッジ
＝ 1 シャーシあたり180 ノード
Radeon HD8400

14. Page 14
なぜ、Moonshot？
2012/9
Paul Santeler来社 (Hyperscale Business VP & GM)
2013/10
HPスケールアウトテクノロジー・ラウンドテーブル
2013/4
Moonshot リリース
2013/12
Discovery Lab 検証開始
2014/1
m700 リリース
2014/2
評価機にて検証
2014/4
日本にMoonshot一号機到着

15. Page 15
Moonshot によるシンプルな HDI 構成概要
ＡｃｔｉｖｅＤｉｒｅｃｔｏｒｙＦｉｌｅＳｅｒｖｅｒ
VPN
＋
ＲＤＰ８
ユーザー様 弊社DC

16. Page 16
ＨＤＩ (Moonshot) への所感
サポート済みの外部ストレージは必須
(HPE社では 3PAR & Apollo 4500 が推奨として追加)
NIC の TOE 機能がない
Internet VPN + RDP では、ペンタブ使用時に
ラグが発生(ICA と比較して帯域を要する)
Windows Server 2012 R2 の WDS
(Windows Deployment Service) からインストールが新しい

17. Page 17
ＨＤＩ or VDI ?
・ＨＤＩ
同程度の性能なら、ＶＤＩ より低コスト
ハードウェアの選択肢が少なく、多様なニーズに
は応える事は難しい
・ＶＤＩ
スペックを必要としないケースも
ＨＤＩではスペック不足なケースにも対応が可能

18. Page 18
自社で首都圏を中心に光ファイバネットワークを整備
閉域接続環境による回線コストの定額化
他社サービスとの差別化は？
インターネットアクセス
キャンパス間専用線アクセス
キャンパス間広域イーサ接続
クラウド・ダイレクトコネクト
SINET5 ・ダイレクトコネクト
インターネットアクセス
拠点間広域イーサ接続
BUSINESS CONNECT

19. Page 19
関係各位に感謝
株式会社 エルザ ジャパン
日本SGI 株式会社
株式会社ユビタス
日本アイ・ビー・エム株式会社
日本ヒューレット・パッカード株式会社
日本AMD株式会社
ユニアデックス株式会社
株式会社エヌ・ティ・ティピー・シーコミュニケーションズ
スーパーマイクロ株式会社
株式会社アルティマ
メラノックス テクノロジーズ ジャパン株式会社
エヌビディア合同会社
株式会社アスク
*敬称略、順不同

20. Page 20
クラウドゲーミング ４号機
CPU Intel E5-2650 V3 * 2
GPU NVIDIA GeForce GTX980(4GB) * 4
NIC Mellanox ConnectX-3 DP 40GbE * 1
2015年02月17日～ 某社様とIPV6回線での有効性確認

21. Page 21
Thank you!
ご清聴有難うございました