SOFTLAYERのベアメタルで、Fusion IOが使える様になりました。

1. © 2015 IBM Corporation
ベアメタルサーバー
＋Fusion ioMemory
SOFTLAYER
2015年5月19日
日本アイ・ビー・エム株式会社
クラウド事業統括 高良 真穂
本書に含まれる情報は、貴社内部のご検討、評価の目的のために提供されるものです。貴社内での
ご使用,複製、開示はこの目的のために必要な範囲でのみお願いいたします。貴社との間で正式な契
約が成立した場合には、それに従ってこれをお取り扱い願います。なお、貴社にて既に取得されている
情報については、これらの制限は及びません。

2. © 2015 IBM Corporation
SanDisk社 Fusion ioMemoryが、
ベアメタルで使える様になりました！
2
または
2Uサーバー
4Uサーバー
+
Fusion ioMemory SX-300
電源と冷却の関係で、1Uサーバーには
装着できないので注意ねがいます。
ベアメタル
ブッチギリの高性能！
SSDに比べ５倍
SATAに比べ４００倍
（グローバル共通サービス）

3. © 2015 IBM Corporation
Fusion ioMemory とは？
3
PCI Expressバスに接続して利用する超高速ストレージ
一般的 SSDFusion ioMemory
転送速度: 0.6Gバイト／秒
インタフェース: SATA3
転送速度： 8Gバイト／秒
インタフェース： PCIe x 8
PCI Express 2.0はSATA3の約１３倍の転送速度
（バスの規格であって、機器の性能ではありません）
＞
PCI Express 2.0
SATA3

4. © 2015 IBM Corporation
Fusion ioMemory の性能差は？
4
 実ワークロードに近い ランダム R/Wを使って比較した結果、 fusion ioMemoryは突出した性能
差であることが実測されました。
測定方法： fioコマンド
条件: ランダム R/W、ブロックサイズ 4K、同時並行数64
サーバー： Xeon E5-2650-V3 20 core
SSDに比べ５倍の早さ
SATAに比べ４００倍の早さ

5. © 2015 IBM Corporation
Fusion ioMemoryの性能の特徴
5
 NAND型フラッシュ・メモリのストレージなのに、ランダム書込みが早い
 RDB読取りはチューニング可能であるが、書込みはストレージの性能依存のため難しい
フュージョンは
書込みが高速
SSDは書込みが遅い
磁気ディスクをデータ領域
に使うのは論外！？

6. © 2015 IBM Corporation
iSCSI系のストレージサービスとの違い
 SoftLayerには、エンデュランス・ストレージやパフォーマンス・ストレージといった高速ストレージがありますが、
Fusion ioMemoryを使うことのメリットは？
6
物理ディスク・アレイ
（磁気ディスク）
ストレージプール
論理ディスク
RAID化、I/Oの分散高速化
のための物理ディスク集合単位
ストレージプールから
必要量に小分け
大容量ライト・キャッシュ
データの一貫性と
書込み高速化の
ため停電対策を
装備するメモリ
データを複数の
磁気ディスクに
分散することで、
高速化を実現
TCP/IP LAN
iSCSIプロトコル
ベアメタル
仮想サーバー
PCIeバスに
装着して利用
物理ディスクが故障
しても無停止で取り替
え
最短パスで性能最優先！
コントローラが故障し
ても無停止交換
短いパスで最高の性能確保

7. © 2015 IBM Corporation
ベアメタルでFusion ioMemoryを利用するには？
以下２つのパターンが利用可能
SoftLayerの裏メニューを利用するパターン
1. IBM SoftLayer営業経由で、Fusion ioMemoryのモデルと数量、データセンターを指定して、月額
利用料金の見積もりを取得 （案件ベースで推進）
2. 実装するベアメタルのモデルを決めて、チケットからオーダー
3. 利用者は、OSにFusion ioMemoryのドライバをインストールして利用開始
4. 故障時は、SoftLayerのDC常駐技術員が交換等の対応実施
COD（Customer Own Device）サービスを利用
1. 利用申請：以下をチケットに書き込んで依頼する
• PCIeカードのモデル、メーカー、数量
• ベアメタルの想定モデルと一台あたりの装着数、サーバー台数
• CODの必要性などの理由
2. 審査： SoftLayerのサーバーエンジニアとDCエンジニアの審査 （かなり厳しい）
3. 条件承諾: CODのPCIeが原因でサーバーを壊した時の弁償、ユーザー責任で問題判別、性能や
安定性の無保証
4. 送付手続き： 場所、送付連絡先、配送業者とトラッキング番号、入所時の電話連絡先
5. ドライバ： カードの装着は常駐技術員が実施、ドライバは利用者がインストール実施
6. 問題判別：ユーザー自身で実施、PCIeカードの接続位置の確認などはチケットで問合せ
7. 保守部品：代替部品の送付、故障部品の回収送付依頼などはユーザー責任で実施
7

8. © 2015 IBM Corporation
ベアメタルの装着したFusion ioMemoryは
 ポータルのサーバー管理画面から確認可能
8
マザーボードのモデル
SuperMicro社にPCIeの仕様を
確認するために利用、マシンのシリ
アル番号はIPMIの画面から取得
する。
Fusion ioMemoryが装着されて
いれば、ココに表示が出る

9. © 2015 IBM Corporation
Fusion ioMemoryの最高性能を追求
Fusion ioMemoryの最高の性能を絞り出す条件設定
–電力設定
9
fioinf ioDrive 0000:82:00.0: PCIe Slot reported power limit: 0mWatts
fioinf ioDrive 0000:82:00.0: Warning! PCIe Slot reported power 0mWatts is less than product minimum power 13000mWatts
fioinf ioDrive 0000:82:00.0: PCIe Adapter power limit: 25000mWatts
fioinf ioDrive 0000:82:00.0: PCIe Adapter power Throttle point: 24750mWatts
許容電力が取得できない場合、マザーボードの故障を回避するためパワースロットルを25ワット以下に自主設定
最大性能を発揮するには、35ワットの消費電力が必要
オーバーライドするパラメータを設定することで、35ワットを利用可能。 ただし、マザーボードが対応していないと
故障の原因となるので、SuperMicro または SoftLayerのチケットに確認した上で実施
SuperMicroに問合せた結果、この2CPU
20コアのサーバーは、45ワットの給電可能
と判り、パワースロットル全開で利用できました。

10. © 2015 IBM Corporation
Fusion ioMemoryの最高性能を追求
２CPU以上のベアメタルのH/Wアーキテクチャは、NUMA（Non-Uniform
Memory Access） なので、FIO側にプロセスを集中すると性能アップ！
10
インターコネクト メモリバスCPUメモリバス CPU
I/Oバス
I/Oバス
メインメモリ メインメモリ
I/OデバイスI/Oデバイス
# numactl –H
available: 2 nodes (0-1)
node 0 cpus: 0 1 2 3 4 5 6 7 8 9
node 0 size: 32660 MB
node 0 free: 26155 MB
node 1 cpus: 10 11 12 13 14 15 16 17 18 19
node 1 size: 32768 MB
node 1 free: 31936 MB
node distances:
node 0 1
0: 10 21
1: 21 10
Node 0 Node 1
コア 0〜9
メモリ 32GB
コア 10〜19
メモリ 32GB
CPU1CPU2
numa コマンドでの確認結果
ベアメタルの
マザーボード
2CPUタイプ

11. © 2015 IBM Corporation
11
Fusion ioMemory と SSDの性能比較結果
SSDを利用でも改善が難しいＤＢ更新系処理の性能向上
に期待される
Fusion ioMemoryは、
Node#1のPCIeに装着
35ワット利用可能な
オーバライド設定済
１１〜１２倍の性能差

12. © 2015 IBM Corporation
MySQLをSysbenchでFusionの性能を再確認
12
サーバー Xeon 2650 v3 x 2 (10core x 2) 、64Gメモリ
Sysbench条件 対象データ18億レコード、 ８スレッド、バッファプール 48G
企業向け、読み出し多用負荷用途向け
ポータルのチケットから注文
iSCSI ストレージ
デフォルトのストレージ
（ポータルから注文）
（ポータルから注文）
（ポータルから注文）
ソーシャル・アプリやスマホ・ゲームなどの高負荷を想定したテストでも、他を引き離す結果を得ました。

13. © 2015 IBM Corporation
物理サーバー+高性能ストレージの効果
13
MySQLサーバーに１８億件のデータ生成して、サーバー上のバッファプール(48G)の10倍
相当のデータを使って、SysbenchのOLTPテストを実施した比較結果
CPUコアを増やしても、ストレージの
性能を高くしてもトランザクション性
能は簡単に改善しない
ベアメタル（物理サーバー）＋
Fusion ioMemory
ベアメタル＋SSD
ベアメタル＋SATA

14. © 2015 IBM Corporation
まとめ
2U, 4Uのベアメタルで、Fusion ioMemoryが利用できます！
–グローバル共通サービス
–弊社へご相談後、チケットからオーダー
Fusion ioMemory の特徴
–PCI Express 2.0 のバス接続で、SATAの１０倍以上の転送速度規格を利用
–SATAの４００倍、ＳＳＤの５倍のI/O性能
–NAND型フラッシュなのに、書き込みが高速
–最短パスで、性能最優先 （PCIeバス接続、 NUMA Affinity ）
利用方法は２通り
–裏メニューからオーダー （ベアメンタルと同じレンタル）
–ユーザーのFusion ioMemory を送付して利用 （要審査合格）
 MySQLのＯＬＴＰテストにおいて、他ストレージを圧倒する性能値
14

15. © 2015 IBM Corporation
15