Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.
© 2016 Insight Technology, Inc. All Rights Reserved.
DBAが知っておくべき 最新テクノロジー
ライフワーク的に話し続けて はや7回目(か 8回目かも)
いつもどおり ユルユルにDBMSに役立...
© 2016 Insight Technology, Inc. All Rights Reserved. 2
自己紹介
 石川 雅也 (いしかわ まさや)
 現職
 株式会社インサイトテクノロジー 取締役 CTO
ビッグデータソリューショ...
© 2016 Insight Technology, Inc. All Rights Reserved.
インサイトテクノロジー事業詳細
コンサルティング事業
ソフトウェア事業
ハードウェア事業 (2012年~)
対象データベース: Oracl...
© 2016 Insight Technology, Inc. All Rights Reserved.
今日のセッションの目的とゴール
目的
DBAとして押さえるべき
最新テクノロジーをわかりやす
く紹介する。
今回はストレージの観点のみ...
© 2016 Insight Technology, Inc. All Rights Reserved. 5
今日のお品書き
HDD Trend
NVMe, NVMe Fabric
SCM
NVDIMM
© 2016 Insight Technology, Inc. All Rights Reserved.
Storage
HDD
6
© 2016 Insight Technology, Inc. All Rights Reserved. 7
出典: テクノ・システム・リサーチ
© 2016 Insight Technology, Inc. All Rights Reserved. 8
出典: テクノ・システム・リサーチ
© 2016 Insight Technology, Inc. All Rights Reserved. 9
http://www.hgst.com/ja/science-of-storage/next-generation-data-cent...
© 2016 Insight Technology, Inc. All Rights Reserved. 10
© 2016 Insight Technology, Inc. All Rights Reserved. 11
Helium-filled HDD
• ヘリウムを密封したHDD 現在は HGSTのみ
• 空気抵抗が1/7になることにより
• プ...
© 2016 Insight Technology, Inc. All Rights Reserved. 12
Helium-filled HDD
• ヘリウムを密封したHDD 現在は SeagateとHGSTが 10TB
• 空気抵抗が1/7...
© 2016 Insight Technology, Inc. All Rights Reserved. 13
© 2016 Insight Technology, Inc. All Rights Reserved. 14
© 2016 Insight Technology, Inc. All Rights Reserved. 15
HGST 8TB HGST 10TB
© 2016 Insight Technology, Inc. All Rights Reserved. 16
Wrap Up
• HDDは大容量 7200rpm が今後も使われると思う。
• それ以外のHDDは廉価版SSDに代わられる。
• ...
© 2016 Insight Technology, Inc. All Rights Reserved. 17
Storage
NVMe Fabric
© 2016 Insight Technology, Inc. All Rights Reserved.
Technical Basics of NVMe
• All Parameters for 4kb command in single 6...
© 2016 Insight Technology, Inc. All Rights Reserved. 19
© 2016 Insight Technology, Inc. All Rights Reserved.
NVMe in Fabric Environment
• NVMeを使用した
All Flash アプライアンス
のユースケース
• ファ...
© 2016 Insight Technology, Inc. All Rights Reserved.
NVMe over Fabrics
21
© 2016 Insight Technology, Inc. All Rights Reserved. 22
RDMA
• RDMA Remote Direct Memory Access
CPUが関与することなくネットワーク越しにリモート計...
© 2016 Insight Technology, Inc. All Rights Reserved. 23
How Ethernet RDMA Protocols iWARP and RoCE Support NVMe over Fabri...
© 2016 Insight Technology, Inc. All Rights Reserved. 24
NVMe, NVMe Fabric Performance
1,042 1,0651,030 1,044
2,766
2,302
1...
© 2016 Insight Technology, Inc. All Rights Reserved. 25
Wrap Up
• NVMe (DAS) が実際のシステムに使用され始めている。
• 但し、SWでの冗長化必須なのでSDSのストレー...
© 2016 Insight Technology, Inc. All Rights Reserved. 26
Wrap Up
• NVMe (DAS) が実際のシステムに使用され始めている。
• 但し、SWでの冗長化必須なのでSDSのストレー...
© 2016 Insight Technology, Inc. All Rights Reserved. 27
SCM
Storage
Class
Memory
© 2016 Insight Technology, Inc. All Rights Reserved. 28日経エレクトロニクス techon.nikkeibp.co.jp/article/MAG/20150702/425921/
© 2016 Insight Technology, Inc. All Rights Reserved. 29
© 2016 Insight Technology, Inc. All Rights Reserved. 30
© 2016 Insight Technology, Inc. All Rights Reserved. 31
NVDIMM
© 2016 Insight Technology, Inc. All Rights Reserved. 32
NVDIMM-N Cookbook: SMART Modular
© 2016 Insight Technology, Inc. All Rights Reserved. 33
NVDIMM-N Cookbook: SMART Modular
© 2016 Insight Technology, Inc. All Rights Reserved. 34
NVDIMM-N Cookbook: SMART Modular
© 2016 Insight Technology, Inc. All Rights Reserved. 35
NVDIMM-N Cookbook: SMART Modular
© 2016 Insight Technology, Inc. All Rights Reserved. 36
NVDIMM-N Cookbook: SMART Modular
© 2016 Insight Technology, Inc. All Rights Reserved. 37
NVDIMM-N Cookbook: SMART Modular
© 2016 Insight Technology, Inc. All Rights Reserved. 38
NVDIMM-N Cookbook: SMART Modular
© 2016 Insight Technology, Inc. All Rights Reserved. 39
NVDIMM-N Cookbook: SMART Modular
© 2016 Insight Technology, Inc. All Rights Reserved. 40
© 2016 Insight Technology, Inc. All Rights Reserved. 41
© 2016 Insight Technology, Inc. All Rights Reserved. 42
Wrap Up
• SCMは Intel/Micron の 3D XPoint が一歩リード。
• 価格は高いみたい。
• NVDI...
© 2016 Insight Technology, Inc. All Rights Reserved. 43
まとめのまとめ
• HDDは大容量 7200rpm が今後も使われる。速度もそこそこ。
それ以外のHDDは廉価版SSDに代わられる。...
© 2016 Insight Technology, Inc. All Rights Reserved. 44
• 7/15(金) 14:00~
A34 NVMe 徹底検証 インサイトテクノロジー 平間大輔
NVMe, NVMe Over Fa...
© 2016 Insight Technology, Inc. All Rights Reserved.
記載されている会社名、サービス名、製品名は、株式会社インサイトテクノロジーおよび各社の商標または登録商標です。
Copyright 201...
Upcoming SlideShare
Loading in …5
×

DBTS2016 DBAのための最新テクノロジー

530 views

Published on

db tech showcase 2016 Tokyo

Published in: Technology
  • Be the first to comment

DBTS2016 DBAのための最新テクノロジー

  1. 1. © 2016 Insight Technology, Inc. All Rights Reserved. DBAが知っておくべき 最新テクノロジー ライフワーク的に話し続けて はや7回目(か 8回目かも) いつもどおり ユルユルにDBMSに役立ちそうなHardware/Storage界隈 のネタ話をしていきます。いつもよりメモリ的な話が多いかも…
  2. 2. © 2016 Insight Technology, Inc. All Rights Reserved. 2 自己紹介  石川 雅也 (いしかわ まさや)  現職  株式会社インサイトテクノロジー 取締役 CTO ビッグデータソリューション事業部 FB: MasayaIshikawa  職歴  外資系HWベンダーにて、ミニコン/UNIX OS担当SE. 社内SE向け技術情報発信、 トラブルシュート。crash dump解析、UNIX SCSI Device Driver改造とか  1993年 日本オラクルに入社。 DBインフラ系テクニカルサポート、コンサルティング、トラブルシュート。  1995年 インサイトテクノロジー設立 Oracleパフォーマンス管理ツール Performance Insight開発 (1995~) Oracleアクセスログ取得管理ツール PISO開発 (2004~) SQL Server版、富士通Symfoware版 PISO開発 (2005~) DBコンサルティング、トラブルシュート 2012年 DB専用IAサーバー Insight Qube 開発、販売開始 2013年 Actian DWH向けRDBMS 販売開始 2015年 Delphix データ仮想化ソリューション 販売開始 現在 NVMe, NVMe Fabric, 大規模分析/ストレージ基盤などをR&D中
  3. 3. © 2016 Insight Technology, Inc. All Rights Reserved. インサイトテクノロジー事業詳細 コンサルティング事業 ソフトウェア事業 ハードウェア事業 (2012年~) 対象データベース: Oracle, SQL Server, MySQL, Actian Vector, Actian Matrix など 支援内容: データベースの設計、構築、運用支援、パフォーマンス改善など データベースのパフォーマンス監視・分析ツール(自社開発) データベースのセキュリティ保全ツール(自社開発) 大規模システムの統合監視ツール(自社開発) マルチデータベースのリアルタイムレプリケーションツール 世界最速のデータベース専用高速サーバー(自社開発) 7年連続シェアNo1 次世代型データウェアハウス向け 超高速データベース Oracle Standard Edition向け DR構築ツール Database仮想化による Test Data Management支援、DevOps今やり始めている事業 データベース基盤、ストレージ基盤、データ分 析/データ処理基盤 などの、SW/HW合わせた プロトタイピングやPoCを支援するサービス
  4. 4. © 2016 Insight Technology, Inc. All Rights Reserved. 今日のセッションの目的とゴール 目的 DBAとして押さえるべき 最新テクノロジーをわかりやす く紹介する。 今回はストレージの観点のみ ソフトウェア・テクノロジーの 話はなし ゴール 最新のストレージ界隈の技術に ついて知見を得る
  5. 5. © 2016 Insight Technology, Inc. All Rights Reserved. 5 今日のお品書き HDD Trend NVMe, NVMe Fabric SCM NVDIMM
  6. 6. © 2016 Insight Technology, Inc. All Rights Reserved. Storage HDD 6
  7. 7. © 2016 Insight Technology, Inc. All Rights Reserved. 7 出典: テクノ・システム・リサーチ
  8. 8. © 2016 Insight Technology, Inc. All Rights Reserved. 8 出典: テクノ・システム・リサーチ
  9. 9. © 2016 Insight Technology, Inc. All Rights Reserved. 9 http://www.hgst.com/ja/science-of-storage/next-generation-data-centers/10tb-smr-helioseal-hdd
  10. 10. © 2016 Insight Technology, Inc. All Rights Reserved. 10
  11. 11. © 2016 Insight Technology, Inc. All Rights Reserved. 11 Helium-filled HDD • ヘリウムを密封したHDD 現在は HGSTのみ • 空気抵抗が1/7になることにより • プラッターの数が 5 から 7に増加し大容量化 • 消費電力低減、静音化、低温化 • 密封していることにより • 空気が入らないため故障率が激減 MTBF 250万時間 • 空冷以外の新たな冷却方式が採用可能 (水冷/油冷?) • 普通の7,200回転と同じ速度と思って下さい • 価格は従来のHDDよりまだ若干高めだが、電力・スペースコス トを考えると良い選択肢となる
  12. 12. © 2016 Insight Technology, Inc. All Rights Reserved. 12 Helium-filled HDD • ヘリウムを密封したHDD 現在は SeagateとHGSTが 10TB • 空気抵抗が1/7になることにより • プラッターの数が 5 から 7に増加し大容量化 • 消費電力低減、静音化、低温化 • 密封していることにより • 空気が入らないため故障率が激減 MTBF 250万時間 • 空冷以外の新たな冷却方式が採用可能 (水冷/油冷?) 液冷出た! • 普通の7,200回転と同じ速度と思って下さい 10TB速いです! • 価格は従来のHDDよりまだ若干高めだが、電力・スペースコス トを考えると良い選択肢となる
  13. 13. © 2016 Insight Technology, Inc. All Rights Reserved. 13
  14. 14. © 2016 Insight Technology, Inc. All Rights Reserved. 14
  15. 15. © 2016 Insight Technology, Inc. All Rights Reserved. 15 HGST 8TB HGST 10TB
  16. 16. © 2016 Insight Technology, Inc. All Rights Reserved. 16 Wrap Up • HDDは大容量 7200rpm が今後も使われると思う。 • それ以外のHDDは廉価版SSDに代わられる。 • 但し 体積あたりの記憶容量はSSDがどんどん大きくなっている… 記憶容量あたりの価格がSSDが安くなったらどうなるか… • 容量が10TBから大きく増える話はあまり聞かない。 • 次に来るのは… google?
  17. 17. © 2016 Insight Technology, Inc. All Rights Reserved. 17 Storage NVMe Fabric
  18. 18. © 2016 Insight Technology, Inc. All Rights Reserved. Technical Basics of NVMe • All Parameters for 4kb command in single 64B command • Support deep queues (64K commands/queue, 64K queues) • Supports MSI-X and interrupt steering • Streamlined & simple command set (13 required commands) 18
  19. 19. © 2016 Insight Technology, Inc. All Rights Reserved. 19
  20. 20. © 2016 Insight Technology, Inc. All Rights Reserved. NVMe in Fabric Environment • NVMeを使用した All Flash アプライアンス のユースケース • ファブリック上は SCSIプロトコルで通信 • NVMeとSCSIの プロトコル変換が必須 だが 100us以上のペナルティ (NVMeのLatencyは 1~2桁us) 20
  21. 21. © 2016 Insight Technology, Inc. All Rights Reserved. NVMe over Fabrics 21
  22. 22. © 2016 Insight Technology, Inc. All Rights Reserved. 22 RDMA • RDMA Remote Direct Memory Access CPUが関与することなくネットワーク越しにリモート計算機上 のメモリへアクセスする すなわち、リモート計算機上のメモリからリードおよびリモー ト計算機上のメモリへ直接ライトする http://rdma.hatenablog.com/entry/2014/04/06/161737
  23. 23. © 2016 Insight Technology, Inc. All Rights Reserved. 23 How Ethernet RDMA Protocols iWARP and RoCE Support NVMe over Fabrics
  24. 24. © 2016 Insight Technology, Inc. All Rights Reserved. 24 NVMe, NVMe Fabric Performance 1,042 1,0651,030 1,044 2,766 2,302 1,796 1,673 2,759 2,257 0 500 1000 1500 2000 2500 3000 RND. READ SEQ. READ Throughput (MB/s) 12Gbps SAS LOCAL 12Gbps SAS IB QDR, SRP NVMe LOCAL NVMe iSCSI NVMe over Fabric
  25. 25. © 2016 Insight Technology, Inc. All Rights Reserved. 25 Wrap Up • NVMe (DAS) が実際のシステムに使用され始めている。 • 但し、SWでの冗長化必須なのでSDSのストレージ部分とし て。あとは運用に乗るか とか(Hot Swapなど) • NVMe Fabricがやっと規格化。 各社独自実装から移行し、今後事例が増えていくだろう。 まだ荒削りなのでエンタープライズ分野はもうちょい先か。 • Insight Qube NVMe model 発売します…
  26. 26. © 2016 Insight Technology, Inc. All Rights Reserved. 26 Wrap Up • NVMe (DAS) が実際のシステムに使用され始めている。 • 但し、SWでの冗長化必須なのでSDSのストレージ部分とし て。あとは運用に乗るか とか(Hot Swapなど) • NVMe Fabricがやっと規格化。 各社独自実装から移行し、今後事例が増えていくだろう。 まだ荒削りなのでエンタープライズ分野はもうちょい先か。 • Insight Qube NVMe model 発売します…
  27. 27. © 2016 Insight Technology, Inc. All Rights Reserved. 27 SCM Storage Class Memory
  28. 28. © 2016 Insight Technology, Inc. All Rights Reserved. 28日経エレクトロニクス techon.nikkeibp.co.jp/article/MAG/20150702/425921/
  29. 29. © 2016 Insight Technology, Inc. All Rights Reserved. 29
  30. 30. © 2016 Insight Technology, Inc. All Rights Reserved. 30
  31. 31. © 2016 Insight Technology, Inc. All Rights Reserved. 31 NVDIMM
  32. 32. © 2016 Insight Technology, Inc. All Rights Reserved. 32 NVDIMM-N Cookbook: SMART Modular
  33. 33. © 2016 Insight Technology, Inc. All Rights Reserved. 33 NVDIMM-N Cookbook: SMART Modular
  34. 34. © 2016 Insight Technology, Inc. All Rights Reserved. 34 NVDIMM-N Cookbook: SMART Modular
  35. 35. © 2016 Insight Technology, Inc. All Rights Reserved. 35 NVDIMM-N Cookbook: SMART Modular
  36. 36. © 2016 Insight Technology, Inc. All Rights Reserved. 36 NVDIMM-N Cookbook: SMART Modular
  37. 37. © 2016 Insight Technology, Inc. All Rights Reserved. 37 NVDIMM-N Cookbook: SMART Modular
  38. 38. © 2016 Insight Technology, Inc. All Rights Reserved. 38 NVDIMM-N Cookbook: SMART Modular
  39. 39. © 2016 Insight Technology, Inc. All Rights Reserved. 39 NVDIMM-N Cookbook: SMART Modular
  40. 40. © 2016 Insight Technology, Inc. All Rights Reserved. 40
  41. 41. © 2016 Insight Technology, Inc. All Rights Reserved. 41
  42. 42. © 2016 Insight Technology, Inc. All Rights Reserved. 42 Wrap Up • SCMは Intel/Micron の 3D XPoint が一歩リード。 • 価格は高いみたい。 • NVDIMMも規格化途上。 • 規格化済みの NVDIMM-N SSD(NAND)の10,000倍のLatencyは非常に魅力的。
  43. 43. © 2016 Insight Technology, Inc. All Rights Reserved. 43 まとめのまとめ • HDDは大容量 7200rpm が今後も使われる。速度もそこそこ。 それ以外のHDDは廉価版SSDに代わられる。 今後のトピックはあまり無いかな… • NVMe (DAS) が実際のシステムに使用され始めている。 が、冗長化、Hot Swapなどに注意 Insight Qube NVMe model 発売します。 • NVMe Fabricがやっと規格化。今後に期待 • SCMは Intel/Micron の 3D XPoint が一歩リード。 • NVDIMMも規格化途上だが、SSD(NAND)の10,000倍の Latencyは非常に魅力的で使いドコロによっては面白そう。
  44. 44. © 2016 Insight Technology, Inc. All Rights Reserved. 44 • 7/15(金) 14:00~ A34 NVMe 徹底検証 インサイトテクノロジー 平間大輔 NVMe, NVMe Over Fabric を使って Oracle動かしてみたら… • 7/15(金) 17:00~ D37 Database as Code サクッとテスト用DB環境をアプリチームに渡したい ~ DevOpsを実現するテクノロジーの秘密
  45. 45. © 2016 Insight Technology, Inc. All Rights Reserved. 記載されている会社名、サービス名、製品名は、株式会社インサイトテクノロジーおよび各社の商標または登録商標です。 Copyright 2016 Insight Technology, Inc. All Rights Reserved.

×