AWS Storage Gateway 詳細 - AWSマイスターシリーズ
Upcoming SlideShare
Loading in...5
×
 

Like this? Share it with your network

Share

AWS Storage Gateway 詳細 - AWSマイスターシリーズ

on

  • 9,635 views

AWSマイスターシリーズの、AWS Storage Gatewayの資料です。

AWSマイスターシリーズの、AWS Storage Gatewayの資料です。

Statistics

Views

Total Views
9,635
Views on SlideShare
9,622
Embed Views
13

Actions

Likes
15
Downloads
515
Comments
0

6 Embeds 13

http://a0.twimg.com 5
http://us-w1.rockmelt.com 4
http://blog.livedoor.jp 1
http://paper.li 1
http://192.168.77.100 1
https://twitter.com 1

Accessibility

Categories

Upload Details

Uploaded via as Adobe PDF

Usage Rights

© All Rights Reserved

Report content

Flagged as inappropriate Flag as inappropriate
Flag as inappropriate

Select your reason for flagging this presentation as inappropriate.

Cancel
  • Full Name Full Name Comment goes here.
    Are you sure you want to
    Your message goes here
    Processing…
Post Comment
Edit your comment

AWS Storage Gateway 詳細 - AWSマイスターシリーズ Presentation Transcript

  • 1. AWSマイスターシリーズ “Reloaded” AWS Storage Gateway 2012 2月8日 エバンジェリスト 玉川 憲 (@KenTamagawa ) ソリューションアーキテクト 松尾 康博 (@understeer)
  • 2. Webセミナーほぼ週刊AWSマイスターシリーズ Reloaded!ほぼ週刊AWSマイスターシリーズ 1/30 IAM & Consolidated Billing 2/6 AWS Direct Connect 2/8 AWS Storage Gateway 3/12 HPC申し込みサイト http://aws.amazon.com/jp/event_schedule/ http://aws.amazon.com/jp/aws-meister/
  • 3. セミナーのAgenda AWS Storage Gatewayとは? Storage Gateway詳細 Copyright © 2011 Amazon Web Services
  • 4. AWS Storage Gatewayとは? 既存データセンタのデータを、クラウドの ストレージに安全にバックアップするサービス Amazon S3にデータをバックアップ • 耐久性が高く、安価(1G/月=約10円) データ転送/保存、ともに暗号化される バックアップ、ディザスタリカバリのコストを最小化 AWS Storage Gateway オンプレミスのデータセンタ AWSクラウド 既存アプリケー ションサーバ バックアップ Amazon S3 リストア
  • 5. Amazon S3EBSスナップショット仮想アプライアンスiSCSI
  • 6. Amazon S3は、データ保存の基盤 は、データ保存の基盤 S3 世界中のリージョンから選択 東京リージョンデータ置くだけ。イ 保存するデータは、ンフラ、電源、気に 自動で暗号化 しない。 (AES-256)する ことも可能 データセンターA データセンターB バケット 3か所以上で か所以上で 自動複製 データセンターC 高い耐久性で データ失わない: 安価な従量課金 99.999999999% ファイル(バイナリ、 ファイル バイナリ、 1GB/月 – 約10円 テキスト、画像、動画) テキスト、画像、動画
  • 7. EBSスナップショット EBSはいつでも、 バックアップをとれるEBSは、EC2のた (スナップショットと呼ぶ)めの仮想ディスク AWS クラウド(東京リージョン) EC2 S3 EC2 アベイラビリティゾーン アベイラビリティゾーン EBSスナップ EBSスナップ ショットは差分 で保存される SBE SBE SBE SBE SBE ショット EBSスナップ ショット ( EBSスナップ くなる) ショット EBSスナップ 2CE 2CE ショット EBSスナップ ショット 起動しているEC2に いつでも任意のス EBSを ナップショットから アタッチできる EBSを作成できる
  • 8. 仮想アプライアンスとは?VMware, Xenといった仮想化技術の上で動作するよう設計された仮想イメージOS、各種ソフトウェアをあらかじめインストール、設定しており、ハイパーバイザーの上ですぐに使えるようになっている オンプレミスのデータセンタ すぐ動く! 仮想 アプライアンス ハイパーバイザ
  • 9. iSCSIとは? コンピュータとストレージ装置の通信に使うSCSIコマ ンドをIPネットワークで送受信するためのプロトコル iSCSI対応ストレージは、LANを経由してローカルドラ iSCSIイニシエータを用いる オンプレミスのデータセンタ iSCSI対応 ストレージ ネットワーク経由で ローカルドライブに! iSCSI イニシエータ
  • 10. Storage Gatewayを Copyright © 2011 Amazon Web Services
  • 11. Storage Gatewayは仮想アプライアンス Storage Gatewayは、 仮想アプライアンスとして、 AWSからダウンロードできる オンプレミスのデータセンタ Storage Gateway ハイパーバイザの上で SGサーバ (仮想 稼働するだけで、 アプライアンス) iSCSI対応の ストレージになる ハイパーバイザ ハイパーバイザは、 VMWare ESXi 4.1(無償) に対応
  • 12. iSCSI対応のストレージになる アプリ・サーバからは、 iSCSI形式で オンプレミスのデータセンタ ローカル側でディスクとして できる アプリ・サーバ SGサーバ iSCSI ネットワーク経由 イニシエータ Storage Gateway ハイパーバイザ iSCSI Windows, RedHatの イニシエータを使う
  • 13. SG上のデータを、S3に自動転送 SGに書き込まれたデータを、 オンプレミスのデータセンタ スケジュールにあわせ、 自動的にAmazon S3に転送 アプリ・サーバ Amazon Web Services SGサーバ iSCSI イニシエータ Storage Gateway AWS Storage Amazon ハイパーバイザ Gateway S3 サービス 差分のみ、 圧縮して、 暗号化して転送!
  • 14. 保存形式は、 EBSスナップショットなので、オンプレミスのデータセンタ Amazon Web Services SGサーバ プ ッ ナ スSBE プッナスSBシ トッョ E Amazon プッナスSBシ トッョ E EC2 プッナスSBシ トッョ E トッョシ Storage Gateway AWS Storage Amazon ハイパーバイザ Gateway S3 サービス Amazon EBS AWSクラウド上で データの システムリカバリ リストアも も可能!
  • 15. AWS Storage Gatewayのユースケース のユースケース バックアップ テープを 別拠点に送付する必要が無く、別拠点の準備も必要ない バックアップ先のストレージのスペースを、先に購入しておく必要が 無く、S3 ディザスタリカバリとBCP ディザスタリカバリ用のデータセンタ、 サーバを用意する必要がなく、ハードウェア投資を削減 仮想サーバ(Amazon EC2)の準備のために、既存のVMイメージをクラ ウドに持ち込んでもよい(VM Importと呼ばれる) データを既存データセンターからクラウドへ
  • 16. セキュリティへの配慮AWSと各ゲートウェイの間のデータ転送は、SSLで暗号化クラウド側のデータ(耐久性99.999999999%設計のAmazon S3に保存される)は、AES-256を用いて暗号化iSCSIのイニシエータは、CHAP (Challenge-Handshake Authentication protocol)を用いて、暗号化認証を実施
  • 17. AWS Storage Gatewayの詳細機能 の詳細機能 ストレージゲートウェイのコントロール Webコンソールから、ボリューム作成、 1ボリューム 最大1TiB 1ゲートウェイで最大12TiB (12ボリューム) ボリューム上限緩和申請も可能 https://aws-portal.amazon.com/gp/aws/html-forms- controller/StorageGatewayRequest スナップショット作成/ 1, 2, 4, 8, 12, 24時間間隔で設定可能 現状はWebコンソールでの操作のみ。APIは後程提供
  • 18. AWS Storage Gatewayの詳細機能 の詳細機能 ストレージゲートウェイの自動アップデート アップデートやパッチを自動的にダウンロード、 インストール、デプロイ メンテナンスウィンドウを設定可能。 Amazon CloudWatchを用いて、 各ゲートウェイを監視し、ログ化、アラーム設定を 転送ネットワークのオプション ローカルのプロキシサーバ経由も可能 専用線接続サービス( AWS Direct Connect)
  • 19. 利用料金 なる 毎月$125/1ゲートウェイ 通常のEBSス 適用 (注: S3のPUT ) WS →バックアップ時のデータ転送は AWS →リストア時 2 AWS される
  • 20. AWS Storage Gatewayとは? 既存データセンタのデータを、クラウドの ストレージに安全にバックアップするサービス Amazon S3にデータをバックアップ • 耐久性が高く、安価(1G/月=約10円) データ転送/保存、ともに暗号化される バックアップ、ディザスタリカバリのコストを最小化 AWS Storage Gateway オンプレミスのデータセンタ AWSクラウド 既存アプリケー ションサーバ バックアップ Amazon S3 リストア
  • 21. セミナーのAgenda AWS Storage Gatewayとは? Storage Gateway詳細 Copyright © 2011 Amazon Web Services
  • 22. ローカル側の構成についてESXi4.1環境 最小構成 4vCPU 7.5GB RAM 最低1 NICストレージ環境 DAS (最低でも75GBのOVAインストール先ボリューム) iSCSI ストレージ(任意) NFSストレージ(任意)AWSへアップロードするSSL インターネット回線 Direct Connect(任意)
  • 23. VMWare ESXi 4.1 SGサーバ iSCSI VMDK Working VMDK storage VMDK VMDK VMDK VMDK VM boot VMFS VMFS VMFS storage RAID HDD HDD HDD NFS iSCSI iSCSIVMDKの払い出し方法はESXi標準• ローカルディスクのVMFSから• NFS経由のVMFSから LUN LUN LUN• iSCSI VMFSから• iSCSI 共有ストレージ※ボリュームは最大12個※1VMDKのMax 1TiB※ VM/ストレージ層で実装
  • 24. 仮想ディスクを適宜追加 Boot用 Working Storage用 iSCSI target用注意点 SCSIコントローラは「準仮想化」
  • 25. 仮想NICを用意 iSCSI target及びAWSへの転送用 仮想NICを分けることも可能NIC,N/W
  • 26. ローカル側ネットワークの構成iSCSIの通信用AWS HTTPSで通信 インターネット回線 Direct ConnectSOCKS Proxy Proxy経由でAWSにアクセスする際 に設定が必要 Consoleから設定
  • 27. ローカル環境の特記事項時刻同期 ESXiにてNTPサーバと同期 SGサーバは ESXiと同期させるIPアドレス SGサーバはDHCPでIP取得 固定するならDHCPサーバにてMACアドレスで制御 (N/W, HDD) ESXiやストレージのレイヤで実装監視 外部からのPing監視 ESXi
  • 28. Management Console Gateway 帯域制御 メンテナンスウインドウ設定 ボリューム作成、削除、リカバリ iSCSI 定期スナップショットスケジュール設定 監視 スナップショットの進捗 CloudWatchによる各種パフォーマンス監視
  • 29. 帯域制御AWSとのUp/Down帯域を指定 デフォルトは無制限
  • 30. SGサーバ自動メンテナンス設定メンテナンスウインドウを指定可能 メンテナンス内容はパッチの自動適用等
  • 31. iSCSI target AWS ことで iSCSI ターゲットへ IQNはボリューム作成と同時に設定・開始作成方法は3種類 新規作成 S3上のSnapshotを基に、オンプレミス側を作成 オンプレミス側ディスクを基に、S3上のSnapshotを作成
  • 32. VMWare側のボリュームと1:1でマッピング
  • 33. ローカルのボリュームと1:1でマッピング 作成と同時に、iSCSI target IQNも決定され、自動開始
  • 34. ボリュームの状態確認 各ボリュームのステータスを確認可能 AVAILABLE (正常) PASS THROUGH, etc. (http://docs.amazonwebservices.com/storagegateway/latest/userguide/StorageVolumeStatuses.html
  • 35. ボリューム毎に設定 1 24時間間隔まで デフォルトは 作成時刻で24時間間隔
  • 36. 作成したスナップショットはEC2タブのスナップショット一覧に表示
  • 37. 性能監視CloudWatchにて各種メトリクスを監視可能 しきい値を設定してアラーム通知も可能
  • 38. 想定利用ケース(バックアップサーバ) バックアップサーバ用iSCSIストレージとして S3へのスナップショットが、遠隔バックアップの役割を果たす 定期的に書き込まれるバックアップとスナップショット取得のタイミン グを調整することでタイムラグを削減可能DBサーバ サーバ/Fileサーバ サーバ サーバ NetBackup/NetVault/ARCserve/etc Snapshots 定期バックアップ iSCSI Storage Gateway S3 Local DAS/SAN Backup
  • 39. 想定利用ケース(ファイルサーバ)ファイルサーバ用iSCSIストレージとして 更新サイズ・スナップショット頻度が許容できる場合 S3へのスナップショットが、遠隔バックアップの役割を果たす DB側ですぐにファイルサーバとして復元可能 NFS/Windows Storage Server Snapshots iSCSI Storage Gateway S3 Local Volume
  • 40. 想定利用ケース(DBサーバ)想定利用ケース( サーバ)直接DBサーバとして 更新量が性能的に許容できる場合(参照がメインなど) S3へのスナップショットが、遠隔バックアップの役割を果たす AWS側ですぐにDBとして復元可能 Web/APサーバ サーバ MySQL/Oracle Snapshots iSCSI Storage Gateway S3 Local Volume
  • 41. 想定利用ケース(ストレージサーバプロキシ)iSCSI targetのヘッドとして 既存のiSCSIストレージ環境に挿し込む形 更新量が性能的に許容できる場合に限られる(参照がメインなど) S3へのスナップショットが、遠隔バックアップの役割を果たす DBサーバ サーバ/Fileサーバ サーバ サーバ/etc サーバ Snapshots iSCSI Storage Gateway iSCSI S3 iSCSI Storage
  • 42. 想定利用ケース( Direct Connect)想定利用ケース(w/ ) Direct Connectを利用 転送帯域・速度を確保 大量の更新データを高頻度にスナップショット取得可能 VPC接続の場合は、VPC内にSOCKS PROXYを別途用意、設定 Snapshots iSCSI Storage Gateway S3 Local Backup Direct Connect
  • 43. 動作の詳細重要な項目 スナップショット Working Storage ボリューム EBS
  • 44. ボリュームの作成新規作成の場合 ボリューム内は空(既存データが存在するとクリア) スナップショットは存在しない 初回スナップショットで、ボリューム内の全データをアップ ロード volume snapshot
  • 45. ボリュームの作成新規作成(既存データを使用)の場合 作成時に、ボリューム内の全データをアップロードしてスナップ ショット作成 volume snapshot
  • 46. ボリュームの作成新規作成(既存のスナップショットを使用)の場合 作成時に、スナップショット内の全データをダウンロードして スナップショット作成 ボリュームリカバリなどで使用 (EBSのスナップショットはサポート対象外) volume snapshot
  • 47. ボリュームの作成(EBS)スナップショットからEBSを作成 通常のEBS・スナップショットの操作と同じ EBS化したデータはEC2から読み書き可能 EC2 volume volume snapshot
  • 48. Working Storage Working Storageとは iSCSI経由で書きこまれたデータを一時的に保持するために必要 Snapshot作成時にAWSに転送後、クリアされる 最大2TiB(複数ボリュームで構成可能)
  • 49. Working Storage(Snapshot直後) ある時点で、snapshotをとった直後の状態 volume Working Storage snapshot
  • 50. Working Storage(通常状態) Snapshot取得後、ボリュームにデータが書き込まれる Working Storage volume Working StorageiSCSI snapshot
  • 51. Working Storage(Snapshot取得) Snapshot時にWorking Storageのデータをアップロード Working Storage volume Working Storage snapshot
  • 52. Working Storageがあふれると PASS THROUGHに遷移する スナップショットが取れない状態 ローカルディスクの読み書きは可能 実質、S3へのアップロードが停止している状態 Working Storageの増強( ただし Max 2TiBまで) ボリューム削除・再作成(サイズに応じた時間がかかる)
  • 53. Working Storageの容量管理が重要 の容量管理が重要 溢れないようにする AWSへのN/W帯域を太く( Direct Connect等) いつでもWorking Storageを追加できるH/W構成 監視する( CloudWatch、vSphere Client等) WorkingStorageUsed WorkingStorageFree WorkingStoragePercentUsedhttp://docs.amazonwebservices.com/storagegateway/latest/userguide/MainAddLocalDiskWorkingStorage.html
  • 54. 参考情報AWS Storage Gateway http://aws.amazon.com/jp/storagegateway/Blog http://aws.typepad.com/aws_japan/2012/01/aws- storage-gateway.htmlFAQ http://aws.amazon.com/jp/storagegateway/faqs/ユーザーガイド http://docs.amazonwebservices.com/storagegateway/late st/userguide/GettingStarted.htmlビデオ http://www.youtube.com/watch?v=Fu4VuQ8bdJY
  • 55. AWSプレミアムサポート アーキテクチャ設計に関するガイダンス、ベストプラクティス も日本語でご案内できます aws.amazon.com/jp/premiumsupport/ ブロンズ シルバー ゴールド プラチナ初回応答時間 12時間 4時間 1時間 15分サポート連絡先 1人 2人 3人 無制限24/365対応 対応 なし なし あり ありTEL可能 可能 不可 不可 可能 可能専任スタッフ なし なし なし あり特別サポート なし なし なし あり AWS利用総額の AWS利用総額の $0~$10K: 10% AWS利用総額の 10% $49 $10K~$80K: 7% 5%料金 $80K~: 5% (最低$15K) Copyright © 2011 Amazon Web Services (最低$400)
  • 56. AWS無料使用枠、Linux, Windows各1台ずつ無料
  • 57. Q&ACopyright © 2011 Amazon Web Services