Cloudian meets CloudStack

CloudStack Ecosystem Day, Tokyo

Cloudian meets CloudStack

July 20, 2012
Gemini Mobile Technologies
Shinya Motohashi

Copyright © 2011-2012 Gemini Mobile Technologies Inc. & KK All Rights Reserved. Page 1

私たちのご紹介

2001年創立

渋谷、シリコンバレー、北京

開発製品

- 数千万人が利用する携帯メールシステム

- 数百万人が利用する（Gmailのような）Webメールシステム

- Hibari - NOSQL Database (オープンソース)

- Cloudian – S3 API準拠クラウドストレージ


Cloudianに至る経緯

NOSQLの入門解説のほか、CloudianにNOSQLを実装した経緯についても
紹介しています。

カスタマーレビューのコメント：
「買って損しない内容」
「遂に基礎知識になった,」
「大変解りやすく、整理された本です。」


お知らせ

本年8月11日、社名を変更いたします。

新社名：クラウディアン株式会社
Cloudian KK

ロゴ：
ロゴ：


Agenda

クラウドストレージ (10 min)

S3 API準拠 (10 min)

Cloudianの概要 (10 min)

CloudStackとの統合連携 (10 min)


クラウドストレージ、4つのキーワード

オブジェクト構造

大規模分散処理

ストレージの仮想化

クラウドのインフラ


クラウドストレージはオブジェクト構造

フラットなオブジェクト構造はクラウド環境に最適です

ファイル構造オブジェクト構造

VolumeA/MyFolder VolumeB/John/ http://s3.cloudian.com/abc123def4...
/Favorite/Music Music


フラットなオブジェクト構造はクラウド環境に最適です


オブジェクトの移動が自由、柔軟
オブジェクト毎にメタデータ付与
オブジェクト毎に許可設定
オブジェクト数を無制限に拡張
- ディレクトリサイズに制約を受けない

http://s3.cloudian.com/abc123def4...


オブジェクトのIDがHTTPのため、WAN経由のオブジェクト
移動や複製が容易です。

マルチデータセンター対応に最適
DC1 DC2
- 多くのファイヤーウォール、
ルーター機器はHTTP対応

WAN
DC3 DC4


クラウドストレージは大規模分散処理
分散処理技術により経済的に、高い拡張性を実現しています。

単一処理型分散処理型

マニュアルでデータ移行

ハードウェアを追加する
ことで自動的にクラスタ
サイズを拡張

大規模なハードウェア置換を繰り返し、
ビッグデータに対応することは、経済的
にも、時間的にも簡単ではありません。


クラウドストレージは大規模分散処理
分散処理技術により経済的に、高い拡張性を実現しています。

分散処理型

Cloudianが実装する分散処理技術の場合、

低コストの汎用サーバーを並列配置
ハードウェアを追加する
数台から数百台まで弾力的に拡張ことで自動的にクラスタ
サイズを拡張
データ自動複製
復旧時データリバランス
単一障害点なし


クラウドストレージはストレージを仮想化
リソースを仮想的に統合し、複数グループで共有します。

サーバーの仮想化ストレージの仮想化

1台の物理的なサーバーを共有複数の物理ディスクを仮想的に統合

B社が利用
B社が利用

A社が利用 A社が利用

複数のグループ、ユーザーが共有


クラウドストレージはクラウドインフラ
クラウドのストレージサービスにはレイヤーがあります。

クラウド俯瞰図オンラインストレージサービス(例)

SaaS

クラウドストレージサービス(例)
PaaS

IaaS

http://en.wikipedia.org/wiki/Cloud_computing

クラウドストレージはクラウドインフラ
アプリケーションとのインターフェース（API)を提供します。

クラウド俯瞰図

：
API：
Application
Programming
Interface
SaaS

PaaS

IaaS

http://en.wikipedia.org/wiki/Cloud_computing

Agenda

クラウドストレージ

S3 API準拠

Cloudianの概要

CloudStackとの統合連携


なぜ、S3 API準拠？

Amazon S3は急速に成長し、大きなエコシステムを形成して
います。

Amazon S3のオブジェクト数 S3エコシステム

数百～千種類のサービス、アプリケーション、
ツール、アプライアンス


S3 APIのメリット
アプリケーションやツールをAWSと相互利用し、クラウド
ストレージ間での相互運用ができます。
Public

Hybrid
Private


エコシステムのメリット
大きなエコシステムには数多くのメリットがあります。

豊富なドキュメント、情報開発済資産を共有

多数の開発者パートナーシップ、アライアンス


クラウドストレージの次のステージ
インタークラウドにより、クラウド間で相互バックアップ、
オブジェクト相互間移動・・・

パブリック
クラウドB
パブリック
クラウドA 相互バック
アップオブジェクト
の相互間移動
同じAPIを利用していると
相互接続がスムース
プライベートパブリック
クラウド b
プライベートクラウド
クラウド a

暗号化、高度セキュリティ
の相互間統一にも有利？

Agenda


S3 API準拠

Cloudianの概要



Cloudianは商用サービスに利用されています。
2011年7月に商用版リリース。丸1年が経過したところです。

Public

• 世界各国で100件を超えるトライアル
• 年内、さらに追加発表予定
Hybrid
Private


Cloudian、3つのキーワード

Amazon S3 API完全準拠
Compatibility:

C

クラウドストレージ基盤
A P
Architecture: Package:

パッケージソフトウェア製品


CloudianはS3 API完全準拠
REST APIや基本的なS3 API準拠ではなく、高度なS3 API
に対応しています。


【S3 API例】マルチパート・アップロード
大きなオブジェクトを分割してストレージします。

Part5
Part5
A Large Object

Part4
Part4

Part3

Part2
Part3
Part2
Part1
Part1


【S3 API例】アクセスコントロールリスト
オブジェクトへのアクセスをコントロールします。


【S3 API例】パブリックURL
URLによりオブジェクトを共有できます。

Dropboxにおける利用例


一般的な「S3準拠」製品との違い


Cloudianはクラウドストレージ基盤
Cloudianはクラウド環境に最適なストレージを提供します。

の特徴
他製品

ファイルストレージ製品：
大量のオブジェクト対応ファイル構造による制約
オブジェクト構造柔軟なオブジェクト移動
マルチデータセンター

拡張性ハードウェアストレージ製品：
弾力性ハードウェアの置換の際の、
大規模分散処理データ移動に制約
信頼性
経済性
ハードウェアストレージ製品：
マルチテナント（複数グループ）テナント毎にハードウェアを
ストレージの仮想化割当てる場合、経済性に課
題


拡張性、弾力性、信頼性
NOSQLデータベースによりデータ分割、複製を行います。

論理リング内のノード
数は2127まで理論的に
は可能（ほぼ無制限）

ただし、運用面では、
100台～400台
データを
(例) Facebook：複数のノード
1クラスタ100台/ に自動複製
多数のクラスタ
論理リング
DC1

DC2

複数データセンターや
ノード追加や縮退時に、
ラック単位で指定可能
自動でデータリバランス


サイズを無制限に拡張
理論的にはシステム全体サイズを無制限に拡張できます。

論理リング論理リング

Virtual Bucket
本年10月アルファ版論理リング論理リング
リリース予定

論理リング論理リング


最適な格納先を選択（HyperStoreTM）
オブジェクトのサイズに応じて最適な格納先を設定できます。

小さなオブジェクト

HyperStore
Manager NOSQLデータベース

（特許申請中）
大きなオブジェクト

HyperStoreを利用しない場合と比較して、
書き込み：約30％高速化
読み出し：約400％高速化
ディスク使用率：50％→80％に向上ファイルシステム

パッケージソフトウェア
各種オープンソースも利用し開発。短期間・簡単に利用でき
るようパッケージ化。

自動設定（ターン・キー） Cloudianソフトウェア構成

NOSQLデータベース
独自開発HyperStore
HyperStore Cloudian Management Console
管理機能
Apache Tomcat
サービス提供基盤
- 統計、課金 Cloudian Admin I/F Cloudian S3 I/F
REST I/F
Jetty Jetty
- ユーザー、グループ管理 HyperStore

- 利用量制御(QOS) 認証 QOS ユーザレポートオブジェクトオブジェクト
ストレージ
Redis Apache Cassandra File System
- 監視モニタリング
監視自動化
設定運用 Puppet
Zabbix


Cloudian Management Console (CMC)


Agenda


S3 API準拠

Cloudianの概要




1. シングル・サインオン

2. S3 APIを経由したオブジェクトストレージを提供

3. セカンダリストレージに適用
- CloudianからVMイメージとスナップショットを読み込み、格納

4. “拡張”プライマリストレージに適用


CloudStackからシングル・サインオン


オブジェクトストレージの提供
S3 API経由でオブジェクトをストレージします。
CloudStack Cluster

Management
Server

Secondary
S3 API Storage

Computing Computing Computing
Node Node Node

VM image
Objects

Primary Storage


CloudStackセカンダリーストレージへの適用
スケールアウト、マルチゾーン対応が可能になります。
CloudStack Zone CloudStack Zone

HOST HOST

Primary HOST HOST Primary
Storage CloudStack Storage
Zone Cluster
Cluster

POD Cluster
Secondary
Storage POD
POD

NFS NFS
Secondary
Secondary Secondary
Secondary
Storage
Storage Storage
Storage
CloudStack CloudStack
System VM ZONE System VM
ZONE

Snapshot, Backup, ISO

のセカンダリーストレージ
CloudStackのセカンダリーストレージ


CloudStackプライマリーストレージの拡張
プライマリストレージの“拡張”ストレージとなります。
CloudStack Cluster

Management
Server

Secondary
Storage

VM image
Computing Computing Computing
Node Node Node

VM image
NFS

Primary Storage


まとめ

クラウドストレージは、(1)オブジェクト構造、(2)大規模分散処理、(3)仮
想化ストレージ、(4)クラウドのインフラという特徴があります。

クラウドのインフラにとって、大きなエコシステムをもつS3 API準拠は数
多くのメリットがあります。

Cloudianは、S3 API完全準拠のクラウドストレージ基盤を構築できるパッ
ケージソフトウェア製品です。

CloudStackとCloudianが統合・連携することにより、以下を実現します。
(1)シングルサインオン
(2)S3 API経由のオブジェクトストレージ
(3)スケールアウト、マルチゾーン対応のセカンダリストレージ
(4)プライマリストレージの拡張


Cloudianの入手方法
法人であれば、Cloudianを30日間無料で評価できます。お申込みは、
• http://geminimobile.jp/cloud-storage-products/cloudian_eval_agr.php
Cloudianは以下のパートナー企業から購入いただけます。

ホワイトペーパー：｢クラウドストレージの基礎知識」がダウンロードできます。
• http://wp.techtarget.itmedia.co.jp/contents/?cid=11355&spath=1


www.cloudian.com


バックアップ


Cloudian meets CloudStack

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Viewers also liked

Viewers also liked (20)

Similar to Cloudian meets CloudStack

Similar to Cloudian meets CloudStack (20)

More from CLOUDIAN KK

More from CLOUDIAN KK (20)

Recently uploaded

Recently uploaded (9)

Cloudian meets CloudStack