Cloudian presentation at idc japan sv2016

IDC Japan Storage Vision 2016
講演資料
見えてきたIOT/BigData/AI連携の流れ
それを支えるスマートデータストレージ
2016年2月10日
クラウディアン株式会社
本橋信也
1© Copyright 2010-2016 Cloudian KK. All rights reserved.
それを支えるスマートデータストレージ

本日の講演の流れ
IOT/BigData/AI連携
クラウディアン
における活用事例
 IOT/BigData/AI連携の背景について
ご説明します。
 クラウディアンが検証している取り組み
についてご紹介します。
© Copyright 2010-2016 Cloudian KK. All rights reserved.
 クラウディアンにおける活用経験から、
IOT/BigData/AI連携を促進する、スマートな
データーストレージの要件を考えてみます。
 そのうえで、CLOUDIAN HyperStoreを利用する
メリットについてご説明します。
スマート
データストレージ
の要件
CLOUDIAN
HyperStore
のメリット

アジェンダ
IOT/BigData/AI連携の背景
クラウディアンにおけるIOT/BigData/AI連携の活用例
データストレージに求められるスマート（かしこさ）要件
スマートデータストレージとして活用できる
CLOUDIAN HyperStoreのメリット

加速し始めたIOT
IOT（Internet of Things)とは、一意のIDをモノ・人・動物に付与し、
ネットワーク経由で情報を伝送すること
• 超小型・超低消費電力
コンピューター
• IOT用ゲートウェイ
• インダストリー4.0（ドイツ）
• インダストリアルインターネット（米国）
• 「日本再興戦略改訂2015」等（日本）
産官学連携
の産業育成
• 定額制モバイルデータ
通信サービスの普及
• MVNO（再販事業者）が、
広帯域を分割し販売• ティザリングにより、
スマートフォンを経由
• IOT用ゲートウェイ
• センサー
• SIMカード
ネットワーク
センサー
デバイス
産官学連携
の産業育成
ユビキタス
テレマティクス
M2M
O2O

OSSの分散処理技術がビッグデータを身近に
単体サーバーの処理では、
毎日の集計が間に合わず、
複数サーバーに分散して処理
膨大な量: 12TB/日（当時のTwitter）
速く処理: 12TB÷80MB/秒 ≒ 48時間
Hadoop MapReduce処理の例
出典:「NOSQLの基礎知識ビッグ
データを活かすデータベース技術」
（リックテレコム刊:2012年）
大量のデータ
複数サーバーが
分散並列処理

第2次ブーム第3次ブーム
AI（人工知能）は第3次ブームといわれる
第1次ブーム
1960年代 1980年代 2010年頃～
（推論・探索）（知識）（機械学習・特徴表現学習）
探索
対話システム
エキスパートシステム
Siri
ワトソン
チェス、将棋、囲碁
統計的自然言語処理
自動運転、ペッパー
統計的自然言語処理
ディープラーニング
（深層学習）
出典:「人工知能は人間を超えるか」松尾豊著、角川選書刊の分類を参照
• 機械自身が特徴量を抽出
• OSSやWebサービス登場
機械学習・
ニューラル
ネットワーク
Web
ビッグ
データ
• 人間が機械に学習させる
特徴量を抽出
• 認知精度を高めるための
特徴量抽出は“職人技”

ディープラーニングによる画像認識の例
 多数の人物の画像を与え特徴量を抽出させる
 学習用画像にラベルをつける（例:motohashi）
別の画像を判別させる
（motohashiの正解率）
(2%)(67%)(76%)
（深層学習）
(0%)(5%)
(65%) (1%)
(0%)(61%)
（深層学習）
Caffeは、ディープラーニング用
フレームワークのOSSであり、
Berkeley Vision and Learning
Center（BVLC）が中心ととなり
開発／改良している

IOT/BigData/AI連携の活用例
業界 IOT BigData AI
製造、計測、保守、
物流、農業
センサー、ロボット、
カメラ
装置・設備稼働ログ/
監視映像/画像
自律制御、SCM最適
化、異常検知・予知
通信、電力、ガス、
水道、道路、建物
サービス装置・設備
センサー
運用/稼働/状態ログ
配分最適化
異常検知・予知
流通、
広告
店舗/ディスプレイ
カメラ
洋服、持物、装身具
等の映像/画像
嗜好に合う商品推薦
広告価値測定
IOTによりビッグデータの対象がWebからリアルな世界に移行
流通、
広告
店舗/ディスプレイ
カメラ
洋服、持物、装身具
等の映像/画像
嗜好に合う商品推薦
広告価値測定
防犯防犯カメラ監視映像犯罪予兆検知
自動車、ドローン、
運搬、交通
車両センサー
搭載カメラ
動作ログ
周辺映像/画像
自動運転/制御
経路最適化
医療、介護、ヘルス
ケア、保険
ウェアラブル端末、
レントゲン、CT
心拍数、血圧
検査画像
健康/医療診断
保険料査定
受付、コールセン
ター、CS
マイクロフォン音声自動応答/支援
ホワイトカラー支援スキャナー書籍/書類/印刷物自動作成/支援

見えてきたIOT/BigData/AI連携の流れ
IOT/BigData/AIは連携することで、それぞれの課題を解決し、
新たな価値を生み始めている
IOT BigData AI
世界中のIOTデバ
イスが集める、多
種多様の大量デー
タを迅速に経済的
に処理することが
必要
ビッグデータを分
析し価値を生み出
すためには、専門
的な知識が必要
画像認識や、特に
映像認識の学習
には、大量のデー
タ量や高速処理に
対応できる環境が
必要
GoogleはYoutubeから
1000万枚の画像を取り出し、
1000台のマシンで3日間か
けて「ネコ」の画像を認識

アジェンダ

クラウディアンの概要

2001
2011 
$44 M

75

Global
日本生まれ
シリコンバレー本社
一流の投資家
産業革新機構、
インテルキャピタル、
経験豊富な人材が集結
ソフトウェア、
ストレージ分野の
大量データを経済的に
保存するストレージ
グローバルに展開
2013年の本格展開
以降、海外の顧客インテルキャピタル、
フィデリティー、
ゴールドマンサックス
ストレージ分野の
専門家
保存するストレージ
製品を開発販売
2013年の本格展開
以降、海外の顧客
数は日本の3倍以上
チャネル
パートナー
アライアンス
パートナー

ソフトウェアデファインドのオブジェクトストレージ製品
ソフトウェア製品
ソフトウェアデファインド
アプライアンス製品
ソフトウェアとアプライアンスのいずれでも提供
24TB/サーバー
3.84PB/ラック64bit版 RHEL/CentOS 6.X
CPU: 8 cores, 2.4GHz
RAM: 32GB
CLOUDIAN HyperStore
ソフトウェアを利用する
サーバーの最小仕様
48TB~/サーバー
CLOUDIAN
HyperStore
ソフトウェア実装済
サーバー
欧米市場で販売
GB/月額換算=1セント
国内パートナーが販売
GB/月額換算=1円～3円程度

日本品質と日本流サポートを世界が高く評価
「クラウディアンは、問い合わせの対応も迅速で、トラブルを
日本から世界のお客様をサポート
「サポートスタッフは日米でシフトを組み、いわゆる“Follow
the Sun”の運用で、全世界のお客様へ24時間365日のサポート
を提供しています。」
出典:http://news.mynavi.jp/articles/2015/06/02/cloudian_support/
「クラウディアンは、問い合わせの対応も迅速で、トラブルを
調査したり修正したりするためのツールも提供してくれます。
バージョンアップなどのメンテナンスも、手厚いサポートが受
けられます。」（ニフティ）
「クラウディアンは、これまで受けたなかでの最高のサポートを提
供しています。優先度の低い問い合わせにも迅速に回答し、関連ド
キュメントもわかりやすく更新してくれます。」
（欧州大手企業）
出典: http://news.mynavi.jp/kikaku/2015/12/28/001/

「スマートサポート」によるIOT/BigData/AIの活用
「スマートサポート」は、お客様のログを自動的に収集、蓄積、
分析し、事前にトラブルの予兆を発見してサポートを開始
お客様に設置された
CLOUDIAN
HyperStoreのログ
をNW経由で収集
CLOUDIAN
HyperStoreに蓄積し、
ビッグデータ分析
AIで異常値を検知し、
予期しないトラブル
の発生を未然に防ぐ
（検証中）

複数サーバー間にPINGを送り、
レスポンス時間を定期的に計測
サーバーの健康状態をPINGとAIで「脈診」
出典:http://enterprisezine.jp/dbonline/detail/7573
青が実際の値。オレンジがHTMに1ステップ先
（10分後）を予測させたもの。パターン認識で
きていることがわかる
膨大なパターンの中から、関連する
パターンを取り出して予測し、
予測と実際の差から異常値を検出
PDAで有名なPalm Sourceの創業者のジェフ・ホーキンスが立ち上げたNumentaのAI
（HTM）は、2006年に米国でベスセラーになった『On Intelligence』のコンセプト
「人間の大脳新皮質は、絶え間なく予測を行っており、現実の入力との『違い』が検出さ
れたときに、人は注意を向ける」を具体化したもの

カメラ映像をIOTゲートウェイで収集・保存し、
DL4Jを使い映像認識
CLOUDIAN
HyperStore
S3 API
「ぷらっとホーム社」様製
OpenBlocks IOT BX1を
IOTゲートウェイとして利用
Deeplearning4j(以下DL4J)はJava, Scalaで書かれた世界初のオープンソース
分散deep-learningライブラリ。HadoopやSparkと連携することにより研究、
調査目的に加え、実際のビジネスに活かせるように作られている
S3 API
Intel Edison内蔵

10,000
100,000
AIで映像認識するための前処理工程
データ件数
映像から抽出した
フレーム画像（KB）
映像を深層学習するための前処理工程では、様々なサイズのデータを
大量に生成
1
10
100
1,000
0 100 200 300 1030 20210 48790 51180 51280 51380 51480 51580 51680 51780 51880
KB
監視カメラで撮影した映像（MB）

アジェンダ

データストレージはクラウド型でありたい
仮想化
IOT/BigData/AI
開発で起きること
データストレージに
求められること
ビッグデータ/AIアプリ
ケーション開発は試行錯
誤を繰り返すハードウェアの種類、
処理速度、容量等の
物理的な制約が開発
の妨げにならないIOTが収集する膨大で多種
クラウドの特徴
クラウドサービスの利便性と差がない環境が開発には求められる
分散処理
自動化
の妨げにならない
必要な時に、必要なリ
ソースを、必要なだけ
すぐにセルフサービス
で調達できる
IOTが収集する膨大で多種
多様なビッグデータの
迅速な処理が求められる
新規サービス・事業開発
には速さや柔軟性が求め
られる
＊クラウドの特徴については、
「ハイブリッドクラウド時代必修 ITインフラの基礎知識（ITLeaders連載）」参照
http://it.impressbm.co.jp/category/c320033

インターネット経由で直接アクセス
従来型ストレージへの
データアクセス
IOT/BigData/AI連携の
データアクセス
VPN
IOTが集めるデータを直接データストレージに保存できるよう、
インターネット通信プロトコルに対応したい
IOT
VPN
ファイル共有
プロトコル
インターネット
HTTP
HTTPS
MQTT
・・・
インターネット
通信プロトコル

ビッグデータ分析基盤と連携
ビッグデータ分析
専用ストレージ
ビッグデータ分析基盤連携
ストレージ
DC1ストレージ DC2ストレージ
分析基盤と連携しながらも、多目的に使え、DRやBCPにも対応したい
BigData
広域分散データストレージ
YARN YARN
ビッグデータ分析専用のデータストレージでは、
• ビッグデータ分析のためだけにしか使えない
• ひとつのクラスタとして地域冗⾧ができない
ビッグデータ分析基盤と「連携」
できる広域分散データストレージ
MapReduce Others MapReduce Others

APIをアプリケーションに提供
データストレージアプリケーション開発 Webサーバークライアント
 データストレージをAPI経由で操作し、  API
API
開発が迅速に柔軟に行えるためには、API対応でありたい
AI
 データストレージをAPI経由で操作し、
領域の割当や各種設定準備等の手間な
しに開発
 前処理作業をプログラム化したAPI
 API
 Webサービス
 学習済のアルゴリズムを
組み込んだ軽いアプリ
GoogleのAIサービスの例
「使いやすいRESTful インターフェースを通じてGoogleの
機械学習アルゴリズムを利用できる、データの分析と予測の
ためのAPIです。」
出典:https://cloud.google.com/prediction/
*API: Application Programming Interface

アジェンダ

多目的データを最適保存する統合ストレージ
膨大で多種多様なデータをひとつのストレージ空間に統合
サイロ化された
データストレージ環境
全社共通統合データストレージ環境
業務系
基幹系
IOT
映像ログ
ビッグ
データ
分析
AI
ファ
イル
業務系
基幹系
IOT
映像ログ
ビッグ
データ
分析
AI
ファ
イル
アプリケーションが求める性能や
用途別、部門別にサイロ化しやすい
• データをオブジェクトとして保存
• 様々なデータサイズに最適化
• データ保護方法を柔軟に選択
高速
サイロ化したデータストレージ共通基盤データストレージ

⾧期間にわたり経済的
ハードウェアベンダーにロックインされず、将来の汎用サーバー価格
の逓減効果をフルに享受できる
SDS タイプ1
汎用サーバー
汎用OS
ソフトウェア
汎用OS
ソフトウェア
SDS タイプ2
専用OS
ソフトウェア
SDS タイプ3
汎用OS
ソフトウェア
SDS(Software Defined Storage)の分類例
SDS タイプ4
従来型汎用サーバー
指定サーバー指定サーバー汎用サーバー
• コントローラー
機能がSDS
• 複数の専用スト
レージを統合管理
• 動作保証の指定HWベンダー
にロックイン
• 汎用OS（Linux)
• 異種・世代混在の
汎用サーバーを
利用可能
従来型
ストレージ
• 一体型

現状を大きく変えずにスタート
小規模から、既存システムと連携するハイブリッドクラウド環境構築
ファイル
サーバー
バックアップ
アーカイブ等
ビッグ
データ分析
S3
アプリ
ブラウザ
期間等の
“HyperStore
Connect for Files“
(オプション）
SMB/NFS/FTP
S3 API
Win
Mac
アプリ
Amazon S3
Glacier
CLOUDIANストレージ
最小2台（推奨3台）から始め、データ量の増加
とともに、汎用サーバーを追加（スケールアウト）し、
全体のストレージ容量を拡張
期間等の
ポリシーで、
データを
外部クラウド
に自動転送
（階層化）
S3 API

数多くのアプリケーションをそのまま活用
バックアップ
DR/BCP
バックアップ
DR/BCP
ファイル検索
共有・同期
ファイル検索
共有・同期
S3
NFS
SMB
FTP
オンライン
ストレージ
STaaS
オンライン
ストレージ
STaaS
IOT ストレージIOT ストレージ
S3
NFS
SMB
FTP
アーカイブ
（eメール等）
アーカイブ
（eメール等）
ストレージ
ゲートウェイ
自動階層化
ストレージ
ゲートウェイ
自動階層化
クラウドコン
ピューティングの
2次ストレージ
クラウドコン
ピューティングの
2次ストレージ
Cloud Computing
IOT ストレージ
BigData 分析
IOT ストレージ
BigData 分析HDL-XRWシリーズ S3
NFS
SMB
FTP
FTP
S3
NFS
SMB
FTP

データを安全に保護
サーバーやデータセンター間に、自動的にデータを複製、分散配置し、
万が一の災害や障害にも備えたデータ保護
• 複数のサーバーとデータセンター間に、同期、または準同期で
ファイルやデータを自動的に複製する、秒単位のDR/BCP対策
• データセンター間バックアップのためのソフトウェアや
オプションサービス不要
データセンター1 データセンター2

IT部門が提供するハイブリッドクラウドサービス
ITインフラ部隊が少数の場合でも、全社統合/共通ストレージを
社内向けサービスとして、すぐに提供可能
ユーザ部門
研究開発
情報システム部門
設計製造営業運用マーケ
課金・利用量制限・グループ/ユーザ管理
監視・統計
システム管理
課金・利用量制限・グループ/ユーザ管理
システム管理
 統計・課金・利用量・
グループ/ユーザ管理機能
を標準搭載
 部門別利用量把握や精算可能

まとめ
 活用領域の広がり
 連携が個々の課題を解決
 スマートサポートへの適用
 深層学習による映像認識
IOT/BigData/AI連携
クラウディアン
における活用事例
© Copyright 2010-2016 Cloudian KK. All rights reserved.
 クラウド型でありたい
 インターネット経由で直接アクセス
 ビッグデータ分析基盤と連携
 APIをアプリケーションに提供
 多目的データを最適保存する統合ストレージ
 ⾧期間にわたり経済的
 現状を大きく変えずにスタート
 数多くのアプリケーションをそのまま活用
 データを安全に保護
 IT部門が提供するハイブリッドクラウドサービス
スマート
データストレージの
要件
CLOUDIAN
HyperStore
のメリット

参考情報
 クラウディアンに関する情報は以下でご紹介しています。
ホームページ（日） http://cloudian.jp/
ホームページ（英） http://www.cloudian.com/
ブログ: http://www.cloudian-blog.com/
Facebook: https://www.facebook.com/cloudian.cloudstorage.S3Facebook: https://www.facebook.com/cloudian.cloudstorage.S3
Twitter: https://twitter.com/Cloudian_KK
Slideshare http://www.slideshare.net/geminimobile
CLOUDIAN HyperStoreに関するお問い合わせ
電話: 03－6418－6466
メール: info@cloudian.com

ご清聴いただき、
ありがとうございました。

Cloudian presentation at idc japan sv2016

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Viewers also liked

Viewers also liked (9)

Similar to Cloudian presentation at idc japan sv2016

Similar to Cloudian presentation at idc japan sv2016 (20)

More from CLOUDIAN KK

More from CLOUDIAN KK (9)

Recently uploaded

Recently uploaded (9)

Cloudian presentation at idc japan sv2016