Copyright © 2015 Nippon Information and Communication Corporation
複数データセンターを活用して作る
高可用性システム
日本情報通信株式会社
2015年2月12日
Japan SoftLayer Summit 2015
- 1 -Copyright © 2015 Nippon Information and Communication Corporation
AGENDA
自己紹介
会社案内
SoftLayer 特長のおさらい
弊社ユーザ様の特徴
複数データセンターを利用した冗長構成
複数データセンターを用いたネットワーク
- 2 -Copyright © 2015 Nippon Information and Communication Corporation
自己紹介
氏名 吉川 裕樹 (よしかわ ゆうき)
趣味 Surfing、子守り、釣り
所属 日本情報通信株式会社(NI+C)
クラウド&マネージドサービス事業部
クラウドサービス部 クラウドサービスグループ
サービス推進部 クラウド推進グループ 兼務
仕事 システム運用サービス、DCサービス、技術支援サービスのソリューションセールス
クラウド事業の企画、ソリューションセールス
- 3 -Copyright © 2015 Nippon Information and Communication Corporation
会社案内 日本情報通信株式会社 略称:NI+C(エヌ・アイ・アンド・シー)
設立 1985年12月18日
資本金 40億円
株主
日本電信電話株式会社(50%)
日本アイ・ビー・エム株式会社(50%)
売上高 422億円(FY13連結ベース)
社員数 976名(グループ会社計:FY14 4月現在)
代表
取締役
代表取締役社長 廣瀬 雄二郎
代表取締役副社長 三浦 浩
事業内容
・システムインテグレーションサービス
・ハードウェア機器、ソフトウェア製品の販売
お取引先 約2,400社
本社(築地)
開発拠点(門前仲町)
東北開発室(仙台)
中部支店(名古屋)
大阪支店
全国主要都市の支店/拠点の
営業・サポート体制により、
きめ細かなプロジェクト運営をご提供します。
国際規格 ISO/IEC27001
情報セキュリティマネジメントシステム
国際規格 ISO14001
環境マネジメントシステム
本社・門前仲町開発センター・大阪支店
エヌアイシー・ソフト株式会社/本社
エヌアイシー・ネットシステム株式会社/本社
国際規格 ISO9001
品質マネジメントシステム
ソフトウェア開発部門
JNX 認定サービス・プロバイダー
NTTコミュニケーションズ・ビジネスパートナー
NTT東日本Tm@Partner
JPNIC正規会員
インターネット・サービス・プロバイダー
IPアドレス管理指定業者
AT&Tグローバル・サービス特約店
Microsoft認定パートナー
ORACLE Partner
Network Certified Partner
Novellソリューションパートナー
IBMプレミア・ビジネス・パートナー
届出電気通信事業者(総務省)
一般建設業(電気通信工事業)
主な会社資格
サポート体制
システム開発
システム運用
ネットワーク技術
パートナー支援
- 4 -Copyright © 2015 Nippon Information and Communication Corporation
NI+Cのクラウドサービス
ネットワークサービス 2000
JNXサービス
.ComExchange
2008
NICインフォトレード
社設立
1998
NMS Plus
サービス
2006
EGWサービス
(EDI GateWayサービス)
1985
IBM NMS
IE/EXサービス
運用ツール 1998
監視・運用ソフトウェア
(Tivoli)の取り組みの本格化
2006
ITIL準拠サービスデスクツール
Resso発売開始
2013
Resso on Cloud
発表
運用サービス・データセンターサービス
2000
川崎DC
2010
横浜DC開設
2012
大阪DC開設
2005
運用技術支援Bellevue
2008
監視サービス開始
仮想化環境構築・クラウドサービス
2005
IA仮想化環境構築開始
2009
NI+Cクラウドサービス
2013
SoftLayer
取り扱い開始
• 2013年10月よりSoftLayer販売開始
- 5 -Copyright © 2015 Nippon Information and Communication Corporation
NI+CのSoftLayer事業の取り組み
• SoftLayer リセラー
• エンドユーザ企業様向け
• 2013年10月にファーストユーザ様へご提供
• パートナー企業様向け
• 2015年1月15日 ニュースリリース
• パートナー企業への支援体制作り、クラウドビジネスの体制強化
• SoftLayer普及促進活動
• 日本SoftLayerユーザー会(JSLUG)
• 技術検証
• 雑誌への寄稿 (Software Design)
• Web媒体への寄稿(Think IT)
- 6 -Copyright © 2015 Nippon Information and Communication Corporation
NI+CのSoftLayer事業の取り組み
• リセラー事業
• エンドユーザー様向けにSoftLayerをご提供
• 2013年10月にファーストユーザ様へご提供
• 2015年2月9日 受賞
- 7 -Copyright © 2015 Nippon Information and Communication Corporation
NI+CのSoftLayer事業の取り組み
• リセラー事業
• パートナー企業様向け支援体制
• 提案・見積・契約・手配
• 技術支援
- 8 -Copyright © 2015 Nippon Information and Communication Corporation
• 普及促進活動
• 日本SoftLayerユーザー会(JSLUG)
• 勉強会での講演/LT
• 技術検証
• 雑誌への寄稿
• Software Design
• Web媒体への寄稿
• Think IT
NI+CのSoftLayer事業の取り組み 検証もやってます
slideshare
http://goo.gl/ePb1zR
slideshare
http://goo.gl/TTfWU4
- 9 -Copyright © 2015 Nippon Information and Communication Corporation
今日はブースも出展しています
ホールB
この会場
ルームBルームA
この会場
ここで展示中です
Copyright © 2015 Nippon Information and Communication Corporation
SoftLayer特長のおさらい
日本情報通信株式会社
常田 秀明
- 11 -Copyright © 2015 Nippon Information and Communication Corporation
SoftLayerの特長
 ネットワーク転送料が無料!
 上手に使おう
 もっと使い道がないの
 東京データセンターからその他のデータセンターまでの距離
 プライベートネットワークをもっと有効に使える
- 12 -Copyright © 2015 Nippon Information and Communication Corporation
SoftLayerのグローバルネットワーク
London
Amsterdam
NYC
Washington,D.C.
New Location
Network PoP
Datacenter & Network PoP
Private Network
Private Network Expansion
- 13 -Copyright © 2015 Nippon Information and Communication Corporation
東京DCを起点とした各DCとのレイテンシ
• レイテンシの単位はms
• 距離はhttp://www.softlayer.com/data-centersを参考にNI+Cが独自算出した参考値を100km単位で表示
• 2015年2月6日(金)時点のhttp://lg.softlayer.com/のレイテンシの値を昇順に並び替え
- 14 -Copyright © 2015 Nippon Information and Communication Corporation
SoftLayerのグローバル間の通信速度イメージ図
New Location
Network PoP
Datacenter & Network PoP
香港
43
シンガポール82
シドニー113
メルボルン128
サンノゼ100
ダラス
130
ワシントン
17050msec
100msec
130msec
170msec
ロンドン248
フランクフルト265
265msec
• 2015年2月6日(金)時点のhttp://lg.softlayer.com/のレイテンシの値を基に作成
- 15 -Copyright © 2015 Nippon Information and Communication Corporation
弊社ユーザ様の特徴
- 16 -Copyright © 2015 Nippon Information and Communication Corporation
弊社のお客様 ・・・ 製造業や流通業のお客様が多い
 イントラネット向けのサービスが多い
 インターネット向けのサービスではない
 Privateのみで利用する事を前提にしている
 社内データセンターにホストなどがあり、クラウドと既存データセンター間の通信量が
多く発生することが予想される
 海外拠点からの利用がある
 海外に何らかの拠点がある
 海外にデータセンターを用意する法的な要因を持っている
 すでに国際WAN回線を維持している
- 17 -Copyright © 2015 Nippon Information and Communication Corporation
SoftLayer利用上のポイント
 Privateネットワークで利用可能な負荷分散/冗長化構成を考えて行きたい。
 世界中の複数の拠点から利用するPrivateネットワークの利用をどうするのか。
- 18 -Copyright © 2015 Nippon Information and Communication Corporation
SoftLayerサービスの整理
 SoftLayerのネットワークは、「Public」と「Private」があります。
 そして、提供される機能(サービス)も「Public」と「Private」で違いがあります。
- 19 -Copyright © 2015 Nippon Information and Communication Corporation
SoftLayerサービス群と対応ネットワーク(抜粋)
→Public側は機能が豊富。
⇒機能が少ないPrivate側でいかに構築するかが課題。
№ サービス名 Public Private
1 DNS ○
2 Load Balancer(Local) ○
3 Load Balancer(Local & Global) ○
4 High Availability Dedicated Load Balancers ○
5 Gateway Appliance ○ ○
6 Citrix NetScaler ○ ○
7 Hardware Firewall ○
8 Hardware Firewall (Dedicated) ○
9 Fortigate Security Appliance. ○ ○
10 SSL Certificates ○
11 Email Delivery(SendGrid) ○
- 20 -Copyright © 2015 Nippon Information and Communication Corporation
複数データセンターを利用した冗長構成
- 21 -Copyright © 2015 Nippon Information and Communication Corporation
専用線・IPSEC等
1.複数データセンターを利用した冗長構成をとるケース
 複数のデータセンターを活用し、縮退運転用途にも利用可能なサイトを構築する。
1. 普段は、縮退兼負荷分散サイト
2. 障害時にはBCPサイト
server1
Client
東京データセンター
server2
お客様拠点
server1
server2
要件に応じて対向データセンターを選定
・東京DCと距離的に一番近いのは香港DC(50ms)の距離
→ 50Mbps程度の速度で通信が可能
- 22 -Copyright © 2015 Nippon Information and Communication Corporation
複数データセンターを利用した冗長構成 【データの同期】
 システムの用途によりデータの同期を考える
専用線・IPSEC等
server1
東京データセンター
server2
お客様拠点
server1
server2
データはどの様に同期されるべきか
・適切なソリューションを選択する。
iSCSI iSCSI
30分間隔
ブロック単位
データ単位
- 23 -Copyright © 2015 Nippon Information and Communication Corporation
専用線・IPSEC等
複数データセンターを利用した冗長構成 【サーバの切り替え】
 サーバをどのように切り替えることが出来るか。
server1
server2
お客様拠点
server1
server2
どうやって切り替えるか?
東京データセンター
- 24 -Copyright © 2015 Nippon Information and Communication Corporation
複数データセンターを利用した冗長構成 【サーバ切り替えの考慮点】
 データセンターが異なるとVLAN(Subnet)が異なる。
 SoftLayerのプライベートIPはSubnetに紐づくため利用できない。
 IP-MuluticastもIGMPが利用できないためVXLAN等のネットワークオーバーレイも
難しい。
Server1
(Active)
server2
Server1
(Standby)
server2
 IPアドレスでの切り替えは難しいため、ホスト名等で解決す
る必要がある。
 またサーバ単位の切替だけでなく、DC全体の切替が発生
する事を考慮する必要もある。
東京データセンター
- 25 -Copyright © 2015 Nippon Information and Communication Corporation
当初の構想は・・・
 DCをまたがるオーバーレイネットワークを作ってみたかった。
 OpenVswich、Vyatta等の機能を利用してトンネリング出来るとSoftLayerらしい。
Server1
(Active)
東京データセンター
server2
Server1
(Standby)
server2
VyOS
実際のネットワークアドレス体系とは別に、別のIPアドレス体系を付与する
VyOS
IP Multicast : 24.0.0.115-224.0.0.250 (IGMP禁止)
- 26 -Copyright © 2015 Nippon Information and Communication Corporation
サーバ切替方法① ローカルで分散制御を行う
ap1
db2db1
ap2
東京データセンター 香港データセンター
専用Load Balancer
Sorryサーバ
 ローカルサイトにてLoad Balancerの機能により制御を
行う(ユーザはLBのアドレスが固定となっているため分
散が可能)
 SoftLayerのメンテナンス時などでもSorryサーバを内
部に持ち、振り分けが可能
Client
お客様拠点
VPN Router
(pop-tok02)
- 27 -Copyright © 2015 Nippon Information and Communication Corporation
サーバ切替方法② SoftLayer側のLoad Balancerで制御する
ap1
db2
VPN Router
(pop-tok02)
Client
db1
ap2
お客様拠点
 SoftLayerのGlobal Load Balancerの機
能により分散を行う
 GLBに対しての名前解決が必要
 内部にDNSサーバ等の解決策が必要
Global – Load Balancer
社内DNSサーバ
DNSに登録される Aサーバ: IP1 , IP2
IP1 IP2
東京データセンター 香港データセンター
- 28 -Copyright © 2015 Nippon Information and Communication Corporation
通信経路の考慮
 データセンターを跨いだデータ通信はしない事も考慮する。
 DCを跨いでAPサーバとDBサーバと通信する事は、通信経路としては可能だ
が、「server2@東京」が停止した場合 「server2@香港」に切り替えると通
信速度が遅くなる。
Server1
(Active)
server2
Server1
(Standby)
server2
<1ms 50ms<
東京データセンター 香港データセンター
- 29 -Copyright © 2015 Nippon Information and Communication Corporation
データセンターに問題が生じた際の考慮
ap1
db2db1
ap2
 SoftLayerはどのPoP、DCに接続して
もネットワーク的に接続が可能
 この特性を利用してバックアップ経路
を用意する
vyatta
Client
お客様拠点
東京データセンター 香港データセンター
vyatta
- 30 -Copyright © 2015 Nippon Information and Communication Corporation
複数データセンターを用いたネットワーク
- 31 -Copyright © 2015 Nippon Information and Communication Corporation
2.複数データセンターを利用したスター型広域ネットワーク
 グローバルのWANの代わりにSoftLayerのGlobal Netwrokを利用する。
 オンプレミスでは国際WANサービスを活用するか、各地にDCを個別に建て、個別
にInternet接続を準備するなど、費用や管理ノウハウが・・・
Client Client
Global WAN
専用線
Client Client ClientClient
DC
国内/国際接続
欧州
DC
アジア
DC
日本
DC
北米
DC
Internet
国内 WAN
- 32 -Copyright © 2015 Nippon Information and Communication Corporation
SoftLayerのネットワークの特長
 世界中のデータセンターが同一環境の扱いとして利用可能
東京DC
Client
 クライアントがどのPOPやデータセンターに
接続しても同じサーバにアクセス可能。
 世界規模のプライベートネットワーク環境
が手に入る。
ユーザーが利用できるプライベートネットワーク環境
SoftLayer Global Network
- 33 -Copyright © 2015 Nippon Information and Communication Corporation
メインのDC
 プラン1)単一のDCを「センター」として考える
 東京データセンターに全てのサーバを集中して配置した場合
東京POP
お客様拠点 お客様拠点
Internet環境や、閉域網から接続
ダラスPOP
お客様拠点
世界中の拠点から近くのPOPに接続すれば良い
Internet環境や、閉域網から接続
- 34 -Copyright © 2015 Nippon Information and Communication Corporation
 プラン2)SoftLayerを網として考える
東京POP
お客様拠点 お客様拠点
Internet環境や、閉域網から接続
ダラスPOP
お客様拠点
Internet環境や、閉域網から接続
お客様拠点
Mass Storage Servers
/ QuantaStor
ストレージサーバでデータを同期する
Mass Storage Servers
/ QuantaStor
- 35 -Copyright © 2015 Nippon Information and Communication Corporation
各地域をSoftLayer中心に結ぶ
 ラストワンマイルは同じ
 世界中の地域で各POPを中心にスター型ネットワークを構成
PoP
Client Client
メインのDC
各地のDC
Vyatta
Gateway Appliance
Client Client
SoftLayer Global Network
Direct Connect
PoP
Client Client Client
IP-Sec
各地のDC
Client
IP-Sec
WAN
Internet
- 36 -Copyright © 2015 Nippon Information and Communication Corporation
各地域をSoftLayer中心に結ぶ
 ラストワンマイルは同じ
 世界中の地域で各POPを中心にスター型ネットワークを構成
拠点
- 37 -Copyright © 2015 Nippon Information and Communication Corporation
よもやまばなし
 問題
 東京DCが出来たのでサンノゼのサーバから1TByteのデータを送る必要があります。
一番簡単な方法は何でしょうか?
 ところでデータセンター間の通信速度は?
 最大スループットはWindowサイズとRTTに影響される。
 実測してみましょう。
 スループットは送信元のサーバの通信速度(契約)に影響される。
 送信元のNICの速度を1Gbpsにする
- 38 -Copyright © 2015 Nippon Information and Communication Corporation
サンノゼ
実際の速度を計測
 Iperfで測定 (東京⇔サンノゼ)
東京
RTT:100ms 程度
1Tのデータ
1.普通にFTPで送信をすると1Tを送信するためには 25時間必要
2.送り先のサーバ起動や転送ソフト準備が必要。
IF 100Mbps IF 1000Mbps
転送速度(TCP) : 9.6851 Mbps
転送速度(TCP) : 86.2422 Mbps
サーバを起動して?
ストレージ設定して、転送
ソフトを用意する?
- 39 -Copyright © 2015 Nippon Information and Communication Corporation
サンノゼ
答え
• 対象のImageから好きなデータセンターでBootするだけ。
 SoftLayerのImage Templateは別データセンターへCopy可能
東京
RTT:100ms 程度
Image Template
Templateから復元してみる
Image Template
1Tのデータ
テンプレートから復元してしまえばワンクリックで転送してデータが利用可能に!
- 40 -Copyright © 2015 Nippon Information and Communication Corporation
まとめ
 SoftLayerが持つ特徴が、クラウドが持つ特性をより引き立てます
 世界各地に存在するDC、PoP
 DCを結ぶ強靭なネットワーク
 ネットワークを活かした各種機能
 クラウドの利用はネットワーク設計があってこそ
 クラウド上での設計・考慮
 既存システムとの接続・考慮
 ユーザからの接続
 日本情報通信にお任せ下さい。
- 41 -Copyright © 2015 Nippon Information and Communication Corporation
重 要 事 項 是非ブースへお越しください
ホールB
この会場
ルームBルームA
この会場
絶賛展示中
- 42 -Copyright © 2015 Nippon Information and Communication Corporation
Speed and Change
SoftLayerの構築から運用まで
ご清聴ありがとうございました
sl-cc@niandc.co.jp

150212 summit発表用資料 公開用

  • 1.
    Copyright © 2015Nippon Information and Communication Corporation 複数データセンターを活用して作る 高可用性システム 日本情報通信株式会社 2015年2月12日 Japan SoftLayer Summit 2015
  • 2.
    - 1 -Copyright© 2015 Nippon Information and Communication Corporation AGENDA 自己紹介 会社案内 SoftLayer 特長のおさらい 弊社ユーザ様の特徴 複数データセンターを利用した冗長構成 複数データセンターを用いたネットワーク
  • 3.
    - 2 -Copyright© 2015 Nippon Information and Communication Corporation 自己紹介 氏名 吉川 裕樹 (よしかわ ゆうき) 趣味 Surfing、子守り、釣り 所属 日本情報通信株式会社(NI+C) クラウド&マネージドサービス事業部 クラウドサービス部 クラウドサービスグループ サービス推進部 クラウド推進グループ 兼務 仕事 システム運用サービス、DCサービス、技術支援サービスのソリューションセールス クラウド事業の企画、ソリューションセールス
  • 4.
    - 3 -Copyright© 2015 Nippon Information and Communication Corporation 会社案内 日本情報通信株式会社 略称:NI+C(エヌ・アイ・アンド・シー) 設立 1985年12月18日 資本金 40億円 株主 日本電信電話株式会社(50%) 日本アイ・ビー・エム株式会社(50%) 売上高 422億円(FY13連結ベース) 社員数 976名(グループ会社計:FY14 4月現在) 代表 取締役 代表取締役社長 廣瀬 雄二郎 代表取締役副社長 三浦 浩 事業内容 ・システムインテグレーションサービス ・ハードウェア機器、ソフトウェア製品の販売 お取引先 約2,400社 本社(築地) 開発拠点(門前仲町) 東北開発室(仙台) 中部支店(名古屋) 大阪支店 全国主要都市の支店/拠点の 営業・サポート体制により、 きめ細かなプロジェクト運営をご提供します。 国際規格 ISO/IEC27001 情報セキュリティマネジメントシステム 国際規格 ISO14001 環境マネジメントシステム 本社・門前仲町開発センター・大阪支店 エヌアイシー・ソフト株式会社/本社 エヌアイシー・ネットシステム株式会社/本社 国際規格 ISO9001 品質マネジメントシステム ソフトウェア開発部門 JNX 認定サービス・プロバイダー NTTコミュニケーションズ・ビジネスパートナー NTT東日本Tm@Partner JPNIC正規会員 インターネット・サービス・プロバイダー IPアドレス管理指定業者 AT&Tグローバル・サービス特約店 Microsoft認定パートナー ORACLE Partner Network Certified Partner Novellソリューションパートナー IBMプレミア・ビジネス・パートナー 届出電気通信事業者(総務省) 一般建設業(電気通信工事業) 主な会社資格 サポート体制 システム開発 システム運用 ネットワーク技術 パートナー支援
  • 5.
    - 4 -Copyright© 2015 Nippon Information and Communication Corporation NI+Cのクラウドサービス ネットワークサービス 2000 JNXサービス .ComExchange 2008 NICインフォトレード 社設立 1998 NMS Plus サービス 2006 EGWサービス (EDI GateWayサービス) 1985 IBM NMS IE/EXサービス 運用ツール 1998 監視・運用ソフトウェア (Tivoli)の取り組みの本格化 2006 ITIL準拠サービスデスクツール Resso発売開始 2013 Resso on Cloud 発表 運用サービス・データセンターサービス 2000 川崎DC 2010 横浜DC開設 2012 大阪DC開設 2005 運用技術支援Bellevue 2008 監視サービス開始 仮想化環境構築・クラウドサービス 2005 IA仮想化環境構築開始 2009 NI+Cクラウドサービス 2013 SoftLayer 取り扱い開始 • 2013年10月よりSoftLayer販売開始
  • 6.
    - 5 -Copyright© 2015 Nippon Information and Communication Corporation NI+CのSoftLayer事業の取り組み • SoftLayer リセラー • エンドユーザ企業様向け • 2013年10月にファーストユーザ様へご提供 • パートナー企業様向け • 2015年1月15日 ニュースリリース • パートナー企業への支援体制作り、クラウドビジネスの体制強化 • SoftLayer普及促進活動 • 日本SoftLayerユーザー会(JSLUG) • 技術検証 • 雑誌への寄稿 (Software Design) • Web媒体への寄稿(Think IT)
  • 7.
    - 6 -Copyright© 2015 Nippon Information and Communication Corporation NI+CのSoftLayer事業の取り組み • リセラー事業 • エンドユーザー様向けにSoftLayerをご提供 • 2013年10月にファーストユーザ様へご提供 • 2015年2月9日 受賞
  • 8.
    - 7 -Copyright© 2015 Nippon Information and Communication Corporation NI+CのSoftLayer事業の取り組み • リセラー事業 • パートナー企業様向け支援体制 • 提案・見積・契約・手配 • 技術支援
  • 9.
    - 8 -Copyright© 2015 Nippon Information and Communication Corporation • 普及促進活動 • 日本SoftLayerユーザー会(JSLUG) • 勉強会での講演/LT • 技術検証 • 雑誌への寄稿 • Software Design • Web媒体への寄稿 • Think IT NI+CのSoftLayer事業の取り組み 検証もやってます slideshare http://goo.gl/ePb1zR slideshare http://goo.gl/TTfWU4
  • 10.
    - 9 -Copyright© 2015 Nippon Information and Communication Corporation 今日はブースも出展しています ホールB この会場 ルームBルームA この会場 ここで展示中です
  • 11.
    Copyright © 2015Nippon Information and Communication Corporation SoftLayer特長のおさらい 日本情報通信株式会社 常田 秀明
  • 12.
    - 11 -Copyright© 2015 Nippon Information and Communication Corporation SoftLayerの特長  ネットワーク転送料が無料!  上手に使おう  もっと使い道がないの  東京データセンターからその他のデータセンターまでの距離  プライベートネットワークをもっと有効に使える
  • 13.
    - 12 -Copyright© 2015 Nippon Information and Communication Corporation SoftLayerのグローバルネットワーク London Amsterdam NYC Washington,D.C. New Location Network PoP Datacenter & Network PoP Private Network Private Network Expansion
  • 14.
    - 13 -Copyright© 2015 Nippon Information and Communication Corporation 東京DCを起点とした各DCとのレイテンシ • レイテンシの単位はms • 距離はhttp://www.softlayer.com/data-centersを参考にNI+Cが独自算出した参考値を100km単位で表示 • 2015年2月6日(金)時点のhttp://lg.softlayer.com/のレイテンシの値を昇順に並び替え
  • 15.
    - 14 -Copyright© 2015 Nippon Information and Communication Corporation SoftLayerのグローバル間の通信速度イメージ図 New Location Network PoP Datacenter & Network PoP 香港 43 シンガポール82 シドニー113 メルボルン128 サンノゼ100 ダラス 130 ワシントン 17050msec 100msec 130msec 170msec ロンドン248 フランクフルト265 265msec • 2015年2月6日(金)時点のhttp://lg.softlayer.com/のレイテンシの値を基に作成
  • 16.
    - 15 -Copyright© 2015 Nippon Information and Communication Corporation 弊社ユーザ様の特徴
  • 17.
    - 16 -Copyright© 2015 Nippon Information and Communication Corporation 弊社のお客様 ・・・ 製造業や流通業のお客様が多い  イントラネット向けのサービスが多い  インターネット向けのサービスではない  Privateのみで利用する事を前提にしている  社内データセンターにホストなどがあり、クラウドと既存データセンター間の通信量が 多く発生することが予想される  海外拠点からの利用がある  海外に何らかの拠点がある  海外にデータセンターを用意する法的な要因を持っている  すでに国際WAN回線を維持している
  • 18.
    - 17 -Copyright© 2015 Nippon Information and Communication Corporation SoftLayer利用上のポイント  Privateネットワークで利用可能な負荷分散/冗長化構成を考えて行きたい。  世界中の複数の拠点から利用するPrivateネットワークの利用をどうするのか。
  • 19.
    - 18 -Copyright© 2015 Nippon Information and Communication Corporation SoftLayerサービスの整理  SoftLayerのネットワークは、「Public」と「Private」があります。  そして、提供される機能(サービス)も「Public」と「Private」で違いがあります。
  • 20.
    - 19 -Copyright© 2015 Nippon Information and Communication Corporation SoftLayerサービス群と対応ネットワーク(抜粋) →Public側は機能が豊富。 ⇒機能が少ないPrivate側でいかに構築するかが課題。 № サービス名 Public Private 1 DNS ○ 2 Load Balancer(Local) ○ 3 Load Balancer(Local & Global) ○ 4 High Availability Dedicated Load Balancers ○ 5 Gateway Appliance ○ ○ 6 Citrix NetScaler ○ ○ 7 Hardware Firewall ○ 8 Hardware Firewall (Dedicated) ○ 9 Fortigate Security Appliance. ○ ○ 10 SSL Certificates ○ 11 Email Delivery(SendGrid) ○
  • 21.
    - 20 -Copyright© 2015 Nippon Information and Communication Corporation 複数データセンターを利用した冗長構成
  • 22.
    - 21 -Copyright© 2015 Nippon Information and Communication Corporation 専用線・IPSEC等 1.複数データセンターを利用した冗長構成をとるケース  複数のデータセンターを活用し、縮退運転用途にも利用可能なサイトを構築する。 1. 普段は、縮退兼負荷分散サイト 2. 障害時にはBCPサイト server1 Client 東京データセンター server2 お客様拠点 server1 server2 要件に応じて対向データセンターを選定 ・東京DCと距離的に一番近いのは香港DC(50ms)の距離 → 50Mbps程度の速度で通信が可能
  • 23.
    - 22 -Copyright© 2015 Nippon Information and Communication Corporation 複数データセンターを利用した冗長構成 【データの同期】  システムの用途によりデータの同期を考える 専用線・IPSEC等 server1 東京データセンター server2 お客様拠点 server1 server2 データはどの様に同期されるべきか ・適切なソリューションを選択する。 iSCSI iSCSI 30分間隔 ブロック単位 データ単位
  • 24.
    - 23 -Copyright© 2015 Nippon Information and Communication Corporation 専用線・IPSEC等 複数データセンターを利用した冗長構成 【サーバの切り替え】  サーバをどのように切り替えることが出来るか。 server1 server2 お客様拠点 server1 server2 どうやって切り替えるか? 東京データセンター
  • 25.
    - 24 -Copyright© 2015 Nippon Information and Communication Corporation 複数データセンターを利用した冗長構成 【サーバ切り替えの考慮点】  データセンターが異なるとVLAN(Subnet)が異なる。  SoftLayerのプライベートIPはSubnetに紐づくため利用できない。  IP-MuluticastもIGMPが利用できないためVXLAN等のネットワークオーバーレイも 難しい。 Server1 (Active) server2 Server1 (Standby) server2  IPアドレスでの切り替えは難しいため、ホスト名等で解決す る必要がある。  またサーバ単位の切替だけでなく、DC全体の切替が発生 する事を考慮する必要もある。 東京データセンター
  • 26.
    - 25 -Copyright© 2015 Nippon Information and Communication Corporation 当初の構想は・・・  DCをまたがるオーバーレイネットワークを作ってみたかった。  OpenVswich、Vyatta等の機能を利用してトンネリング出来るとSoftLayerらしい。 Server1 (Active) 東京データセンター server2 Server1 (Standby) server2 VyOS 実際のネットワークアドレス体系とは別に、別のIPアドレス体系を付与する VyOS IP Multicast : 24.0.0.115-224.0.0.250 (IGMP禁止)
  • 27.
    - 26 -Copyright© 2015 Nippon Information and Communication Corporation サーバ切替方法① ローカルで分散制御を行う ap1 db2db1 ap2 東京データセンター 香港データセンター 専用Load Balancer Sorryサーバ  ローカルサイトにてLoad Balancerの機能により制御を 行う(ユーザはLBのアドレスが固定となっているため分 散が可能)  SoftLayerのメンテナンス時などでもSorryサーバを内 部に持ち、振り分けが可能 Client お客様拠点 VPN Router (pop-tok02)
  • 28.
    - 27 -Copyright© 2015 Nippon Information and Communication Corporation サーバ切替方法② SoftLayer側のLoad Balancerで制御する ap1 db2 VPN Router (pop-tok02) Client db1 ap2 お客様拠点  SoftLayerのGlobal Load Balancerの機 能により分散を行う  GLBに対しての名前解決が必要  内部にDNSサーバ等の解決策が必要 Global – Load Balancer 社内DNSサーバ DNSに登録される Aサーバ: IP1 , IP2 IP1 IP2 東京データセンター 香港データセンター
  • 29.
    - 28 -Copyright© 2015 Nippon Information and Communication Corporation 通信経路の考慮  データセンターを跨いだデータ通信はしない事も考慮する。  DCを跨いでAPサーバとDBサーバと通信する事は、通信経路としては可能だ が、「server2@東京」が停止した場合 「server2@香港」に切り替えると通 信速度が遅くなる。 Server1 (Active) server2 Server1 (Standby) server2 <1ms 50ms< 東京データセンター 香港データセンター
  • 30.
    - 29 -Copyright© 2015 Nippon Information and Communication Corporation データセンターに問題が生じた際の考慮 ap1 db2db1 ap2  SoftLayerはどのPoP、DCに接続して もネットワーク的に接続が可能  この特性を利用してバックアップ経路 を用意する vyatta Client お客様拠点 東京データセンター 香港データセンター vyatta
  • 31.
    - 30 -Copyright© 2015 Nippon Information and Communication Corporation 複数データセンターを用いたネットワーク
  • 32.
    - 31 -Copyright© 2015 Nippon Information and Communication Corporation 2.複数データセンターを利用したスター型広域ネットワーク  グローバルのWANの代わりにSoftLayerのGlobal Netwrokを利用する。  オンプレミスでは国際WANサービスを活用するか、各地にDCを個別に建て、個別 にInternet接続を準備するなど、費用や管理ノウハウが・・・ Client Client Global WAN 専用線 Client Client ClientClient DC 国内/国際接続 欧州 DC アジア DC 日本 DC 北米 DC Internet 国内 WAN
  • 33.
    - 32 -Copyright© 2015 Nippon Information and Communication Corporation SoftLayerのネットワークの特長  世界中のデータセンターが同一環境の扱いとして利用可能 東京DC Client  クライアントがどのPOPやデータセンターに 接続しても同じサーバにアクセス可能。  世界規模のプライベートネットワーク環境 が手に入る。 ユーザーが利用できるプライベートネットワーク環境 SoftLayer Global Network
  • 34.
    - 33 -Copyright© 2015 Nippon Information and Communication Corporation メインのDC  プラン1)単一のDCを「センター」として考える  東京データセンターに全てのサーバを集中して配置した場合 東京POP お客様拠点 お客様拠点 Internet環境や、閉域網から接続 ダラスPOP お客様拠点 世界中の拠点から近くのPOPに接続すれば良い Internet環境や、閉域網から接続
  • 35.
    - 34 -Copyright© 2015 Nippon Information and Communication Corporation  プラン2)SoftLayerを網として考える 東京POP お客様拠点 お客様拠点 Internet環境や、閉域網から接続 ダラスPOP お客様拠点 Internet環境や、閉域網から接続 お客様拠点 Mass Storage Servers / QuantaStor ストレージサーバでデータを同期する Mass Storage Servers / QuantaStor
  • 36.
    - 35 -Copyright© 2015 Nippon Information and Communication Corporation 各地域をSoftLayer中心に結ぶ  ラストワンマイルは同じ  世界中の地域で各POPを中心にスター型ネットワークを構成 PoP Client Client メインのDC 各地のDC Vyatta Gateway Appliance Client Client SoftLayer Global Network Direct Connect PoP Client Client Client IP-Sec 各地のDC Client IP-Sec WAN Internet
  • 37.
    - 36 -Copyright© 2015 Nippon Information and Communication Corporation 各地域をSoftLayer中心に結ぶ  ラストワンマイルは同じ  世界中の地域で各POPを中心にスター型ネットワークを構成 拠点
  • 38.
    - 37 -Copyright© 2015 Nippon Information and Communication Corporation よもやまばなし  問題  東京DCが出来たのでサンノゼのサーバから1TByteのデータを送る必要があります。 一番簡単な方法は何でしょうか?  ところでデータセンター間の通信速度は?  最大スループットはWindowサイズとRTTに影響される。  実測してみましょう。  スループットは送信元のサーバの通信速度(契約)に影響される。  送信元のNICの速度を1Gbpsにする
  • 39.
    - 38 -Copyright© 2015 Nippon Information and Communication Corporation サンノゼ 実際の速度を計測  Iperfで測定 (東京⇔サンノゼ) 東京 RTT:100ms 程度 1Tのデータ 1.普通にFTPで送信をすると1Tを送信するためには 25時間必要 2.送り先のサーバ起動や転送ソフト準備が必要。 IF 100Mbps IF 1000Mbps 転送速度(TCP) : 9.6851 Mbps 転送速度(TCP) : 86.2422 Mbps サーバを起動して? ストレージ設定して、転送 ソフトを用意する?
  • 40.
    - 39 -Copyright© 2015 Nippon Information and Communication Corporation サンノゼ 答え • 対象のImageから好きなデータセンターでBootするだけ。  SoftLayerのImage Templateは別データセンターへCopy可能 東京 RTT:100ms 程度 Image Template Templateから復元してみる Image Template 1Tのデータ テンプレートから復元してしまえばワンクリックで転送してデータが利用可能に!
  • 41.
    - 40 -Copyright© 2015 Nippon Information and Communication Corporation まとめ  SoftLayerが持つ特徴が、クラウドが持つ特性をより引き立てます  世界各地に存在するDC、PoP  DCを結ぶ強靭なネットワーク  ネットワークを活かした各種機能  クラウドの利用はネットワーク設計があってこそ  クラウド上での設計・考慮  既存システムとの接続・考慮  ユーザからの接続  日本情報通信にお任せ下さい。
  • 42.
    - 41 -Copyright© 2015 Nippon Information and Communication Corporation 重 要 事 項 是非ブースへお越しください ホールB この会場 ルームBルームA この会場 絶賛展示中
  • 43.
    - 42 -Copyright© 2015 Nippon Information and Communication Corporation Speed and Change SoftLayerの構築から運用まで ご清聴ありがとうございました sl-cc@niandc.co.jp