Downloaded 24 times
Glusterfsを用いた静的コンテンツ配信サーバ冗長化 20130723
- 1.
- 2.
- 3.
- 4.
- 5.
- 6. gloopsのDBとKVS ■DB 前述の通り、SQL Serverを利用 ■KVS redis とmemcached を利用 →DBの負荷を軽減するため、cacheを最大限利用 →利用場面でSQL Serverとredisとmemcached使い分け →アクセスを捌くことが優先
- 7.
- 8.
- 9. 静的コンテンツ配信の概要 ユーザー mobage CDNgloops サーバ群 ①Platform CDNに静的コンテンツ （画像etc）がcacheされていれば、 そのままユーザーへ返す ②Platform CDNに静的コンテンツ （画像etc）がcacheされていない場 合は、gloopsサーバ群に取りに来る
- 10. va nx nxnx va va 静的コンテンツ配信サーバ群ver.1.0 LB LB LB varnish LB nginx file :http :nfs(autofs) :Global IP 画像etc
- 11.
- 12. va va va nxnxnx 静的コンテンツ配信サーバ群 ver.1.1 LBLB varnish nginx file :http :nfs(autofs) :Global IP 画像etc nx nxnx
- 13.
- 14. 静的コンテンツ配信サーバ群 ver.1.1 ■問題点 ・ nx→file間のnfs(autofs)が、安定しない！！ ・10台中1台程度、数日に1回接続切れる →一部画像etcNG ・timeout等の設定変更、version変更しても改善せず>< →nfsやめよう！ →nginxでpoxyさせよう！
- 15.
- 16.
- 17.
- 18.
- 19.
- 20.
- 21. va 静的コンテンツ配信サーバ群 ver.2.0 va nx LBLB varnish glusterfs replica volume (nginx+画像etc) :http :GlobalIP 画像etc va nx 画像etc 画像etc :glusterfs glusterfs native client+samba Windows 画像etc :samba
- 22. 静的コンテンツ配信サーバ群 ver.2.0 # glustervolume info Volume Name: data01 Type: Replicate Volume ID: 12345678-1234-abcd-abcd-abcdefghijkl Status: Started Number of Bricks: 1 x 2 = 2 Transport-type: tcp Bricks: Brick1: 172.16.10.11:/www/data Brick2: 172.16.10.12:/www/data
- 23. 静的コンテンツ配信サーバ群 ver.2.0 ■仕様 ・glusterfs nativeclient+sambaサーバから、replica volumeサーバへ画像の同期を行なう ・replica volumeサーバには各々nginxが稼働している
- 24.
- 25. 静的コンテンツ配信サーバ群 ver.2.0 【ヘルスチェック】 ■from LB ・LB→varnish→nginx経由で特定ファイルのHTTP status監視 →200が返って来なかったら、LBからvarnishが外れる 5sおきにチェックし、 HTTPStatus 200が3s以内に返ってく ればOK 1回でもNGなら外す
- 26. ■from varnish ・varnish→nginx経由で特定ファイルのHTTP status監 視 →200が返って来なかったら、varnishからnginxが外れ る .expected_response= 200; .interval = 5s; .timeout = 1s; .initial = 6; .window = 5; .threshold = 4; 5sおきにチェックし、 レスポンスが1s以内に返ってきて、 5回中4回HTTP Status 200が 返ってくればOK 起動時は6回成功しないと、healthとみ なさないよ 静的コンテンツ配信サーバ群 ver.2.0 【ヘルスチェック】
- 27. 静的コンテンツ配信サーバ群 ver.2.0 【そもそもvarnishの設定】 ・vclで複数ドメインに対応 →ドメイン毎に、振り先のnginx（replica volume）サー バ群を変更可能■nginx(replica volume)への振り分け director image01 round-robin { { .backend = replica11; } { .backend = replica12; } } director image02 round-robin { { .backend = replica21; } { .backend = replica22; } } ■ドメインの振り分け set req.http.host = regsub(req.http.host, ":8080$", ""); if ( req.http.host == "image01.hogehoge.jp" ) { set req.backend = image01; } if ( req.http.host == "image02.hogehoge.jp" ) { set req.backend = image02; }
- 28.
- 29.
- 30.
- 31.