20130723 ecシステムにchefを導入してみた v1.0

Ad

Ad

Ad

Ad

Ad

Ad

Ad

Ad

Ad

Ad

Ad

Ad

Copyright © NIFTY Corporation All Rights Reserved.
EC システムに Chef を
導入してみた
2013年7月23日
ニフティ株式会社
千家啓陽

1. 自己紹介
2. Chef 導入のきっかけ
3. Chef で環境構築する手順
4. Chef Server とは？
5. サーバーを役割毎にまとめよう
6. デモ
7. 使ってみた感想
8. TIPS
9. まとめ
アジェンダ
- 1 -

自己紹介
- 2 -

• 2009年入社 (5年目)
• ECシステムアプリ開発＆インフラ運用
• PHPer
• 認定スクラムマスター
千家啓陽

• フロントエンド: 買い物カゴ
• バックエンド:在庫管理、受注管理、…
ECシステムとは？
- 4 -
based on

Chef 導入のきっかけ
- 5 -

3年に1度の OS リプレースが
超面倒。
- 6 -

環境
• 開発 (dev)
• 検証 (check)
• 本番 (service)
役割
• Web/Apl
• DB
• Session
• Work
• Batch
- 7 -
現在のシステム構成
×

- 8 -
dev check service
Web/Apl *8
DB Master
DB Slave *6
Work *2
Batch *2
Session *2
Web/Apl
Work/Batch
DB
Master/Slave
Se...

インストールしたいミドルウェア
- 9 -
Web/Apl
Work/Batch
Apache / PHP / MySQL Client
DB MySQL Server / MySQL Client
Session Redis / Monit ...

tar xvf freetype-2.3.8.tar
cd freetype-2.3.8
make clean
./configure
make all
make install
tar zxvf jpegsrc.v6b.tar.gz
cd j...

- 11 -
dev check service
Web/Apl
Web/Apl
Work/Batch
Web/Apl
Work/Batch
x1 x1 x8
• 一部の設定値は環境毎に異なる。
• 時々バージョンアップも行う。
• 手順書も更...

- 12 -
こんなの全部
手動でやる？

- 13 -
Chef

新dev
- 14 -
旧dev
Web/Apl
Work/Batch
DB
Master/Slave
Web/Apl
Work/Batch
DB
Master/Slave
Session
Chef
新dev環境に Chef Server を導...

- 15 -
Web/Apl/Work/Batch
Chef Client
DB
Chef Client
Session
Chef Client
Chef
Chef Server
&
Workstaion

Chef で環境構築する手順
- 16 -

1. ローカル環境に VM を作る
2. ローカル VM で Cookbook を作る
3. Cookbook をリポジトリにコミットする
4. Chef Server にアップロードする
5. chef-client を実行する
流れ
- 1...

Vagrant でローカル
VM を作る。
※
Oracle VirtualBox 上に
簡単に VM を作ること
ができるフリーソフト。
http://www.vagrantup.com/
Vagrant.configure('2') do ...

`vagrant provision`
を叩いてエラーが出な
くなるまで。
サーバー毎に異なる値
は、attributes ファイ
ルに書いて、上書き可
能にしておく。
$ vim recipes/default.rb
$ vagrant pr...

バージョン管理するた
め、SCM (ソース管理
システム) に登録する。
$ svn commit site-cookbooks/
- 20 -
3. Cookbook をリポジトリにコミットする

リポジトリ内の
cookbook を Chef
Server にアップロード
する。
@chef server
$ cd /chef-repo
$ svn update
$ knife cookbooks upload –a –o
site-c...

Cookbook を実行し、
環境を構築する。
@chef client
$ sudo chef-client
- 22 -
5. chef-client を実行する

Chef Server とは？
- 23 -

Chef ファミリー
- 24 -
OSS Chef
• 無料 (OSS)
• 構築/運用は自
力で
Hosted Chef
• 有料 (5ノード
までは無料)
• Opscodeが運
用
Private Chef
• 有料
• Opscode...

Chef Solo の基本構成
- 25 -
Node
cook
book
cook
book
cook
book
Node
cook
book
cook
book
cook
book
全 node が cookbook リポジトリを持つ。

Chef Server の基本構成
- 26 -
Chef Server
Workstation
NodeNodeNode
ノード情報
cookbooks
knife
knife
chef-client

Workstation から knife コマンドを使って
ほとんどの作業を行う。
• Cookbooks の登録、編集
• Node の追加、編集
• Node の検索
Chef Server の運用
- 27 -

典型的なオペレーション
- 28 -
Chef Server
Workstation
Node
(moja001)
knife ssh ‘name:moja00*’
‘sudo chef-client’
chef-client
Node
(mo...

• 台数が多すぎて、個別の Node に入って
コマンドを叩くのが面倒な場合
• Environment を使いたい場合
• 高度な検索機能を使いたい場合
• 各 Node の状態を一元管理したい場合
Chef Server を使うケース
- ...

メリットデメリット
• Workstation 1台で全
てのオペレーションを
行える
• Chef Server にデータ
を集約できる
• 柔軟な検索機能
• Environment
• ミドルウェアが大量に
入る
• 運用ノウハウが少な...

サーバーを役割毎にまとめよう
- 31 -

サーバーの役割毎に、導入するアプリを指
定する機能。
Roles
- 32 -
Role Recipes
web Apache / PHP / MySQL Client
db MySQL Server / MySQL Client
sessio...

name 'web'
description ‘web/aplサーバー'
run_list [
'recipe[apache2-ec]',
'recipe[mysql-ec::client]',
'recipe[php-ec]'
]
Role ...

- 34 -
実際に適用した例
新dev
Web/Apl
Work/Batch
DB
Master/Slave
Session
Build
Chef
"role[web]“,
“role[work]”
"role[session]”
"role...

$サーバー毎に異なる値は、あらかじめ Attributes として切り出しておくことで、値を個別に指定できる。レプリ先のIP、ログ出力先パスなど。 @dev環境のDBサーバー) { "mysql_ec": { "server": { "...$

- 36 -
最終的な構成 (予定)
dev check service
Web/Apl
DB Master
DB Slave
Work
Batch
Session
Web/Apl
Work/Batch
DB
Master/Slave
Sess...

Chef Server なら、各ノードの Role と
Attribute を一元管理できる。
サーバーの役割と設定値が
明確に。
- 37 -

デモ
- 38 -

デモ
- 39 -
1. WebUI を動かしてみる
2. ノード側の設定を書き換える
→Workstation から
`knife ssh “sudo chef-client”`
→設定が元に戻る

• 閲覧はいいけど、編集しづらい。
• knife コマンドで十分。
WebUI
- 40 -

knife
- 41 -
$ knife node list
$ knife node show {nodename}
$ EDITOR=vim knife node edit
{nodename}
$ knife ssh {query} {c...

使ってみた感想
- 42 -

• Cookbook さえ作ってしまえば後が超楽。
–環境構築は `chef-client` 一発。
–設定ファイルが一括管理できる。
• 誰でも同じ環境をすぐ作れる。
• 各環境の設定がバージョン管理できる。
“Infrastracture ...

• 学習が大変。
–概念がややこしい！
–情報源が基本的に英語。
• 環境が作りこまれている場合、公式
cookbook を使えない。自分で作る。
• Chef Server の管理方法を覚える必要が
ある。
悪かったこと
- 44 -

良かったこと >> 悪かったこと
メリット >> 学習コスト
時間をかけても学ぶ価値あり。
トータルで見ると
- 45 -

TIPS
- 46 -

• 最初は Chef Solo + Vagrant で勉強する
のがおすすめ。
• 慣れたら Vagrant VM 上で Chef
Server/Client 構成を作って試してみれば
OK。
• 5台程度の小規模システムなら、Chef
Sol...

• knife cookbook test で構文テストが可能。
• 一部の公式 cookbook (MySQL等) はテク
ニカルすぎてオーバーライドしづらい。
自分で作ったほうが早い。
cookbook の作り方
- 48 -

まとめ
- 49 -

• 自動化はクラウド時代に必須の技術。
• 学習コストは必ずペイされる！
• 属人化解消のためにも。
- 50 -
Chef

- 51 -