自作サーバカンファレンスで発表した資料です。 まあustででてるんだし、だした所でということでだしちゃいましょう。

1. 自作サーバ運用 アメーバピグ編 株式会社サイバーエージェント 桑野 章弘

2. 自己紹介

3. 自己紹介 桑野 章弘 株式会社サイバーエージェント インフラエンジニア サーバインフラの設計・構築・運用など

4. アジェンダ 自作サーバの導入状況 アメーバピグについて サーバについて メリット・デメリット まとめ

5. 自作サーバの導入状況

6. の前に、、、導入の目的 コストダウン DCの使用効率の向上（消費電力の削減、ラック集積度向上） HW情報収集

7. 自作サーバの用途 ストレージサーバ 低コストで安定したストレージサーバ 高密度サーバ スケールアウト前提のサーバ AtomモデルとCore2Quadモデルを用途毎に使い分け

8. 自作サーバの例[ストレージサーバ]

9. 自作サーバの例[ストレージサーバ]

10. 自作サーバの例[高密度サーバ]

11. 自作サーバの例[高密度サーバ]

12. 自作サーバ台数 200台前後 2009/11現在 8割以上がアメーバピグで使用 ->と、言うわけなので今回はアメーバピグでの使用状況についてしゃべります。

13. アメーバピグについて

14. アメーバピグとは Amebaで提供しているアバターサービス 2009年2月 オープン 2009年11月現在 150万ユーザ

16. サーバについて

17. サーバについて サーバ仕様 サーバスペック

18. サーバ仕様 M/BはMini-ITX 縦置きするにはMicro-ATXでは厳しい

19. サーバ仕様

20. サーバ仕様 サーバ筐体はM/Bを固定するアクリル板

21. アクリル板

22. アクリル板

23. HDD 2.5InchSATA * 2 マウンタは 2.5InchHDD を 2 つマウントできるタイプ

24. HDD 2.5InchSATA * 2 マウンタは 2.5InchHDD を 2 つマウントできるタイプ

25. サーバ仕様 固定方法 ネジ止め

26. サーバ仕様 固定方法 両面テープ

27. サーバ仕様 ラッキング 電源で安定を取って縦置き 簡易ブレード的な、、、

28. サーバ仕様 ラッキング 16 台 1 組（ 6U ） サーバ 8 台を前後から縦置き 合計 16 台を 1 セット

29. サーバ仕様 ラッキング 1 ラック最大 96 台（ 16 台 * 5 セット）搭載可能 もちろん消費電力の兼ね合いがあります

30. サーバの使い分け 2種類のサーバを用途毎に使い分け AtomはCPUは使わない用途 Core2QuadはCPUも使う用途

31. サーバスペック Core2Quad モデル Intel Core2Quad Q8400S CPU 2.5Inch 160GB 7200rpm HDD * 1 台 HDD ATX 200W 変換効率 75% 電源 DDR2 667 2GB * 2 枚 Memory Dynatron T195 CPUFAN Intel DG41MJ M/B

32. サーバスペック Atom モデル 2.5Inch 160GB 7200rpm HDD * 1 台 HDD ATX 200W 変換効率 75% 電源 DDR2 667 2GB * 1 枚 Memory Intel Atom 330 CPU Intel D945GCLF2 M/B

33. アメーバピグでの使い分け例 Core2Quadモデル Web、APサーバ等のロードバランサ等で負荷分散される用途

34. アメーバピグでの使い分け例 Atomモデル 分散KVS MySQL 分散 KeyValue ノード 自作サーバ マスタデータの入っている DB ベンダーサーバ 分散 KeyValue マスタ 定期的にデータを再分配する ベンダーサーバ MySQL MySQL

35. サーバ構築 サーバ構築は社員 1台の組み立てに20分前後 100台の構築～インストール、サーバ設定まで7hour程度 インストールはPXE＋自作スクリプト

36. 構築の様子

37. 構築の様子

38. メリット・デメリット

39. メリット 直ぐに構成改善できる 電源容量がすくなくてすむ コストパフォーマンス

40. メリット 直ぐに構成改善できる 一番最初のバージョンは電源ユニットを別出しにしていたが、取り回しが悪かったので変更。

41. 最初のバージョン

42. メリット 消費電力がすくなくてすむ よっぽどの高負荷でない限りは一般的な1Uサーバの6割くらいの消費電源

43. メリット 消費電力[Core2Quadモデル] アイドル時 0.4～0.5 A 最大負荷時 0.9～1.0 A

44. メリット 消費電力[Atomモデル] アイドル時 0.3～0.4 A 最大負荷時 0.4～0.5 A

45. メリット コストパフォーマンス Atomサーバは安価

46. デメリット 安定性 機材の確保 個人の力量が問われる 温度 耐震

47. デメリット 安定性 言うほど悪くないよ 故障率は9ヶ月で4/200 ただし、初期不良は結構あります

48. デメリット 機材の確保 常に同じ機材が入手できず無駄が出る 特にHDDとか、100台とかそろいづらいので代理店さん経由で購入 在庫を持つ必要があるかもしれません

49. デメリット 個人の力量が問われる マニュアルは陳腐化する可能性が高い 作業工数削減（組み上げまで5～10分が理想と考えます）

50. デメリット サーバの取り回し サーバのラック間移動をしたくない 用途から台数が多い

51. デメリット サーバの取り回し 独自サーバシリアル付番 Tagged-VLAN導入

52. デメリット 耐震 今後の課題

53. デメリット ラック内空調 サーバ背面から 排気されホットスポット 発生 サーバ前面 より吸気

54. デメリット ラック内空調改善 排気ユニットで ラック側面から排気 する サーバ前面 より吸気

55. ラック内空調ユニット

56. まとめ

57. まとめ 考えないといけない事はたくさんある ベンダーさんのサーバと比べちゃだめ、適材適所 適所に合わせて作れる点が一番のメリット 全幅の信頼という訳にはいきませんｗ

58. 今後の構想 1U4Wayサーバ 省スペースと高集積を両立 自作エンクロージャ

59. 1U4Wayサーバのイメージ

60. ご清聴ありがとうございました。