Jisaku09 presentation

はてなの自作サーバの実際株式会社はてな吉田晃典(id:marqs)

アジェンダ自己紹介  id:marqs はてなの自作サーバー  シャーシ  電源  電源スイッチ  消費電力  ラッキング自作サーバーの用途  アプリケーションサーバー  DBサーバー  ネットワーク特化サーバー  ストレージサーバーまとめ

自己紹介吉田晃典(id:marqs)  インフラチームのエンジニア  ハードウェア全般（設計/投入プランニング/購買）  データベース  バックエンドアプリケーション  その他いろいろ http://d.hatena.ne.jp/marqs/ http://twitter.com/marqs/ marqs ＠ hatena.ne.jp

はてなの自作サーバー特徴  ハーフ1UシャーシフロントアクセスさくらiDCに最適化した設計シャーシ奥行　310mm リア吸気、フロント排気  量産化半年運用 marqs-60 90台以上スペック M/B: Intel DQ45CB CPU: Intel Core2 Quad Q9400 Memory: Transcend → ACTICA 8GB CPU fan: Dynatron P199 Case fan: SanAce 40mm x 2 PDU: Enhance Flex300 Chassis,電源スイッチ: 自社開発

シャーシ  設計はid:marqs  製作は板金工場の職人さん  440mm x 43mm x 310mm  本体処理鋼板　1.2mm厚ケーブルガイドをスポット溶接  耳メッキ

電源 Enhance社のFlex300を使用 80plus認証低負荷時に高効率初期  延長ケーブルで対処毎回延長ケーブルを発注取り回しが悪い現在  業者に依頼してケーブル長をカスタマイズカスタマイズ電源価格　<　(電源+4pin延長+24pin延長)の価格取り回しGood

電源スイッチ最初期突く初期  ユニバーサル基板に自作ハンダ最初の10台のみ現在  プリント基板業者に依頼して一括作成とはいえプリント基板は使ってない  実装をやってもらえるのがGood

消費電力標準的構成のmarqs-60  アイドル時　0.5A  負荷時　1.1A  1電源あたり15台  1ラックに45台

ラッキングラックに60台収納可能  実際は電源の制限あり～45台  M6 ケージナット x 4で取り付け  レールはなしレール自体は完成している  L字アングルで支える  タップ位置重要

用途(1)アプリケーションサーバ Intel DQ45CB + 2.5inch HDD x 1 + 8GB Memory  基本かつ最安構成  HDDが壊れたら即交換  Pros 価格機動性 AMTでリモートON/OFF  Cons DDR2メモリの高騰

用途(2)DBサーバー Intel DQ45CB + Intel SSD X25-M + 8GB memory  DB スレーブ  まだ1台も壊れてない安物SSDは壊れまくった  Pros SSDいけてる  Cons SSDの入手性搭載メモリの限界

用途(3)ネットワーク特化サーバサーバー用M/B(LAN port x 2 + IPMI)  トラフィックの多いところ(PCルータ,LVS)で利用  ネットワーク担当エンジニア id:maoeが愛用  最安構成+25000円程度  Pros NICの性能 IPMI メモリレイアウト  Cons 価格入手性

用途(4)ストレージサーバー Intel DQ45CB + 3.5inch 1.5TB HDD x 4発  2Uハーフサーバ既存のシャーシを2枚重ねて2階建て構成 MogileFS用クラスタに使用  Pros 高密度特別なパーツがいらない常にギガバイト単価の安いディスクを投入できる  1TB(ちょっと前) -> 1.5TB(今) -> 2TB(来年頭?)  Cons HDDを選ぶ SATA電源分岐ケーブルホットスワップ

まとめ自作サーバを量産して  ベンダ製サーバを1年くらい買ってない  アーキテクチャを自分で決められる  ハードウェアトラブルを自分達で解決する覚悟今後  P55などLGA1156  ホットスワップ  RAIDカード搭載

Questions?

Jisaku09 presentation

by Akinori YOSHIDA on Nov 26, 2009

Accessibility

Categories

Tags

Upload Details

Usage Rights

1 Embed 10

Statistics

Jisaku09 presentation — Presentation Transcript