Aiming飲み会 1-rails における コネクション数と シャーディングのお話
•
1 like•2,040 views
Rails における コネクション数と シャーディングのお話
Recommended
More Related Content
What's hot
What's hot (16)
Similar to Aiming飲み会 1-rails における コネクション数と シャーディングのお話
Similar to Aiming飲み会 1-rails における コネクション数と シャーディングのお話 (20)
Aiming飲み会 1-rails における コネクション数と シャーディングのお話
- 2. About: 土井 英範 • 株式会社 Aiming 開発グループマネージャー リードソフトウェアエンジニア • エンジニアになって10年弱 • かかわったゲームタイトル 4本くらいクライアントからサーバまで 全般を経験してきた • コンシューマゲーム、ブラウザゲーム、ス マホのゲーム • サーバ・クライアントプログラム
- 3. Rubyist 編
- 5. 水平分割したい
- 7. User Table User Table 1 User Table 2 User Table 3 分割基準 Range (ID: 1∼100, 101∼200 …) List (CountryCode: JP, US …) Hash ( ID mod 3 ) 一つのテーブルを特定のルールで 複数のDBに分散する ↓分割↓
- 9. A. 一筋縄にはいかない
- 10. Active Record の コネクションスイッチング •establish_connection というメソッドがありますが •能動的に接続を確立するためのものではなく 実際の接続は行わない •指定されたクラスをキーに (クラス・メソッド) コネクションプールを作成するだけのもの
- 11. establish_connection の挙動 •クラス定義の段階で指定するため スイッチングの用途に使えない •安直に呼び出して切り替えるのも危険 class User < ActiveRecord::Base establish_connection :user_db # database.yml で定義されているとする … end
- 13. 水平分割に利用できる Gem •octopus •https://github.com/tchandy/octopus •昔ある有名な Gem •@user = User.using(:shard1).find_by_name( Joao") •こんな書き方ができる
- 14. 水平分割に利用できる Gem •ActiveRecord::Turntable •https://github.com/drecom/activerecord-turntable •高機能 •シャード間で ActiveRecord の id をキーとして分散できる •自動的にどのシャードでクエリを投げる必要があるかを解決 してくれる
- 18. 見積もり方法 •プロセスベースのサーバならスレッド数は 基本 1 •※コード内に Ruby スレッド処理などがない前提 • Passenger ※Enterprise版だと Thread モデルも可能らしい •Unicorn •スレッドベースのサーバ •Puma (ワーカープロセスも複数設定できる)
- 19. 見積もり方法 •サーバ台数 x プロセス数 x スレッド数 •20台 x 5 process x 2 thread • = 200 connection
- 21. database.yml •pool: 5 •プールサイズの設定はスレッドを利用する 際の設定 •unicorn, passenger などのプロセスベー スのサーバだと1 process に付き 1 connection
- 22. 水平分割した時の話 •Multi-DB アクセスする場合 •基本的に全てのDBにコネクションが張られると考 えたほうが良い •5分割したら5つのDBに接続を張る可能性がある •各 Gem でどのような実装になっているかは未確認 •※Sengiriはつなぎっぱなしになっちゃいます
- 23. DB1 DB2 DB3 DB4 DB5 イメージ web web admin bat