ドリコムを支える課金ライブラリを支えるJenkins

Copyright Drecom Co., Ltd. All Rights Reserved.
ドリコムを支える課金ライブラリを
支えるJenkins
2015/03/23 16新卒エンジニア勉強会
@sue445

@sue445
● 福岡生まれ福岡育ち
● 福岡教育大学卒
● 2009年4月～: 某SI系企業新卒入社（前職）
● 2012年7月～: ドリコム
今のお仕事
● iOS/Androidアプリの課金ライブラリのメンテ
● 社内ツール、社内ライブラリ開発
● サーバサイド全般(アプリ～インフラまで横断的に)
● PO (Precure Ojisan)
自己紹介

● フルボッコヒーローズの事前登録ガチャ（フライング
ゲットガチャ）開発
○ ドリコムのフライングゲットガチャの舞台裏
#ksgstudy - くりにっき
○ http://sue445.hatenablog.
com/entry/2014/07/12/204741
● ドリコムAdventCalendarの主犯
○ ドリコム Advent Calendar 2014 - Adventar
○ http://www.adventar.org/calendars/518
その他やってたこと

【今期の嫁】キュアトゥインクル

今期の黄色は肩背中出し！！！！

【本妻】キュアピース

エンジニアの仕事机

机には多数の技術書

全社員サブディスプレ
イ支給

● Jenkinsとは?
● ドリコムでのJenkinsの使われ方
● dpoint(課金ライブラリ)について
● dpointでのJenkins活用事例
● おまけ
● まとめ
Agenda

● http://jenkins-ci.org/
● Javaで書かれたオープンソース継続的インテグレーション
ツール(Wikipediaより)
○ 継続的インテグレーション = 開発時の品質改善や自動
化推進
● プラグインでいろいろ拡張できる
Jenkinsとは？

会社全体で1つのJenkins使っているというわけではなく、アプリ
ごとに野良Jenkinsが乱立しているので全部は把握していない
具体例
● 開発中アプリのテスト
● 開発サーバへのデプロイ
● テストアプリの配信
● ライブラリのドキュメントの作成
● etc
ドリコムでのJenkinsの使われ方

● iOS/Androidのアプリの中間ポイントシステム
○ 魔法石やダイヤをサーバで管理する仕組み
● 2013年以降に出たアプリで全部使われているはず
○ ガルロワ、フルボッコなど
● 詳細は「ドリコムAdventCaledar」で検索
com/entry/2014/12/01/000000
dpoint(課金ライブラリ)について

● Rubyで書かれているライブラリ(gem)
● 開発はほぼ僕1人
dpoint(中間ポイントシステム)について

開発はほぼ僕1人（でした）
重要なのでもう一度

Σ(ﾟДﾟ)
重要なのでもう一度

● 機能改修
● 負荷対応、パフォーマンスチューニング
● AppleやGoogleの課金の仕組みが変わった時の対応
● その他諸々の緊急対応
● まともにやってると1人じゃ絶対回せない
○ バグがあるとライブラリを導入しているアプリ全体に影響
するので絶対にバグは出せない
○ 課金がバグってると会社は誤った売上を計上することに
なるので超シビア
○ 今はメンテナ増えたけど1年以上僕1人で面倒を見てた
dpointでやってること

よろしい

ならば自動化だ！

● 今日話すこと
○ GitLabにpushされたbranchの自動テスト
○ 静的解析
● 今日話さないこと
○ ドキュメント生成
自動化していること

GitLabへpushされたbranchの自動テスト
git push

POST
webhook

テスト

結果をチャット
通知

テスト結果の通知

開発スタイルはほぼgit flow

master/develop/MRをそれぞれテスト
master branch
develop branch
topic branch
(MergeRequest /
PullRequest)

● MergeRequest, PullRequest (topic branch)
○ コードレビューの単位で常にテストを行い、テストが通っ
たものだけをdevelopにmergeする
● develop branch
○ 開発中のメインブランチを常にテストすることでどこでバ
グが混入したのかをいち早く検知できる
● master branch
○ masterはいつでもリリースできる状態のものなので、常
にテストは通っている
○ 全てのテストが通ったものだけしかリリースしない
Jenkinsで自動テストを行う粒度

MRにはｶｰﾁｬﾝによる温かみのあるテスト結果

テストケースは約900個... (約3分)

x 27パターン = 計24000ケース

x 27パターン = 計24000ケース
丸1つが900個のテ
ストケース

● Rubyの各バージョン
○ 2.0系, 2.1系, 2.2系
● Ruby on Railsの各バージョン
○ 4.0系, 4.1系, 4.2系
● 特定のmigrarionを適用するか(indexの有無)
○ 大人の事情で。。。
● activerecord-turntableの利用有無
○ データベースの分割ライブラリ
○ https://github.com/drecom/activerecord-turntable
● 運用上今のところありえない組み合わせを除去
● 3 x 3 x 2 x 2 - 9 = 27
内訳

考えられる全ての組み合わせ
はテストすべき

それがプロとしての当たり前

3分 x 27パターン = 81分
だがしかし

(;´Д｀)

速くするにはどうした
らいいか？

マシンを増やせばい
い
【結論】

言い換えると

レベルを上げて物理
で殴ればいい

Master
master

Master + Slave x 8
master
slave

マシン9台でCPU 17コア
master
slave
趣味で社内ツールをいくつか立て
ているのでそのサーバにJenkins
のSlaveを相乗りしている

17並列で81分 ->11分

● http://openstack.jp/
● クラウド上でサーバのインスタンスを作るための環境
○ 平たく説明するとAWSの社内版（みたいなもの）
● 弊社では開発用途や社内ツールくらいなら自由にインスタンス
が立てられる
● 自分の場合JenkinsのSlaveも必要に応じて増減している
○ itamae + Serverspecでテスト駆動インフラやってみた
#shibuyarb - くりにっき
com/entry/2015/03/19/001919
OpenStack

pronto + rubocopでコーディング規約違反を検知し、ボットが自
動で指摘
● https://github.com/mmozuras/pronto
● https://github.com/bbatsov/rubocop
● メリット
○ MergeRequestやPullRequestが作られたら勝手に動く
ので忘れない
○ 人間によるコードレビューの工数削減
○ 人間が言うと角が立つけどボットに言わせると角が立た
ない
静的解析

行単位で教えてくれる

問題なければLGTM
LGTM = Look good to me (大丈夫そう)

● 弊社では毎週主要エンジニアで集まるMTGがあって、「今週
のgem」のコーナーでgemリリースのアナウンスはしてる
● それとは別に速報的な位置づけでgemのリリース通知も自
動化した
【おまけ】gemリリース通知の自動化

git push --tags
rake drecom:release
gem push
社内gemサーバ

社内gemサーバ
POST webhook

結果をチャット
通知
社内gemサーバ

ｶｰﾁｬﾝによる温かみのあるアナウンス

● rake drecom:releaseは社内gem(drecom_gem)の機能
○ 社内gemサーバへのリリースを簡易化してる
○ 社内gemが間違えて社外のrubygems.orgに公開され
るのを防止する機能もある
○ 【詳細】RubyKaigi2014で発表した - mitaku.log
http://mitaku.github.io/blog/2014/09/22/rubykaigi-
2014-speech/
● fluentdっていうとbigdataやログの集約ってイメージがある
けど、webhookを受けることができるしチャット通知のプラグ
インが豊富なのでこういう風にカジュアルな通知にも利用で
きる
詳しいこと

● 機械がやるべき仕事
○ スクリプトを1回書けばずっと使いまわせる
○ 単調な作業
○ 時間がかかる作業
● 人間がやるべき仕事
○ 人間の目で見ないと判断できないもの
■ デザイン崩れなど
○ 1回しか行わない作業
機械がやるべき作業と人間がやるべき作業の切り分けが大切
全部が全部自動化はできない

● 機械に任せられることで人間は楽をできる
● 1人でたくさんの仕事をこなせるようになるので、レバレッジを
効かせることができる
● 一度自動化したものは誰でも使えるようになる
● 結果的に自分が楽になればみんなが楽になる
まとめ（自動化のすすめ）

ドリコムを支える課金ライブラリを支えるJenkins

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Similar to ドリコムを支える課金ライブラリを支えるJenkins

Similar to ドリコムを支える課金ライブラリを支えるJenkins (20)

More from Go Sueyoshi (a.k.a sue445)

More from Go Sueyoshi (a.k.a sue445) (18)

Recently uploaded

Recently uploaded (15)

ドリコムを支える課金ライブラリを支えるJenkins