サービス運用のPDCAサイクル

1. PR TIMES
http://prtimes.jp
月間200万PV以上を誇る、シェアNO.1のプレスリリース配
信掲載サービス。月間1億PV以上の大手新聞社・通信社
Webサイトを含む、日本有数のメディアにリリースを掲載
できる機能が特長。またPR TIMESのFacebookファン数は
4万人超、Twitterアカウントのフォロワー数は1万6千人超
となっており、SNSでの情報拡散にも効果的です。
BREAK TIMES
http://breaktimes.hatenablog.com
PR TIMESのエンジニア・チームによる技術/デザインブロ
グ。PR TIMESのサイトなどを制作・運営する上で学んで
きた技術や運用法などを公開しています。

2. Google Analytics
http://www.google.com/analytics/

3. User Insight
http://ui.userlocal.jp/

4. A/Bテスト
2つのオプションを比較して、より良い方を選択する。

5. A/Bテスト
PR TIMES サービス紹介ページ
http://prtimes.jp/service/
動画vs 画像で比較し、よりコンバージョン率の高かった
動画バージョンを選択。

6. 多変量テスト
互いに作用する複数のオプションを比較して、より良い組み合わせを選択する。

7. 多変量テスト
単純なA/Bテストよりも、複雑なデータを取得できる。
ただし…
より多くのトラフィック、時間が必要

8. 多腕バンディット
“・最も利益の大きい選択肢の特定を目標とする
・ランダム分布がテストの進行とともに更新される”
- Google Analyticsサポートページより

9. 多腕バンディット
Google Analyticsウェブテスト

10. 1日目

11. 表示率
25%
25%
25%
25%
コンバージョン率
1.5%
0.5%
1.0%
0.3%

12. 2日目

13. 表示率
45%
15%
30%
10%
コンバージョン率
1.8%
1.2%
0.6%
1.0%
コンバージョン率(累計)
1.6%
0.8%
0.7%
0.5%

14. 3日目

15. 表示率
45%
22%
20%
13%
コンバージョン率
1.2%
1.5%
1.1%
0.4%
コンバージョン率(累計)
1.5%
0.7%
0.8%
0.5%