Yusuke Tsuchiya LINE / Machine Learning Team LINE社内におけるABテストの企画・開発・分析業務の効率化を進めるため、自社内の分析インフラとABテストサポートのために整備したツールセットについてご紹介します。 LINEでは各事業部で独立に開発チームが存在しています。各サービスのログはData LabsのHadoop Clusterに流れてくるようになっていますが、ABテストの実施に関しては、担当者や事業部の開発チーム毎に方式が変わったり個別対応を行うケースも少なくありませんでした。 また、Data Labsでは各事業部に対してレコメンドエンジン等の提供を行っていますが、オンラインでの比較検証を効率的に進めたいという要件もあり、既存のDMPに合わせた、ABテスト用の環境を自前で用意しました。 背景、考えたこと、システム構成等をカジュアルにお話できたらと思います。

1. LINE’s
A/B Test Standardization
with our toolset
Yusuke Tsuchiya

2. ●
●
●
●

3. •
•
•

4. Service
Contents
Log
1. Define spec
2. Export/Share spec and target
3. Import/Implement + QA
4. Analyse

5. ●
●

6. ●
●
●
●

7. ●
●

8. ●
●
●
●
●

9. ●
●

10. ●
●
●
●

11. Code snippet of slot calculationSlot input on Libra UI

12. Service
Service
Service
Libra

14. Service
Contents
Log
1. Define spec
3. Import/Implement + QA
4. Analyse
Libra
2. Input Libra

15. ●
●
●
●
●

16. ●
●
●

17. ●
●
●
●
●
●
●
●

18. THANK YOU