Рассказали о том как у нас эволюционировала сборка code-coverage для php-кода за 4 года, каких успехов мы достигли на этом поприще и как боролись со скоростью сборки с учетом постоянно растущего количества тестов. Доклад будет полезен как тем, кто только начитает покрывать свой код тестами, так и тем, кто давно этим занимается и сталкивается с проблемами производительности при сборке покрытия.

1. Эволюция php code
coverage в Badoo
Илья Агеев

2. Badoo
● ~250 миллионов пользователей
● ~40 тысяч RPS
● >60 тысяч файлов
● ~1 миллион строк кода
● ~53 тысячи тестов

4. 2011 год

5. 2011 год

6. 2011 год

7. 2011 год

8. 2011 год

9. 2011 год
● ~34 тысячи файлов в репозитории
● 250 тестов
● php, phpunit, runkit

11. 2012 год

13. 2013 год
● ~43 тысячи файлов в репозитории
● ~17 тысяч тестов
2011
2013
2011
2013

14. habrahabr
2013 год

15. 2013 год
● xebug (http://xdebug.org/)
● phpcov (https://github.com/sebastianbergmann/phpcov)
● <2GB данных покрытия
● ~70 часов выполнения (!)

16. worker worker worker worker worker worker worker worker
cov cov cov cov cov cov cov cov
2GB raw coverage data
merge
HTML coverage information

17. serialize / unserialize -> var_export / include = 2,5 часа

18. 2013 год
habrahabr

19. 2013 год
● ~49 тысяч файлов в репозитории
● ~27 тысяч тестов
2011
2013 - начало
2013 - конец
2011
2013 - начало
2013 - конец

20. 2013 год
runkit

21. 2013 год

22. 2013 год
addconf

23. 2013 - 2014 год
vimeo habrahabr

25. 2014 год

26. 2014 год

27. 2014 год

28. 2014 год
● ~56 тысяч файлов в репозитории
● ~40 тысяч тестов
2011
2013 - начало
2013 - конец
2014
2011
2013 - начало
2013 - конец
2014

29. 2014 год

30. 2014 год
coverage
server
w w w w w w w w
c c c c c c c c
2GB raw data
merge
HTML coverage information
regular tests
10h 2m

32. 2015 год

33. worker worker worker worker worker worker worker worker
DB
HTML coverage information

34. 2015 год
● Время сборки 30-50 минут
● Текущее покрытие 38%

35. 2015 год

36. 2015 год

37. 2015 год

38. 2015 год
● >60 тысяч файлов в репозитории
● ~53 тысячи тестов
2011
2013 - начало
2013 - конец
2014
2015 - начало
2011
2013 - начало
2013 - конец
2014
2015 - начало

39. 2015 год

40. 2015 год

41. 2015 год

42. 2015 год
● Покрытие для каждой задачи
● Уменьшение съюитов для задач
● Open source
● ???
● PROFIT

43. Вопросы?
Илья Агеев
Head of QA
Badoo