Downloaded 18 times
Uploaded bySQALab
Badger — инструмент для мониторинга качества продуктов
Документ описывает инструмент Badger для мониторинга качества продуктов, а также выявленные проблемы с доступностью тестов, их количеством и статистикой результатов. Основные требования к инструменту включают подробные отчеты, сбор результатов тестирования и удобство использования. В результате внедрения Badger было значительно улучшено качество продуктов, сокращены временные затраты на тестирование и увеличено количество релизов.
Badger — инструмент для мониторинга качества продуктов
- 1. Badger - инструментдля мониторинга качества продуктов Шрейдер Ирина 1
- 2.
- 3.
- 4.
- 5.
- 6.
- 7.
- 8.
- 9. Проблема доступности тестов •сложный запуск тестов ~10 ручных действий 9
- 10. Проблема доступности тестов •сложный запуск тестов ~10 ручных действий • кол-во окружений изменение конфигов вручную 10
- 11.
- 12. Проблема количества тестов •время выполнения 4 часа ожидания 12
- 13. Проблема количества тестов •время выполнения 4 часа ожидания • неполнота/некорретность отчетов нет причины скипов 13
- 14.
- 15. Отсутствие тестовой статистики сколькотестов? тенденции развития? результаты последней регрессии? сколько фейлов? какое качество у продукта? и т.д. 15
- 16. Еще раз сложный запусктестов большое количество окружений время выполнения неполнота/некорретность отчетов отсутствие тестовой статистики 16
- 17.
- 18. Основные требования • подробныеи понятные отчеты 18
- 19. Основные требования • подробныеи понятные отчеты • сбор результатов тестирования 19
- 20. Основные требования • подробныеи понятные отчеты • сбор результатов тестирования • удобство использования 20
- 21. Основные требования • подробныеи понятные отчеты • сбор результатов тестирования • удобство использования • возможность интеграции 21
- 22. Основные требования • подробныеи понятные отчеты • сбор результатов тестирования • удобство использования • возможность интеграции • простота расширения 22
- 23.
- 24. Выводы TestLink TestRail подробные отчеты- +/- импорт результатов - +/- удобство использования - +/- интеграция с JIRA + + простота расширения + - стоимость бесплатный платный 24
- 25. Badger - инструмент длямониторинга качества продуктов 25
- 26.
- 27. Возможности • сбор ихранение результатов тестирования 27
- 28. Возможности • сбор ихранение результатов тестирования • информативные графики 28
- 29. Возможности • сбор ихранение результатов тестирования • информативные графики • интеграция с JIRA 29
- 30. Возможности • сбор ихранение результатов тестирования • информативные графики • интеграция с JIRA • запуск тестов* * пока только для unix 30
- 31.
- 32. Статистика по тестам Пример:время выполнения 32
- 33. Статистика по тестам Пример:количество скипов 33
- 34. Статистика по тестам Пример:количество фейлов 34
- 35. Статистика по тестам Пример:тенденции 35
- 36.
- 37.
- 38.
- 39.
- 40.
- 41. Путь 1: отправка данныхв Badger
- 42.
- 43.
- 44. Отправка данных • способы pythonутилита, api метод 44
- 45. Отправка данных • способы pythonутилита, api метод • форматы nunit, junit 45
- 46. Путь 2: настройка тестовв Badger
- 47.
- 48.
- 49.
- 50.
- 51.
- 52.
- 53.
- 54.
- 55.
- 56. Наши проблемы решены сложныйзапуск тестов большое количество окружений время выполнения неполнота/некорретность отчетов отсутствие тестовой статистики 56
- 57.
- 58. Особенности • нельзя создаватьсвои дашборды • нет настройки графиков • нет локализации 58
- 59.
- 60. Технологии API UI Python +Django Django REST Framework Celery ExpressJS AngularJS 60
- 61.
- 62. Тестирование API UI Unit &Functional tests Selenium tests 62
- 63.
- 64. Итоги • повысили качествопродуктов доступность, актуальность 64
- 65. Итоги • повысили качествопродуктов • 18 команд 65
- 66. Итоги • повысили качествопродуктов • 18 команд время: было 4 часа, стало ~40 минут скипов: было 20%, стало 4% релизы: было 1 в неделю, стало 2-3 в неделю 66
- 67. Итоги • повысили качествопродуктов • 18 команд • гибкий, легкий инструмент 1 человек на поддержке 67
- 68. Итоги • повысили качествопродуктов • 18 команд • гибкий, легкий инструмент • opensource fork, pull request, issues 68
- 69.