Доклад Моцарь Павла на SQA Days 7

1. «Сокращение времени регрессионного тестирования»Павел Моцарь КЮЕЙНАУЧФИЛЬМ Харьков, 2010

2. Новый билд

3. Можно делать это и ночью

4. One-click testing!

8. Результаты тестирования

9. Интересны не сами результаты,а их сравнение

10. Регресс

12. Задача №1 минимизировать количество ручных действий

13. Задача №2 минимизировать время выполнения

14. Задача №3 минимизировать количество тестовых серверов

15. Хорошо бы … Web-интерфейс для запуска сборки, запуска тестирования, анализа результатов Интеграцию с системой контроля версий Интеграцию с системой багтрекинга Управление массивом тестовых серверов и пользовательских машин в т.ч. использование слабо загруженных пользовательских машин для выполнения тестов в фоновом режиме Механизм расписания и оповещений

16. Архитектура системы Пользователи Сервер БД Тестовые сервера Веб-сервер

17. Условно клиентская часть локальный КЭШ ТЕСТОВ TEST ROBOT тесты TEST RUNNER ПРОДУКТ СЕТЕВОЙ РЕСУРС управление БАЗА ДАННЫХ статус результаты, логи

19. запускать циклы «сборка версии продукта» – «регрессионное тестирование»

20. просматривать результаты запуска, сравнения и историю

22. результаты и историю запусков тестовых конфигураций

23. логи упавших тестовСервер БД Веб-сервер

24. Тестирование «в одно нажатие» Сервер БД Веб-сервер

25. Локальный «тестовый робот»Пример структуры папок [test_robot] [builds] (установленныеверсии продуктов, подлежащих тестированию) [our_product_v1.3.1] [our_product_v1.3.2] … [scripts] (исполняемые и конфигурационные файлы локального робота) test_robot.pl test_robot.ini … [tests_cache] (кэш тестовых наборов) test_group_A-ts512.tar.gz test_group_A-ts513.tar.gz test_group_B-ts513.tar.gz … [work] (рабочая папка для выполнения тестов) [our_product_v1.3.1] [test_group_A-ts512] [our_product_v1.3.2] [test_group_A-ts513] [test_group_B-ts513]

26. Совет:Давайте удалённый доступ

29. Совет:Контроль времени на функциональных тестах тоже

30. Тестовая конфигурация версия продукта платформа версиятест-сьюта настройки

31. Разработка на ветках

32. Решение о сборке билда

33. Тандемный принцип

34. Совет:Кластеры серверного пула Сервер БД Веб-сервер Honey, I’m still free Take a chance on me!

35. Совет: Декомпозировать test-suite

36. Совет:Параметры тестовых машин

37. Совет:Параметры тестовых машин Blue Resource-specific tests Green Black

38. Совет:Ключевые слова для групп ПОИСК СЧЁТЧИК КАТАЛОГ КОРЗИНА ИНТЕРФЕЙС ИЗБРАННОЕ БД API Long

39. Совет:Подписка на события

40. Совет:Лог коммитов на билд – в письмо

41. Идея:Автоматизация багов

42. Когда?

43. Продукт

44. Прирост тестов

45. Время выполнения тест-сьюта перевалило за 2 часа

46. Ежедневная сборка

47. Осёдлан локальныйтестовый инструмент

48. Реализованные решения

49. Вкалывают роботы

50. Обычный вечер в отделе SQA

51. Есть время украсить отдел SQA

52. Экономия времени Распределённое выполнение Используем все машины включая пользовательские Разработчики сами запускают ,

53. ПО для регрессионного тестирования

54. ПО для распределённого тестирования

55. Использование средств автоматизации

56. Автоматизировано тестов

57. Причины автоматизации

58. Спасибо, друзья! Pavel.Motsar@gmail.com