Организация процесса автоматизации тестирования. Стратегии, цели, анализ. Что такое автоматизация тестирования? Что затрагивает автоматизация тестирования? Отношение автоматизаии к ручному тестированию. Цели автоматизации. Зачем нужны цели? Какие основные метрики при выборе цели? Как правильно поставить цель автоматизации? Стратегии автоматизации. Стратегия как определяющий вектор развития. Чем грозит отсутствие стратегии. Основные стратегии, их плюсы и минусы. Анализ эффективности проекта автоматизации. Из чего складывается эффективность?

1. Автоматизация тестирования
Цели. Стратегии.

3. Определение
Автоматизация тестирования –
это...

4. Определение
Автоматизация тестирования –
Использование ПО для осуществления или
помощи в проведении определенных тестовых
процессов
● управление тестированием
● проектирование тестов
● выполнение тестов и проверка результатов

5. Определение
Автоматизация тестирования –
Использование ПО для осуществления или
помощи в проведении определенных тестовых
процессов
● управление тестированием
● проектирование тестов
● выполнение тестов и проверка результатов

6. Определение
Автоматизация тестирования –
Использование ПО для осуществления или
помощи в проведении определенных тестовых
процессов
● управление тестированием
● проектирование тестов
● выполнение тестов и проверка результатов

7. Определение
Автоматизация тестирования –
Computer Aided Software Testing (CAST)

8. Определение
Автоматизация тестирования –
Computer Aided Software Testing (CAST)

9. Область приложения
Автоматизация различных тестовых процессов:
● Подготовка к тестированию
● Исполнение тестов
● Составление отчетов
● Анализ результатов

10. Область приложения
Автоматизация различных тестовых процессов:
● Подготовка к тестированию
● Исполнение тестов
● Составление отчетов
● Анализ результатов

11. Цели автоматизации
Для осуществления любой задачи
нужно четко поставить перед собой
цель

12. Цель автоматизации
“A goal is not always meant to be reached, it often serves
simply as something to aim at.”
Цель не обязательно должна достигаться. Порой это
просто направление двигаться дальше.
Брюс Ли.

13. Цель автоматизации
“A goal is not always meant to be reached, it often serves
simply as something to aim at.”
Цель не обязательно должна достигаться. Порой это
просто направление двигаться дальше.
Брюс Ли.

14. Основные метрики
Цель автоматизации должна быть:

15. Основные метрики
● Конкретная ● Specific
Цель автоматизации должна быть:

16. Основные метрики
● Конкретная
● Измерима
● Specific
● Measurable
Цель автоматизации должна быть:

17. Основные метрики
● Конкретная
● Измерима
● Достижима
● Specific
● Measurable
● Attainable
Цель автоматизации должна быть:

18. Основные метрики
● Конкретная
● Измерима
● Достижима
● Релевантна
● Specific
● Measurable
● Attainable
● Relevant
Цель автоматизации должна быть:

19. Основные метрики
● Конкретная
● Измерима
● Достижима
● Релевантна
● Ограничена
временем
● Specific
● Measurable
● Attainable
● Relevant
● Time-bound
Цель автоматизации должна быть:

20. Цели автоматизации
Более быстрое выполнение тесткейсов
Тестировать выгоднее
Большее покрытие функционала тестами
Анализ неудобочитаемых данных
Полный отказ от ручного тестирования

21. Цель автоматизации
Автоматизация - не цель,
а инструмент достижения цели

22. Стратегии автоматизации
Стратегия – путь к цели
Нет стратегии – «Нет пути» ©

23. Стратегии автоматизации
Проба пера

24. Стратегии автоматизации
Проба пера
● Подбор инструмента
● Изучение тестопригодности
продукта

25. Стратегии автоматизации
Проба пера
● Подбор инструмента
● Изучение тестопригодности
продукта
● Значительные вложения
● Деморализация
● Плохая прогнозируемость

26. Стратегии автоматизации
Решение задач
● Конкретные задачи
● Неплохо прогнозируем
● Завершенный этап – готовое решение

27. Стратегии автоматизации
Решение задач
● Конкретные задачи
● Неплохо прогнозируем
● Завершенный этап – готовое решение
● До завершения каждого этапа идет период
вложения
● Требует минимального фреймворка для
долгосрочной перспективы

28. Стратегии автоматизации
Поэтапное наступление
● Профит уже после первого этапа разработки
● Новый этап может быть полезен для
нескольких областей тестирования

29. Стратегии автоматизации
Поэтапное наступление
● Профит уже после первого этапа разработки
● Новый этап может быть полезен для
нескольких областей тестирования
● Распределение неоднородное
● Значительное покрытие будет на дальних
этапах

30. Стратегии автоматизации
Массированная автоматизация
● Делается все и сразу
● По окончании – готовый проект

31. Стратегии автоматизации
Массированная автоматизация
● Делается все и сразу
● По окончании – готовый проект
● Огромные затраты
● Важно довести до конца

32. Анализ эффективности проекта

33. Анализ эффективности проекта
● Конкретные цели

34. Анализ эффективности проекта
● Конкретные цели
● Измеримые показатели

35. Анализ эффективности проекта
● Конкретные цели
● Измеримые показатели
● Статистика
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17
0
0,2
0,4
0,6
0,8
1
1,2

36. Анализ эффективности проекта
● Конкретные цели
● Измеримые показатели
● Статистика до и после
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17
0
0,2
0,4
0,6
0,8
1
1,2

37. Анализ эффективности проекта
Сверяем результаты с
поставленной целью
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17
0
0,2
0,4
0,6
0,8
1
1,2

38. Анализ эффективности проекта
Сверяем результаты с
поставленной целью
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17
0
0,2
0,4
0,6
0,8
1
1,2
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17
0
0,2
0,4
0,6
0,8
1
1,2

39. Анализ эффективности проекта
Сверяем результаты с
поставленной целью
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17
0
0,2
0,4
0,6
0,8
1
1,2
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17
0
0,2
0,4
0,6
0,8
1
1,2

40. Вопросы?