Документ обсуждает проблемы и решения, связанные с процессом тестирования программного обеспечения, включая причины возникновения hotfix и багов, такие как недостаточное тестирование требований и некачественная документация. Он также предлагает оптимизации, такие как улучшение технического уровня команды QA и эффективное планирование релизов, для повышения производительности. Кроме того, документ содержит ссылки на полезные ресурсы для дальнейшего изучения и анализа ситуации в тестировании.

1. Масло масляное
или ТЕСТИРУЕМ ТЕСТИРОВАНИЕ
Горшенина Ирина
2GIS

2. Зачем? Почему? Как?

3. HOTFIX - количество

4. HOTFIX - количество

5. HOTFIX - количество
ToDo:Анализируем и устраняем причины

6. HOTFIX - причины
1) не придумали кейс
2) не знали о существовании требования
3) на тестовом окружении бага нет
4) проверили не весь связанный
функционал

7. HOTFIX - решения
не придумали кейс - изучаем тест-дизайн
Cause/Effect
Error guessing

8. HOTFIX - решения
не знали о существовании требования -
acceptance testing

9. HOTFIX - решения
на тестовом окружении бага нет
устраняем отличия
тестового и боевого
серверов

10. HOTFIX - решения
проверили не весь связанный функционал
матрица
взаимосвязей

11. BUGS

12. BUGS
CAN'T REPRODUCE

13. BUGS - причины
- нестабильное тестовое окружение
- описаны не все шаги по воспроизведению
- не докопались до источника проблемы

14. BUGS

15. BUGS
WON'T FIX

16. BUGS - причины
- это незадокументированная "фича"
- исправление займет много времени,а кейс
слишком редкий

17. BUGS
OPEN "MINOR"

18. BUGS - причины
- баг есть, нет времени на починку
- кейс слишком редкий

19. BUGS
ONE FEATURE - N BUGS

20. BUGS - причины
- плохой код
- некачественные требования
- изменение требований

21. BUGS - решение
плохой код -
codereview
стандарты кодирования
автоматическая проверка кода

22. BUGS - решение
некачественные требования -
проверяем требования на:
полнота
непротиворечивость
тестируемость
однозначность

23. BUGS - решение
изменение требований -
отслеживаем причины изменения
требований:
- "5 почему"
- Cause/Effect Diagram

24. Тестовое окружение

25. Тестовое окружение
- одна тестовая среда на всех(qa, qa+dev)
- QA не умеет настраивать тестовую среду
- нет в наличии pre-production сервера

26. Тестовое окружение

27. Тестовое окружение-решение
- одна тестовая среда на всех(qa, qa+dev)
разъезжаемся на разные маленькие
виртуалки

28. Тестовое окружение-решение
- QA не умеет настраивать тестовую среду
повышаем технический уровень QA
- мастер-классы от разработчиков
- самобучение
- "собери сам"

29. Тестовое окружение-решение
- нет в наличии pre-production сервера
- нет средств на покупку нового сервера
оптимизируем использование серверов

30. Процесс: подготовка "фич"

31. Процесс: подготовка "фич"
1) Тестирование
требований

32. Процесс: подготовка "фич"
1) Тестирование
требований
2) уточнение
сроков

33. Процесс: подготовка "фич"
1) Тестирование
требований
2) уточнение
сроков
3) декомпозиция
задач

34. Процесс: планирование

35. Процесс: планирование
- приоритезация задач
- оценка времени на тестирование
- согласование сроков с
командой/смежными командами

36. Планирование: учет рисков

37. Планирование: учет рисков
- использование нового ПО
- зависимость от релиза другой команды
- отсутствие документациинеполная
документация
- рефакториг(значительные изменения в
коде)
- большое количество багов в функционале
- новый член команды

38. Процесс: скорость поставки
Оценка времени нахождения фичи в
тестировании

39. Скорость поставки-причины
- большой буфер задач на тестирование
- долго правятся баги в тестируемых фичах

40. Скорость поставки-решение
- большой буфер задач на тестирование
привлекаем команду к тестированию
- долго правятся баги в тестируемых фичах
отслеживаем, чтобы задачи выполнялись
согласно приоритетам

41. Процесс: релиз

42. Релиз - проблемы
- нестабильная релизная ветка
- смещены сроки релиза
- несогласованность релиза со смежными
командами
- переработка команды до релиза и после

43. Релиз - решение
- нестабильная релизная ветка
- смещены сроки релиза
- переработка команды до релиза и после
анализируем
- причины сдвига сроков
- проблемы с ветками

44. Релиз - решение
- несогласованность релиза со смежными
командами
- выносим пункт на планирование

45. Вопросы
Спасибо за внимание :)
Вопросы ?
Контакты
gorshenina.ia@gmail.com
http://qaskills.pro

46. Полезные ссылки
Тестирование требований
1) Lee Copeland - A Practitioner's Guide to Software Test Design
2)http://www.slideshare.net/astenix/sqamaps
Анализ ситуаций
3)http://www.slideshare.net/blv/ss-10129729?ref=http://itbrunch.com.
ua/2011/11/30/boris-volfson-conference-materials/
Риски
4) http://www.slideshare.net/VLDCORP/ss-7904849
5) http://www.koob.ru/demarko/valsiruya_s_medvedyami