Екатерина Каменева - доклад на SQA Days, 2-3 декабря 2011, Москва

1. Добавляем гибкости
в тестирование
Катя Каменева

2. Кто здесь?
Head of QA Department
Test Lead
Co-founder

3. Проект
• Веб-сервис: перевод веб-сайтов и приложений
• Команда: 30+, распределенная
• Релиз: <10 раз в сутки
• Методология: ммм…

4. Клиенты

7. Max Dima
PM
JenyaT
AlexM
Den
Kirill DimaN
Pasha Roma
SergD
AlexT
Devs
DimaG
Keith VovaY AlexN
Michael Aaron Vetal VovaS
Tolik
Ning Ian
AlexK
Igor
Katya
QA
DimaD
GergS
Команда
Oleg Jenya Jenya
NetOps
Andrey

8. Процесс
Goes to Production
Branch with light changes
Significant changes
Integration branch

9. Ответственность
разработчика
• Clarify Requirements
• Code
• Test, Fix
• Add UnitTests
• Add Metrics
• Deploy
• Track Metricks
• Add Interg. Tests, UI Tests

10. IEEE 829
Standard for Software Test Documentation
Test Plan
Test Design Specification
Test Case Specification
Test Procedure Specification
Test Item Transmittal Report
Test Log
Test Incident Report
Test Summary Report

11. Тестовая документация
 Test Plan
 Feature test task
 Release check list
 FAQs

12. Test Plan
“A detail of how the test will
proceed, who will do the
testing, what will be tested, in how
much time the test will take
place, and to what quality level the
test will be performed.”
(IEEE 829)

13. Test Plan
• Что?
• Зачем?
• Где?

14. Test Cases
“Test cases specify for each testing requirement:
- The exact input values that will be input and the
values of any standing data that is required,
- The exact output values and changes of value of
the internal system state that are expected,
-And any special steps for setting up the tests.”
(IEEE 829)

15. Повторяемость

16. Метрики

17. Отчетность
I’m watching you

18. Test process
Design
Learning Execution
Interpretation
http://www.satisfice.com/articles/what_is_et.shtml

19. Требования
• Wireframe
• Пара тех. деталей
• Будут меняться
• ?

20. Feature Test Task
• Дать видение миссии
• Ответить на возможные вопросы
• Дать свободу

21. Release check list
• Особенности этого релиза
• Регрессионные тесты

22. Вечные вопросы
• Этого достаточно?
• Когда остановиться?
• А вдруг ... ?

23. Рискнуть
• Последствия
• План «Б»
• Мониторинг

25. Стройте доверие
• Подбор команды
• Ответственность
• Поощрение

26. “Stars and Asses”

27. Ресурсы
• Context-Driven Testing
http://www.context-driven-testing.com/
• Cem Kaner
http://kaner.com/
• James Bach
http://www.satisfice.com/
Continuous Delivery
• Michael Bolton Jez Humble,
http://www.developsense.com/ David Farley

28. Спасибо
Катя Каменева
katoo.katoo
@katookatoo
katoo.katoo@gmail.com
http://ua.linkedin.com/in/katyakameneva