SlideShare a Scribd company logo
Про меня
Опыт в тестировании более 8 лет
Опыт в управлении командами около 5 лет
ISTQB сертифицированный Test Manager и
Test Analyst
Текущая позиция:
Senior Test Engineer / Test Lead
в Sigma Software
lysaya.yana@gmail.com
Агенда
1. Как тест кейсы могут становиться плохими
2. Возможные причины плохих тест кейсов и
сьютов
3. Ловушки, с которыми QA могут столкнуться
при создании тест кейсов или построении тест
сьютов
4. Подсказки и выводы
Характеристики плохого тест кейса
Непонятные, неоднозначные
Дубликаты
Лишняя работа
Неповторяемость
Плохая поддерживаемость
Какое-то плохое ощущение
Причины возникновения плохих тест кейсов
Некомпетентность
Небрежность
Предположения
ЛовушкиНестабильность
Нехватка времени
Неопытность
Ловушки при построении тест
кейсов и тестовых сценариев
Привет, бро
Test case 46: Check received email
…
Step 6. Send email
Step 7. Check, that user received email
…
Test case 64: Check ability to send email
Привет, бро
Ловушки
Уже
протестировано
или покрыто
Дубликаты
Решение Матрица
покрытия
Планирование
тестов
Взаимодействие
с командой
Вершки и корешки
Create new PayPal transfer
Create new Check withdrawal transfer
Create new business transfer
Check transfer history for business user
Check transfer history for private user
…
Вершки и корешки
Ловушки
Только
названия
тестов
Описание
бизнес
сценария
Никаких
ожидаемых
результатов
Решение Матрица
покрытия
Добавлять
ожидаемые
результаты
Трейни-ориентированные тесты
Open application
Expected result…
Enter test@test.com in Email field
Expected result…
Enter “test” in Password field
Expected result…
Click on “Login” button
Expected result…
Open Products page
Expected result…
Трейни-ориентированные тесты
Ловушки Полная
навигация
Слишком
много
объяснений
Повторение
Решение Пре-
кондишены
Вызовы тест
кейсов
Кросс-
ревью
Трейни-ориентированные тесты
Pre-conditions:
User is logged in in application with
next credentials: test@test.com
/test
Steps:
Open Products page
Save patient’s age field with empty value;
Expected result: not possible
Save patient’s age field with alphabetic characters
Expected result: not possible
Save patient’s age field with special characters
Expected result: not possible
Save patient’s age field with ‘NULL’
Expected result: not possible
Save patient’s age field with ‘999999999999999’
Expected result: not possible
Save patient’s age field with negative value
Expected result: not possible
Слишком много негатива
Ловушки
Копи-паст
большинства
тестов
Один ожидаемый
результат для многих
тестов
Решение Комбинирование
Использование
параметров
Чеклисты
Save patient’s age field with
@age_value
@age_value:
 empty;
 alphabetic characters;
 special characters;
 ‘NULL’;
 ‘999999999999999’;
 negative value.
Expected result: not possible
Шаги, шаги, шаги…
Step 1. Login as application user  Expected
result…
Step 2. Start creation of task  Expected result…
Step 3. Enter task name  Expected result…
Step 4. Enter Due date  Expected result…
Step 5. Enter task description  Expected result…
…
Step 26. Select task watchers  Expected result…
Шаги, шаги, шаги…
Отделение шага
для каждого
действия
Комбинация
шагов без
эффекта на
систему
Шаги, шаги, шаги…
Step 1. Login as application user
Step 2. Start creation of task
Step 3. Fill in next fields:
 task name;
 due date;
 task description;
 …
 task watchers;
Step 4. Click on “Create” button
Expected result…
Балк степы
Step 1. Open application. Login with correct credentials
as application user. Navigate to Files menu. Click on
“Create new folder” button and create new folder
Expected result: Folder with name specified is
created
Step 2. Open created folder. Click on “Upload file” button.
Select file from computer. Click on “Select” button.
Балк степы
Комбинирование
Слишком
много шагов
в одном
действии
Потеря
общей
картинки
Балк степы
Pre-conditions:
User is logged in into application.
User created folder in Files menu
Step 1. Open created folder.
Step 2. Click on “Upload file” button.
Step 3. Select file from computer and click on “Select” button.
Expected result: File is uploaded
Бесконечный вызов
Step 1. <<Registration>>
Expected result: <<Successful registration>> @REG_DATA
Step 2. <<Fill user profile>>
Expected result: <<Successful message>>
Step 3. <<Upload user picture>>
Expected result: <<Successful picture upload>>
…
Бесконечный вызов
Ловушки
Слишком
много вызовов
параметров /
тестов
Потеряна
общая
картина
Решение
Вызов только
расшаренных
тестов
Кросс-ревью
Тест кейс от Земли до неба
1. Login as private user
2. Create new transfer to business user
3. Enter…
10. Navigate to History
11. Check balance
12. Navigate to Account list
13. Check balance
…
22. Logout
23. Login as business user
24. Check balance of account, where transfer was sent
…
25. Login as admin user
26. Check ability to cancel created transfer
…
45. Connect to DB
46. Check that correct value is written in DB
Тест кейс от Земли до неба
Ловушки Все в одном
кейсе
Всегда есть
что-то, что
зафейлится
Solutions 1 тест кейс = 1
цель
Использование
тест сьютов вместо
длинных тест ейсов
Тест кейс от Земли до неба
Test suite 1
TC1
1. Login as @user
2. Create new transfer to business user
3. Enter @amount and confirm transfer
Expected result: …
TC2
Pre-conditions: TC1 is executed
1. Navigate to History
2. Check @user balance
Expected result: …
TC3
Pre-conditions: TC1 is executed
1. Navigate to Account list
2. Check balance
Expected result: …
…
Зови меня, как пожелаешь
Step 1. Click on “Table” menu
Expected result: Menu is opened
Step 2. Push “Board” switcher
Expected result: User is navigated to
“Board” window
Step 3. Press on “Table” button
Expected result: “Table” screen is displayed
Зови меня, как пожелаешь
Ловушки
Никакой
стандартизации
терминологии
Неконсистентные
действия юзера
Решение стандарт для
терминологии
Словарик с
действиями
пользователя
Подсказки для дизайна тест кейсов и сьютов
 Использование техник тест дизайна;
 Матрица покрытия;
 1 тест кейс =1 цель;
 Большие тест кейсы разбивать и комбинировать в тест сьюты;
 Использование пре-кондишенов и общих объяснений;
 Использовать параметры, где возможно;
 Использовать чек листы, где возможно;
 Использовать тестовые данные отдельно от тест кейсов;
 Планирование структуры тест сьюта;
 Использование стандартизации;
 Комбинация шагов, имеющих одинаковый ожидаемый результат;
 Кросс-ревью
Выводы
 Планируйте тест сьюты;
 Стройте матрицы покрытия, они работают;
 Находите правильный баланс между
детализацией и параметрами, полетом
фантазии и негативными кейсами, и т.д.;
 Кросс-ревью, взгляд со стороны иногда важнее
техник тест дизайна.
Вопросы?
 LinkedIn: linkedin.com/in/yana-lysa-
4b3b4667
 Email: lysaya.yana@gmail.com

More Related Content

Similar to Яна Лиса, “Ефективні методи написання хороших мануальних тестових сценаріїв”

Excel всё подскажет или "Вот сколько времени понадобится на тестирование" (ма...
Excel всё подскажет или "Вот сколько времени понадобится на тестирование" (ма...Excel всё подскажет или "Вот сколько времени понадобится на тестирование" (ма...
Excel всё подскажет или "Вот сколько времени понадобится на тестирование" (ма...
SQALab
 
Процесс тестирования в условиях неявных требований
Процесс тестирования в условиях неявных требованийПроцесс тестирования в условиях неявных требований
Процесс тестирования в условиях неявных требований
SQALab
 
Что ждет тестировщиков при организации процесса тестирования Enterprise-проду...
Что ждет тестировщиков при организации процесса тестирования Enterprise-проду...Что ждет тестировщиков при организации процесса тестирования Enterprise-проду...
Что ждет тестировщиков при организации процесса тестирования Enterprise-проду...
SQALab
 
Автоматизация сборки и тестирования в разрезе эффективного производства
Автоматизация сборки и тестирования в разрезе эффективного производстваАвтоматизация сборки и тестирования в разрезе эффективного производства
Автоматизация сборки и тестирования в разрезе эффективного производства
SQALab
 
50 оттенков красного
50 оттенков красного50 оттенков красного
50 оттенков красного
Сергей Александрович
 
2015-03-07 03 Сергей Александрович. 50 оттенков красного
2015-03-07 03 Сергей Александрович. 50 оттенков красного2015-03-07 03 Сергей Александрович. 50 оттенков красного
2015-03-07 03 Сергей Александрович. 50 оттенков красного
Омские ИТ-субботники
 
Процесс тестирования в условиях неявных требований
Процесс тестирования в условиях неявных требований Процесс тестирования в условиях неявных требований
Процесс тестирования в условиях неявных требований
COMAQA.BY
 
презентация для сайта free-student.ru
презентация для сайта free-student.ruпрезентация для сайта free-student.ru
презентация для сайта free-student.ru
Evgenii Rumyatsev
 
организация и проведение тестирования
организация и проведение тестированияорганизация и проведение тестирования
организация и проведение тестированияIgor Pozumentov
 
Тестирование для не-тестировщиков
Тестирование для не-тестировщиковТестирование для не-тестировщиков
Тестирование для не-тестировщиков
Julia Nechaeva
 
создание форм Google1
создание форм Google1создание форм Google1
создание форм Google1
Vera2160
 
Путь Product Owner`s. От факапов до успешного продукта
Путь Product Owner`s. От факапов до успешного продуктаПуть Product Owner`s. От факапов до успешного продукта
Путь Product Owner`s. От факапов до успешного продукта
Andrii Mandrika
 
Как сделать наши проекты немного более управляемыми с Agile
Как сделать наши проекты немного более управляемыми с AgileКак сделать наши проекты немного более управляемыми с Agile
Как сделать наши проекты немного более управляемыми с Agile
Alexey Krivitsky
 
CodeFest 2011. Руколь Н. — Творческая мастерская по тестированию ПО
CodeFest 2011. Руколь Н. — Творческая мастерская по тестированию ПОCodeFest 2011. Руколь Н. — Творческая мастерская по тестированию ПО
CodeFest 2011. Руколь Н. — Творческая мастерская по тестированию ПОCodeFest
 
ISTQB Foundation Level: Why, Why Not and How?
ISTQB Foundation Level: Why, Why Not and How?ISTQB Foundation Level: Why, Why Not and How?
ISTQB Foundation Level: Why, Why Not and How?
OdessaQA
 
Денис Бесков. Как обеспечивать полноту требований
Денис Бесков. Как обеспечивать полноту требованийДенис Бесков. Как обеспечивать полноту требований
Денис Бесков. Как обеспечивать полноту требований
Denis Beskov
 
Автотестирование АБС. Конвейер разработки, конвейер данных, конвейер выполнения
Автотестирование АБС. Конвейер разработки, конвейер данных, конвейер выполненияАвтотестирование АБС. Конвейер разработки, конвейер данных, конвейер выполнения
Автотестирование АБС. Конвейер разработки, конвейер данных, конвейер выполнения
SQALab
 
Становление программы внутренних аудитов.
Становление программы внутренних аудитов.Становление программы внутренних аудитов.
Становление программы внутренних аудитов.
Elena Petrova
 
How to estimate time for testing
How to estimate time for testingHow to estimate time for testing
How to estimate time for testingAlexandr Zinovyev
 
Как оценить время на тестирование. Александр Зиновьев, Test Lead Softengi
Как оценить время на тестирование. Александр Зиновьев, Test Lead SoftengiКак оценить время на тестирование. Александр Зиновьев, Test Lead Softengi
Как оценить время на тестирование. Александр Зиновьев, Test Lead Softengi
Softengi
 

Similar to Яна Лиса, “Ефективні методи написання хороших мануальних тестових сценаріїв” (20)

Excel всё подскажет или "Вот сколько времени понадобится на тестирование" (ма...
Excel всё подскажет или "Вот сколько времени понадобится на тестирование" (ма...Excel всё подскажет или "Вот сколько времени понадобится на тестирование" (ма...
Excel всё подскажет или "Вот сколько времени понадобится на тестирование" (ма...
 
Процесс тестирования в условиях неявных требований
Процесс тестирования в условиях неявных требованийПроцесс тестирования в условиях неявных требований
Процесс тестирования в условиях неявных требований
 
Что ждет тестировщиков при организации процесса тестирования Enterprise-проду...
Что ждет тестировщиков при организации процесса тестирования Enterprise-проду...Что ждет тестировщиков при организации процесса тестирования Enterprise-проду...
Что ждет тестировщиков при организации процесса тестирования Enterprise-проду...
 
Автоматизация сборки и тестирования в разрезе эффективного производства
Автоматизация сборки и тестирования в разрезе эффективного производстваАвтоматизация сборки и тестирования в разрезе эффективного производства
Автоматизация сборки и тестирования в разрезе эффективного производства
 
50 оттенков красного
50 оттенков красного50 оттенков красного
50 оттенков красного
 
2015-03-07 03 Сергей Александрович. 50 оттенков красного
2015-03-07 03 Сергей Александрович. 50 оттенков красного2015-03-07 03 Сергей Александрович. 50 оттенков красного
2015-03-07 03 Сергей Александрович. 50 оттенков красного
 
Процесс тестирования в условиях неявных требований
Процесс тестирования в условиях неявных требований Процесс тестирования в условиях неявных требований
Процесс тестирования в условиях неявных требований
 
презентация для сайта free-student.ru
презентация для сайта free-student.ruпрезентация для сайта free-student.ru
презентация для сайта free-student.ru
 
организация и проведение тестирования
организация и проведение тестированияорганизация и проведение тестирования
организация и проведение тестирования
 
Тестирование для не-тестировщиков
Тестирование для не-тестировщиковТестирование для не-тестировщиков
Тестирование для не-тестировщиков
 
создание форм Google1
создание форм Google1создание форм Google1
создание форм Google1
 
Путь Product Owner`s. От факапов до успешного продукта
Путь Product Owner`s. От факапов до успешного продуктаПуть Product Owner`s. От факапов до успешного продукта
Путь Product Owner`s. От факапов до успешного продукта
 
Как сделать наши проекты немного более управляемыми с Agile
Как сделать наши проекты немного более управляемыми с AgileКак сделать наши проекты немного более управляемыми с Agile
Как сделать наши проекты немного более управляемыми с Agile
 
CodeFest 2011. Руколь Н. — Творческая мастерская по тестированию ПО
CodeFest 2011. Руколь Н. — Творческая мастерская по тестированию ПОCodeFest 2011. Руколь Н. — Творческая мастерская по тестированию ПО
CodeFest 2011. Руколь Н. — Творческая мастерская по тестированию ПО
 
ISTQB Foundation Level: Why, Why Not and How?
ISTQB Foundation Level: Why, Why Not and How?ISTQB Foundation Level: Why, Why Not and How?
ISTQB Foundation Level: Why, Why Not and How?
 
Денис Бесков. Как обеспечивать полноту требований
Денис Бесков. Как обеспечивать полноту требованийДенис Бесков. Как обеспечивать полноту требований
Денис Бесков. Как обеспечивать полноту требований
 
Автотестирование АБС. Конвейер разработки, конвейер данных, конвейер выполнения
Автотестирование АБС. Конвейер разработки, конвейер данных, конвейер выполненияАвтотестирование АБС. Конвейер разработки, конвейер данных, конвейер выполнения
Автотестирование АБС. Конвейер разработки, конвейер данных, конвейер выполнения
 
Становление программы внутренних аудитов.
Становление программы внутренних аудитов.Становление программы внутренних аудитов.
Становление программы внутренних аудитов.
 
How to estimate time for testing
How to estimate time for testingHow to estimate time for testing
How to estimate time for testing
 
Как оценить время на тестирование. Александр Зиновьев, Test Lead Softengi
Как оценить время на тестирование. Александр Зиновьев, Test Lead SoftengiКак оценить время на тестирование. Александр Зиновьев, Test Lead Softengi
Как оценить время на тестирование. Александр Зиновьев, Test Lead Softengi
 

More from Sigma Software

Fast is Best. Using .NET MinimalAPIs
Fast is Best. Using .NET MinimalAPIsFast is Best. Using .NET MinimalAPIs
Fast is Best. Using .NET MinimalAPIs
Sigma Software
 
"Are you developing or declining? Don't become an IT-dinosaur"
"Are you developing or declining? Don't become an IT-dinosaur""Are you developing or declining? Don't become an IT-dinosaur"
"Are you developing or declining? Don't become an IT-dinosaur"
Sigma Software
 
Michael Smolin, "Decrypting customer's cultural code"
Michael Smolin, "Decrypting customer's cultural code"Michael Smolin, "Decrypting customer's cultural code"
Michael Smolin, "Decrypting customer's cultural code"
Sigma Software
 
Max Kunytsia, “Why is continuous product discovery better than continuous del...
Max Kunytsia, “Why is continuous product discovery better than continuous del...Max Kunytsia, “Why is continuous product discovery better than continuous del...
Max Kunytsia, “Why is continuous product discovery better than continuous del...
Sigma Software
 
Marcelino Moreno, "Product Management Mindset"
Marcelino Moreno, "Product Management Mindset"Marcelino Moreno, "Product Management Mindset"
Marcelino Moreno, "Product Management Mindset"
Sigma Software
 
Andrii Pastushok, "Product Discovery in Outsourcing - What, When, and How"
Andrii Pastushok, "Product Discovery in Outsourcing - What, When, and How"Andrii Pastushok, "Product Discovery in Outsourcing - What, When, and How"
Andrii Pastushok, "Product Discovery in Outsourcing - What, When, and How"
Sigma Software
 
Elena Turkenych “BA vs PM: Who' the right person, for the right job, with the...
Elena Turkenych “BA vs PM: Who' the right person, for the right job, with the...Elena Turkenych “BA vs PM: Who' the right person, for the right job, with the...
Elena Turkenych “BA vs PM: Who' the right person, for the right job, with the...
Sigma Software
 
Eleonora Budanova “BA+PM+DEV team: how to build the synergy”
Eleonora Budanova “BA+PM+DEV team: how to build the synergy”Eleonora Budanova “BA+PM+DEV team: how to build the synergy”
Eleonora Budanova “BA+PM+DEV team: how to build the synergy”
Sigma Software
 
Stoyan Atanasov “How crucial is the BA role in an IT Project"
Stoyan Atanasov “How crucial is the BA role in an IT Project"Stoyan Atanasov “How crucial is the BA role in an IT Project"
Stoyan Atanasov “How crucial is the BA role in an IT Project"
Sigma Software
 
Olexandra Kovalyova, "Equivalence Partitioning, Boundary Values ​​Analysis, C...
Olexandra Kovalyova, "Equivalence Partitioning, Boundary Values ​​Analysis, C...Olexandra Kovalyova, "Equivalence Partitioning, Boundary Values ​​Analysis, C...
Olexandra Kovalyova, "Equivalence Partitioning, Boundary Values ​​Analysis, C...
Sigma Software
 
Yana Lysa — "Decision Tables, State-Transition testing, Pairwase Testing"
Yana Lysa — "Decision Tables, State-Transition testing, Pairwase Testing"Yana Lysa — "Decision Tables, State-Transition testing, Pairwase Testing"
Yana Lysa — "Decision Tables, State-Transition testing, Pairwase Testing"
Sigma Software
 
VOLVO x HACK SPRINT
VOLVO x HACK SPRINTVOLVO x HACK SPRINT
VOLVO x HACK SPRINT
Sigma Software
 
Business digitalization trends and challenges
Business digitalization trends and challengesBusiness digitalization trends and challenges
Business digitalization trends and challenges
Sigma Software
 
Дмитро Терещенко, "How to secure your application with Secure SDLC"
Дмитро Терещенко, "How to secure your application with Secure SDLC"Дмитро Терещенко, "How to secure your application with Secure SDLC"
Дмитро Терещенко, "How to secure your application with Secure SDLC"Sigma Software
 
Тетяна Осетрова, “Модель зрілості розподіленної проектної команди”
Тетяна Осетрова, “Модель зрілості розподіленної проектної команди”Тетяна Осетрова, “Модель зрілості розподіленної проектної команди”
Тетяна Осетрова, “Модель зрілості розподіленної проектної команди”
Sigma Software
 
Training solutions and content creation
Training solutions and content creationTraining solutions and content creation
Training solutions and content creation
Sigma Software
 
False news - false truth: tips & tricks how to avoid them
False news - false truth: tips & tricks how to avoid themFalse news - false truth: tips & tricks how to avoid them
False news - false truth: tips & tricks how to avoid them
Sigma Software
 
Анна Бойко, "Хороший контракт vs очікування клієнтів. Що вбереже вас, якщо вд...
Анна Бойко, "Хороший контракт vs очікування клієнтів. Що вбереже вас, якщо вд...Анна Бойко, "Хороший контракт vs очікування клієнтів. Що вбереже вас, якщо вд...
Анна Бойко, "Хороший контракт vs очікування клієнтів. Що вбереже вас, якщо вд...
Sigma Software
 
Дмитрий Лапшин, "The importance of TEX and Internal Quality. How explain and ...
Дмитрий Лапшин, "The importance of TEX and Internal Quality. How explain and ...Дмитрий Лапшин, "The importance of TEX and Internal Quality. How explain and ...
Дмитрий Лапшин, "The importance of TEX and Internal Quality. How explain and ...
Sigma Software
 
Юрій Артюх, "Історія однієї анімації"
Юрій Артюх, "Історія однієї анімації"Юрій Артюх, "Історія однієї анімації"
Юрій Артюх, "Історія однієї анімації"
Sigma Software
 

More from Sigma Software (20)

Fast is Best. Using .NET MinimalAPIs
Fast is Best. Using .NET MinimalAPIsFast is Best. Using .NET MinimalAPIs
Fast is Best. Using .NET MinimalAPIs
 
"Are you developing or declining? Don't become an IT-dinosaur"
"Are you developing or declining? Don't become an IT-dinosaur""Are you developing or declining? Don't become an IT-dinosaur"
"Are you developing or declining? Don't become an IT-dinosaur"
 
Michael Smolin, "Decrypting customer's cultural code"
Michael Smolin, "Decrypting customer's cultural code"Michael Smolin, "Decrypting customer's cultural code"
Michael Smolin, "Decrypting customer's cultural code"
 
Max Kunytsia, “Why is continuous product discovery better than continuous del...
Max Kunytsia, “Why is continuous product discovery better than continuous del...Max Kunytsia, “Why is continuous product discovery better than continuous del...
Max Kunytsia, “Why is continuous product discovery better than continuous del...
 
Marcelino Moreno, "Product Management Mindset"
Marcelino Moreno, "Product Management Mindset"Marcelino Moreno, "Product Management Mindset"
Marcelino Moreno, "Product Management Mindset"
 
Andrii Pastushok, "Product Discovery in Outsourcing - What, When, and How"
Andrii Pastushok, "Product Discovery in Outsourcing - What, When, and How"Andrii Pastushok, "Product Discovery in Outsourcing - What, When, and How"
Andrii Pastushok, "Product Discovery in Outsourcing - What, When, and How"
 
Elena Turkenych “BA vs PM: Who' the right person, for the right job, with the...
Elena Turkenych “BA vs PM: Who' the right person, for the right job, with the...Elena Turkenych “BA vs PM: Who' the right person, for the right job, with the...
Elena Turkenych “BA vs PM: Who' the right person, for the right job, with the...
 
Eleonora Budanova “BA+PM+DEV team: how to build the synergy”
Eleonora Budanova “BA+PM+DEV team: how to build the synergy”Eleonora Budanova “BA+PM+DEV team: how to build the synergy”
Eleonora Budanova “BA+PM+DEV team: how to build the synergy”
 
Stoyan Atanasov “How crucial is the BA role in an IT Project"
Stoyan Atanasov “How crucial is the BA role in an IT Project"Stoyan Atanasov “How crucial is the BA role in an IT Project"
Stoyan Atanasov “How crucial is the BA role in an IT Project"
 
Olexandra Kovalyova, "Equivalence Partitioning, Boundary Values ​​Analysis, C...
Olexandra Kovalyova, "Equivalence Partitioning, Boundary Values ​​Analysis, C...Olexandra Kovalyova, "Equivalence Partitioning, Boundary Values ​​Analysis, C...
Olexandra Kovalyova, "Equivalence Partitioning, Boundary Values ​​Analysis, C...
 
Yana Lysa — "Decision Tables, State-Transition testing, Pairwase Testing"
Yana Lysa — "Decision Tables, State-Transition testing, Pairwase Testing"Yana Lysa — "Decision Tables, State-Transition testing, Pairwase Testing"
Yana Lysa — "Decision Tables, State-Transition testing, Pairwase Testing"
 
VOLVO x HACK SPRINT
VOLVO x HACK SPRINTVOLVO x HACK SPRINT
VOLVO x HACK SPRINT
 
Business digitalization trends and challenges
Business digitalization trends and challengesBusiness digitalization trends and challenges
Business digitalization trends and challenges
 
Дмитро Терещенко, "How to secure your application with Secure SDLC"
Дмитро Терещенко, "How to secure your application with Secure SDLC"Дмитро Терещенко, "How to secure your application with Secure SDLC"
Дмитро Терещенко, "How to secure your application with Secure SDLC"
 
Тетяна Осетрова, “Модель зрілості розподіленної проектної команди”
Тетяна Осетрова, “Модель зрілості розподіленної проектної команди”Тетяна Осетрова, “Модель зрілості розподіленної проектної команди”
Тетяна Осетрова, “Модель зрілості розподіленної проектної команди”
 
Training solutions and content creation
Training solutions and content creationTraining solutions and content creation
Training solutions and content creation
 
False news - false truth: tips & tricks how to avoid them
False news - false truth: tips & tricks how to avoid themFalse news - false truth: tips & tricks how to avoid them
False news - false truth: tips & tricks how to avoid them
 
Анна Бойко, "Хороший контракт vs очікування клієнтів. Що вбереже вас, якщо вд...
Анна Бойко, "Хороший контракт vs очікування клієнтів. Що вбереже вас, якщо вд...Анна Бойко, "Хороший контракт vs очікування клієнтів. Що вбереже вас, якщо вд...
Анна Бойко, "Хороший контракт vs очікування клієнтів. Що вбереже вас, якщо вд...
 
Дмитрий Лапшин, "The importance of TEX and Internal Quality. How explain and ...
Дмитрий Лапшин, "The importance of TEX and Internal Quality. How explain and ...Дмитрий Лапшин, "The importance of TEX and Internal Quality. How explain and ...
Дмитрий Лапшин, "The importance of TEX and Internal Quality. How explain and ...
 
Юрій Артюх, "Історія однієї анімації"
Юрій Артюх, "Історія однієї анімації"Юрій Артюх, "Історія однієї анімації"
Юрій Артюх, "Історія однієї анімації"
 

Яна Лиса, “Ефективні методи написання хороших мануальних тестових сценаріїв”

  • 1.
  • 2. Про меня Опыт в тестировании более 8 лет Опыт в управлении командами около 5 лет ISTQB сертифицированный Test Manager и Test Analyst Текущая позиция: Senior Test Engineer / Test Lead в Sigma Software lysaya.yana@gmail.com
  • 3. Агенда 1. Как тест кейсы могут становиться плохими 2. Возможные причины плохих тест кейсов и сьютов 3. Ловушки, с которыми QA могут столкнуться при создании тест кейсов или построении тест сьютов 4. Подсказки и выводы
  • 4. Характеристики плохого тест кейса Непонятные, неоднозначные Дубликаты Лишняя работа Неповторяемость Плохая поддерживаемость Какое-то плохое ощущение
  • 5. Причины возникновения плохих тест кейсов Некомпетентность Небрежность Предположения ЛовушкиНестабильность Нехватка времени Неопытность
  • 6. Ловушки при построении тест кейсов и тестовых сценариев
  • 7. Привет, бро Test case 46: Check received email … Step 6. Send email Step 7. Check, that user received email … Test case 64: Check ability to send email
  • 8. Привет, бро Ловушки Уже протестировано или покрыто Дубликаты Решение Матрица покрытия Планирование тестов Взаимодействие с командой
  • 9. Вершки и корешки Create new PayPal transfer Create new Check withdrawal transfer Create new business transfer Check transfer history for business user Check transfer history for private user …
  • 11. Трейни-ориентированные тесты Open application Expected result… Enter test@test.com in Email field Expected result… Enter “test” in Password field Expected result… Click on “Login” button Expected result… Open Products page Expected result…
  • 13. Трейни-ориентированные тесты Pre-conditions: User is logged in in application with next credentials: test@test.com /test Steps: Open Products page
  • 14. Save patient’s age field with empty value; Expected result: not possible Save patient’s age field with alphabetic characters Expected result: not possible Save patient’s age field with special characters Expected result: not possible Save patient’s age field with ‘NULL’ Expected result: not possible Save patient’s age field with ‘999999999999999’ Expected result: not possible Save patient’s age field with negative value Expected result: not possible
  • 15. Слишком много негатива Ловушки Копи-паст большинства тестов Один ожидаемый результат для многих тестов Решение Комбинирование Использование параметров Чеклисты
  • 16. Save patient’s age field with @age_value @age_value:  empty;  alphabetic characters;  special characters;  ‘NULL’;  ‘999999999999999’;  negative value. Expected result: not possible
  • 17. Шаги, шаги, шаги… Step 1. Login as application user  Expected result… Step 2. Start creation of task  Expected result… Step 3. Enter task name  Expected result… Step 4. Enter Due date  Expected result… Step 5. Enter task description  Expected result… … Step 26. Select task watchers  Expected result…
  • 18. Шаги, шаги, шаги… Отделение шага для каждого действия Комбинация шагов без эффекта на систему
  • 19. Шаги, шаги, шаги… Step 1. Login as application user Step 2. Start creation of task Step 3. Fill in next fields:  task name;  due date;  task description;  …  task watchers; Step 4. Click on “Create” button Expected result…
  • 20. Балк степы Step 1. Open application. Login with correct credentials as application user. Navigate to Files menu. Click on “Create new folder” button and create new folder Expected result: Folder with name specified is created Step 2. Open created folder. Click on “Upload file” button. Select file from computer. Click on “Select” button.
  • 21. Балк степы Комбинирование Слишком много шагов в одном действии Потеря общей картинки
  • 22. Балк степы Pre-conditions: User is logged in into application. User created folder in Files menu Step 1. Open created folder. Step 2. Click on “Upload file” button. Step 3. Select file from computer and click on “Select” button. Expected result: File is uploaded
  • 23. Бесконечный вызов Step 1. <<Registration>> Expected result: <<Successful registration>> @REG_DATA Step 2. <<Fill user profile>> Expected result: <<Successful message>> Step 3. <<Upload user picture>> Expected result: <<Successful picture upload>> …
  • 24. Бесконечный вызов Ловушки Слишком много вызовов параметров / тестов Потеряна общая картина Решение Вызов только расшаренных тестов Кросс-ревью
  • 25. Тест кейс от Земли до неба 1. Login as private user 2. Create new transfer to business user 3. Enter… 10. Navigate to History 11. Check balance 12. Navigate to Account list 13. Check balance … 22. Logout 23. Login as business user 24. Check balance of account, where transfer was sent … 25. Login as admin user 26. Check ability to cancel created transfer … 45. Connect to DB 46. Check that correct value is written in DB
  • 26. Тест кейс от Земли до неба Ловушки Все в одном кейсе Всегда есть что-то, что зафейлится Solutions 1 тест кейс = 1 цель Использование тест сьютов вместо длинных тест ейсов
  • 27. Тест кейс от Земли до неба Test suite 1 TC1 1. Login as @user 2. Create new transfer to business user 3. Enter @amount and confirm transfer Expected result: … TC2 Pre-conditions: TC1 is executed 1. Navigate to History 2. Check @user balance Expected result: … TC3 Pre-conditions: TC1 is executed 1. Navigate to Account list 2. Check balance Expected result: … …
  • 28. Зови меня, как пожелаешь Step 1. Click on “Table” menu Expected result: Menu is opened Step 2. Push “Board” switcher Expected result: User is navigated to “Board” window Step 3. Press on “Table” button Expected result: “Table” screen is displayed
  • 29. Зови меня, как пожелаешь Ловушки Никакой стандартизации терминологии Неконсистентные действия юзера Решение стандарт для терминологии Словарик с действиями пользователя
  • 30. Подсказки для дизайна тест кейсов и сьютов  Использование техник тест дизайна;  Матрица покрытия;  1 тест кейс =1 цель;  Большие тест кейсы разбивать и комбинировать в тест сьюты;  Использование пре-кондишенов и общих объяснений;  Использовать параметры, где возможно;  Использовать чек листы, где возможно;  Использовать тестовые данные отдельно от тест кейсов;  Планирование структуры тест сьюта;  Использование стандартизации;  Комбинация шагов, имеющих одинаковый ожидаемый результат;  Кросс-ревью
  • 31. Выводы  Планируйте тест сьюты;  Стройте матрицы покрытия, они работают;  Находите правильный баланс между детализацией и параметрами, полетом фантазии и негативными кейсами, и т.д.;  Кросс-ревью, взгляд со стороны иногда важнее техник тест дизайна.