Hire the top 3% of freelance talent www.toptal.com
Кто должен писать
автоматические
тесты?
Игорь Хрол, Минск
www.toptal.comHire the top 3% of freelance talent

Hire the top 3% of freelance talent www.toptal.com
Кто перед вами?
● Игорь Хрол
● Team Lead / QA Engineer в отделе
аналитики Toptal
● >10 лет в отрасли
● Инженер, тимлид, менеджер,
архитектор, тренер, консультант
● Python, Scala, Ruby, Java, SQL и другое
● www.khroliz.com
2

Hire the top 3% of freelance talent www.toptal.com3

Hire the top 3% of freelance talent www.toptal.com
О чём говорим?
● Подходы по организации автотестов
● Постараюсь описать как плюсы, так и минусы
4

Hire the top 3% of freelance talent www.toptal.com
Классическая картина
мира
www.toptal.comHire the top 3% of freelance talent

Hire the top 3% of freelance talent www.toptal.com
Автотесты
Автоматизаторы
Тест кейсы
Разработка автотестов
Ручные
тестировщики
6

Hire the top 3% of freelance talent www.toptal.com
Использование
Билд на
тестирование
Тест кейсы
Ручные
тестировщики
Автотесты
Автоматизаторы
Ручные
тестировщики
7

Hire the top 3% of freelance talent www.toptal.com
Доработка
автотестов
Автоматизаторы
Поддержка
Красный
автотест
Дефект
Разработчики
Ручные
тестировщики
8

Hire the top 3% of freelance talent www.toptal.com
http://www.yatester.ru/2017/08/blog-post.html
9

Hire the top 3% of freelance talent www.toptal.com
Что хорошего?
10
● Красивые и сложные процессы
○ Менеджеры повышают ЧСВ

Hire the top 3% of freelance talent www.toptal.com
● Красивые и сложные процессы
○ Менеджеры повышают ЧСВ
Что хорошего?
11
● Узкая специализация
○ Можно сделать работу менее квалифицированными людьми

Hire the top 3% of freelance talent www.toptal.com
Что плохого?
● Высокая формализация при передаче информации
12
● Неочевидное использование автотестов
● Разработка мало вовлечена

Hire the top 3% of freelance talent www.toptal.com
Где можно применять?
Для outsourcing’a
отдельных кусков
разработки
13
В классическом
enterprise

Hire the top 3% of freelance talent www.toptal.com
От каждого по
возможностям, каждому -
по фреймворку
www.toptal.comHire the top 3% of freelance talent

Hire the top 3% of freelance talent www.toptal.com
Фрейворк
Разработка автотестов
“Ручные”
тестировщики
Автоматизаторы
Автотесты
15

Hire the top 3% of freelance talent www.toptal.com
Использование
Автотесты
16
Билд на
тестирование
“Ручные”
тестировщики
Ручные тесты

Hire the top 3% of freelance talent www.toptal.com
Что хорошего?
● Можно сразу писать автотесты
17
● Меньше документации
● Нужно меньше автоматизаторов

Hire the top 3% of freelance talent www.toptal.com
Что плохого?
Требуется более высокая квалификация тестировщиков
18

Hire the top 3% of freelance talent www.toptal.com
Где можно применять?
“Продвинутый” enterprise
19
Для outsourcing’a
тестирования целиком

Hire the top 3% of freelance talent www.toptal.com
Универсальный солдат
www.toptal.comHire the top 3% of freelance talent

Hire the top 3% of freelance talent www.toptal.com
Ручные тесты
QA инженер
21
Автотесты

Hire the top 3% of freelance talent www.toptal.com
Что хорошего?
Проще в управлении
Меньше потерь на передачу
информации

Hire the top 3% of freelance talent www.toptal.com
Что плохого?
Результат часто неудовлетворительный,
когда “ручному тестировщику” добавляют
разработку автотестов

Hire the top 3% of freelance talent www.toptal.com
Где можно применять?
В небольших командах, где нет
смысла разводить большое
количество ролей
Если у вас есть правильный
“тестировщик”

Hire the top 3% of freelance talent www.toptal.com
Нигилизм
www.toptal.comHire the top 3% of freelance talent

Hire the top 3% of freelance talent www.toptal.com
Кто пишет автоматические тесты?
Никто

Hire the top 3% of freelance talent www.toptal.com
Схема разработки I
Ручные тест
кейсы
Ручные тест
кейсы
Ручные тест
кейсы
Билд на
тестирование
Ручные
тестировщики

Hire the top 3% of freelance talent www.toptal.com
Схема разработки II
28

Hire the top 3% of freelance talent www.toptal.com
Что хорошего?
Быстро и дешево
29

Hire the top 3% of freelance talent www.toptal.com
Что плохого?
Быстро и дёшево только в начале
30

Hire the top 3% of freelance talent www.toptal.com
Где можно применять?
● Разработка прототипов
● Короткие проекты
● Заказчик, которого вы видите в
первый и последний раз
31

Hire the top 3% of freelance talent www.toptal.com
Модульные тесты
www.toptal.comHire the top 3% of freelance talent

Hire the top 3% of freelance talent www.toptal.com
Кто пишет и поддерживает?
● Если пишутся, то разработчиками
● Плотно связаны с кодом
● QA обычно туда не допускается
● Часто дублируют проверки более высокоуровневых тестов

Hire the top 3% of freelance talent www.toptal.com
Вспомним про
“пирамиду”
https://www.youtube.com/watch?v=JYY_52DTJqs Heisenbug’2016
https://www.youtube.com/watch?v=ZC_GH4AANqc QA Fest’2015

Hire the top 3% of freelance talent www.toptal.com
Тесты пишут разработчики
www.toptal.comHire the top 3% of freelance talent

Hire the top 3% of freelance talent www.toptal.com
Кто пишет и поддерживает?
● Разрабатывается вместе с кодом
○ можно до кода (TDD, BDD, ATDD)
○ можно после
○ можно параллельно

Hire the top 3% of freelance talent www.toptal.com
Что хорошего?
● Можно делать выбор между разными типами автотестов
(приёмочные, API, модульные) для поддержания баланса
“пирамиды”
● Кардинально меняется эффективность от автотестов
● Тестируемость приложения закладывается в процессе
37

Hire the top 3% of freelance talent www.toptal.com
Что плохого?
● Требуются ответственные разработчики
● Разработчики должны уметь тестировать
● Непонятная роль QA на проекте
38

Hire the top 3% of freelance talent www.toptal.com
Где можно применять?
● Амбициозные стартапы
● Передовые компании
39

Hire the top 3% of freelance talent www.toptal.com
Подводя итоги...
www.toptal.comHire the top 3% of freelance talent

Hire the top 3% of freelance talent www.toptal.com
Для успешных автотестов требуются
1. Продуманные тестовые сценарии
2. Качественный фреймворк и инструментарий
3. Подготовленное приложение
4. Максимальное использование низкоуровневых проверок

Hire the top 3% of freelance talent www.toptal.com
От исполнителя требуется
1. Знать то, как тестировать, чтобы не автоматизировать ненужное
(быть “тестировщиком”)
2. Владеть фреймворками и инструментами (быть “автоматизатором”)
3. Понимать архитектуру приложения, чтобы тестировать в нужных
местах
4. Знать код приложения, чтобы писать модульные тесты (быть
“разработчиком”)

Hire the top 3% of freelance talent www.toptal.com
Можно раскладывать разные
функции по конвейеру

Hire the top 3% of freelance talent www.toptal.com
Или повышать квалификацию и
развиваться в разные стороны

Hire the top 3% of freelance talent www.toptal.com
Спасибо!
Вопросы?
www.toptal.comHire the top 3% of freelance talent
Игорь Хрол
igor.khrol@toptal.com
khroliz@gmail.com
skype: igor.khrol