Контрактное
тестирование на
примерах
или Contract First
23 сентября, 2017

Никита Галкин
Верю, что:
▰ Любая проблема должна решаться
на нужно уровне
▰ Сложности не в технологиях,
сложности в людях
▰ Проблемы надо обсуждать,
идеи – продавать,
а решения – демонстрировать
2

3
Что такое проверка
качества?

4
Проверка
соответствия
требованиям

Что такое качество?
5
Атрибуты:
▰ переносимость;
▰ функциональность;
▰ эффективность;
▰ удобство использования
(юзабилити);
▰ тестируемость;
▰ понятность;
▰ модифицируемость.

Об ожиданиях
6

7
Проверка
соответствия
требованиям
ОЖИДАНИЯМ

Основные идеи
8
▰ Задача QA Engineer проверять ожидания
▰ Людям необходимо помогать договариваться
▰ Требования это синхронизированные ожидания
▰ Бизнес платит за реализацию своих ожиданий,
за реализованную функциональность

9
Виды тестов

Виды тестов
10
▰ Linting – между разработчиками, что код понятен
▰ Unit – между разработчиками, что код не сломают
▰ Functional e2e – между бизнесом и разработчиками,
что ПО работает как ожидается
▰ Performance – между бизнесом и разработчиками,
что ПО обеспечение эффективно

11
Personal story

Типичная ситуация
12
Мобильное приложение
Новая фича не работает
А может даже регрессия перестала работать
Вопрос на кого отправлять баг? Mobile/Backend/Content?

Slack bot
13
Венгры

14
Contract first

Что есть контракт
15
▰ Между разработчиками из разных команд
▰ Человеко и машино читаемый
▰ Используется для тестирования и разработки,
иначе устареет
▰ Является единственным источником правды о
договорености
▰ Контракт это не документация, а скорее спецификация

16
Контракт
для REST API

О чем надо договориться для использования REST
17
▰ Endpoints – где лежат сущности
▰ Methods – действия с сущностями
▰ Headers – метаданные
▰ Status Codes – варианты ответов
▰ Body shemas – форматы ответов и запросов

Текущие форматы
18
▰ raml
▰ swagger
▰ WADL
▰ API BluePrint
▰ И прочие

19
Контракт надо
читать и писать,
поэтому YAML!

Endpoints and methods
20
/pet:
post:
put:
/pet/{petId}:
get:
post:
delete:

Responses
21
/pet:
post:
responses:
201:
description: Created
405:
description: Invalid input

22
Что вам даст
наличие контракта

Использование контракта для тестирования
23
▰ Одинаковые ожидания у всех членов команды
▰ Автогенерируемая документация
▰ Возможность загрузить сразу в Postman
▰ Создание mock для вашего REST API
▰ Автовалидация входных данных
▰ Упрощения тестирование для Backend
▰ И прочее...

24
Использование
контракта для
тестирования

Использование контракта для тестирования
25
▰ Тест кейс – endpoint + method + response
▰ Что проверяем:
▻ Код ответа
▻ Заголовки
▻ Формат body

Использование контракта для тестирования
26
▰ Arrange – Подготовить данные для запроса
▰ Act – Выполнить запрос
▰ Assert – Проверить соответствие
▻ Код ответа
▻ Заголовки
▻ Формат body
▰ PostAct – Убрать за собой

27
Изменение
контракта не повод
переписывать тесты!

Использование контракта для тестирования
28
▰ Arrange – Подготовить данные для запроса
▰ Act – Выполнить запрос
▰ Assert – Проверить соответствие
▻ Код ответа
▻ Заголовки
▻ Формат body
▰ PostAct – Убрать за собой

29
Хватить
дублировать!
Используем парсинг
и хуки

Использование контракта для тестирования
30
▰ Arrange – Подготовить данные для запроса
▰ Act – Выполнить запрос
▰ Assert – Проверить соответствие
▻ Код ответа
▻ Заголовки
▻ Формат body
▰ PostAct – Убрать за собой

Использование контракта для тестирования
31
▰ Arrange – Подготовить данные для запроса – Before
▰ Act – Выполнить запрос – на основании контракта
▰ Assert – Проверить соответствие – на основании контракта
▰ PostAct – Убрать за собой – After

32
Dredd для Swagger

Dredd
33
▰ Поддерживаемые спецификации:
▻ Swagger
▻ Api BluePrint
▻ Что вы допилите в этот OpenSource проект
▰ Хуки на GO, PHP, Python, JavaScript
▰ Написан на Node.js

34
Abao для RAML 0.8

Abao
35
▰ Поддерживаемые спецификации:
▻ Raml 0.8
▰ Хуки на JavaScript и CoffeeScript
▰ Написан на CoffeeScript

36
СПАСИБО!
УПРАВЛЯЙТЕ ОЖИДАНИЯМИ,
ДОГОВАРИВАЙТЕСЬ И
АВТОМАТИЗИРУЙТЕ!
Вы можете найти меня на твиттере @galk_in
Слайды доступны speakerdeck.com/galkin
Или на моем сайте galk.in