Документ представляет опыт Владимира Никонова, руководителя департамента разработки Terrasoft, в области тестирования качества программного обеспечения с использованием разнообразных технологий и подходов. Он освещает задачи системы QA, оптимизацию процессов разработки и автоматизацию тестирования, включая e2e тестирование и мобильное тестирование. Также обсуждаются достижения команды в ускорении релизов и увеличении их количества.

1. Владимир
Никонов
руководитель департамента
разработки в Terrasoft, эксперт
в области проектирования
приложений с опытом
работы более 10 лет
С П И К Е Р

2. Код Шредингера или как
и зачем мы тестируем
продукт
QA CONFERENCE #1 IN UKRAINE
KYIV 2019

3. ОБЕСПЕЧЕНИЕ
КАЧЕСТВА ГОТОВОГО
ПРОДУКТА
Задачи системы QA
ОПТИМИЗАЦИЯ
ПРОЦЕССА РАЗРАБОТКИ
УЛУЧШЕНИЕ
СЕРВИСА

4. РАЗРАБОТКА

5. Команда

6. Компания

7. Клиен (Web-браузер,
мобильное приложение) Web-сервис (IIS)
Web-сервисы
глобальный
поиск
рассылка
трекинг событий
сайта
Обогащения
данных
Сервер БД
MS SQL, Oracle)
Сервер SVN (опционально) Сервер Redis
Продукт

8. Технологии разработки
 Angular
 AKKA.NET
 ExtJs
 Docker/K8S
 MSSQL/ORACLE/PostgreSQL
 Redis
 .net (Freamework/Core)
Languages
 Javascript
 Typescript
 T-SQL/PL-SQL
 С#

9. Системы тестирования
API/e2e
 Cucumber
 Protractor
 Cypress.io
 ChakramJS
Languages
 Javascript
 Typescript
 SQL
 Powershell/bash
Backend performance
Frontend performance

10. Масштаб системы
20
25
3
21000+
5800+
Scrum-команд
Продукт
СУБД (MSSQL, Oracle, PostgreSQL)
е2е тестов
Тестов проходят каждую
ночь на 6 сборках

11. Е2Е
ТЕСТИРОВАНИЕ

12. Структура e2e

13. ATDD (BDD) подход

14. Тестирование UI
 Resemble JS – работает по принципу наложение уже готовых картинок друг на друга
и отображает места которые не совпадают + % разницы
 Реализовано в виде шагов на Cucumber JS

15. Мобильное тестирование
 Платформы:
• Android
• iOS
 Выполнение тестов:
• эмулятор
• реальные девайсы

16. Тестирование обновленных
сайтов клиентов на Cypress

17. Team Diagnostics (Selenoid)
14
120 - 565
8
30 минут
Командных диагностик
Тестов на каждой диагностике
Потоков
Среднее время прохождения

18. На что обратить внимание
Автоматизация
Стабильность
и достоверность
Автономность Скорость
Окружение Задачи

19. Нагрузочное тестирование

20. Web-сервис (IIS)
Web-сервисы
глобальный
поиск
рассылка трекингсобытийсайта обогащенияданных
Сервер БД MS SQL, Oracle)
Сервер SVN (опционально) Сервер Redis
Структура тестирования

21. Инструменты

22. Визуализация результатов

23. МОДЕЛЬ ПРОФИЛЬ
НАГРУЗКИ
ПОДГОТОВКА
Сложности и вызовы
ИНТЕПРИТАЦИЯ

24. Интерфейс

25. Архитектура
Browser
HAR Storage
Jmeter
Selenium Script
AUT: Application Uner Test
AUT
BrowserMob
Load Simulation
Using Jmeter

28. РЕГУЛЯРНОСТЬ ПРОВЕДЕНИЯ
ВОСПРОИЗВОДИМОСТЬ РЕЗУЛЬТАТОВ
ПОНЯТНЫЙ ФОРМАТ РЕЗУЛЬТАТОВ
Рекомендации

29. ПРОЦЕССЫ

30. Жизненный цикл задачи
В планах В работе Dev тест Ревью Тест DoD Готово
QA участвует на всех этапах работы
над задачей

31. Жизненный цикл релиза
Автоматизированные
тесты
Нефункциональное
тестирование
(RTL/DEMO etc)
Выделение ветки
Регрессионное
тестирование
Релиз

32. Визуальный менеджмент

33. Выводы
Скорость
обратной связи
Простота
использования
Процессы
взаимодействия
Квалификация
команды

34. КОЛЛИЧЕСТВО
РЕЛИЗОВ УВЕЛИЧЕНА
В 8 РАЗ
Результаты
ПРОЦЕССА РЕЛИЗА
УСКОРЕН В 4 РАЗА
КОМАНДА РАЗРАБОТКИ
УВЕЛИЧЕНА В 3 РАЗА

35. Вопросы