В данном докладе мы поговорим об особенностях и задачах которые стоят перед автоматизаторами больших тяжелых систем. Поговорим о решениях, которые мы разработали для автоматизации сложных интеграционных решений. Обсудим на какие компромиссы приходится идти и почему. Я покажу, как DevOps и автоматизация вместе позволяют строить системы автоматического тестирования.

1. Опыт автоматизации интеграционного тестирования и
внедрения DevOps в банковском процессинге
Алексей Якимович

2. Теория систем для АТ
Система Автоматического Тестирования
Система
автотестирова
ния
Тестируемая
система
Система
управления
проектом
Система
обучения
Система
сборки DevOps
Система
упрвления
требованиями
Система
документиров
ания
Система
управления
тестированием
Тестирование
( # дефектов в проме)

3. Главное нефункциональное
требование к системе АТ
Повышение Эффективности
Тестирования
(принцип ПЭТ Якимовича)

4. Декомпозиция ПЭТ
Повышение Эффективности Тестирования
 Исполнения Тестов
 Создания Тестов
 Модификации Тестов
 Изменения Тестов
 Анализа результатов
 Конфигурирования Тестов
 Обучение
 Подготовка системы тестирования
 Подготовка тестируемой системы
 Настройка DevOps процедур
и т.п.
Max VПОЛЕЗНОЙ РАБОТЫ
Min ТВРЕМЕНИ

5. Tradeoffs – искусство инженера
Макс
функциональность
фреймворка
Макс обучаемость
Макс полнота
анализа результатов
Макс скорость
выполнения тестов
Макс возможность
конфигурирования
теста
Макс скорость
создания тестов
Макс количество
версий тестов
Макс скорость
поддержки тестов

6. Добавим еще сложности!
Resource
Driven
Architecture

7. Как пишем тесты?
Максимальное
Конфигурирование
Максимальная
Обучаемость
ЯП:
Java,
.Net
Libs:
TestNg,
Selenium,
Rest-Assured
Keyword
Driven
Fremework
BDD Selenide

8. Как анализируем результаты?
Тест Анализ Тест Анализ
Тест
Анализ
Тест
Анализ
DevOps:
Сбор
результатов
Максимальная
Полнота анализа
Максимальная
Скорость тестирования

9. Как конфигурируем тесты?
Test Test Test
Сьют
Test Test Test
Сьют
Сьют Сьютов
Test Test Test
Сьют
Test Test Test
Сьют
Сьют Сьютов
Bamboo Config
Максимальная
Конфигурируемость
Максимальная
Поддерживаемость,
Обучаемость

10. Что делаем с данными?
Данные1 Тест1 Данные2 Тест2
Данные Тест1 Тест2 Тест3
Максимальная
Атомарность тестов
Поддерживаемость
Обучаемость
Максимальная
Скорость выполнения
тестов

11. Как версионируем тесты?
Build Plan1 – Prepare
ZIP
Deployment on
region
Build Plan2
(Test result load)
Start
Deploy Zip archive
to region
Start process of
getting results to
Bamboo
Load stored in
Work folder test
results to Build
Plan2 artifacts
Create build
artifact Zip archive
TTT Artifacts in zip:
- PI scripts,
- TTT autotests
- Talend jobs
- RDF
Store Zip in
Artifactory (GIT)
Start
Execute TTT tests
Zip store
Specify Region to
Deploy
Specify Zip archive
to use
Start
Максимальная
Поддерживаемость
Обучаемость
Максимальная
Версионная
конфигурируемость

12. Как тестируем отчеты?
Максимальная
Формализация
описания деталей
Максимальная
Скорость написания
Поддержка тестов
Скрость обучения

13. Как проверяем готовность
стенда к тестированию?
4: JMS
System1
Stub
System 3
Processing
DB
Gate 8: JDBC
AutoTestsBamboo
System 2
5: JMS:
3: JMS
0:Batch Execution
System 1
6: SSH: Tibco Log Download
7: SSH: Gate Log download
1: JMS: SOAP
2: HTTP: SOAP
System 4
EMS Tibco
BIN tbl
Http
adapter
logic
jdbc
JMS
adapter
JMS
adapter
JMS
adapter
Logs
10: JDBC scripts execution for contract creation
11: HTTP Gate Debug interface
Logs
HTTP
Debug
Interface

14. Вопросы
ayakimovich@gmail.com
Skype:aliaksei.yakimovich