1. Про автотесты, фреймворки и
железки
Андрей Баюн

2. SDK: Состав
Исходники
Бинари
Документация
Контент
Инструментарий

3. SDK: Внешний вид

4. SDK: Рост со временем
Windows 1 3 6 12
Linux 1 3 6
Mac OS X 1 3 6
Android 1 3
iOS 1 3
Всего SDK 5 15 24 30
Время

5. Надо проверять
• Установку и удаление
• Состав каждого комплекта
• Сборку исходников
• Ошибки при запуске
• Функционал инструментария
• Качество картинки

6. Требования к системе
• Кроссплатформенность
• Легкое наращивание тестовых окружений и тестов
• Планировщик

7. Готовые решения
• HP LoadRunner, QuickTest Professional, HP Quality
Center
• IBM Rational
• SmartBear TestComplete
• Не подходят

8. Встречайте, UNITEST!
• UNIGINE TEST (Framework)
• Разработан за 2 месяца
• С помощью:
• 1 системный администратор
• 1 билд-инженер
• 1 ведущий инженер по качеству
• Сила воли и вера в победу

9. UNITEST
Важно!
Впереди описание велосипеда!

10. UNITEST: Железная часть

11. UNITEST: Отчеты

12. Задачи железок
• Подготовка чистого окружения
• Хранение образов виртуальных машин
• Информирование и отчеты
Побочные эффекты
• Песочница для ручного тестирования
• Тестирование других продуктов

13. Задачи людей
• Придумывание тестов
• Поддержка тестов и тестовых окружений
Правила
• Атомарность тестов
• Максимальная утилизация железок

14. Классификация тестов
• По платформам
• По время выполнения
• По частоте запуска

15. UNITEST: Cтруктура тестов

16. UNITEST: Результаты теста

17. Задачи тестов
• Не глючить (не падать)
• Делать полезную и нудную работу

18. В сухом остатке
• Разработано 25 тестовых наборов
• ~1250 тест-кейсов
• Самый короткий тест: 5 минут
• Самый длинный тест: 27 часов
• Автотесты работают ночью
• Ревизия тестов
• Поддержка

19. Ближайшие планы
• Прикрутить веб-дашборд
• Улучшение планировщика
• Графические тесты

20. Спасибо за внимание!