Слайды с выступления с конференции Rootconf ( РИТ фестиваль ).

1. Платформа для
поставки
счастья в
команду QA
Вячеслав Кузнецов
@smith3v

2. Ecwid
• SaaS-платформа для интернет-
магазинов.
• ~ 750 000 клиентов по всему миру.
• ~ 100 000 000 посетителей в месяц.
• 80 человек в команде.
• Ульяновск, Самара, Казань, San
Diego.

3. Operations
• Доступность.
• Надежность.
• Безопасность.
• Максимальная скорость от
идеи до релиза.

4. QA
• Подготовка и поддержка
ботов.
• Сопровождение релизов.
• Проверка изменений на
соответствие задаче.

5. На заре проекта
• Десяток разработчиков.
• SVN репозиторий.
• All-in-one staging-сервер.
• Обновление руками.

6. Команда растет
• Больше изменений.
• Тестирование до слияния с
основным кодом.
• Завели pre-staging сервер J

7. Переехали на Git
• Изменение делается в
отдельной ветке.
• Тестовые серверы стали
бутылочным горлышком.

8. Первый подход
У нас уже есть configuration
management, который готовит
production-кластер!
• Git
• Chef
• Bash
• Jenkins

9. Запуск площадки
• Передаем имя и версию;
• Собираем все пакеты;
• Создаем базы из шаблонов;
• Регистрируем DNS;
• Добавляем в Nginx;
• Запускаем сервер EC2;
• Дожидаемся результата.

10. Инфраструктура
Package
Storage
Nginx
EC2
instance
Postgres
Route53
Jenkins
app.<name>.ecwid.com
my.<name>.ecwid.com

11. Статистика
• время запуска ~45 мин;
• 15-30 сборок в день;
• до 30 поломок в месяц.

12. Сложности
• Поддержка bash-кода.
• Хрупкая реализация.

13. Сложности
• Общее пространство
имен в *.ecwid.com.
• Ручное бессмертие.

14. Сложности
• История версий баз в
файлах.
• Сложное добавление
сервисов.

15. Песочницы
S3
Nginx
EC2
instance
RDS
Teamcity
*<name>.sandbox.ecwid.com

16. Песочницы

17. Песочницы

18. Песочницы
• <Build tasks> (2m:10s)
• <Upload static to S3> (2m:56s)
• <Instance start> (10m:29s)
• Chef Client finished, 652/1037
resources updated in
521.716752572 seconds

19. Статистика
• ~15 мин время запуска;
• ~50 сборок в день;
• единичные поломки;
• ~$1500 в месяц.

20. Песочницы. Плюшки
• Бессмертные площадки и
остановка ненужных.
• Простое добавление
новых сервисов.

21. Песочницы. Плюшки
• Нормальное управление
базами.
• Нормальная работа с
доменами.

22. Sandy

23. Sandy
• Что запущено?
• Есть бессмертные?
• История.

24. Интеграция с чатом

25. Интеграция с чатом

26. Интеграция с чатом

27. Оптимизации
• Базовый образ.
• Ночное тестирование.
• Предварительная сборка
пакетов.
• ssh-dev, psql-sand, ectail.

28. Платформа
Дали возможность добавлять
новые компоненты без
участия Ops:
• Шаблон конфига в пакете;
• Добавление одной
командой.

29. Итог
• Системные решения
эффективнее.
• Больше свободы, меньше
блокировок.
• Тестовая среда ≈ реальной.

30. Спасибо

31. Get better
• hangops.ru
• devopsru.com