Павел Степанов, Sun Microsystems, Inc, Санкт-Петербург, Россия Система контроля качества Java SE

1. Контроль качества Java SE
Павел Степанов, SUN Microsystems

2. J2SE в цифрах
• 130 000 000 загрузок в месяц*
• 100+ инженеров по качеству
• 8 различных продуктов или версий
• 3 или 4 релиза одновременно
• 1.5 релиза в неделю в среднем

3. J2SE в проектах
• JDK 7- новая версия Java
• SSR - обновления безопасности
• LU, FU и MU - другие обновления
• J4B – платные релизы

4. J2SE в графиках
неделя 1 2 3 4 5 6 7 8 9
J4b
SSR/LU
JDK 7

5. Структура проекта

6. Качество тестов
• ~95+% автоматических
тестов
• Непрерывная разработка
новых тестов
• Постоянная интеграция в
предыдущие версии

7. Организация тестовой базы

8. Качество JDK 7
• Длинный тестовый цикл
• Много тестовых команд
• Наличие новых технологий,
интегрированных в продукт
(изначально непокрытых тестами)
•

9. Тестирование изменений

10. Тестовый цикл новой
версии
b01 b02 b03
тестирование тестирование тестирование
b01 B02 b03

11. Критерий выхода

12. Пример критерия выхода

13. Жизненный цикл и
критерий выхода

14. Synchronized Security
Release
• Короткий тестовый цикл – два билда
(если b02 удовлетворяет критерию
выхода)
• Полностью под контролем одной
команды тестировщиков
• 4 версии параллельно
• Тесная интеграция с разработчиками

15. Жизненный цикл и
критерий выхода

16. Критерий выхода SSR
• Нет регрессий
• Все заявленные ошибки в
безопасности исправлены

17. Java For Business
• Короткий тестовый цикл – один
билд
• Полностью под контролем одной
команды тестировщиков
• 3 версии параллельно, все
исправления рассматриваются
индивидуально

18. Процесс тестирования J4B

19. J4B критерий выхода
• Отсутствие регрессий
– Если регрессии есть – билд выбрасывается,
соответствующие испоавления исключаются
из пространства и строится новый билд.
• Ошибки исправлены
– Если исправлены не все ошибки, но
регрессий нет, то подписчики все
равно могут получить этот билд

20. Вопросы?