Илья Кацев "Автоматизация тестирования веб-форм" Я.Субботник в Новосибирске О докладе: Рассказ пойдет о том, как в Яндексе организовано автоматическое тестирование форм в веб-интерфейсах. В зависимости от того, какая информация о форме нам известна, мы можем проводить различные тесты. В каких ситуациях можно автоматически распознать и выделить элементы формы на странице, даже если никакой информации о странице у нас нет? Как мы создаем наборы тестовых сценариев для проверок, когда уже обладаем какой-то информацией о форме?

1. Автоматизация
тестирования
веб-­‐форм
Илья
Кацев
Ведущий
инженер
по
тестированию
Субботник,
Новосибирск,
19
ноября
2011
года

2. Примерный
план
Зачем?
Распознавание
форм
Генерация
данных
Универсальные
проверки
Нерешенные
проблемы
1

3. Примерный
план
Зачем?
Распознавание
форм
Генерация
данных
Универсальные
проверки
Нерешенные
проблемы
2

4. Лень
Тестирование
вручную
3

5. Лень
Тестирование
вручную
Автотесты
3

6. Лень
Тестирование
вручную
Автотесты
Универсальные
автотесты
3

7. Роботы
4

8. Spidy
5

9. Список
проверок:
Ссылки
Картинки
JS
Стили
6

10. Spidy-­‐man
7

11. Новые
возможности
Формы
Верстка
8

12. Новые
возможности
Формы
Проверки
Обход
8

13. Примерный
план
Зачем?
Распознавание
форм
Генерация
данных
Универсальные
проверки
Нерешенные
проблемы
9

14. Сложность
10

15. Сложность
44800000
сценариев!
10

16. Сложность
10

17. Сложность
2800
сценариев!
10

18. Структура
формы
11

19. Структура
формы
11

20. Структура
формы
11

21. Определение
формы
<form>
js
js:dynamic
12

22. Как
определить
зависимости?
1.
Анализ
JS
2.
Анализ
изменений
страницы
12

23. Релевантные
элементы
13

24. Релевантные
элементы
div
14

25. Релевантные
элементы
div
14

26. Релевантные
элементы
div
14

27. Релевантные
элементы
14

28. Граф
элементов
15

29. Граф
элементов
15

30. Граф
элементов
16

31. Граф
элементов
16

32. Граф
элементов
16

33. Граф
элементов
16

34. Граф
элементов
16

35. Граф
элементов
16

36. Граф
элементов
16

37. Распознавание
полей
ввода
input
имя
тип
поля
17

38. Распознавание
полей
ввода
input
имя
17

39. Распознавание
полей
ввода
18

40. Распознавание
полей
ввода
getText = “”
18

41. Распознавание
полей
ввода
getText = “Пробег до(тыс. км.)”
18

42. Распознавание
полей
ввода
getText = “”
18

43. Распознавание
полей
ввода
getText = “Объём двигателя отдо(л)”
18

44. Примерный
план
Зачем?
Распознавание
форм
Генерация
данных
Универсальные
проверки
Нерешенные
проблемы
19

45. Схема
информация
о
форме
20

46. Схема
информация
о
форме
покрытие
20

47. Схема
информация
о
форме
алгоритм
покрытие
20

48. Схема
информация
о
форме
алгоритм
покрытие
количество
сценариев
20

49. Тестовые
значения
e-­‐mail
Значение
yandex@yandex.ru
Вес
1
ya@ya.ru
1
yandex@website.travel
0.8
yandex@yandex.com.tr
0.7
…
0.5
0.5
0.3
0.1
21

50. Тестовые
значения
Поле
От
вес
До
Год
Модель
Пробег
21

51. Тестовые
значения
Поле
От
10
0.5
До
10
Год
7
Модель
12
Пробег
5
21

52. Тестовые
значения
Поле
От
3
0.8
До
3
Год
1
Модель
4
Пробег
2
21

53. Схема
вес
алгоритм
покрытие
количество
сценариев
22

54. Поисковые
формы
набор
условий
23

55. Поисковые
формы
набор
условий
0
результатов
23

56. Поисковые
формы
поднабор
набор
условий
поднабор
поднабор
23

57. Примерный
план
Зачем?
Распознавание
форм
Генерация
данных
Универсальные
проверки
Нерешенные
проблемы
24

58. 25

59. 26

60. 27

61. 28

62. Примерный
план
Зачем?
Распознавание
форм
Генерация
данных
Универсальные
проверки
Нерешенные
проблемы
29

63. Нерешенные
проблемы
Сложные
формы
ajax
30

64. Илья
Кацев
Ведущий
инженер
по
тестированию
bromozel@yandex-­‐team.ru