Prezentacja o tym, jak zastosowac #thinkingdriventesting w praktyce testowania automatycznego

1. Najpierw myśl
Potem automatyzuj
Jakub Rosiński

2. Automatyzacja? Robotyzacja?

4. powtarzalne
rutynowe

5. powtarzalne
rutynowe
słowaklucze

6. Zamiana czegoś, co działa na coś, co prawie działa,
ale jest szybsze i tańsze

8. Selenium

9. Selenium
web frontend

10. Selenium
web frontend
web frontend

11. Selenium
web frontend
web frontend
Selenium

12. Selenium
wstęp uniwersalny
web frontend
web frontend
Selenium

13. Selenium
wstęp uniwersalny
web frontend
web frontend
Selenium
Selenium

14. Selenium
wstęp uniwersalny
web frontend
web frontend
Selenium
funkcjonalne
Selenium

15. Selenium
wstęp uniwersalny
web frontend
web frontend
Selenium
funkcjonalne
wydajnościowe!
Selenium

16. Selenium
wstęp uniwersalny
web frontend
web frontend
Selenium
funkcjonalne
wydajnościowe!
web frontend
Selenium

17. Czy testowanie automatyczne to testowanie?

18. Czy testowanie automatyczne to testowanie?

21. Cel testów automatycznych?
ZNAJDOWANIE BŁĘDÓW ?

22. Kto pamięta 6 rozdział ISTQB FL?

23. + -

24. Redukcja manualnej pracy
+ -

25. Redukcja manualnej pracy
+ -
Obiektywna ocena

26. Redukcja manualnej pracy
+ -
Stała logika i regularność
Obiektywna ocena

27. Redukcja manualnej pracy
+
Nierealistyczne oczekiwania
-
Stała logika i regularność
Obiektywna ocena

28. Redukcja manualnej pracy
+
Nierealistyczne oczekiwania
-
Stała logika i regularność
Obiektywna ocena
Niedoszacowanie (wdrożenia,
utrzymania, osiągnięcia zysków)

29. Redukcja manualnej pracy
+
Nierealistyczne oczekiwania
-
Stała logika i regularność
Obiektywna ocena
Niedoszacowanie (wdrożenia,
utrzymania, osiągnięcia zysków)
Automatyzujmy wszystko
(zbyt duża zależność)

30. Redukcja manualnej pracy
+
Nierealistyczne oczekiwania
-
Stała logika i regularność
Obiektywna ocena
Niedoszacowanie (wdrożenia,
utrzymania, osiągnięcia zysków)
Automatyzujmy wszystko
(zbyt duża zależność)
I sporo innych!

31. Co automatyzować?

32. Co automatyzować?
Powtarzające się zadania
Testy regresji
w tym smoke testy

33. Co automatyzować?
Powtarzające się zadania
Testy regresji
w tym smoke testy
Zadania trudne lub niewykonalne manualnie
Test wydajnościowe
Konfigurowanie środowisk
Tworzenie danych (szczególnie dużo danych)

34. I na Teutatesa! Pamiętajcie!

35. I na Teutatesa! Pamiętajcie!
Automatyzacja to nie tylko GUI!!

36. I na Teutatesa! Pamiętajcie!
Automatyzacja to nie tylko GUI!!
Funkcjonalne i niefunkcjonalne!

37. Popularność Selenium / frontend ?

38. Popularność Selenium / frontend ?

39. Popularność Selenium / frontend ?

40. Popularność Selenium / frontend ?

41. Popularność Selenium / frontend ?

42. Dobre praktyki

43. Dobre praktyki
#thinkingdriventesting

44. Dobre praktyki
#thinkingdriventesting
Nie o narzędziach o których ktoś mówił na konferencji

45. Dobre praktyki
#thinkingdriventesting
Nie o narzędziach o których ktoś mówił na konferencji
a o tym jakie Ty masz potrzeby projektowe

46. Dobre praktyki
#thinkingdriventesting
Nie o narzędziach o których ktoś mówił na konferencji
a o tym jakie Ty masz potrzeby projektowe
takich narzędzi szukaj

47. Dobre praktyki
#thinkingdriventesting
Nie o narzędziach o których ktoś mówił na konferencji
a o tym jakie Ty masz potrzeby projektowe
takich narzędzi szukaj
ale poznaj ich słabe punkty / koszt

48. Dobre praktyki
#thinkingdriventesting
Nie o narzędziach o których ktoś mówił na konferencji
a o tym jakie Ty masz potrzeby projektowe
takich narzędzi szukaj
ale poznaj ich słabe punkty / koszt
będziemy te narzędzia konfigurować

49. Dobre praktyki
#thinkingdriventesting
Nie o narzędziach o których ktoś mówił na konferencji
a o tym jakie Ty masz potrzeby projektowe
takich narzędzi szukaj
ale poznaj ich słabe punkty / koszt
będziemy te narzędzia konfigurować
one wpłyną na nasze procesy
(bardzo we wdrożeniu)

51. Poor automated tests are just chaos done faster

52. Poor automated tests are just chaos done faster
Szkolenia z „nietechnicznego testowania”?

53. Poor automated tests are just chaos done faster
Szkolenia z „nietechnicznego testowania”?

54. Planuj

55. Planuj
Wybieraj scenariusze do automatyzacji

56. Planuj
Wybieraj scenariusze do automatyzacji
Czekaj na choć odrobinę stabilności

57. Wybór scenariuszy?

58. Wybór scenariuszy?
Najważniejsze testy (poziom ryzyka)

59. Wybór scenariuszy?
Najważniejsze testy (poziom ryzyka)
Szerokie i płytkie pokrycie

60. Wybór scenariuszy?
Najważniejsze testy (poziom ryzyka)
Szerokie i płytkie pokrycie
Najłatwiej automatyzowalne

61. Wybór scenariuszy?
Najważniejsze testy (poziom ryzyka)
Szerokie i płytkie pokrycie
Najłatwiej automatyzowalne
Najwyższe ROI

62. Wybór scenariuszy?
Najważniejsze testy (poziom ryzyka)
Szerokie i płytkie pokrycie
Najłatwiej automatyzowalne
Najwyższe ROI
Najczęściej wykonywane

63. Wybór scenariuszy?
Najważniejsze testy (poziom ryzyka)
Szerokie i płytkie pokrycie
Najłatwiej automatyzowalne
Najwyższe ROI
Najczęściej wykonywane
Niemożliwe, trudne, drogie manualnie

64. Zastanów się czy w tym projekcie W OGÓLE warto / da się

66. Wyobraźmy sobie
bardzo skomplikowany projekt informatyczny
Baza danych, backend - webservice’y,
web-frontend

67. Wyobraźmy sobie
bardzo skomplikowany projekt informatyczny
!! sklep internetowy !!
Baza danych, backend - webservice’y,
web-frontend

69. Przecież to dla programistów!

70. Przecież to dla programistów!
Pilnujmy pokrycia

71. Przecież to dla programistów!
Pilnujmy pokrycia
Pilnujmy wyników

72. Przecież to dla programistów!
Pilnujmy pokrycia
Pilnujmy wyników
Wymyślajmy ciekawe przypadki

73. Przecież to dla programistów!
Pilnujmy pokrycia
Pilnujmy wyników
Wymyślajmy ciekawe przypadki
Wspólnie planujmy (TDD)

74. Przecież to dla programistów!
Pilnujmy pokrycia
Pilnujmy wyników
Wymyślajmy ciekawe przypadki
Wspólnie planujmy (TDD)
A może nawet piszmy!

75. Baza danych + webservice
mogą być stabilne na długo przed UI

76. SQL
Tworzenie danych testowych bezpośrednio w bazie danych
Migracja (anonimizacja) danych produkcyjnych
Odczytywanie danych SELECTY, JOINY, widoki itd.

78. API

79. API
wybór narzędzia?

80. API
wybór narzędzia?
wybór biblioteki?

81. API
wybór narzędzia?
wybór biblioteki?
integracja z bazą danych

82. API
wybór narzędzia?
wybór biblioteki?
integracja z bazą danych
Sekwencje CRUD

83. API
wybór narzędzia?
wybór biblioteki?
integracja z bazą danych
Sekwencje CRUD
wydajność

84. Doczekaliśmy się stabilnego GUI

85. Doczekaliśmy się stabilnego GUI
Ta… jasne ;-)

86. Doczekaliśmy się stabilnego GUI
Ta… jasne ;-)
Jakie testy przyniosą korzyść?

87. Doczekaliśmy się stabilnego GUI
Ta… jasne ;-)
Jakie testy przyniosą korzyść?
-> „Wybór scenariuszy”
zysk czasowy, pokryciowy, finansowy

88. Doczekaliśmy się stabilnego GUI
Ta… jasne ;-)
Jakie testy przyniosą korzyść?
-> „Wybór scenariuszy”
zysk czasowy, pokryciowy, finansowy
zysk psychologiczny!

89. Biznesowe scenariusze e2e na GUI?

90. Zadania „nietestowe”:
Tworzenie użytkowników
Tworzenie danych
Konfiguracja środowiska
Doprowadzanie do konkretnych stanów systemu
Jako miejsc startowych do eksploracji

91. Funkcjonalność
Selenium (znowu programowanie!)
czyste czy opakowane (a może nawet BDD)?
Robot Framework
Ranorex
…

92. Wydajność
jMeter
Load Runner
…
A inne niefunkcjonalne?

93. Tester
Lider
Krytyk, posiadacz i trener ISTQB
Ojciec i Mąż
Motocyklista
Jedyny mężczyzna w domu
3 kobiet i psa kastrata
Ojciec prowadzący fp Syrenki
Warszawskie
Jakub Rosiński
qpcio
jrosinski@thinkingdriventesting.com

94. Dziękuję
Pytania?