14-10-2015 presentatie gegeven door Marielle Winarto en Jori Ramakers

1. TestNet najaarsevent
Jori Ramakers & Marielle Winarto
Agile testautomatisering
in de praktijk

2. Wat gaan we doen
Aan de slag met agile testautomatisering
• Waarom belangrijk?
• Hoe past testautomatisering binnen scrum?
• Van user story tot werkende software
• Tools
• Valkuilen en veelgemaakte fouten

3. Testautomatisering
sneller, vaker en beter testenS
door inzet van tools

4. Uitgangspunten

5. Scrumbord

6. • Teams van 6
• Laptops
• Internet: wifi NBC
• Website: training.testtoolfactory.com
Praktische zaken

7. De case

8. De mensen
Jori
Technical lead
Marielle
Product Owner
Annelène
Eindgebruiker

9. • Online database met gegevens over mobiele
telefoons, zodat de klant makkelijker kan
kiezen
• (en tot aankoop overgaat)
Productvisie

10. alleen
bellen
breed
productaanbod
onpartijdig
levert zelf
phonehouse.nl
Tweakers.net
coolblue
wehkamp
belsimpel
Beslist.nl

11. • Project gaat binnenkort van start
• Scrum, korte sprints van 2 weken
• Weinig budget, zsm werkend prototype
• Testen? Testautomatisering?
Situatieschets

12. Redenen om te automatiseren
1. Eerder en sneller fouten vinden
2. Minder testers nodig
3. Hogere kwaliteit
4. Technische wijzigingen minder riskant

13. • Wat wil je testen?
• Welke methoden heb je beschikbaar?
Overall teststrategie

14. • Kennismaken
– Wie ben je?
– Wat heb je al gedaan met agile TA?
– Wat wil je vandaag bereiken?
Opdracht 1a

15. Opdracht 1b
• Waar liggen de risico’s?
• Wat testen?
• Wat automatiseren?
• Welke randvoorwaarden?
(techniek, mensen, proces)

16. Testpiramide

17. • Dicht op de code
• Voor en door developers
• Pros: snel, makkelijk debuggen
• Cons: gebrek aan context
Unittesten

18. • Vanuit technisch perspectief
• Delen afzonderlijk en samen
• Pros: test integraties
• Cons: afhankelijkheden
Componenten, integraties

19. • Technische implementatie als
black box
• Gericht op functionaliteit
• Doet de applicatie het?
Functionele acceptatie

20. • Door eindgebruikers
(of vanuit hun perspectief)
• Heb je er ook wat aan?
Gebruikersacceptatie

21. Unittesten - tools
• Junit
• TestNG
• Jasmine (+Karma)
• Visual Studio Unit Test Framework
• Etc.

22. Demo
• Unit testen met TestNG

23. • Behavior Driven Development
• Jbehave
• Cucumber
• Specflow
• Etc.
Given – When - Then

24. Syntax - features

25. Syntax - features

26. Code

28. Given I have an order
Given there is an order
Given there is an order called “incidental detail”
Given the order “incident detail” exists
Given an order exists
DRY

29. Imperative

30. Declarative

32. • Voorbeelden maken een story concreet
• Alle teamleden op één lijn
• OOK zinvol als er niet geautomatiseerd wordt
Voordelen

33. a) Bel1voudig.nl begint vorm te krijgen, bekijk
het verloop
b) Specificeer testgevallen voor de zoekfunctie
Opdracht 2

34. Done
• Teststrategie bepalen
– Incl. automatiseringsdoelen
• Testpiramide
• Testautomatisering dicht bij de code

35. ToDo
(na de pauze)
• Testautomatisering bovenin de piramide
• Andere tools

36. Maar nu eerst: valkuilen en risico’s

37. Mini-waterval

38. Definition of Done

39. Tijd tekort

40. Falende tests

41. Stellingen
1. Agile projecten kunnen niet zonder
testautomatisering.
2. Iedere tester moet kunnen programmeren.
3. Als je genoeg automatiseert, is handmatig testen
niet meer nodig.
4. Automatiseren in een vroeg stadium is niet zinvol,
alles verandert toch nog.

43. ToDo
• Testautomatisering bovenin de piramide
• Andere tools

44. • (nog aanvullen, of weglaten)
Functionele acceptatie

45. • Natuurgetrouw
• Black-box
• Testen van functionaliteit

46. Automatiseren webapplicatie

47. Tools
Een selectie

48. • Hotelapplicatie
Nieuwe casus

49. Opdracht 3
1. Draai het script
2. Pas het script aan
3. Maak een nieuw testgeval voor de volgende
story: <story>
4. Draai het script opnieuw

50. • Alles willen testen
• Onleesbare testgevallen
• Fragiele locators: xpath
• Timing
• Afhankelijkheden testdata en infrastructuur
Valkuilen functioneel testen

51. Tips functioneel testen
werk
doelgericht
structureel
onderhoud
gooi ook
wat weg

52. story testgevallen keuzes
Focus

53. Andere tools

54. • Scrum tools
• Test management tools
• Testdata
• Service virtualisatie
• Versiebeheer
• Etc

55. Opdracht 4a
• Onderhoudbaarheid
– Herbruikbare blokken
– Testdata

56. Opdracht 4b
• Voorbereiding retro
– Wat ging er goed?
– Wat kon er beter?
– Wat heb je geleerd?
– Welke vragen staan nog open?

57. Agile plaatje
Daily
24 hours
Sprint
2-4 weeks

58. Wanneer draai je wat
• Elke save
• Elke build
• Elke deployment
• Elke dag
• Elke sprint
• Gerichte werk

59. Review

60. Retro