Innoveren staat of valt met een goede implementatie. Die is vaak de sluitpost, maar zou juist de kern moeten vormen van het innovatieproces. Een pilot uitvoeren kost geen moeite, pas bij het opschalen wordt het lastig. Juist bij een kritisch proces zoals toetsing, waarbij de belangen hoog zijn en het afbreukrisico enorm, heb je een goede visie nodig, lef om daarmee aan de slag te gaan en vertrouwen om te geven en te krijgen. Telkens de verantwoorde grens op zoeken, vertrouwen op je eigen expertise. Collega's verleiden om uit hun comfort zone te stappen, in het diepe te springen terwijl je klaarstaat met zwemvest en zwemhaak. Wij nemen je mee in ons verhaal: hoe wij de grenzen opzoeken, elkaar meenemen en wel moeten vertrouwen bij het invoeren van digitaal toetsen.
'Verleiden met lef en vertrouwen: digitaal toetsen bij Avans'- Eky Fioole & Marian Kat-de Jong - OWD18
1.
2. VERLEIDEN MET LEF EN VERTROUWEN:
DIGITAAL TOETSEN BIJ AVANS HOGESCHOOL
Eky Fioole (LIC)
Marian Kat-de Jong (ATGM)
3. Wie zijn wij?
Eky Fioole
Projectleider digitaal toetsen
Leer- en innovatiecentrum (LIC)
ey.fioole@avans.nl
Marian Kat-de Jong
Projectmanager/docent
Academie voor de Technologie van
Gezondheid en Milieu (ATGM)
mp.kat-dejong@avans.nl
4. Wat gaan wij vertellen?
• Digitaal toetsen bij Avans Hogeschool
– Aanpak
– Successen
– Uitdagingen
• Perspectief instelling
• Perspectief academie
interactie
5. Zomaar een toets in 2014…
120 studenten
100 vragen
4 antwoorden
random
8. Onze uitdagingen
• Van een projectplan en methodiek naar veranderstrategie
• Bottom up of juist Top Down
• Van pilot naar opschaling
• Grote belangen en een hoog afbreukrisico (geen foutenmarge)
• Controle of juist lef en vertrouwen
• Invoering van een digitaal toetsplatform of vooral aandacht voor organisatie,
professionalisering en faciliteiten
• Hoe haal je mensen uit hun comfortzone?
9. 4 onderdelen van het project
• Implementatie van RemindoToets als digitaal toetsplatform
• Professionalisering en coaching van alle betrokkenen
• Aanpassingen aan de toetsprocessen en –organisatie
• Faciliteiten voor het veilig grootschalig digitaal toetsen
_
10. Beoogde projectresultaten
1. verlagen van de werkdruk bij docenten (delen en hergebruik
vragen, inzet ICT bij correctie)
2. verhogen van de toetskwaliteit van toetsvragen en toetsen
(psychometrie, reviews) en de variatie in vragen
3. betere borging van toetsen, toetsvragen en toetsmatrijzen
4. tijd- en plaatsonafhankelijk toetsen flexibiliteit, verbreding,
verdieping en/of versnelling maar ook minder druk op de
organisatie
5. meer mogelijkheden voor studenten om te oefenen en feedback te
ontvangen
beter en flexibeler onderwijs
| 10
11. Van pilots naar opschaling
• Digitaal toetsen als katalysator Multidisciplinaire teams
• Uitvoeren en leren van Pilots
Projectaanpak:
• Start met een stevige ondersteuningsstructuur
• Besteed veel aandacht aan implementeren!!!
• Heb oog voor urgentie en behoeften
• Erken en beleg het eigenaarschap zo laag mogelijk
Projectplan op hoofdlijnen, agile uitvoering
13. Het implementatieproces
• geen big bang maar
iteratief
• afspraken maken over
het ambitieniveau van de
academie en aanpak
• per opleiding een
contactpersoon en een
toetsco
• vragenbank:
samenwerking op
CROHO-niveau
Stappen Omschrijving
1 Ingerichte categorieindeling en afspraken over
inrichting itembank
2 Afname analoog PDF
3 Afname analoog via print en scan
4 Digitale afname oefentoets met gesloten vragen in
RemindoToets
5 Afname eerste digitale summatieve toets met
gesloten vragen
5a Uitbreiden van aantallen summatieve digitale
toetsafnames met gesloten vragen
6 Afname eerste digitale summatieve toets met open
vragen
6a Uitbreiden van aantallen summatieve digitale
toetsafnames met open vragen
7 Analyse op toetsen, systematisch structureel
verbeteren
8 Meerdere toetsvarianten anders dan gesloten en
open vragen
versnellen
verbreden
14. Waar staan we nu in de academie?
• Extra stappen toegevoegd aan
implementatieproces:
Stappen Omschrijving
1 Ingerichte categorieindeling en afspraken over inrichting
itembank
2 Afname analoog PDF
3 Afname analoog via print en scan
4 Digitale afname oefentoets met gesloten vragen in
RemindoToets
5 Afname eerste digitale summatieve toets met gesloten
vragen
5a Uitbreiden van aantallen summatieve digitale
toetsafnames met gesloten vragen
6 Afname eerste digitale summatieve toets met open vragen
6a Uitbreiden van aantallen summatieve digitale
toetsafnames met open vragen
7 Analyse op toetsen, systematisch structureel verbeteren
8 Meerdere toetsvarianten anders dan gesloten en open
vragen
8b
Meer varianten van dezelfde toets tegelijkertijd afnemen (formatief dan
wel summatief)
9 Opstellen digitaal toetsbeleid (of aanpassen bestaand toetsbeleid)
10 Herstructureren toetsorganisatie
15. De ondersteuningsstructuur van RT bij Avans
Kerngroep
digitaal toetsen
Projectleiders
overleg
Functioneel
beheer
Toets-
coördinator
enoverleg
Community
of Learning
Landelijke
Gebruikers
raad
16. Ondersteuningstructuur in de academie
Opleiding
Academie
Instelling
Sector HO Helpdesk
Leverancier
Functioneel
beheer Avans
Team
RemindoToets
ATGM
Key user
Toetscoördinator
Projectleider
(tijdelijk)
‘Hoofd’ Key user Toetsorganisatie
Team RemindoToets
ATGM
17. Wat werkt bij Avans?
• Inzet van multidisciplinaire projectgroepen
• Start met aanpak pijnpunten: werkdrukverlaging (50 %)
• Samenwerken waar mogelijk ook tussen de deelprojecten
• Delen van creatieve oplossingen: Inzet sttudenten (toetsvragen)
• Lef tonen: samenwerking op CROHO-niveau
• Wendbaarheid bij implementatie : niveau 0, Luistervaardigheid bij
talen
• Geef ruimte aan innovatie: Klinisch redeneren en inzet van
expertpanel
• Heb lef en vertrouwen en kies voor korte communicatielijnen
18. Wat werkt in de academie…
• Inzet van multidisciplinaire projectgroepen
• Start met aanpak pijnpunten: werkdrukverlaging (50 %)
• Samenwerken waar mogelijk Avansbrede vragenbanken
• Oog hebben voor creatieve oplossingen: Inzet studenten bij het
maken van toetsvragen
• Lef tonen: samenwerking op CROHO-niveau
• Wendbaarheid in implementatie : Luistervaardigheid bij talen
• Geef ruimte aan innovatie: Klinisch redeneren en inzet van
expertpanel
• Heb lef en vertrouwen
19. Wat werkt in onze academie…
• No pressure – uitgaan van nieuwsgierigheid en interesse
• ‘At-desk’ ondersteuning: niet trainen maar meedoen
• Samen werken en samenwerken (centraal – decentraal)
• Realistische doelen stellen
• Open communiceren
20. Uitdagingen
• Vasthouden van het succes
• Kunnen beschikken over voldoende faciliteiten (4 vestigingsplaatsen, 14 gebouwen)
• Aanpassingen in de toetsorganisatie (roostering, meenemen van (e)surveillanten)
• Avansbreed werken met RemindoToets, nog meer aandacht voor coaching
• Centrale (gestandaardiseerde) dienstverlening vs. individuele keuzes (en fouten) docent
• Het delen van Good Practices en communiceren met de achterban
• Uitfaseren van andere digitale toetsvormen.
• RemindoToets tenzij……