Toetsvragen Maken En Digitaal Toetsen Ubvu

2,576 views
2,365 views

Published on

Presentatie van Silvester Draaijer over toetsen/opdrachten en QMP bij cursussen informatievaardigheden.

0 Comments
1 Like
Statistics
Notes
  • Be the first to comment

No Downloads
Views
Total views
2,576
On SlideShare
0
From Embeds
0
Number of Embeds
12
Actions
Shares
0
Downloads
31
Comments
0
Likes
1
Embeds 0
No embeds

No notes for slide
  • Toetsvragen Maken En Digitaal Toetsen Ubvu

    1. 1. Itembanking en Digitaal Toetsen Informatievaardigheden Silvester Draaijer Onderwijscentrum VU
    2. 2. Wat is toetsen? <ul><li>In de praktijk van het WO … </li></ul><ul><li>Summatief Toetsen </li></ul><ul><ul><li>= Tentamineren </li></ul></ul><ul><ul><li>= Eindoordeel </li></ul></ul><ul><ul><li>= ‘Civiel Effect’ </li></ul></ul>
    3. 3. Wat is toetsen? <ul><li>Klassieke wetenschap vanuit de Psychologie en veel toegepast bij Medicijnen, Economische wetenschappen etc. </li></ul><ul><ul><li>Toetsontwikkeling is rationeel proces </li></ul></ul><ul><ul><li>Toets- en vraaganalyse wordt statistisch benaderd </li></ul></ul><ul><li>Belangrijkst: validiteit en betrouwbaarheid </li></ul>
    4. 4. Wat is toetsen <ul><li>Alles onder controle </li></ul><ul><li>Individuele prestatie (fraude tegengaan) </li></ul><ul><li>Groepen in één keer toetsen </li></ul><ul><li>Voldoende aantal vragen en respondenten </li></ul>
    5. 5. Wat is toetsen <ul><li>Formatief Toetsen – Toetsen om te leren </li></ul><ul><ul><li>Diagnostisch toetsen </li></ul></ul><ul><ul><ul><li>Vaststellen van niveau en lacunes in kennis (bijv. instaptoetsen) </li></ul></ul></ul><ul><ul><li>Oefentoetsen (oefententamens) </li></ul></ul><ul><ul><ul><li>Leren en voorbereiden op een eindtoets (qua vorm, vraagstelling e.d.) </li></ul></ul></ul><ul><ul><li>Courseware </li></ul></ul><ul><ul><li>Games </li></ul></ul>
    6. 6. Formatief-Summatief schaal zelf groepje Deelcijfer Eindcijfer Voorwaarde
    7. 7. Een digitale toets <ul><li>Voorbereiding cursus </li></ul><ul><li>Start cursus </li></ul><ul><li>Voorbereiding college 1 </li></ul><ul><li>College 1 </li></ul><ul><li>Verwerking college 1 </li></ul><ul><li>Afsluitende toets </li></ul><ul><li>Nabespreking cursus </li></ul><ul><li>Voorbereiding college 2 </li></ul><ul><li>College 2 </li></ul><ul><li>Verwerking college 2 </li></ul><ul><li>Voorbereiding college n </li></ul><ul><li>College n </li></ul><ul><li>Verwerking college n </li></ul>
    8. 8. Digitale Toets - Interactie pad A <ul><li>Start toets </li></ul><ul><li>Vraag 1 </li></ul><ul><li>Vraag 2 </li></ul><ul><li>Vraag 3 </li></ul><ul><li>Vraag n </li></ul><ul><li>Afsluiten toets </li></ul><ul><li>Feedback per vraag </li></ul><ul><li>Cijfer/diagnose op toets </li></ul>Score Voldoende Score Onvoldoende klaar
    9. 9. Digitale Toets - Interactiepad B <ul><li>Start toets </li></ul><ul><li>Vraag 1 </li></ul><ul><li>Feedback 1 </li></ul><ul><li>Afsluiten toets </li></ul><ul><li>Cijfer/diagnose op toets </li></ul><ul><li>Vraag 2 (op basis antwoord vraag 1 </li></ul><ul><li>Feedback 2 </li></ul><ul><li>Vraag 3 (op basis antwoord vraag 2 </li></ul><ul><li>Feedback 3 </li></ul>klaar
    10. 10. Interactiepad C <ul><li>Casusvragen </li></ul><ul><li>In combinatie met Interactiepad A en/of B </li></ul>
    11. 11. Wat is toetsen <ul><li>Formatief Toetsen – Toetsen om te leren </li></ul><ul><ul><li>Motiveren </li></ul></ul><ul><ul><li>Feedback </li></ul></ul>
    12. 12. Motiveren – intrinsieke motivatie <ul><li>Zelftoetsing – intrinsieke motivatie (Keller 1983): </li></ul><ul><ul><li>Aandacht . Zorg ervoor dat de opdracht de aandacht van de lerenden zal trekken door onverwachte en spannende elementen. </li></ul></ul><ul><ul><li>Relevantie . Zorg ervoor dat de relevantie van de oefening voor de lerende duidelijk is. Geef een interessante context weer waar de lerende zich mee kan identificeren. </li></ul></ul><ul><ul><li>Vertrouwen . Zorg ervoor dat complexiteit en het niveau van oefeningen niet te laag en niet te hoog is zodat studenten vertrouwen krijgen in hun eigen kunnen. </li></ul></ul><ul><ul><li>Bevrediging . Als oefeningen zijn afgerond dienen lerenden feedback te krijgen die hen stimuleert om verder te gaan. </li></ul></ul>
    13. 13. Feedback <ul><li>Toets </li></ul><ul><ul><li>Zak/slaag </li></ul></ul><ul><ul><li>Procent goed/fout </li></ul></ul><ul><ul><li>Cijfer </li></ul></ul><ul><ul><li>Studie-advies </li></ul></ul><ul><li>Vraag </li></ul><ul><ul><li>Goed/fout </li></ul></ul><ul><ul><li>Goede alternatief </li></ul></ul><ul><ul><li>Omschrijving goede alternatief </li></ul></ul><ul><ul><li>Argumentatie goede alternatief </li></ul></ul><ul><ul><li>Aanwijzing voor oplossing </li></ul></ul><ul><ul><li>Studeeraanwijzing </li></ul></ul>
    14. 14. Prestatiedrempel – extrinsieke motivatie <ul><li>Geef pas feedback nadat zeker is dat de lerende een oprechte poging heeft gewaagd om een antwoord te formuleren, bijvoorbeeld door een prestatiedrempel op te werpen </li></ul><ul><ul><li>Temporiseren aanbieden vervolgvraag </li></ul></ul><ul><ul><ul><li>Vervolgvragen ‘verlaat’ aanbieden als een fout antwoord is gegeven </li></ul></ul></ul><ul><ul><ul><li>Vervolgtoetsen ‘verlaat’ aan te bieden als een toets slecht gemaakt is (bijv. een dag tussen pogingen inlassen) </li></ul></ul></ul><ul><ul><li>Temporiseren feedback </li></ul></ul><ul><ul><ul><li>Pas feedback te geven als het antwoord goed is. Dus vraag kan meerdere keren beantwoord worden. </li></ul></ul></ul><ul><ul><ul><li>Pas feedback geven als alle vragen zijn beantwoord </li></ul></ul></ul><ul><ul><ul><li>Pas feedback geven als 80 procent van de antwoorden van een toets correct is. Dus toets kan herhaaldelijk worden gestart </li></ul></ul></ul><ul><ul><li>Randomiseren </li></ul></ul><ul><ul><ul><li>Telkens andere vragen uit een vragenbank te trekken </li></ul></ul></ul><ul><ul><ul><li>Andere antwoordopties tonen </li></ul></ul></ul><ul><ul><ul><li>Telkens varianten van dezelfde soort vraag stellen </li></ul></ul></ul><ul><ul><li>In de feedback niet het juiste antwoord te vermelden maar de student aanwijzingen te geven om het juiste antwoord zelf te vinden </li></ul></ul><ul><ul><li>Summativeren </li></ul></ul><ul><ul><ul><li>Score telt deels mee voor eindresultaat cursus </li></ul></ul></ul><ul><ul><ul><li>Een voldoende score is voorwaardelijk voor verdere deelname aan cursus of geldig laten zijn van cijfer </li></ul></ul></ul>
    15. 15. Voorbeelden
    16. 16. Questionmark Perception <ul><li>Waarom QMP voor de VU? </li></ul><ul><ul><li>Blackboard enigszins beperkt </li></ul></ul><ul><ul><li>Respondus voldoet ook niet aan de eisen en richt zich op andere functionaliteit </li></ul></ul>
    17. 17. Questionmark Perception <ul><li>Waarom QMP voor de VU? </li></ul><ul><ul><li>T.o.v. Blackboard nodig: </li></ul></ul><ul><ul><ul><li>Goede statistische verwerking van resultaten Itembanken op grotere schaal (> 1000 items) </li></ul></ul></ul><ul><ul><ul><li>Performance onder grote belasting </li></ul></ul></ul><ul><ul><ul><li>Meer mogelijkheden om aan te bieden en geavanceerde vraagtypen (o.a. voice, animaties, meerdere uitkomsten afvangen ) </li></ul></ul></ul><ul><ul><ul><li>Betere mogelijkheid voor sprongen in toetsen en conditionele uitslagen en roostering </li></ul></ul></ul><ul><ul><ul><li>Mogelijkheid voor eigen templates (tbv uiterlijk van de toets) </li></ul></ul></ul><ul><ul><ul><li>Beveiligd toetsen met QMsecure Browser mogelijk </li></ul></ul></ul>
    18. 18. Questionmark Perception <ul><li>Waarom QMP voor de VU? </li></ul><ul><ul><li>Internationale standaard (UK, VS, DigiUni, UTwente, div. Hogescholen, CITO, Windesheim - continuïteit leverancier gewaarborgd, uitwisseling met andere systemen via QTI) </li></ul></ul>
    19. 19. Questionmark Perception <ul><li>Eigenschappen: </li></ul><ul><ul><li>Gemaakt voor specialisten </li></ul></ul><ul><ul><li>Steile leercurve </li></ul></ul><ul><ul><li>Complexe structuur en autorisatie </li></ul></ul>
    20. 20. Technische structuur QMP AUTEURS PC’S Authoring server Poortwachter/Ond VU Productie (afname) server Communicatie
    21. 21. Uitwisseling van toetsvragen <ul><li>Via Respondus kunnen toetsvragen van het ene naar het andere systeem gebracht worden </li></ul><ul><li>QMP heeft ook eigen Blackboard converter </li></ul><ul><li>Uitwisselingsstandaard: QTI (Question and Test Interoperability Standard) </li></ul>Blackboard Respondus Questionmark QTI-bestand QTI-bestand Blackboard Converter via qmark website
    22. 22. Uitwisseling van toetsresultaten en studentgegevens <ul><li>Toekomst: </li></ul><ul><ul><li>In Bb 7 zullen tzt QMP toetsresultaten verschijnen in het Bb-gradebook </li></ul></ul><ul><ul><li>Tzt single sign-on </li></ul></ul>Blackboard Questionmark LDAP Toetsresultaat Studentgegevens Studentgegevens
    23. 23. Stand van zaken <ul><li>Onderwijscentrum VU heeft zware productieserver (~150 inlog in 3 sec mogelijk) </li></ul><ul><li>Onderwijscentrum heeft ondersteuning beschikbaar (~ 1FTE totaal) </li></ul><ul><li>Bijna concernsysteem  technisch, functioneel en applicatiebeheer naar UC-IT </li></ul><ul><li>Steeds meer faculteiten die participeren </li></ul>

    ×