SlideShare a Scribd company logo
EVIDENCE INFORMED
WAAR IS DE BIJSLUITER?
ResearchEd
Christian Bokhove
en Per-Ivar Kloen
Bijsluiter
• Medische analogie wordt vaak gemaakt
• In Engeland en andere landen is dit de aanleiding
geweest for ‘evidence-based practice’ (bv Goldacre)
• Als gevolg meer aandacht voor evaluaties en interventies,
alsmede RCTs
• Maar wat we missen is een bijsluiter
Bijwerkingen
• Een bijsluiter bevat
informatie over
• De werking van een
‘medicijn’
• Gebruiksaanwijzing
• De bijwerkingen
• Zhao (2017)
• Dit is niet een slinkse
manier om evidence te
ondermijnen
Zhao, Y. (2017). What works may hurt: Side effects in
education. Journal of Educational Change, 18(1), 1-19.
Uitgangspunt
• Doel niet om te bevestigen wat je al weet, maar jullie te
laten nadenken over wat je al weet (of denkt te weten).
• Dus dat zal soms misschien schuren.
• Misschien erger je je wel omdat we de positieve kanten
niet genoeg belichten.
• Pech!
(Geen dual coding – jullie houden de aandacht er maar bij!)
Vier voorbeelden waar we willen praten
over een bijsluiter
1. Instructie en Einstellung
2. Retrieval practice: wat?
3. Motivatie en prestatie
4. Retrieval practice: hoe?
1. Instructie en Einstellung
• 80s werk Sweller (Cognitive Load Theory) is geweldig
• Maar naar mijn mening niet altijd goed ‘vertaald’?
• Daarom ga ik over dit interessante artikel uit 1982
vertellen. Zoals wel vaker in de 80er jaren is de sample
size klein.
• Volgens Sweller (2016) staan deze experimenten aan de
basis van de theorie.
Sweller, J. (2016). Story of a research program. Education Review, 23.
Problemen
2a
Start
60
81
34
35
35
31
Doel
111
453
21
156
315
3
Oplossing
x3 -69
x3
Bewerkingen
-69
De a in 2a staat
voor ‘alternating’
x3 -69 x3 -69
x3 -69 x3 -69
x3 -69 x3 -69 x3 -69
x3
x3
x3 -69 x3 -69 x3 -69 x3 -69
6a
10a
2c
4a (1)
4a (2)
De history-cued groep werd aan oplossingen herinnerd.
Bijvoorbeeld na het oplossen van 6a:
De oplossing van het eerste problem was x –
De oplossing van het tweede problem was x – x –
De oplossing van het derde problem was x – x –
De oplossing van het vierde problem was x – x – x –
Daarna werd gevraagd om de laatste oplossing te
onthouden, en nog een keer in te voeren.
De resultaten
M doet langer over 10a!
Maar H doet langer over 2c!
Einstellung
• “Often called a problem
solving set, Einstellung refers
to a person's predisposition
to solve a given problem in a
specific manner even though
better or more appropriate
methods of solving the
problem exist.”
• Einstellung komt vaker voor
• Algebra
• Schaak paper
• Ergo…balans nodig….laten
zien niet genoeg
https://www.sciencedirect.com/science/article/pii/S0010027708001
133
De conclusie van Sweller (2016)
“Perhaps we should be showing students how to solve
problems rather than having them solve the problems
themselves?”
Maar we hebben gezien dat er ook een risico van
Einstellung is!
Retrieval practice: een voorbeeld bij
biologie
Aan wie denken jullie bij deze score?
Rosenshine, B.V. (2012). Principles of Instruction: Research-Based Strategies
That All Teachers Should Know. The American Educator, 36, 12.
Obtain a high success rate: It is
important for students to achieve
a high success rate during
classroom instruction.
The research also suggests that
the optimal success rate for
fostering student achievement
appears to be about 80 percent.
A success rate of 80 percent
shows that students are learning
the material, and it also shows
that the students are challenged.
Hoe kan je hier onderscheid maken tussen het beter worden
van leerlingen of de juiste vraag hebben gesteld?
Maakt het nog uit wat WAT je ophaalt?
Maakt het nog uit wat WAT je ophaalt?
Kijk uit met teveel basiskennis. Het is een begin om mee te
kunnen denken over problemen.
3. Motivatie en prestatie
Social media komt het regelmatig voor dat ‘motivatie’ als onbelangrijk
wordt neergezet
De stelling is dat motivatie voorkomt uit prestatie
• Garon‐Carrier, G., Boivin, M., Guay, F., Kovas, Y., Dionne, G., Lemelin, J. P., ...
& Tremblay, R. E. (2016). Intrinsic motivation and achievement in mathematics
in elementary school: A longitudinal investigation of their association. Child
development, 87(1), 165-175.
• Ma, X., & Xu, J. (2004). The causal ordering of mathematics anxiety and
mathematics achievement: a longitudinal panel analysis. Journal of
adolescence, 27(2), 165-179.
En inderdaad, die geven de andere richting, maar dat doet niet andere
bronnen ongedaan! De vraag ‘wat klopt er niet aan die bronnen’ is
onterecht. Het zijn goede studies. Maar is het een ‘hoofdzonde’ om te
zeggen dat motivatie leidt tot betere prestaties? Nee!
Daarvoor moet je echt breder lezen.
• Terminologie verschilt
• Motivatie
• Self-concept
• Emotions
• Enjoyment
• Boredom
• “positive emotions
(enjoyment, pride)
positively predicted
subsequent achievement
(math end-of-the-year
grades and test scores)”
en vice versa.
Pekrun, R., Lichtenfeld, S., Marsh, H. W., Murayama, K., & Goetz, T. (2017).
Achievement emotions and academic performance: Longitudinal models of
reciprocal effects. Child development, 88(5), 1653-1670.
• Enjoyment en boredom
• “Mathematics
achievement positively
predicted enjoyment and
negatively predicted
boredom.”
• “Enjoyment positively,
and boredom negatively,
predicted subsequent
mathematics
achievement.”
Putwain, D. W., Becker, S., Symes, W., & Pekrun, R. (2018). Reciprocal
relations between students’ academic enjoyment, boredom, and achievement
over time. Learning and Instruction, 54, 73-81.
Kortom…
• En ook ‘goal setting’…..
• Je hebt dit hele plaatje nodig
• Bijsluiter bij de bijsluiter:
• Núñez-Regueiro, F., Juhel, J., Bressoux, P., & Nurra, C. (2021).
Identifying reciprocities in school motivation research: A review of
issues and solutions associated with cross-lagged effects
models. Journal of Educational Psychology. Advance online
publication. https://doi.org/10.1037/edu0000700
• De methodologische aanpak werkt misschien niet goed!
• (zie hetzelfde bij fMRI)
• Dus: altijd open blijven staan…breed lezen
Retrieval practice: maakt het nog uit wat
HOE je ophaalt?
Flitskaart uit Biologie voor jou (HAVO 5)
https://pikloen.medium.com/het-kaartensysteem-leerling-en-leraar-facb8cd8814e
Endres, T., Kranzdorf, L., Schneider, V. et al. It matters how to recall – task
differences in retrieval practice. Instr Sci 48, 699–728 (2020).
https://doi.org/10.1007/s11251-020-09526-1
Retrieval practice: maakt het nog uit wat
HOE je ophaalt?
Als je ‘targeted’ gebruikt laat dit dan hand in hand gaan met
‘holistic’ retrieval.
Dit is een leeg blaadje
DNA mRNA eiwit
Je kunt het ‘free retrieval’ ook kaderen:
een voorbeeld
DNA mRNA eiwit
replicatie
translatie
transcriptie
replicatie
translatie
transcriptie
Conclusie
• Evidence kan nuttige inzichten geven.
• Uiteindelijk moeten leraren het zelf in hun onderwijs
integreren – zij zijn de experts daarin.
• Onderzoek heeft een bijsluiter nodig
• Opbrengsten
• Hoe je het kan gebruiken
• Bijwerkingen
• Schuurde dit?
GOED!

More Related Content

Similar to Evidence informed: Waar is de Bijsluiter?

(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijs
(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijs(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijs
(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijs
Christian Bokhove
 
School aan zet wiskundig denken
School aan zet wiskundig denkenSchool aan zet wiskundig denken
School aan zet wiskundig denkenLionel Kole
 
Les 1, verschil mag er zijn
Les 1, verschil mag er zijnLes 1, verschil mag er zijn
Les 1, verschil mag er zijnCollin Koenen
 
Activerende werkvormen
Activerende werkvormenActiverende werkvormen
Activerende werkvormen
Ton Kallenberg
 
Toetsen
ToetsenToetsen
Keynote martin valcke
Keynote martin valckeKeynote martin valcke
Keynote martin valckemkuiten
 
Keynote martin valcke
Keynote martin valckeKeynote martin valcke
Keynote martin valckemkuiten
 
20140701 impulsklasonderzoek hogeschool leiden
20140701 impulsklasonderzoek hogeschool leiden20140701 impulsklasonderzoek hogeschool leiden
20140701 impulsklasonderzoek hogeschool leiden
Bart van Loon
 
Powerpoint hl ce vt32013 les 5 ww + verslag(1)
Powerpoint hl ce vt32013 les 5 ww + verslag(1)Powerpoint hl ce vt32013 les 5 ww + verslag(1)
Powerpoint hl ce vt32013 les 5 ww + verslag(1)Anne de Hulster
 
Effectief leren en formatief evalueren
Effectief leren en formatief evaluerenEffectief leren en formatief evalueren
Effectief leren en formatief evalueren
Tim Surma
 
Op weg naar Evidence-informed onderwijs
Op weg naar Evidence-informed onderwijsOp weg naar Evidence-informed onderwijs
Op weg naar Evidence-informed onderwijs
Pedro De Bruyckere
 
CS K&J lesbeurt 1 introductie.pptx
CS K&J lesbeurt 1 introductie.pptxCS K&J lesbeurt 1 introductie.pptx
CS K&J lesbeurt 1 introductie.pptx
sana788228
 
Critical reflective team behaviour: do differences matter?
Critical reflective team behaviour: do differences matter?Critical reflective team behaviour: do differences matter?
Critical reflective team behaviour: do differences matter?Mieke86
 
Artikel analyseren van toetsen
Artikel analyseren van toetsenArtikel analyseren van toetsen
Artikel analyseren van toetsenKaren van Kooten
 
Social Learning Analytics
Social Learning AnalyticsSocial Learning Analytics
Social Learning Analytics
Rory Sie
 
Geert Driessen & Ton Mooij (2007) TVO Onderpresteren begaafdheid en leerling-...
Geert Driessen & Ton Mooij (2007) TVO Onderpresteren begaafdheid en leerling-...Geert Driessen & Ton Mooij (2007) TVO Onderpresteren begaafdheid en leerling-...
Geert Driessen & Ton Mooij (2007) TVO Onderpresteren begaafdheid en leerling-...
Driessen Research
 
Presentatie pjotrtraining
Presentatie pjotrtrainingPresentatie pjotrtraining
Presentatie pjotrtrainingWJPA
 

Similar to Evidence informed: Waar is de Bijsluiter? (20)

(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijs
(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijs(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijs
(On)waarheden en (on)bekende zaken uit onderzoek over reken-wiskundeonderwijs
 
School aan zet wiskundig denken
School aan zet wiskundig denkenSchool aan zet wiskundig denken
School aan zet wiskundig denken
 
Les 1, verschil mag er zijn
Les 1, verschil mag er zijnLes 1, verschil mag er zijn
Les 1, verschil mag er zijn
 
Activerende werkvormen
Activerende werkvormenActiverende werkvormen
Activerende werkvormen
 
Toetsen
ToetsenToetsen
Toetsen
 
Keynote martin valcke
Keynote martin valckeKeynote martin valcke
Keynote martin valcke
 
Keynote martin valcke
Keynote martin valckeKeynote martin valcke
Keynote martin valcke
 
20140701 impulsklasonderzoek hogeschool leiden
20140701 impulsklasonderzoek hogeschool leiden20140701 impulsklasonderzoek hogeschool leiden
20140701 impulsklasonderzoek hogeschool leiden
 
Powerpoint hl ce vt32013 les 5 ww + verslag(1)
Powerpoint hl ce vt32013 les 5 ww + verslag(1)Powerpoint hl ce vt32013 les 5 ww + verslag(1)
Powerpoint hl ce vt32013 les 5 ww + verslag(1)
 
Effectief leren en formatief evalueren
Effectief leren en formatief evaluerenEffectief leren en formatief evalueren
Effectief leren en formatief evalueren
 
Hhs april 2014
Hhs april 2014Hhs april 2014
Hhs april 2014
 
Op weg naar Evidence-informed onderwijs
Op weg naar Evidence-informed onderwijsOp weg naar Evidence-informed onderwijs
Op weg naar Evidence-informed onderwijs
 
1bad Theunynck Lies .
1bad Theunynck Lies .1bad Theunynck Lies .
1bad Theunynck Lies .
 
CS K&J lesbeurt 1 introductie.pptx
CS K&J lesbeurt 1 introductie.pptxCS K&J lesbeurt 1 introductie.pptx
CS K&J lesbeurt 1 introductie.pptx
 
Critical reflective team behaviour: do differences matter?
Critical reflective team behaviour: do differences matter?Critical reflective team behaviour: do differences matter?
Critical reflective team behaviour: do differences matter?
 
Artikel analyseren van toetsen
Artikel analyseren van toetsenArtikel analyseren van toetsen
Artikel analyseren van toetsen
 
Social Learning Analytics
Social Learning AnalyticsSocial Learning Analytics
Social Learning Analytics
 
Digt
DigtDigt
Digt
 
Geert Driessen & Ton Mooij (2007) TVO Onderpresteren begaafdheid en leerling-...
Geert Driessen & Ton Mooij (2007) TVO Onderpresteren begaafdheid en leerling-...Geert Driessen & Ton Mooij (2007) TVO Onderpresteren begaafdheid en leerling-...
Geert Driessen & Ton Mooij (2007) TVO Onderpresteren begaafdheid en leerling-...
 
Presentatie pjotrtraining
Presentatie pjotrtrainingPresentatie pjotrtraining
Presentatie pjotrtraining
 

More from Christian Bokhove

Master Mathematics Teachers in Chinese primary schools
Master Mathematics Teachers in Chinese primary schoolsMaster Mathematics Teachers in Chinese primary schools
Master Mathematics Teachers in Chinese primary schools
Christian Bokhove
 
Can data from largescale assessments ever be useful For mathematics education?
Can data from largescale assessments ever be useful For mathematics education?Can data from largescale assessments ever be useful For mathematics education?
Can data from largescale assessments ever be useful For mathematics education?
Christian Bokhove
 
Creating interactive digital books for the transition from secondary to under...
Creating interactive digital books for the transition from secondary to under...Creating interactive digital books for the transition from secondary to under...
Creating interactive digital books for the transition from secondary to under...
Christian Bokhove
 
Research on school inspections: What do we know?
Research on school inspections: What do we know?Research on school inspections: What do we know?
Research on school inspections: What do we know?
Christian Bokhove
 
Master mathematics teachers: What do Chinese primary schools look like?
Master mathematics teachers: What do Chinese primary schools look like?Master mathematics teachers: What do Chinese primary schools look like?
Master mathematics teachers: What do Chinese primary schools look like?
Christian Bokhove
 
The role of non-cognitive factors in science achievement: an analysis of PISA...
The role of non-cognitive factors in science achievement: an analysis of PISA...The role of non-cognitive factors in science achievement: an analysis of PISA...
The role of non-cognitive factors in science achievement: an analysis of PISA...
Christian Bokhove
 
Multilevel modelling of Chinese primary children’s metacognitive strategies i...
Multilevel modelling of Chinese primary children’s metacognitive strategies i...Multilevel modelling of Chinese primary children’s metacognitive strategies i...
Multilevel modelling of Chinese primary children’s metacognitive strategies i...
Christian Bokhove
 
Cryptography
CryptographyCryptography
Cryptography
Christian Bokhove
 
Help-seeking in an online maths environment: A sequence analysis of log files
Help-seeking in an online maths environment: A sequence analysis of log filesHelp-seeking in an online maths environment: A sequence analysis of log files
Help-seeking in an online maths environment: A sequence analysis of log files
Christian Bokhove
 
Learning loss and learning inequalities during the covid-19 pandemic: an anal...
Learning loss and learning inequalities during the covid-19 pandemic: an anal...Learning loss and learning inequalities during the covid-19 pandemic: an anal...
Learning loss and learning inequalities during the covid-19 pandemic: an anal...
Christian Bokhove
 
The challenge of proof in the transition from A-level mathematics to university
The challenge of proof in the transition from A-level mathematics to universityThe challenge of proof in the transition from A-level mathematics to university
The challenge of proof in the transition from A-level mathematics to university
Christian Bokhove
 
How can we develop expansive, research-informed ITE ?
How can we develop expansive, research-informed ITE ?How can we develop expansive, research-informed ITE ?
How can we develop expansive, research-informed ITE ?
Christian Bokhove
 
Discussant EARLI sig 27
Discussant EARLI sig 27Discussant EARLI sig 27
Discussant EARLI sig 27
Christian Bokhove
 
Transparency in Data Analysis
Transparency in Data AnalysisTransparency in Data Analysis
Transparency in Data Analysis
Christian Bokhove
 
Proof by induction in Calculus: Investigating first-year students’ examinatio...
Proof by induction in Calculus: Investigating first-year students’ examinatio...Proof by induction in Calculus: Investigating first-year students’ examinatio...
Proof by induction in Calculus: Investigating first-year students’ examinatio...
Christian Bokhove
 
Methodological innovation for mathematics education research
Methodological innovation for mathematics education researchMethodological innovation for mathematics education research
Methodological innovation for mathematics education research
Christian Bokhove
 
Roundtable slides RiTE Paderborn 24/9/2021
Roundtable slides RiTE Paderborn 24/9/2021Roundtable slides RiTE Paderborn 24/9/2021
Roundtable slides RiTE Paderborn 24/9/2021
Christian Bokhove
 
Structural Topic Modelling of Ofsted Documents
Structural Topic Modelling of Ofsted DocumentsStructural Topic Modelling of Ofsted Documents
Structural Topic Modelling of Ofsted Documents
Christian Bokhove
 
Learning loss and learning inequalities during the Covid-19 pandemic: an anal...
Learning loss and learning inequalities during the Covid-19 pandemic: an anal...Learning loss and learning inequalities during the Covid-19 pandemic: an anal...
Learning loss and learning inequalities during the Covid-19 pandemic: an anal...
Christian Bokhove
 
USING MRQAP TO ANALYSE THE DEVELOPMENT OF MATHEMATICS PRE-SERVICE TRAINEES’ C...
USING MRQAP TO ANALYSE THE DEVELOPMENT OF MATHEMATICS PRE-SERVICE TRAINEES’ C...USING MRQAP TO ANALYSE THE DEVELOPMENT OF MATHEMATICS PRE-SERVICE TRAINEES’ C...
USING MRQAP TO ANALYSE THE DEVELOPMENT OF MATHEMATICS PRE-SERVICE TRAINEES’ C...
Christian Bokhove
 

More from Christian Bokhove (20)

Master Mathematics Teachers in Chinese primary schools
Master Mathematics Teachers in Chinese primary schoolsMaster Mathematics Teachers in Chinese primary schools
Master Mathematics Teachers in Chinese primary schools
 
Can data from largescale assessments ever be useful For mathematics education?
Can data from largescale assessments ever be useful For mathematics education?Can data from largescale assessments ever be useful For mathematics education?
Can data from largescale assessments ever be useful For mathematics education?
 
Creating interactive digital books for the transition from secondary to under...
Creating interactive digital books for the transition from secondary to under...Creating interactive digital books for the transition from secondary to under...
Creating interactive digital books for the transition from secondary to under...
 
Research on school inspections: What do we know?
Research on school inspections: What do we know?Research on school inspections: What do we know?
Research on school inspections: What do we know?
 
Master mathematics teachers: What do Chinese primary schools look like?
Master mathematics teachers: What do Chinese primary schools look like?Master mathematics teachers: What do Chinese primary schools look like?
Master mathematics teachers: What do Chinese primary schools look like?
 
The role of non-cognitive factors in science achievement: an analysis of PISA...
The role of non-cognitive factors in science achievement: an analysis of PISA...The role of non-cognitive factors in science achievement: an analysis of PISA...
The role of non-cognitive factors in science achievement: an analysis of PISA...
 
Multilevel modelling of Chinese primary children’s metacognitive strategies i...
Multilevel modelling of Chinese primary children’s metacognitive strategies i...Multilevel modelling of Chinese primary children’s metacognitive strategies i...
Multilevel modelling of Chinese primary children’s metacognitive strategies i...
 
Cryptography
CryptographyCryptography
Cryptography
 
Help-seeking in an online maths environment: A sequence analysis of log files
Help-seeking in an online maths environment: A sequence analysis of log filesHelp-seeking in an online maths environment: A sequence analysis of log files
Help-seeking in an online maths environment: A sequence analysis of log files
 
Learning loss and learning inequalities during the covid-19 pandemic: an anal...
Learning loss and learning inequalities during the covid-19 pandemic: an anal...Learning loss and learning inequalities during the covid-19 pandemic: an anal...
Learning loss and learning inequalities during the covid-19 pandemic: an anal...
 
The challenge of proof in the transition from A-level mathematics to university
The challenge of proof in the transition from A-level mathematics to universityThe challenge of proof in the transition from A-level mathematics to university
The challenge of proof in the transition from A-level mathematics to university
 
How can we develop expansive, research-informed ITE ?
How can we develop expansive, research-informed ITE ?How can we develop expansive, research-informed ITE ?
How can we develop expansive, research-informed ITE ?
 
Discussant EARLI sig 27
Discussant EARLI sig 27Discussant EARLI sig 27
Discussant EARLI sig 27
 
Transparency in Data Analysis
Transparency in Data AnalysisTransparency in Data Analysis
Transparency in Data Analysis
 
Proof by induction in Calculus: Investigating first-year students’ examinatio...
Proof by induction in Calculus: Investigating first-year students’ examinatio...Proof by induction in Calculus: Investigating first-year students’ examinatio...
Proof by induction in Calculus: Investigating first-year students’ examinatio...
 
Methodological innovation for mathematics education research
Methodological innovation for mathematics education researchMethodological innovation for mathematics education research
Methodological innovation for mathematics education research
 
Roundtable slides RiTE Paderborn 24/9/2021
Roundtable slides RiTE Paderborn 24/9/2021Roundtable slides RiTE Paderborn 24/9/2021
Roundtable slides RiTE Paderborn 24/9/2021
 
Structural Topic Modelling of Ofsted Documents
Structural Topic Modelling of Ofsted DocumentsStructural Topic Modelling of Ofsted Documents
Structural Topic Modelling of Ofsted Documents
 
Learning loss and learning inequalities during the Covid-19 pandemic: an anal...
Learning loss and learning inequalities during the Covid-19 pandemic: an anal...Learning loss and learning inequalities during the Covid-19 pandemic: an anal...
Learning loss and learning inequalities during the Covid-19 pandemic: an anal...
 
USING MRQAP TO ANALYSE THE DEVELOPMENT OF MATHEMATICS PRE-SERVICE TRAINEES’ C...
USING MRQAP TO ANALYSE THE DEVELOPMENT OF MATHEMATICS PRE-SERVICE TRAINEES’ C...USING MRQAP TO ANALYSE THE DEVELOPMENT OF MATHEMATICS PRE-SERVICE TRAINEES’ C...
USING MRQAP TO ANALYSE THE DEVELOPMENT OF MATHEMATICS PRE-SERVICE TRAINEES’ C...
 

Evidence informed: Waar is de Bijsluiter?

  • 1. EVIDENCE INFORMED WAAR IS DE BIJSLUITER? ResearchEd Christian Bokhove en Per-Ivar Kloen
  • 2. Bijsluiter • Medische analogie wordt vaak gemaakt • In Engeland en andere landen is dit de aanleiding geweest for ‘evidence-based practice’ (bv Goldacre) • Als gevolg meer aandacht voor evaluaties en interventies, alsmede RCTs • Maar wat we missen is een bijsluiter
  • 3. Bijwerkingen • Een bijsluiter bevat informatie over • De werking van een ‘medicijn’ • Gebruiksaanwijzing • De bijwerkingen • Zhao (2017) • Dit is niet een slinkse manier om evidence te ondermijnen Zhao, Y. (2017). What works may hurt: Side effects in education. Journal of Educational Change, 18(1), 1-19.
  • 4. Uitgangspunt • Doel niet om te bevestigen wat je al weet, maar jullie te laten nadenken over wat je al weet (of denkt te weten). • Dus dat zal soms misschien schuren. • Misschien erger je je wel omdat we de positieve kanten niet genoeg belichten. • Pech! (Geen dual coding – jullie houden de aandacht er maar bij!)
  • 5. Vier voorbeelden waar we willen praten over een bijsluiter 1. Instructie en Einstellung 2. Retrieval practice: wat? 3. Motivatie en prestatie 4. Retrieval practice: hoe?
  • 6. 1. Instructie en Einstellung • 80s werk Sweller (Cognitive Load Theory) is geweldig • Maar naar mijn mening niet altijd goed ‘vertaald’? • Daarom ga ik over dit interessante artikel uit 1982 vertellen. Zoals wel vaker in de 80er jaren is de sample size klein. • Volgens Sweller (2016) staan deze experimenten aan de basis van de theorie. Sweller, J. (2016). Story of a research program. Education Review, 23.
  • 7. Problemen 2a Start 60 81 34 35 35 31 Doel 111 453 21 156 315 3 Oplossing x3 -69 x3 Bewerkingen -69 De a in 2a staat voor ‘alternating’ x3 -69 x3 -69 x3 -69 x3 -69 x3 -69 x3 -69 x3 -69 x3 x3 x3 -69 x3 -69 x3 -69 x3 -69 6a 10a 2c 4a (1) 4a (2)
  • 8. De history-cued groep werd aan oplossingen herinnerd. Bijvoorbeeld na het oplossen van 6a: De oplossing van het eerste problem was x – De oplossing van het tweede problem was x – x – De oplossing van het derde problem was x – x – De oplossing van het vierde problem was x – x – x – Daarna werd gevraagd om de laatste oplossing te onthouden, en nog een keer in te voeren.
  • 9. De resultaten M doet langer over 10a! Maar H doet langer over 2c!
  • 10. Einstellung • “Often called a problem solving set, Einstellung refers to a person's predisposition to solve a given problem in a specific manner even though better or more appropriate methods of solving the problem exist.” • Einstellung komt vaker voor • Algebra • Schaak paper • Ergo…balans nodig….laten zien niet genoeg https://www.sciencedirect.com/science/article/pii/S0010027708001 133
  • 11. De conclusie van Sweller (2016) “Perhaps we should be showing students how to solve problems rather than having them solve the problems themselves?” Maar we hebben gezien dat er ook een risico van Einstellung is!
  • 12. Retrieval practice: een voorbeeld bij biologie
  • 13.
  • 14.
  • 15. Aan wie denken jullie bij deze score?
  • 16. Rosenshine, B.V. (2012). Principles of Instruction: Research-Based Strategies That All Teachers Should Know. The American Educator, 36, 12.
  • 17. Obtain a high success rate: It is important for students to achieve a high success rate during classroom instruction. The research also suggests that the optimal success rate for fostering student achievement appears to be about 80 percent. A success rate of 80 percent shows that students are learning the material, and it also shows that the students are challenged.
  • 18. Hoe kan je hier onderscheid maken tussen het beter worden van leerlingen of de juiste vraag hebben gesteld?
  • 19. Maakt het nog uit wat WAT je ophaalt?
  • 20. Maakt het nog uit wat WAT je ophaalt? Kijk uit met teveel basiskennis. Het is een begin om mee te kunnen denken over problemen.
  • 21. 3. Motivatie en prestatie Social media komt het regelmatig voor dat ‘motivatie’ als onbelangrijk wordt neergezet De stelling is dat motivatie voorkomt uit prestatie • Garon‐Carrier, G., Boivin, M., Guay, F., Kovas, Y., Dionne, G., Lemelin, J. P., ... & Tremblay, R. E. (2016). Intrinsic motivation and achievement in mathematics in elementary school: A longitudinal investigation of their association. Child development, 87(1), 165-175. • Ma, X., & Xu, J. (2004). The causal ordering of mathematics anxiety and mathematics achievement: a longitudinal panel analysis. Journal of adolescence, 27(2), 165-179. En inderdaad, die geven de andere richting, maar dat doet niet andere bronnen ongedaan! De vraag ‘wat klopt er niet aan die bronnen’ is onterecht. Het zijn goede studies. Maar is het een ‘hoofdzonde’ om te zeggen dat motivatie leidt tot betere prestaties? Nee! Daarvoor moet je echt breder lezen.
  • 22. • Terminologie verschilt • Motivatie • Self-concept • Emotions • Enjoyment • Boredom • “positive emotions (enjoyment, pride) positively predicted subsequent achievement (math end-of-the-year grades and test scores)” en vice versa. Pekrun, R., Lichtenfeld, S., Marsh, H. W., Murayama, K., & Goetz, T. (2017). Achievement emotions and academic performance: Longitudinal models of reciprocal effects. Child development, 88(5), 1653-1670.
  • 23. • Enjoyment en boredom • “Mathematics achievement positively predicted enjoyment and negatively predicted boredom.” • “Enjoyment positively, and boredom negatively, predicted subsequent mathematics achievement.” Putwain, D. W., Becker, S., Symes, W., & Pekrun, R. (2018). Reciprocal relations between students’ academic enjoyment, boredom, and achievement over time. Learning and Instruction, 54, 73-81.
  • 24. Kortom… • En ook ‘goal setting’….. • Je hebt dit hele plaatje nodig • Bijsluiter bij de bijsluiter: • Núñez-Regueiro, F., Juhel, J., Bressoux, P., & Nurra, C. (2021). Identifying reciprocities in school motivation research: A review of issues and solutions associated with cross-lagged effects models. Journal of Educational Psychology. Advance online publication. https://doi.org/10.1037/edu0000700 • De methodologische aanpak werkt misschien niet goed! • (zie hetzelfde bij fMRI) • Dus: altijd open blijven staan…breed lezen
  • 25. Retrieval practice: maakt het nog uit wat HOE je ophaalt?
  • 26. Flitskaart uit Biologie voor jou (HAVO 5)
  • 28. Endres, T., Kranzdorf, L., Schneider, V. et al. It matters how to recall – task differences in retrieval practice. Instr Sci 48, 699–728 (2020). https://doi.org/10.1007/s11251-020-09526-1
  • 29. Retrieval practice: maakt het nog uit wat HOE je ophaalt? Als je ‘targeted’ gebruikt laat dit dan hand in hand gaan met ‘holistic’ retrieval.
  • 30.
  • 31. Dit is een leeg blaadje
  • 32. DNA mRNA eiwit Je kunt het ‘free retrieval’ ook kaderen: een voorbeeld
  • 35. Conclusie • Evidence kan nuttige inzichten geven. • Uiteindelijk moeten leraren het zelf in hun onderwijs integreren – zij zijn de experts daarin. • Onderzoek heeft een bijsluiter nodig • Opbrengsten • Hoe je het kan gebruiken • Bijwerkingen • Schuurde dit? GOED!

Editor's Notes

  1. In England, an important role for the judgement of educational quality, is provided by the national school inspectorate Ofsted. Periodically they inspect schools and judge them. The result of the inspection is captured in inspection reports and associated documents. Ofsted has had several chief inspectors (HMCI) since 2000 and every HMCI tends to put his/her own mark on the inspectorate. This paper extends the analysis of the corpus in Author (2020) using the corpus of more than 17,000 Ofsted documents which were scraped from their website with text-mining techniques. Using the computational research method of structural topic modelling I re-analyse a set of documents that typically could not be analysed with manual methods. I juxtapose the findings with previous findings from sentiment analyses. The paper does not just cover the substantive topic at hand, but also provide insight in how the methods work, and how they provide insight in policy shifts during the ‘reign’ of different HMCIs. All in all, we can see how such text-mining techniques allow us to analyse existing documents at scale.