Presentasjonen til Svend Andreas Horgen fra HiST om bruk av tester i its learning på Kongsbergkonferansen 2009.

1. Bruk av digitale tester
Svend Andreas Horgen
Høgskolelektor@Høgskolen i Sør Trøndelag
Kursholder for stiftelsen TISIP

2. TISIP
Kurs
Fagskole
Lærebøker
FoU/e-læring
www.tisip.no

7. agenda

8. digitale tester
aktivitet distraktørtipset
eksempler formativ
fallgruver
erfaringer gode spørsmål
it´s learning
helhetlig opplegg kategorier
kreativt bruk
kompetansekartlegging kvalitetssikring
pedagogisk bruk planlegging
refleksjon spørsmålsbank
sekvensiering
poengberegning
spørsmålstyper studentaktivisering
statistikk
tankekart testoppsett
summativ
vits

9. Aktivitet
Skriv noen positive og negative sider
ved bruk av digitale tester...

10. Hvorfor bruke tester?
Effektivitet:
- Automatisert retting
- Gjenbruk
Summativt:
- Dekke pensum
- Tilfeldig utvalg av spørsmål
Hvo - Objektiv retting
rdan
Formativt: oppn
å go
- Støtte i læringsprosessen d
- Umiddelbar tilbakemelding
- Ta testen når en selv vil
Kartlegge
Repetis ...
jon
n
o
asj
Pekepinn Skreddersy
tiv
o
M

11. Wordle
Deres stikkord: Hva er en digital test?

12. !

13. He finally made it

14. Gode tester:
teori og praksis

15. Hva vil vi teste?
Teste ferdigheter, kunnskap og
forståelse - ikke evnen til å ta
flervalgstester
Ikke gi bort svaret eller lure ved dårlig
formulerte spørsmål

16. 4 iterative faser for å lage gode tester
Utforming
Forbedring Distribusjon
Vurdering
Utforming: gode spørsmål, nivå, testegenskaper, ...
Distribusjon: utdeling, juks, # forsøk, informasjon, ...
Vurdering: beregne poeng, karaktergrenser, tilbakemelding, ...
Forbedring: analyse, identifisere dårlige spørsmål, ...

17. Utforming
Utformingsfasen Forbedring Distribusjon
Vurdering
testegenskaper
lage godt formulerte spørsmål
nivå
mange spørsmålstyper å
velge mellom...

18. Utforming
Forbedring Distribusjon
Vurdering
Demo:
Hvordan virker
spørsmålstypene
i it´s learning

19. ene
Utforming
p
y
t
lle
Forbedring Distribusjon
A Vurdering

20. ene
Utforming
p
y
t
lle
Forbedring Distribusjon
A Vurdering

21. ene
Utforming
p
y
t
lle
Forbedring Distribusjon
A Vurdering

22. ene
Utforming
p
y
t
lle
Forbedring Distribusjon
A Vurdering

23. ene
Utforming
p
y
t
lle
Forbedring Distribusjon
A Vurdering

24. ene
Utforming
p
y
t
lle
Forbedring Distribusjon
A Vurdering

25. ene
Utforming
p
y
t
lle
Forbedring Distribusjon
A Vurdering

26. ene
Utforming
p
y
t
lle
Forbedring Distribusjon
A Vurdering

27. ene
Utforming
p
y
t
lle
Forbedring Distribusjon
A Vurdering

28. e
uv
Utforming
r
llg
Fa
Forbedring Distribusjon
Vurdering

29. e
uv
Utforming
r
llg
Fa
Forbedring Distribusjon
Vurdering

30. e
uv
Utforming
r
llg
Fa
Forbedring Distribusjon
Vurdering

31. e
uv
Utforming
r
llg
Observasjon
Fa
Forbedring Distribusjon
Vurdering
Det å ikke krysse ut et alternativ, er
også et aktivt valg
Antall poeng = sum av korrekt
plasserte kryss og korrekt plasserte
ikke-kryss, delt på totalt antall
alternativer
Unntak: Helgardering gir 0 poeng

32. e
uv
Utforming
Konsekvens
r
llg
Fa
Forbedring Distribusjon
Hvis man krysser av for Kennedy (galt) og bare ham, så
Vurdering
vil man få 0,51 poeng, fordi 0,17+0,17+0,17 er 0,51.
Disse oppnås fordi Washington, Roosevelt og Johnson
var korrekt ikke avkrysset.
Hvis læreren legger til 4 ekstra alternativer som er
gale (for å lure deltakerne ytterligere), så vil oppgaven
ha totalt 10 alternativer og fortsatt er bare to riktige.
Fordi nå er det 10 alternativer, så hvert
Dersom man fortsatt krysser av for bare Kennedy, vil
alternativ gir 0,1 poeng. Det var hele 7 korrekt
det bli hele 0,7 poeng. Hvorfor det?
plasserte ikke-kryss, så man får kun trekk for
Nixon, trekk for Lincoln og trekk for
Kennedy!!!
Luringens strategi: Er det mange
alternativer, og få riktige svar, så
sett kun ett kryss for å
maksimere utbyttet

33. ge?
la
Utforming
n
rda
o
Forbedring Distribusjon
Hv Vurdering

34. ge?
la
Utforming
n
rda
o
Forbedring Distribusjon
Hv Vurdering

35. ge?
la
Utforming
n
rda
o
Forbedring Distribusjon
Hv Vurdering

36. ge?
la
Utforming
n
rda
o
Forbedring Distribusjon
Hv Vurdering

37. t...
eks
it
Fr

38. ke?
s
Hu
Cheat Sheet
http://www.aitel.hist.no/~svendah/FoU/digitest.php

39. Utforming
Tips 1: alternativer Forbedring Distribusjon
Vurdering
la alle alternativer
Hvem har skrevet den norske
være like sannsynlige boka “Webprogrammering i
PHP”?
Stig Sæther Bakken
unngå systematiske Svend Andreas Horgen
Henrik Ibsen
tendenser: hvilket
alternativ er korrekt? [1]
Ikke la et spørsmål
avsløre svaret på et
[1]: Ivar Bjørgen og Helga Ask: Læringsmøter IV, NTNU (2005)

40. Utforming
Tips 2: progresjon Forbedring Distribusjon
Vurdering
la spørsmål bli 1. Flervalg: hva betyr “convenient”?
2. Klikkpunkt: “hvor i bildet finner
vanskeligere utover i du “hickory, birch og holly”?
3. Finn par: “hvilke norske og
testen engelske hører sammen”?
4. Fyll inn blank: “skriv inn det
ordet som mangler”
varier spørsmålstyper
rundt samme tema

41. Utforming
Tips 3: gjetting Forbedring Distribusjon
Vurdering
hvordan redusere
sjansen for gjetting?
bruk flere nesten like
spørsmål!

42. Utforming
Tips 4: variasjon Forbedring Distribusjon
Vurdering
Unngå bruk av alle 10
spørsmålstypene i én og samme test
varier derimot på tvers av tester
god bruk av bilder kan bidra til
variasjon
interaktive spm.typer kan hjelpe elever
til å se større linjer i fagstoffet / røde

43. Utforming
Tips 5: tilbakemelding Forbedring Distribusjon
Vurdering
det er motiverende å ikke
bare få vite om en har
rett/feil, men også hvorfor
En kan også velge å ikke
gi tilbakemelding, men
heller gjennomgå fasiten
i plenum

44. Utforming
Tips 6: kontekst Forbedring Distribusjon
Vurdering
sett kontekst vha stimuli,
da blir det lettere å sette
seg inn i
Aristoteles var en gresk filosof
problemstillingen... som bla bla bla. Hva var
essensen i hans teorier?
a)
... og svare riktig b)
c)

45. Utforming
Unngå... Forbedring Distribusjon
ift?
revet G
har sk land
er Kjel
Hvem
eksand jelland
Al Vurdering
nder B
Alexa d
Kiellan
ander
Alex land
er Kiel
ksand
Ale
nesten like
ord
r
kle Hvilke av disse
tvi d
u eksemplene
e
em
yst rav m
s gir ikke feil resultat?
n e
k
re ilk
er a
dobbel
Nå uter n, hv an h
k
dis ukere må h
r
br lse
ede jort?
nekting
ber Hva
g
for er N
orge
s be
s
Rose te fotba
pronomen llag
nbo
rg ?
VIF
Bra
nn
Ing
en a
v di
sse
Eksemplene er laget av: Greta Hjertø, HiST motivert av Svein
Magne Sirnes sin bok om flervalgstester

46. Eva Nohr:
engelsk glosetest

47. Utforming
Et typisk spørsmål Forbedring Distribusjon
Vurdering

48. Utforming
Distraktør-tipset Forbedring Distribusjon
Vurdering
1. Gode
ddd
spørsmål?
ccc
bbb
Gode
aaa
bbb
2. aaa
distraktøre
bbb
r!
3.
Flere tips? Bok av Svein Magne Sirnes:
Flervalgsoppgaver - konstruksjon og analyse

49. Konklusjon:
Det er utfordrende å
lage gode tester
Utforming
Forbedring Distribusjon
Vurdering

50. !!

51. Prak
tisk
Hvordan inkludere økt
video?
www.youtube.com
www.teachertube.com

52. Prak
tisk
økt
Just do it
• Mål: Anvend teorien i praksis, lær verktøyet
• Lag en test med tre spørsmål
I. varier spørsmålstypene
II. inkluder gjerne en film fra youtube
• Lag en ny test med noen spørsmål
• Lag en tredje test, men ikke lag nye spørsmål
I. importer spørsmål fra test 1 og 2
II. prøv kategorisering av spørsmål
III. prøv avanserte opsjoner i
testverktøyet

53. Kompetansekartlegging
Hvorfor bruke digitale tester
Gode tester: teori og praksis, tips og triks
Praktisk økt: prøv selv
Pedagogisk og kreativ bruk av digitale tester
Diskusjon
Gjennomgang av eksempler på formativt bruk av tester
Summative aspekter og avanserte tema

54. Mine erfaringer og tips i form av nettbasert fag (6 studiepoeng)
praktisk og ped.bruk av IKT for lærere: http://aitel.hist.no/fag/lms
ped.bruk av digitale tester: http://aitel.hist.no/fag/dit/
Min ressursside for pedagogisk av IKT
www.aitel.hist.no/~svendah/FoU/
Min blogg med refleksjoner og erfaringer
http://gjemmesiden.blogspot.com
Ymse om digitale tester (nyhetsbrev, wiki ++)
http://digitest.no
Kontaktinformasjon
@mail: svend.horgen@hist.no
Jobb: www.aitel.hist.no/~svendah
TISIP (IT, forskning og e-læring): www.tisip.no