Mats Brenner, Högskolan Gävle presenterar och diskuterar vilka fördelar som finns med datoriserad tentamen och digitala prov. Vad behövs för planera och genomföra digitala test samt vad behöver förändras i verksamheten för att detta skall bli framgångsrikt.
Han delar också med sig av aktuell info om den SOU som nu även kommit kring digitala nationella prov för skolan.
Mats Brenner, CV http://mbrenner.weebly.com/ och på Slidesharehttp://www.slideshare.net/MatsBrenner
Projekt Digital tentamen (2015) SUNET Inkubator: http://www.korturl.com/digitaltentamen
SOU 2016:25 Likvärdigt, rättssäkert och effektivt – ett nytt nationellt system för kunskapsbedömning:http://www.regeringen.se/rattsdokument/statens-offentliga-utredningar/2016/03/sou-201625/
Moderator, V Ordförande, SVERD Ebba Ossiannilsson
Digitala nationella prov i skolan och datoriserad tentamen - hur hänger det i...Mats Brenner
Om hur vi kan förbättra examinationsformerna och fånga mer av kursdeltagarnas kunskapsläge. Frågor om varför vi nu kan minska papperstenan på lärosätena och varför lärarutbildare och lärarstudenter nu behöver lära sig hantera systemlösningar för digitala prov besvaras.
Projekt Digital tentamen - SUNET-dagarna HT15 i UmeåMats Brenner
Presentation om Projekt Digital tentamen - SUNET Inkubator, vid SUNET-dagarna i Umeå, HT15. Presentatör: Mats Brenner, Högskolan i Gävle, Learning Center
Digitala prov och examination - är verksamhetsutvecklingMats Brenner
Presentation kring Digitala prov och examination - är verksamhetsutveckling, vid Samverkansgruppen för högskoleingenjörsutbildning 10-11 april, 2019 - Karlstads universitet.
DIGITALA EXAMINATIONER: Nuläget och erfarenhetsutbyte av införandeMats Brenner
DIGITALA EXAMINATIONER: Nuläget och erfarenhetsutbyte av införande. Presentation på konferensen nu2018.se, 11/10-2018. Mats Brenner för Projekt Digital tentamen II - SUNET Inkubator
Digitala nationella prov i skolan och datoriserad tentamen - hur hänger det i...Mats Brenner
Om hur vi kan förbättra examinationsformerna och fånga mer av kursdeltagarnas kunskapsläge. Frågor om varför vi nu kan minska papperstenan på lärosätena och varför lärarutbildare och lärarstudenter nu behöver lära sig hantera systemlösningar för digitala prov besvaras.
Projekt Digital tentamen - SUNET-dagarna HT15 i UmeåMats Brenner
Presentation om Projekt Digital tentamen - SUNET Inkubator, vid SUNET-dagarna i Umeå, HT15. Presentatör: Mats Brenner, Högskolan i Gävle, Learning Center
Digitala prov och examination - är verksamhetsutvecklingMats Brenner
Presentation kring Digitala prov och examination - är verksamhetsutveckling, vid Samverkansgruppen för högskoleingenjörsutbildning 10-11 april, 2019 - Karlstads universitet.
DIGITALA EXAMINATIONER: Nuläget och erfarenhetsutbyte av införandeMats Brenner
DIGITALA EXAMINATIONER: Nuläget och erfarenhetsutbyte av införande. Presentation på konferensen nu2018.se, 11/10-2018. Mats Brenner för Projekt Digital tentamen II - SUNET Inkubator
Presentation biblioteks-nätverksträffen 2014-11-11 i UppsalaMats Brenner
En presentation vad Learning Center vid Högskolan i Gävle och Högskolebiblioteket i Gävle gjort och gör för användarundersökningar, utvärderingar och validering (ett instrument för självskattning) av lärare och studenter.
Presentation för Lunds universitet SAMHÄLLSVETENSKAPLIGA FAKULTETEN 160612Mats Brenner
Presentation om Morgondagens digitala examinationer - Digitala examinationer - utvecklingsmöjlighet för flertalet examinationsformer. Projekt Digital tentamen II - SUNET Inkubator. Mats Brenner, projektledn.
Presentation, Digital tentamen på SUNET-dagarna 22/4Mats Brenner
Presentation av projektet Digitalt tentamen - SUNET Inkubator av Mats Brenner, läs mer om projektet på webbsida: https://portal.nordu.net/display/Inkubator/Digital+Tentamen
Presentation : Digital tentamen - är verksamhetsutvecklingMats Brenner
Presentation om Digital tentamen - är verksamhetsutveckling för lärosätet Mittuniversitetet den 29/11 i Sundsvall och 30/11 i Östersund. Mats Brenner - för Projekt Digital tentamen II - SUNET Inkubator
Presentation: Digital tentamen - är verksamhetsutvecklingMats Brenner
Presentation vid Högskolan i Skövde 2018-11-08. Mats Brenner, Projekt Digital tentamen II - SUNET Inkubator. Digital tentamen - är verksamhetsutveckling.
Presentation: Digital tentamen är verksamhetsutvecklingMats Brenner
Presentation vid Linnéuniversitet 10/12-2018. Digital tentamen - är verksamhetsutveckling. Mats Brenner, för Projekt Digitalt tentamen II - SUNET Inkubator.
Presentation 141126 om Digital TentamenMats Brenner
Föreläsningen presenterad den 26/11-2014 på konferensen Digital examination i högskolan på plats i Sthlm och för VFK, Högskolan Väst (via Adobe Connect).
Presentation biblioteks-nätverksträffen 2014-11-11 i UppsalaMats Brenner
En presentation vad Learning Center vid Högskolan i Gävle och Högskolebiblioteket i Gävle gjort och gör för användarundersökningar, utvärderingar och validering (ett instrument för självskattning) av lärare och studenter.
Presentation för Lunds universitet SAMHÄLLSVETENSKAPLIGA FAKULTETEN 160612Mats Brenner
Presentation om Morgondagens digitala examinationer - Digitala examinationer - utvecklingsmöjlighet för flertalet examinationsformer. Projekt Digital tentamen II - SUNET Inkubator. Mats Brenner, projektledn.
Presentation, Digital tentamen på SUNET-dagarna 22/4Mats Brenner
Presentation av projektet Digitalt tentamen - SUNET Inkubator av Mats Brenner, läs mer om projektet på webbsida: https://portal.nordu.net/display/Inkubator/Digital+Tentamen
Presentation : Digital tentamen - är verksamhetsutvecklingMats Brenner
Presentation om Digital tentamen - är verksamhetsutveckling för lärosätet Mittuniversitetet den 29/11 i Sundsvall och 30/11 i Östersund. Mats Brenner - för Projekt Digital tentamen II - SUNET Inkubator
Presentation: Digital tentamen - är verksamhetsutvecklingMats Brenner
Presentation vid Högskolan i Skövde 2018-11-08. Mats Brenner, Projekt Digital tentamen II - SUNET Inkubator. Digital tentamen - är verksamhetsutveckling.
Presentation: Digital tentamen är verksamhetsutvecklingMats Brenner
Presentation vid Linnéuniversitet 10/12-2018. Digital tentamen - är verksamhetsutveckling. Mats Brenner, för Projekt Digitalt tentamen II - SUNET Inkubator.
Presentation 141126 om Digital TentamenMats Brenner
Föreläsningen presenterad den 26/11-2014 på konferensen Digital examination i högskolan på plats i Sthlm och för VFK, Högskolan Väst (via Adobe Connect).
Datoriserad tentamen - utvecklingsmöjligheter av salsskriving som examination...Mats Brenner
Presentation på ITHU & Swednet våkonferens 11-12 maj, 2017. Datoriserad tentamen - utvecklingsmöjligheter av salsskriving som examinationsform. Presentation 12 maj, 2017. Hos BTH.se i Karlskrona.
Kultur och kvalitet för distansutbildning och nätbaserat lärande_09dec2022.pdfEbba Ossiannilsson
Kultur och kvalitet för distansutbildning och nätbaserat lärande
En översikt över nationella och internationella kvalitesramverk för öppen, flexibel distansutbildning (OFDL) för kulturutveckling och kvalitet. Presentation av Ebba Ossiannilsson, Professor, Dr. Svenska Riksorganisationen för öppen flexibel distansutbildning (SVERD) 12 december 2022 (PDF)
Similar to SVERD webbseminarium om Digital tentamen och digitala prov 27/4 kl 15.00 (20)
AI och ChatGPT - AnvändarsperspektivetMats Brenner
Presentation Lärardagen, Karolinska Institutet 2023:
AI och ChatGPT - Användarsperspektivet
Presenterad av Andrew Maunder – IKT pedagog, UoL
PPT anpassad från Mats Brenner, Educational developer at UoL
Arbete och undervisning på distans - hur rättsäkert är det?Mats Brenner
Arbete och undervisning på distans –
hur rättssäkert är det?
Mats Brenner, Pedagogisk utvecklare vid Karolinska Institutet
Presentation 2021-12-01, Administratör i högskolan – konferens i Sthlm
Utvecklingstrappan - hur får vi in de pedagogisk verktygenMats Brenner
Utvecklingstrappan – hur får vi in de
pedagogiska lärverktygen
Från idé till förvaltning.
Presentation: 2023-05-30, HPU UHR – Temacafé
Deltagare: Mats Brenner, KI – Cecilia Hellekant, KAU – Kent Stening, LNU –
med Jörg Pareigis, KAU och Lotta Fröjdfeldt, MDU (podcast) - Claire
Englund, UMU
Pedagogiska digitala lärverktyg - för utbildningsledare 2022-05-16Mats Brenner
Pedagogiska digitala lärverktyg
Presentation för utbildningsledarna inom PMI på Karolinska
Universitetssjukhuset, 2022-05-18, Mats Brenner – Pedagogisk utvecklare
vid KI, UoL.
Digital tillgänglighet - projekt WAMDIA.EUMats Brenner
Presentation för ITHU den 1 oktober, 2019. Projektet WAMDIA.EU avslutas under hösten 2019. Allt kursmaterial och självtester kommer publiceras som öppna lärresurser under licensformen Creative Commons.
Projekt NAVIGATE: https://www.navigateproject.eu/ and www.navigame.eu
Presentation of the EU-project NAVIGATE and Outputs of the project. Also web link to the games for the workshop in the end of the presentation.
Presentation at the conference ecdea.org, 8 of June 2018Mats Brenner
Presentation of the Project Digital Exam II - SUNET Inkubator - for 1st European Conference on digital Exams and Assessment (ECDEA 2018), 8:th of June 2018 in Gothenborg, Sweden
2. Fördelar, planering, erfarenheter och
myndigheternas kravbild…
■ Vilka fördelar som finns med datoriserad tentamen och digitala prov?
■ Vad behövs för planera och genomföra digitala test samt vad behöver
förändras i verksamheten för att detta skall bli framgångsrikt.
■ Lesson learned från: Projekt Digital tentamen (2015) SUNET Inkubator, gå till:
http://www.korturl.com/digitaltentamen
■ Info om den SOU som nu även kommit kring digitala nationella prov för
skolan. SOU 2016:25 Likvärdigt, rättssäkert och effektivt – ett nytt nationellt
system för kunskapsbedömning:
http://www.regeringen.se/rattsdokument/statens-offentliga-
utredningar/2016/03/sou-201625/
3. Nationella prov - digitalisering klar om
cirka sex (6) år…
■ Syftet med proven är att stödja lärarnas betygsättning (börjar 2018 - klart år 2022!)
■ 500 sidor – digitaliseringen bara en del av uppdraget
■ Perspektivet: Summativa test
■ Lärarnas Riksförbund: ” ..för lite och för försiktigt.”
■ Lärarperspektiv: Lätta på arbetsbördan
■ Infört redan i ett antal länder redan
■ Erfarenhetsgenerering igång redan – Skolverket testar redan
■ Behandlar fördelar och nackdelar med datorbaserade prov
5. Varför digitala prov? (OECD)
■ Huvudargumenten för att man i PISA 2015 helt har övergått till digitala prov…
■ 1:a – datormediet bättre motsvarar elevernas användning av information och
kommunikation
■ 2:a – vill kunna pröva elevernas förmåga göra naturvetenskapliga undersökningar och
deras förmåga till problemlösning
■ 3:dje – vill uppnå effektivitet i provgenomförandet och få bättre precision i
mätningarna. Effektivtetsvinsterna handlar bl a om att slippa hantera och trycka
provhäften.
6. Fördelar - datoriserade prov
(SOU 2016:25)
■ Hantering av proven underlättas och effektiviteten ökar, bl a genom papperslös
distribution samt förenklad datainsamling och resultatsammanställning.
■ Nya uppgiftstyper prövar andra kunskaper och förmågor.
■ Motivationshöjande för elever.
■ Ökad användbarhet och tillgänglighet för elever med funktionsnedsättning.
■ Ökad säkerhet, t ex elektronisk distribution.
■ Ekonomiska vinster på sikt.
■ Automaträttning av vissa uppgifter.
■ Kan främja datoranvändningen i undervisningen och påskynda skolornas uppgradering av
utrustning.
7. Nackdelar - datoriserade prov
(SOU 2016:25)
■ Stora uppgiftsbanker kan krävas om olika elever ska förses med olika uppgifter i ett
och samma prov eller om proven ska vara adaptiva.
■ Risk att elevernas förmåga att använda datorer prövas i stället för deras egentliga
kunskaper.
■ Datorovana hos vissa elever och lärare.
■ Bristande datortillgång, dålig prestanda och otillräckliga uppkopplingar.
■ Säkerhetsrisker, t ex fusk med hjälp av internet.
■ Stora initiala utvecklingskostnader.
8. Börja bottom up eller top down – storskaligt
summativt eller mindre formativa test
■ Återkoppling om provtagarens styrkor och svagheter (validering, diagnos) understöds – därmed
formativ bedömning
■ Att proven och deras innehåll riskerar att styra tekniken
■ Datorovana lärare och datorovana elever sätts på prov
■ Synsätt på kunskapsmätning och vad som är kompetens kan cementeras
■ Test som en lärsituation döljs
■ Immanent pedagogik (kulturell diciplinering) – förut papper penna, nu bara med datorn
■ Bedömningsmetoderna kan utvecklas, manuell bedömning med kriterier, medbedömning, extern
bedömning (objektivitet, likvärdighet)
■ Learning Analytic
■ Frågebanker kan utvecklas och hanteras via EDUPUB (interaktiva e-böcker)
9. DIGITALTENTAMEN
– SUNET
INKUBATOR
Projektledn: Mats Brenner, Högskolan i Gävle – Learning Center
Teknisk resurs: Helena Sandström, Umeå Universitet - ITS
Webbsida: https://portal.nordu.net/display/Inkubator/Digital+Tentamen
10. • Målbild
• Aktiviteter
• Resultat
• Fördelar och/eller nackdelar, vad som förändras
• Anpassning infrastruktur och stöd
• Erfarenhetsspridning
• Samverkan
11. Fokus i detta projekt
Projektet har ett fokus på de tekniska bitarna, vårt huvuduppdrag. De administrativa
bitarna är nedtonade. Fokus ligger därför i huvudsak på:
■ Tekniskt (nät, hårdvara, programvarumässigt, prestanda, robusthet, loggning, etc)
■ Integrationer
■ Säkerhet
■ Användarvänlighet/Användbarhet (för roller och arbetsprocess)
13. Aktiviteter / Resultat
■ Omvärldsbevakning: Konferenser t ex UNINETT, forskning, good & best practice på lärosäten och
kontakt med leverantörer, systemägare vid lärosäten
■ Sprida erfarenheter: Internationella, europeiska, nordiska och svenska
■ Delta i konferenser: Europeisk, Nordiska och Svenska (t exTentakonf Högskolan i Dalarna)
■ Webbsida (Confluence wiki) som dokumentationsplattform - http://korturl.com/digitaltentamen
■ Webbinar, 10 st även inspelade
■ Rapport (170 sid med appendix) - från ax till limpa
■ Frågeformulär: före – under och efter med möjliga lösningar (befintlig dator/BYOD, distans)
■ Underlag för kravspecifikation, excelblad
■ Jämförelse av olika systemlösningar, utifrån underlag för kravspecifikation - excelblad
21. Övervaka och säkerhet
Säkerhet - öka LoA
Styra & bevaka dator -
övervaka och låsa skärm
Safe Exam Browser
Classroom
Management
System, Exam
Monitor
Övervaka
student
Utbildade
tentavakter, Adobe
Connect (Online
Proctoring)
22. Konceptmodeller - lokalutnyttjande
Skriv- och
lärosal:
BOYD
Datasal/ar i
kombination
med BYOD i
lärosalar
Lärcentra:
BOYD och
lärcentras
dator
Skrivsal med
laptop eller
fast
dator/klient
23. Säkerhet – Level of Assurance
Säkerhet - öka LoA
Styra & bevaka dator -
övervaka och låsa skärm
Safe Exam Browser,
USB-stick,
Safe QTI Player
Classroom
Management, Exam
Monitor, System,
*NaaS
Övervaka
student
Monitor tools -
Remote Proctoring
*Native as a Service,Virtual Licensing Cloud Service, Streaming Player for native apps
24. Safe Exam Browser – Säker webbläsare
Studenten eller personal (utbildn.arr) laddar ned en webbläsare (Secure LockDown
Browser).Webbläsaren låter studenten bara se digitala tentan – du kan inte surfa fritt på
Internet.
25. Exam Monitor – sdu.dk
Studentens dator bevakas i realtid – gör loggar vilka programvaror som körs på datorn och
tar skärmbilder var 20-40 sec. Accepterad kontroll.
26. NaaS – gör tredjepartsprogram
tillgängliga (Jmf. Remote Desktop)
Streama ut programvara och styra access både i tid och funktion i programvara.
28. Allmänna rekommendationer
■ Kostnadsanalys – införandebudget (Skapa en Arbetsgrupp)
■ Utbildning och digital kompetens för personal
■ Kontroll av utrustning och utbildning av studenter (ta hänsyn till funktionsvariationer)
■ System för tentaadministration. Anmälningsprocessen. E-arkivering
■ Frågetyper. BYOD. Service för studenter – lånedatorer och information
■ Lämpliga lokaler – effektivt lokalutnyttjande. Driftsäkerhet.
■ Använda Classroom Management System och Adobe Connect för övervakning. Exam
Monitor– övervakning av datorskärm och dataloggar. Juridiska aspekter.
■ Säker webbläsare vid e-test. Plagiatkontroll och andra specialprogram.
Kameraövervakning.
■ Upphandling och upphovsrättsliga aspekter (IPR). Molntjänster och PUL.
■ Intresse och möjligheter för gemensam systemlösning (inom SUNET-tjänster)
29. Ska börja
Skapa arbetsgrupp
Nuläge för lokaler och IT-system
Testa systemlösningar/programvara
Kontakta lärsosäten och leverantörer
Arrangera inspirationsdag, konferensdag
om datoriserad tentamen
Läs rapporten och ta del av inspelade
webbinar
30. Pågång
Hur kan verksamheten skalas upp
Skapa arbets- utvecklingsgrupp
Läs rapport och se webbinar
Föreslå anpassade loklaler, införande av
säkra webbläsare, förstärkt WiFi,
support/stöd för BOYD
Behövs flera och anpassade
systemlösningar
Vad kan integreras
E-arkivering
31. Upphandla
PUL och Safe Harbor
Funktionella och icke funktionella krav
Leverantörsöversikt
Typer av programvaror
Integration
Samverkan
Vad kan redan LMS/lärplattform
32. Samverka
Samverkan kring systemlösning (open
source, lärosäte som leverantör för flera)
Samverkan innehåll, frågebanker
Säkra webbläsare/programvaror
Kring rutiner, utbildningmodeller, support
och stöd till studenter med BYOD. FUNKA-
studenter
IT-referensarkitektur inom Norden
Risker och sårbarhet. Införande och
systemförvaltning.
Autentisering/smart ID-kontroll