The SYNERGY Induction to Pedagogy programme was created by project partners, with the aim of helping micro-enterprise owners using the SYNERGY Exchange platform, to engage in peer-to-peer learning opportunities. This training programme comprises six modules and is delivered over 5 hours through a series of video lectures and PowerPoints which have been written, developed and recorded by project partners. These modules provide micro-enterprise owners with a sound understanding of the basics in relation to e-didactics, quality criteria of peer-learning, evaluation of online learning resources and online learning environments, producing quality learning resources for peers and other knowledge that has helped them to become competent and confident online peer-educators. This module is entitled ‘Evaluation of the Learning Resources’ and provides content which provides an introduction to the basic concepts of quality in peer education, how to assess the quality of learning materials produced by peer educators and also an introduction to some common European standards and toolkits for evaluating online education. These slides are available in English, Finnish, German, Greek, Italian and Romanian.

1. Johdatus pedagogiikkaan
Moduuli 5: Oppimisresurssien arviointi
Johdanto
SYNERGY Exchange (http://synergyexchange.eu/)
Luotu “SYNERGY” ERASMUS+ projektille
Projektinumero: 2014-1-IE01-KA202-000355

2. Moduulin yleiskatsaus & päätavoitteet
OSAT TAVOITTEET
Johdanto
 Moduulin tarkastelu
 Päätavoitteet
Osa 1:
Perusmääritelmä
 Perusmääritelmät
 Keskeisten arviointiperusteiden
tunnistaminen
 Esimerkkejä niiden soveltamisesta
Osa 2:
Helppo tapa arvioida
 5 WH- kysymysmallit
 Esittely ja täytäntöönpano
Osa 3:
Muut mallit ja työvälineet
 MERLOT -malli
 LORI -malli
 EFQUEL -verkosto
Käytännön vinkit &
loppuhuomautukset
 Luo oma arviointikriteeristö

3. Johdatus pedagogiikkaan
Moduuli 5: Oppimisresurssien arviointi
SYNERGY Exchange (http://synergyexchange.eu/)
Luotu “SYNERGY” ERASMUS+ projektille
Projektinumero: 2014-1-IE01-KA202-000355
Osa 1: Perusmääritelmät

4. 4
Mitä on arviointi?
Arviointi on prosessi, jossa määritellään ansioita, arvoa tai
merkitystä; arviointi on tämän prosessin tuote.
(Scriven 2007)
Mikä on oppimisresurssi?
Informaatio esitettynä, helposti saatavilla tai tallennettuna
eri medioihin tai formaatteihin (teksti, video, ohjelmistot
jne.), joka auttaa oppijaa oppimaan kuten oppimistuloksissa
ja/tai oppimistavoitteissa ollaan märitelty.
PERUSMÄÄRITELMÄT

5. 5
Miksi oppimisresursseja arvioidaan?
Arvioinnin päätarkoitus on arvioida resurssien laatua.
Oppimisresurssien laatu riippuu:
- sen ominaisuuksista ja piirteistä
- kontekstista– kuten aika, paikka ja ihmisuhteet.
Laatu liittyy myös siihen, miten, milloin ja suhteessa kehen
resurssia käytetään.
PERUSMÄÄRITELMÄT

6. 6
Miten arvioimme?
Arviointi on yleensä systemaattinen prosessi, ei
yksittäinen toiminto, ja perustuu arviointikriteeristöön
kuten:
Potentiaalinen tehokkuus oppimisvälineenä
Helppokäyttöisyys (ammatinharjoittajille ja
oppijoille)
Tarkkuus
Tarkoituksenmukaisuus
Selkeys
Valmius
…
Katso osasta 2 esimerkki
arviointiprosessista ja
kriteereistä
PERUSMÄÄRITELMÄT

7. 7
ARVIOINNIN KOLME PÄÄKOHTAA
KENELLE
KENELTÄ
TEHDÄ MITÄ MISSÄ OLOSUHTEISSA
Kohderyhmät Tavoitteet Rajoitteet
Esimerkki:
- 5 hitsaajaa ja
1 ulkopuolinen
asiantuntija
Esimerkki:
- Osata tyydyttää
uuden asiaakkaan
tarpeet
Esimerkki:
-Lähestyvä deadline
-Kouluttajan rajallinen
aika
- Hyvin kiireinen
tuotantoaika

8. 8
MAHDOLLISET TULOKSET KOLMEN KRITEERIN SOVELTAMISESTA
ESIMERKKI 1:
 12 nuorta kolmesta yrityksestä
 Tilaus: luoda ja toteuttaa yrityksen
nettisivut
 Pieni budjetti; erilainen tausta;
kuusi kuukautta aikaa.
KOHDERYHMÄT:
- Nuoret, digitaalinen lukutaito
TAVOITTEET eivät ole korkealla
(perus-keskitasoa
monimutkaisuudessaan)
RAJOITTEET
-Aikaa on riittävästi taustan erilaisuudesta huolimatta
-Ei ole kiire saada oikeaa kouluttajaa tai resurssia
-Riittävät (korkealaatuiset) resurssit voidaan hankkia helposti
-Vähemmän kokenut kouluttaja voidaan valmentaa käyttämään niitä

9. 9
Osa 1: KERTAUSKOE
TEKIJÄ KUVAUS RANKING
KOHDERYHMÄ - 7 hallintohenkilöstön jäsentä 2
yrityksestä
- Tekijät: (päätettävä, ei omaa henkilöstöä)
2
1/NA
TAVOITTEET - Valmistele kahden yrityksen
hallintohenkilöstö hoitamaa Venäjän
markkinoita
5
RAJOITTEET -3 kuukautta;
-A2-tason saavuttaminen;
-keskikokoinen-pieni budjetti
4
5
5
Kysymys: Mikä on kaikkein merkittävin tekijä mainittujen
joukossa? (asteikolla 1-5, 5=merkityksellisin)

10. 10
Johdatus pedagogiikkaan
Moduuli 5: Oppimisresurssien arviointi
Osa 2: Helppo tapa arvioida
SYNERGY Exchange (http://synergyexchange.eu/)
Luotu “SYNERGY” ERASMUS+ projektille
Projektinumero: 2014-1-IE01-KA202-000355

11. 11
Tavoitteet
 Syyvällisempi analyysi oppimisresursseista menemättä kuitenkaan liian
monimutkaisiin ja aikaa vieviin tutkimuksiin ja valmisteluihin
HELPPO TAPA ARVIOIDA
Sisältö
 Soveltaa tunnettua tekstin jäsentämisen mallia arviointiprosessiin, koska
se perustuu keskeisiin tekijöihin jotka voivat vastata arvioitavien
resurssien avainkohtiin
 Ehdottaa mahdollisia parannuksia

12. 12
VIISI KYSYMYSTÄ
Kuka
Mitä
Miksi
Milloin
Missä
• Ketkä ovat oppijoita? (ikä, rooli, tausta jne.)
• Kuka on mahdollinen kouluttaja? (sisäinen, ulkoinen
jne.)
• Mitä/millaisia resrusseja he tarvitsevat eniten?
• Ovatko verkkoresurssit heidän helposti saatavilla?
• Mitkä ovat oppimistavoitteet?
• Onko kyseessä syntyvä uusi koulutus vai jo suunniteltu koulutus?
• Mikä on koulutuksen suorittamisen määräaika?
• Milloin koulutus suoritetaan?
• Onko yrityksellä tarvittavat tilat ja tarvikkeet
koulutukseen?
• Ovatko tekniset laitteet käytettävissä?

13. 13
VIISI KYSYMYSTÄ
- Esimerkki taulukon käytöstä -
Kuka
Mitä
Miksi
Milloin
Missä
• 9 ihmistä iältään 25-47, pääasiassa hallintohenkilöstöä, ei
aiempaa kokemusta projektisuunnittelusta
• Ei sisäistä kouluttajaa saatavilla
• He tarvitsevat resursseja projektisuunnitteluun
• Ovat tuttuja verkkoresurssien kanssa (myös enlanniksi )
• Kolme ammatillisen koulutuksen kouluttajaa vailla
koulutusta Erasmus+ projektin suunnittelusta
• Aikaraja 31.3. ja nyt on tammikuu
• Yritystilat eivät ole käytössä
• Kaikilla on omat läppärit/tabletit

14. 14
HELPPO JA EMPIIRINEN TAPA: VIISI KYSYMYSTÄ
- Mahdollisia tavoitteita: RESURSSIEN TULEE OLLA…
Tukena ja opastuksena: koulutus valmistaa
käyttämään resursseja tukimateriaalina
Verkossa: tarvitaan puitteet ja mallit
sopeutumiseen ja hyödyntämiseen
Suoraan todellisiin esimerkkeihin pohjautuvia: ei
tarvita paljon teoriaa, vaan todellisia esimerkkejä

15. 15
5 kysymystä- Vastaukset Vaihtoehdot
1. 10 yli 55-vuotiasta matalasti koulutettua
työntekijää siivous- ja puutarhanhoitoalan
yrityksessä
•Verkkoresurssit
videoineen ja
simulaatioineen olisivat
hyvin hyödyllisiä, mutta
eivät ole sopivia
kohderyhmälle;
•Lyhyet kuvitetut lehdykät
listamuotoisin sisällöin ja
tarkistuslistoin voisi olla
parempi vaihtoehto
•Mobiilisisältöjä voidaan
käyttää organisointiin ja
muistin virkistämiseen jos
kohderyhmä voi hyödyntää
2. Turvallisuus ja ensiapukurssi; kahden
opiskelijan tulee valmistua yksikkönsä
“virallisesti vastuussa olevaksi”
3. Turvallisuusvaatimuksiin vastaaminen
riittävässä ajassa (kuukaudessa)
4. Yrityksessä on meneillään hyvin kiireinen
ajanjakso ja se on myöhässä tehtävissään
5. Yrityksessä on luokka- ja tietokonehuoneita
Harjoitus 1: Etsi oikea resurssi

16. 16
Johdatus pedagogiikkaan
Moduuli 5: Oppimisresurssien arvioiminen
Osa 3: Muut mallit ja työkalut
SYNERGY Exchange (http://synergyexchange.eu/)
Luotu “SYNERGY” ERASMUS+ projektille
Projektinumero: 2014-1-IE01-KA202-000355

17. 17
Sisältö
Tarjoaa kriteerit oppimisresurssien laadun arviointiin. Kriteeristöt
kuuluvat seuraaviin työkaluihin:
o MERLOT
o LORI
Tutustutaan e-oppimisresurssien mahdollisuuksiin ja saatavilla
oleviin palveluihin EFQUEL-verkon kautta.
Tavoitteet
 Analysoida valittujen oppimisresurssien laatukriteereitä, ja
selvittää mikä niistä vastaa parhaiten tunnistettuja tarpeita
ARVIOINTIMALLIT JA TYÖKALUT

18. 18
MERLOT
www.merlot.org
Merlot (Multimedia Education Resource for Learning and Online
Teaching) on tietolähde, joka sisältää opetusresursseja, jotka on
jaoteltu seitsemään laajaan aiheryhmään:
1. Taide
2. Liiketoiminta
3. Koulutus
4. Humanistiset tieteet
5. Matematiikka ja tilastotieteet
6. Tiede ja teknologia
7. Yhteiskuntatieteet

19. 19
MERLOT LAATUKRITEERISTÖ
Arviointistandardit Avainkysymykset
Sisällön laatu
1. Esittääkö resurssi päteviä (oikeita) käsitteitä,
malleja ja taitoja?
2. Esittääkö resurssi koulutuksellisesti merkittäviä
käsitteitä, malleja ja taitoja tieteenalalle?
Mahdollinen vaikuttavuus
opetus/oppimisvälineenä
1. Missä oppimisprosessin/ syklin vaiheessa
materiaalia voitaisiin käyttää ?
2. Mitkä ovat oppimistavoitteet? Mitä
opiskelijoiden pitäisi pystyä tekemään
onnistuneen opiskelun jälkeen? Mitkä ovat
oppijan ominaisuudet ?
Käytettävyys
1. Kuinka helppoa opettajien ja
opiskelijoiden on käyttää ohjelmistoa
ensimmäistä kertaa?

20. 20
LORI LAATUKRITEERISTÖ
LORI on peräisin e-LERAsta
eLera on avoin yhteisö, joka tutkii ja arvioi verkko-oppimista. He
ovat erityisen kiinnostuneita oppisisältöihin, e-portfolioihin sekä
oppimisen suunnittelun määrittelyihin sekä niihin liittyviin asioihin
eLera tarjoaa työkaluja ja informaatiota oppisisältöjen arviointiin
ja tutkimiseen, ylläpitää tietokantaa oppisisältöjen arvosteluista,
sekä tukee kommunikaatiota ja yhteistyötä verkko-
oppimisresurssien tutkijoiden, arvioijien ja käyttäjien kesken.

21. 21
LORI 9 LAATUMÄÄRITETTÄ – ensimmäiset viisi
1. Sisällön laatu Totuudenmukaisuus, tarkkuus, ideoiden tasapainoinen
esitys, ja sopiva yksityiskohtien määrä
2. Oppimistavoitteiden
kohdistaminen
Oppimistavoitteiden, toiminnan arvioinnin ja oppijan
ominaisuuksien kohdistaminen
3. Palaute ja
sopeutuminen
Sisällön mukauttaminen oppijoiden palautteen
pohjalta.
4. Motivaatio Kyky motivoida ja herättää tunnistetun
oppijakohderyhmän kiinnostus
5. Esityksen
suunnittelu
Visuaalisen ja auditiivisen tiedon suunnittelu
parantamaan oppimista ja tehostamaan mentaalista
prosessointia

22. 22
LORI 9 LAATUMÄÄRITETTÄ – loput neljä
6. Vuorovaikutuksen
käytettävyys
Navigoinnin helppous, käyttöliittymän ennustettavuus
ja käyttöliittymän aputoimintojen laatu
7. Saavutettavuus Hallintalaitteiden ja esitysmuotojen suunnittelu
huomioimaan vammaiset ja mobiilioppijat.
8.
Uudelleenkäytettävyys
Mahdollisuus käyttää vaihtelevissa
oppimisympäristöissä ja eritaustaisten oppijoiden
kanssa.
9. Standardien
noudattaminen
Noudattaa kansainvälisiä standardeja ja teknisiä
määräyksiä.

23. 23
EFQUEL
www.efquel.org

24. 24
EFQUEL

25. 25
Osa 3: KERTAUSKOE
Virallisen todistuksen antaminen
Vapaus
Kohderyhmän tarpeiden kohtaaminen
Hyväksytyn virasnomaisen vahvistus
Helppokäyttöisyys
Suunniteltu uudelleen käytettäväksi
On mukautuva ja palautetta antava
Kysymys 1
Valitse alla olevasta listasta, mitkä ovat oppiresurssien laatukriteereitä
analysoitujen kahden mallin mukaisesti (TOTTA/VÄÄRIN):
TOTTA
VÄÄRIN
TOTTA
VÄÄRIN
TOTTA
VÄÄRIN
TOTTA

26. 26
LÄHTEET
o www.merlot.org
o Scriven, M. (2007). The logic of evaluation. In H.V. Hansen, et. al.(Eds),
Dissensus and the Search for Common Ground, CD-ROM (pp. 1-16).
Windsor, ON: OSSA.
o Leacock, T. L., & Nesbit, J. C. (2007). A Framework for Evaluating the
Quality of Multimedia Learning Resources. Educational Technology &
Society, 10 (2), 44-59.
o Prince Edward Island Department of Education (2008). Evaluation and
Selection of Learning Resources: A Guide, Charlottetown, Prince
Edward Island - Canada - http://www.gov.pe.ca/educ
o Student Achievement and Supports Branch Saskatchewan Ministry of
Education (2013). Learning Resources Evaluation Guidelines,
Saskatchewan Ministry of Education – Canada,
http://www.wncp.ca/media/49329/wncptool_%20assessing_validating.pdf

27. 27
Johdatus pedagogiikkaan
Moduuli 5: Oppimisresurssien arviointi
Yhteenveto – Loppuhuomautukset
SYNERGY Exchange (http://synergyexchange.eu/)
Luotu “SYNERGY” ERASMUS+ projektille
Projektinumero: 2014-1-IE01-KA202-000355

28. 28
YHTEENVETO – LOPPUHUOMAUTUKSET
Olemme käyneet läpi oppimisresurssien arvioinnin erilaisia malleja.
Alussa
kartoitimme keskeisi, huomioonotettavia asioita, sekä kävimme läpi
empiirisen tavan tehdä alustavaa arviointia. Mutta jokainen oppi
on mukautettava omaan todellisuuteen ja konkreettiseen
tilanteeseen: ehdotuksemme on, että
LUO OMA TAULUKKOSI
asioista, jotka ovat kaikkein tärkeimpiä SINUN tarpeisiisi with the
items that are the most relevant for YOUR needs, for examples, as a
check list.
Nyt tiedät perusteet; se ei ole vaikeaa. Mutta MUISTA:
Paranna aina työkaluasi saamasi palautteen perusteella!

29. 29
ONNEKSIOLKOON!
Olet suorittanut moduulin
 Tieto tärkeimmistä huomioonotettavista näkökohdista
arvioitaessa oppiresurssien laatua.
 Kyky arvioida oppimisresurssien laatua ja tehdä
tasapaino eri tekijöiden välillä.
facebook.com/pages/Synergy-for-the-SME-
Business-Community
www.projectsynergy.eu
http://synergyexchange.eu/
www.linkedin.com/company/erasmus-synergy-
project