ROEM 'Return on Expectations Measurement' door Provincie Antwerpen
1. 1 - 6/5/2016
ROEM in de praktijk bij
Provincie Antwerpen
Community of Practice - 1 juni 2016
2. 2 - 6/5/2016
Leren en ontwikkelen
1. Open leeraanbod
• Sociale vaardigheden
• Vaktechnisch: enkel indien organisatiebreed
2. Maatwerk
• individueel traject (POP, coaching)
• teamtrajecten
3. Doelgroep
Van werkmannen tot departementshoofden.
3. 3 - 6/5/2016
Aanleiding gebruik ROEM
1. Voorheen: enquêtetool (Socratos)
• gericht op communicatie/marketing
• niet gebruiksvriendelijk
2. Evolutie van groot open leeraanbod naar meer maatwerk
• binnen open aanbod (blended learning)
• individueel (POP)
• teamtrajecten
Kleiner open aanbod > sterkte maatwerk aantonen.
3. Voorheen enkel kwantitatieve rapportering (‘kengetallen’)
DOEL: ook kwalitatief rapporteren, nl. aantonen effect van onze
acties + acties aan kunnen koppelen (sensibiliseren, etc.)
Voorheen: in Excel, nu via ROEM
4. 4 - 6/5/2016
Vragenlijsten: sjablonen (1/2)
Model van Kirckpatrick
• niveau 1: standaardevaluatie na leeractie (happy sheet)
• niveau 3: effectmeting na 3m
• niveau 4: toekomst (voor maattrajecten)
5. 5 - 6/5/2016
Vragenlijsten: sjablonen (2/2)
Eigen sjablonen gemaakt die we nu standaard
(gaan) gebruiken:
1. Standaardevaluatie (direct na de opleiding)
2. Effectmeting na 3m: 1 vraag (score op 4) + optioneel toelichting
3. Evaluatie coachingtraject
4. Evaluatie mentorschapstraject: mentor én mentee
5. Effectmeting maattraject door initiator/leidinggevende
6. Evaluatie loopbaanbegeleidingstraject
7. 7 - 6/5/2016
Bezorgopties
Meestal per mail + af en toe op papier
Verbeteringen sinds start ROEM
• inplannen reminder na 7 dagen bij aanmaak vragenlijst
• knippen en plakken van email-adressen vs csv bestand opladen
• noreply@roem.be>personeelsontwikkeling@provincieantwerpen.be
Nadeel papieren vragenlijsten
• nog niet in de huisstijl
• overtypen in ROEM om mee te nemen in rapportering = veel werk
8. 8 - 6/5/2016
Kwartaalrapportering
Wizard voor rapportering (op maat geprogrammeerd)
= werken met ‘vraagcode’ voor een reeks vragenlijsten overheen een periode
bv kwartaal
Momenteel 3 toepassingen wizard:
1. Score leeractie direct na de leeractie (score op 4)
2. Effect van de leeractie na 3 maanden (score op 4)
3. Vervolgstappen na leeractie (9 aanvink-vakjes, bv steun vragen aan LG om
het geleerde te kunnen toepassen )
9. 9 - 6/5/2016
Algemeen: ervaring ROEM
1. gemakkelijk gebruikers/administrators toe te voegen (geen
licenties/rechtenstructuren/etc.)
2. soms weinig overzicht: je kan bv niet direct naar de bestaande
vragenlijsten gaan om aan te passen > test-leeractiviteit maken om
een bestaand sjabloon te kunnen aanpassen
3. op voorhand goed nadenken wat je wil (vragenlijsten, structuur,
rapporteringen/etc.) want als je onderweg beslist dan moet je vaak
retroactief in alle uitgestuurd vragenlijsten iets gaan aanpassen, bv
vraagcode toevoegen, onder nieuwe projectnaam hangen, …
10. 10 - 6/5/2016
Algemeen: conclusie
Grote verbetering tov vroegere tool
• gebruiksvriendelijkheid (voor ons, niet per se voor klant)
• rapportering (gegevens uit halen > analyse > rapportering > actie)
11. 11 - 6/5/2016
Verzoeken voor Kris/Kristoff ;)
1. Leervormen zelf kunnen toevoegen in drop down lijst bij
aanmaken leeractiviteit
2. Rapport vraag met aanvinkvakjes: kunnen we dat ook over alle
leeractiviteiten krijgen overheen een periode (cfr. vraagcode)
3. Een echte wizard die zichzelf uitvoert met 1 druk op knop ipv
telkens 11 stappen te moeten uitvoeren voor een rapport
4. Papieren vragenlijst ook in onze huisstijl
5. Aanspreekteksten koppelen aan vragenlijst-sjablonen
12. 12 - 6/5/2016
Bedankt voor jullie aandacht
Contactgegevens
Koen Van de Velde
03 240 57 74
koen.vandevelde@provincieantwerpen.be
Marion Kahane
03 240 53 18
marion.kahane@provincieantwerpen.be
Editor's Notes
Vertrokken van de BASIC sjablonen en dan vragen aangepast/geschrapt en toegevoegd (advanced)
Nadeel resultaten wizard: je kan niet doorklikken als je werkt met vraagcode (enkel onder Beheer Resultaten)
Bv hoe leeractiviteiten in projecten indelen: hebben zelf tijdje gezocht > nu per kwartaal = makkelijker om te rapporteren (ervoor: per soort vragenlijst, bv ‘standaardevaluatie’ met daaronder de leeracties waarvoor we die vragenlijst verstuurd hadden)
Rapport aanvinkvakjes: resultaten nu enkel per leeractiviteit en nog niet overheen de periode > vraag aan ROEM