SlideShare a Scribd company logo
1 of 15
Download to read offline
EFFEKTMÅLING: HVAD
OG HVORDAN?
Mette Deding
21-05-2015 2
VI HAR BRUG FOR VIDEN OM EFFEKTER
Fordi vi gerne vil vide, om de indsatser vi sætter i værk, rent
faktisk virker
Og fordi vi gerne vil sikre os, at indsatserne ikke har en
skadelig virkning.
EFFEKTMÅLING: HVAD OG HVORDAN
EVIDENS HANDLER OM EFFEKT:
Effektmåling besvarer spørgsmål om
kausalitet:
Hvordan går det (i gennemsnit)
personer, der modtager en specifik
indsats, i forhold til hvordan det
ville være gået, hvis de ikke havde
modtaget indsatsen?
21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 3
MEN EVIDENS HANDLER OGSÅ OM MEGET
ANDET END EFFEKT
• Viden om sociale problemers
karakter og udbredelse
• Viden om målgruppens
karakteristika og adfærdsmønstre
• Viden om hvilke indsatser der
anvendes
• Viden om ressourceforbrug ved
hidtidig indsats
• Viden om effekter af forskellige
former for indsatser
• …
21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 4
TILFREDSHEDSUNDERSØGELSER OG
EFTERMÅLINGER
90% af dem, der modtog behandlingen var tilfredse eller meget
tilfredse…
…men det siger ikke noget om effekten
75% af dem, der trænede havde et kondital på 40…
… men hvad var deres kondital før træningsprogrammet?
Kan ikke bruges til effektmålinger
21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 5
FØR-EFTERMÅLINGER
Man måler inden man starter indsatsen
(førmåling) og når indsatsen er udført
(eftermåling) for hele målgruppen.
Nok det mest anvendte undersøgelsesdesign – og noget som vi
alle bruger.
21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 6
FØR-EFTERMÅLING AF LÆSE INTERVENTION
80
85
90
95
100
105
Før Efter
Indsats
Kontrol
Statistisk signifikant forskel p < 0.001
21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 7
FØR-EFTERMÅLING AF LÆSE INTERVENTION
80
85
90
95
100
105
110
Før Efter
Indsats
Kontrol
Forskel mellem grupper er IKKE signifikant
21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 8
KAUSAL EFFEKT
FORMÅL MED EFFEKTMÅLING:
At finde den kausale effekt af indsats på udfaldsmål
21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 9
EFFEKTMÅLING: HVAD OG HVORDAN 1021-05-2015
KAUSAL EFFEKT – HVAD KAN GÅ GALT?
Enkelt at undersøge, om der er en sammenhæng eller
korrelation mellem indsats og udfaldsmål
En sådan sammenhæng kan imidlertid ikke nødvendigvis
fortolkes som en kausal effekt – at det er netop A der giver B
Eksempler:
Antal storke og børnefødsler
Alkoholindtagelse og lungecancer
21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 11
EFFEKT STIGEN
EFFEKTMÅLING: HVAD OG HVORDAN 1221-05-2015
HVEM KAN MÅLE EFFEKT?
Effektmåling handler om:
• Systematik
• Tankegang
• Opfølgning
• Analyse
Der er både brug for ‘hverdags’-effekt og ‘forsker’-effekt (og
alting ind imellem)
21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 13
PROGRESSION VS. EFFEKT
Måske en strid om ord…
Men fokus både på de kortsigtede delmål for at opnå de mere
langsigtede effekter
Eksempel:
Effekt på uddannelse for udsatte unge kræver fx at de lærer at
stå op om morgenen
21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 14
SPØRGSMÅL OG
KOMMENTARER?!
EFFEKTMÅLING: HVAD OG HVORDAN 1521-05-2015

More Related Content

Viewers also liked

The Net Effect of Network Effects
The Net Effect of Network EffectsThe Net Effect of Network Effects
The Net Effect of Network EffectsRick Ladd
 
Certificazione delle competenze. Leonie Matta
Certificazione delle competenze. Leonie MattaCertificazione delle competenze. Leonie Matta
Certificazione delle competenze. Leonie MattaDigital-Coach.it
 
HItchhickers Guide to TypeScript
HItchhickers Guide to TypeScriptHItchhickers Guide to TypeScript
HItchhickers Guide to TypeScriptthebeebs
 
El daxtha conocelo
El daxtha conoceloEl daxtha conocelo
El daxtha conoceloZac Coria
 
Amaia trabajo1
Amaia trabajo1Amaia trabajo1
Amaia trabajo1Amaia20
 
Home staging casa paseo alfonso xiii cartagena
Home staging casa paseo alfonso xiii cartagenaHome staging casa paseo alfonso xiii cartagena
Home staging casa paseo alfonso xiii cartagenaCesar Villasante Ochoa
 
Pre-Conference Course: UX Fieldwork - Danielle Cooley
Pre-Conference Course: UX Fieldwork - Danielle CooleyPre-Conference Course: UX Fieldwork - Danielle Cooley
Pre-Conference Course: UX Fieldwork - Danielle CooleyUXPA International
 
Where paris english Issue n° 256 edition mai 2015 /2015 May
Where paris english Issue n° 256 edition mai 2015 /2015 MayWhere paris english Issue n° 256 edition mai 2015 /2015 May
Where paris english Issue n° 256 edition mai 2015 /2015 MayWhere Paris Editions
 
Exchange 2010 Overview
Exchange 2010 OverviewExchange 2010 Overview
Exchange 2010 Overviewrsnarayanan
 
Como se lava cerebro hombre
Como se lava cerebro hombreComo se lava cerebro hombre
Como se lava cerebro hombreJack Eitor
 
LA SUBIDA DEL IVA Y OTRAS MEDIDAS FISCALES MD ASESORES VALLADOLID GESTORES AS...
LA SUBIDA DEL IVA Y OTRAS MEDIDAS FISCALES MD ASESORES VALLADOLID GESTORES AS...LA SUBIDA DEL IVA Y OTRAS MEDIDAS FISCALES MD ASESORES VALLADOLID GESTORES AS...
LA SUBIDA DEL IVA Y OTRAS MEDIDAS FISCALES MD ASESORES VALLADOLID GESTORES AS...MD Asesores Valladolid
 
4th Annual Remote Services Implementation Summit
4th Annual Remote Services Implementation Summit4th Annual Remote Services Implementation Summit
4th Annual Remote Services Implementation SummitCorporate718
 
Business Club UZH - Business Lunch
Business Club UZH - Business LunchBusiness Club UZH - Business Lunch
Business Club UZH - Business LunchJürg Stuker
 
Marina Jack Cruise Club Information
Marina Jack Cruise Club InformationMarina Jack Cruise Club Information
Marina Jack Cruise Club InformationKat Wilson
 

Viewers also liked (20)

The Net Effect of Network Effects
The Net Effect of Network EffectsThe Net Effect of Network Effects
The Net Effect of Network Effects
 
Jensen siaw
Jensen siawJensen siaw
Jensen siaw
 
Certificazione delle competenze. Leonie Matta
Certificazione delle competenze. Leonie MattaCertificazione delle competenze. Leonie Matta
Certificazione delle competenze. Leonie Matta
 
HItchhickers Guide to TypeScript
HItchhickers Guide to TypeScriptHItchhickers Guide to TypeScript
HItchhickers Guide to TypeScript
 
El daxtha conocelo
El daxtha conoceloEl daxtha conocelo
El daxtha conocelo
 
Amaia trabajo1
Amaia trabajo1Amaia trabajo1
Amaia trabajo1
 
Home staging casa paseo alfonso xiii cartagena
Home staging casa paseo alfonso xiii cartagenaHome staging casa paseo alfonso xiii cartagena
Home staging casa paseo alfonso xiii cartagena
 
Pre-Conference Course: UX Fieldwork - Danielle Cooley
Pre-Conference Course: UX Fieldwork - Danielle CooleyPre-Conference Course: UX Fieldwork - Danielle Cooley
Pre-Conference Course: UX Fieldwork - Danielle Cooley
 
Where paris english Issue n° 256 edition mai 2015 /2015 May
Where paris english Issue n° 256 edition mai 2015 /2015 MayWhere paris english Issue n° 256 edition mai 2015 /2015 May
Where paris english Issue n° 256 edition mai 2015 /2015 May
 
Exchange 2010 Overview
Exchange 2010 OverviewExchange 2010 Overview
Exchange 2010 Overview
 
Andy J - Climate change and the outlook for cassava
Andy J - Climate change and the outlook for cassavaAndy J - Climate change and the outlook for cassava
Andy J - Climate change and the outlook for cassava
 
Como se lava cerebro hombre
Como se lava cerebro hombreComo se lava cerebro hombre
Como se lava cerebro hombre
 
Article
ArticleArticle
Article
 
Municipio de ricaurte (1)
Municipio de ricaurte (1)Municipio de ricaurte (1)
Municipio de ricaurte (1)
 
LA SUBIDA DEL IVA Y OTRAS MEDIDAS FISCALES MD ASESORES VALLADOLID GESTORES AS...
LA SUBIDA DEL IVA Y OTRAS MEDIDAS FISCALES MD ASESORES VALLADOLID GESTORES AS...LA SUBIDA DEL IVA Y OTRAS MEDIDAS FISCALES MD ASESORES VALLADOLID GESTORES AS...
LA SUBIDA DEL IVA Y OTRAS MEDIDAS FISCALES MD ASESORES VALLADOLID GESTORES AS...
 
ULI Newsletter
ULI NewsletterULI Newsletter
ULI Newsletter
 
4th Annual Remote Services Implementation Summit
4th Annual Remote Services Implementation Summit4th Annual Remote Services Implementation Summit
4th Annual Remote Services Implementation Summit
 
Business Club UZH - Business Lunch
Business Club UZH - Business LunchBusiness Club UZH - Business Lunch
Business Club UZH - Business Lunch
 
ENFERMEDADES ASOCIADAS A LA INGESTA DE GLUTEN
ENFERMEDADES ASOCIADAS A LA INGESTA DE GLUTENENFERMEDADES ASOCIADAS A LA INGESTA DE GLUTEN
ENFERMEDADES ASOCIADAS A LA INGESTA DE GLUTEN
 
Marina Jack Cruise Club Information
Marina Jack Cruise Club InformationMarina Jack Cruise Club Information
Marina Jack Cruise Club Information
 

More from SFI-slides

Hvordan hjælper vi bedste udsatte unge på vej
Hvordan hjælper vi bedste udsatte unge på vejHvordan hjælper vi bedste udsatte unge på vej
Hvordan hjælper vi bedste udsatte unge på vejSFI-slides
 
Psykisk sårbarhed blandt unge
Psykisk sårbarhed blandt ungePsykisk sårbarhed blandt unge
Psykisk sårbarhed blandt ungeSFI-slides
 
Børns skoleoplevelser og veje gennem uddannelsessystemet
Børns skoleoplevelser og veje gennem uddannelsessystemetBørns skoleoplevelser og veje gennem uddannelsessystemet
Børns skoleoplevelser og veje gennem uddannelsessystemetSFI-slides
 
Etniske minoritetsunge - uddannelse og udsathed
Etniske minoritetsunge - uddannelse og udsathedEtniske minoritetsunge - uddannelse og udsathed
Etniske minoritetsunge - uddannelse og udsathedSFI-slides
 
Jan Storø - En verdig start på voksenlivet
Jan Storø - En verdig start på voksenlivetJan Storø - En verdig start på voksenlivet
Jan Storø - En verdig start på voksenlivetSFI-slides
 
Bente Adolphsen oplæg på SFI.konference 24. maj 2016
Bente Adolphsen oplæg på SFI.konference 24. maj 2016Bente Adolphsen oplæg på SFI.konference 24. maj 2016
Bente Adolphsen oplæg på SFI.konference 24. maj 2016SFI-slides
 
Familiebaggrund og social marginalisering
Familiebaggrund og social marginalisering Familiebaggrund og social marginalisering
Familiebaggrund og social marginalisering SFI-slides
 
Det hele, udsatte menneske
Det hele, udsatte menneskeDet hele, udsatte menneske
Det hele, udsatte menneskeSFI-slides
 
Mere socialt mix i udsatte boligområder
Mere socialt mix i udsatte boligområderMere socialt mix i udsatte boligområder
Mere socialt mix i udsatte boligområderSFI-slides
 
Mikkel warming
Mikkel warmingMikkel warming
Mikkel warmingSFI-slides
 
Anne Sonnet, OECD
Anne Sonnet, OECDAnne Sonnet, OECD
Anne Sonnet, OECDSFI-slides
 
Ældres deltagelse på det danske arbejdsmarked
Ældres deltagelse på det danske arbejdsmarkedÆldres deltagelse på det danske arbejdsmarked
Ældres deltagelse på det danske arbejdsmarkedSFI-slides
 
Release of working better with age in denmark
Release of working better with age in denmarkRelease of working better with age in denmark
Release of working better with age in denmarkSFI-slides
 
DE 60-65-ÅRIGES KOMPETENCER
DE 60-65-ÅRIGES KOMPETENCERDE 60-65-ÅRIGES KOMPETENCER
DE 60-65-ÅRIGES KOMPETENCERSFI-slides
 
De +60-årige på arbejdsmarkedet
De +60-årige på arbejdsmarkedet De +60-årige på arbejdsmarkedet
De +60-årige på arbejdsmarkedet SFI-slides
 
SFI oplæg 26. maj 2015 - Forældrerolle 2
SFI oplæg 26. maj 2015 - Forældrerolle 2SFI oplæg 26. maj 2015 - Forældrerolle 2
SFI oplæg 26. maj 2015 - Forældrerolle 2SFI-slides
 
SFI oplæg 26. maj 2015 - Forældrerolle
SFI oplæg 26. maj 2015 - ForældrerolleSFI oplæg 26. maj 2015 - Forældrerolle
SFI oplæg 26. maj 2015 - ForældrerolleSFI-slides
 
Den åbne skole oplæg til sfi-konference
Den åbne skole   oplæg til sfi-konferenceDen åbne skole   oplæg til sfi-konference
Den åbne skole oplæg til sfi-konferenceSFI-slides
 
Understøttende undervisning og lektiehjælp sfi konf 2015
Understøttende undervisning og lektiehjælp sfi konf 2015Understøttende undervisning og lektiehjælp sfi konf 2015
Understøttende undervisning og lektiehjælp sfi konf 2015SFI-slides
 
Social mobilitet sfi konf maj 15
Social mobilitet  sfi konf maj 15Social mobilitet  sfi konf maj 15
Social mobilitet sfi konf maj 15SFI-slides
 

More from SFI-slides (20)

Hvordan hjælper vi bedste udsatte unge på vej
Hvordan hjælper vi bedste udsatte unge på vejHvordan hjælper vi bedste udsatte unge på vej
Hvordan hjælper vi bedste udsatte unge på vej
 
Psykisk sårbarhed blandt unge
Psykisk sårbarhed blandt ungePsykisk sårbarhed blandt unge
Psykisk sårbarhed blandt unge
 
Børns skoleoplevelser og veje gennem uddannelsessystemet
Børns skoleoplevelser og veje gennem uddannelsessystemetBørns skoleoplevelser og veje gennem uddannelsessystemet
Børns skoleoplevelser og veje gennem uddannelsessystemet
 
Etniske minoritetsunge - uddannelse og udsathed
Etniske minoritetsunge - uddannelse og udsathedEtniske minoritetsunge - uddannelse og udsathed
Etniske minoritetsunge - uddannelse og udsathed
 
Jan Storø - En verdig start på voksenlivet
Jan Storø - En verdig start på voksenlivetJan Storø - En verdig start på voksenlivet
Jan Storø - En verdig start på voksenlivet
 
Bente Adolphsen oplæg på SFI.konference 24. maj 2016
Bente Adolphsen oplæg på SFI.konference 24. maj 2016Bente Adolphsen oplæg på SFI.konference 24. maj 2016
Bente Adolphsen oplæg på SFI.konference 24. maj 2016
 
Familiebaggrund og social marginalisering
Familiebaggrund og social marginalisering Familiebaggrund og social marginalisering
Familiebaggrund og social marginalisering
 
Det hele, udsatte menneske
Det hele, udsatte menneskeDet hele, udsatte menneske
Det hele, udsatte menneske
 
Mere socialt mix i udsatte boligområder
Mere socialt mix i udsatte boligområderMere socialt mix i udsatte boligområder
Mere socialt mix i udsatte boligområder
 
Mikkel warming
Mikkel warmingMikkel warming
Mikkel warming
 
Anne Sonnet, OECD
Anne Sonnet, OECDAnne Sonnet, OECD
Anne Sonnet, OECD
 
Ældres deltagelse på det danske arbejdsmarked
Ældres deltagelse på det danske arbejdsmarkedÆldres deltagelse på det danske arbejdsmarked
Ældres deltagelse på det danske arbejdsmarked
 
Release of working better with age in denmark
Release of working better with age in denmarkRelease of working better with age in denmark
Release of working better with age in denmark
 
DE 60-65-ÅRIGES KOMPETENCER
DE 60-65-ÅRIGES KOMPETENCERDE 60-65-ÅRIGES KOMPETENCER
DE 60-65-ÅRIGES KOMPETENCER
 
De +60-årige på arbejdsmarkedet
De +60-årige på arbejdsmarkedet De +60-årige på arbejdsmarkedet
De +60-årige på arbejdsmarkedet
 
SFI oplæg 26. maj 2015 - Forældrerolle 2
SFI oplæg 26. maj 2015 - Forældrerolle 2SFI oplæg 26. maj 2015 - Forældrerolle 2
SFI oplæg 26. maj 2015 - Forældrerolle 2
 
SFI oplæg 26. maj 2015 - Forældrerolle
SFI oplæg 26. maj 2015 - ForældrerolleSFI oplæg 26. maj 2015 - Forældrerolle
SFI oplæg 26. maj 2015 - Forældrerolle
 
Den åbne skole oplæg til sfi-konference
Den åbne skole   oplæg til sfi-konferenceDen åbne skole   oplæg til sfi-konference
Den åbne skole oplæg til sfi-konference
 
Understøttende undervisning og lektiehjælp sfi konf 2015
Understøttende undervisning og lektiehjælp sfi konf 2015Understøttende undervisning og lektiehjælp sfi konf 2015
Understøttende undervisning og lektiehjælp sfi konf 2015
 
Social mobilitet sfi konf maj 15
Social mobilitet  sfi konf maj 15Social mobilitet  sfi konf maj 15
Social mobilitet sfi konf maj 15
 

Effektmåling hvad og hvordan

  • 2. 21-05-2015 2 VI HAR BRUG FOR VIDEN OM EFFEKTER Fordi vi gerne vil vide, om de indsatser vi sætter i værk, rent faktisk virker Og fordi vi gerne vil sikre os, at indsatserne ikke har en skadelig virkning. EFFEKTMÅLING: HVAD OG HVORDAN
  • 3. EVIDENS HANDLER OM EFFEKT: Effektmåling besvarer spørgsmål om kausalitet: Hvordan går det (i gennemsnit) personer, der modtager en specifik indsats, i forhold til hvordan det ville være gået, hvis de ikke havde modtaget indsatsen? 21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 3
  • 4. MEN EVIDENS HANDLER OGSÅ OM MEGET ANDET END EFFEKT • Viden om sociale problemers karakter og udbredelse • Viden om målgruppens karakteristika og adfærdsmønstre • Viden om hvilke indsatser der anvendes • Viden om ressourceforbrug ved hidtidig indsats • Viden om effekter af forskellige former for indsatser • … 21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 4
  • 5. TILFREDSHEDSUNDERSØGELSER OG EFTERMÅLINGER 90% af dem, der modtog behandlingen var tilfredse eller meget tilfredse… …men det siger ikke noget om effekten 75% af dem, der trænede havde et kondital på 40… … men hvad var deres kondital før træningsprogrammet? Kan ikke bruges til effektmålinger 21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 5
  • 6. FØR-EFTERMÅLINGER Man måler inden man starter indsatsen (førmåling) og når indsatsen er udført (eftermåling) for hele målgruppen. Nok det mest anvendte undersøgelsesdesign – og noget som vi alle bruger. 21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 6
  • 7. FØR-EFTERMÅLING AF LÆSE INTERVENTION 80 85 90 95 100 105 Før Efter Indsats Kontrol Statistisk signifikant forskel p < 0.001 21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 7
  • 8. FØR-EFTERMÅLING AF LÆSE INTERVENTION 80 85 90 95 100 105 110 Før Efter Indsats Kontrol Forskel mellem grupper er IKKE signifikant 21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 8
  • 9. KAUSAL EFFEKT FORMÅL MED EFFEKTMÅLING: At finde den kausale effekt af indsats på udfaldsmål 21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 9
  • 10. EFFEKTMÅLING: HVAD OG HVORDAN 1021-05-2015
  • 11. KAUSAL EFFEKT – HVAD KAN GÅ GALT? Enkelt at undersøge, om der er en sammenhæng eller korrelation mellem indsats og udfaldsmål En sådan sammenhæng kan imidlertid ikke nødvendigvis fortolkes som en kausal effekt – at det er netop A der giver B Eksempler: Antal storke og børnefødsler Alkoholindtagelse og lungecancer 21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 11
  • 12. EFFEKT STIGEN EFFEKTMÅLING: HVAD OG HVORDAN 1221-05-2015
  • 13. HVEM KAN MÅLE EFFEKT? Effektmåling handler om: • Systematik • Tankegang • Opfølgning • Analyse Der er både brug for ‘hverdags’-effekt og ‘forsker’-effekt (og alting ind imellem) 21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 13
  • 14. PROGRESSION VS. EFFEKT Måske en strid om ord… Men fokus både på de kortsigtede delmål for at opnå de mere langsigtede effekter Eksempel: Effekt på uddannelse for udsatte unge kræver fx at de lærer at stå op om morgenen 21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 14