1. FØR- OG EFTERMÅLING
FØRSTE SKRIDT PÅ VEJEN
HELLE HANSEN, SFI

2. 21-05-2015FØR- OG EFTERMÅLING 2

3. HVORFOR FØR-EFTERMÅLING?
Vil gerne se hvordan borgeren UDVIKLER/ÆNDRER sig over tid.
Vil gerne indføre en ny indsats og undersøge hvordan det går
deltagerne.
Kan bruges når der ikke kan laves en effektmåling
- ikke muligt pga. fx økonomi,
- for lille målgruppe
- ingen mulighed for kontrolgruppe
21-05-2015FØR- OG EFTERMÅLING 3

4. FØR-EFTERMÅLING
To vigtige ting:
1. Der skal måles både før og efter indsatsen
2. Der skal måles på samme måde hver gang
man kan vise forskel fra start til slut
21-05-2015FØR- OG EFTERMÅLING 4

5. FØR-EFTERMÅLING AF LÆSE
INTERVENTION
80
85
90
95
100
105
Før Efter
Indsats
Kontrol
Statistisk signifikant forskel p < 0.001
21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 5

6. FØR-EFTERMÅLING AF LÆSE
INTERVENTION
80
85
90
95
100
105
110
Før Efter
Indsats
Kontrol
Forskel mellem grupper er IKKE signifikant
21-05-2015EFFEKTMÅLING: HVAD OG HVORDAN 6

7. 21-05-2015 7
HVAD ER PROBLEMET MED FØR-EFTER
MÅLINGER?
Man ved ikke om ændringen skyldes indsatsen eller noget helt
andet.
Ændringerne kan skyldes:
Modning/spontan remission
Regression mod gennemsnittet

8. MODNING/SPONTAN REMISSION -
EKSEMPLER
Unge kriminelle bliver mindre kriminelle med alderen – også
uden at man gør noget
21-05-2015FØR- OG EFTERMÅLING 8

9. MODNING/SPONTAN REMISSION -
EKSEMPLER
• Man kan få det bedre, mens man står på venteliste – men det er
næppe effekt af ventelisten!
• Personer går til lægen med forkølelse, når de har det værst. Men
får de det bedre pga. af behandlingen eller blot fordi tiden går?
Smitte Symptom Tid
21-05-2015FØR- OG EFTERMÅLING 9

10. REGRESSION MOD GENNEMSNITTET
Statistisk gruppefænomen:
• Målinger, der ligger langt fra gennemsnit ved første måling,
har tendens til at ligge tættere på gennemsnittet ved næste
måling
21-05-2015FØR- OG EFTERMÅLING 10

11. REGRESSION MOD GENNEMSNITTET
•Statistisk gruppefænomen: Målinger, der ligger langt fra
gennemsnit ved første måling, har tendens til at ligge tættere på
gennemsnittet ved næste måling
21-05-2015FØR- OG EFTERMÅLING 11
Før

12. REGRESSION MOD GENNEMSNITTET
Statistisk gruppefænomen: Målinger, der ligger langt fra gennemsnit
ved første måling, har tendens til at ligge tættere på gennemsnittet ved
næste måling
21-05-2015FØR- OG EFTERMÅLING 12
Før Efter

13. REGRESSION MOD GENNEMSNITTET -
EKSEMPLER
• Sammenhæng mellem forældres og børns højde
• Effekt af at få ros på pilotelevers landinger
21-05-2015FØR- OG EFTERMÅLING 13

14. HVAD SKAL TIL FOR AT LAVE EN GOD
FØR-EFTERMÅLING?
Tre vigtige ting:
1. Der skal måles både før og efter indsatsen
2. Der skal måles på samme måde hver gang
Så man kan vise forskel fra start til slut
(3. HUSK KONTROLGRUPPE, hvis det er muligt)
21-05-2015FØR- OG EFTERMÅLING 14

15. HVAD SKAL TIL FOR AT LAVE EN GOD
FØR-EFTERMÅLING?
• Veldefineret målgruppe
• Klar og afgrænset indsats
• Klare succeskriterier/mål
• Gode måle redskaber
21-05-2015FØR- OG EFTERMÅLING 15

16. MÅLGRUPPE
Definer målgruppen
-hvem er med og hvem er ikke?
-fx alder, køn, problemstillinger, bopæl …
Klare kriterier for hvilke krav man skal opfylde
-evt. også eksklusionskriterier
Man skal helst ikke være i tvivl om en person kan indgå i
studiet eller ej.
21-05-2015FØR- OG EFTERMÅLING 16

17. MÅLGRUPPE
EKS: PROJEKTET ‘KÆRLIGHED I KAOS’ (KIK)
MÅLGRUPPE:
Forældretræningskurset henvender sig til forældre, som har et barn
med diagnosen ADHD eller forældre, som har mistanke om, at deres
barn har ADHD.
BEGRUNDELSE:
Mange helt små børn er endnu ikke diagnosticerede, og en del børn
venter på udredning, så ved også at inddrage forældre til børn med
mistanke om ADHD, kan der sættes ind med en hurtigere forebyggende
indsats.
DERUDOVER: Forældre deltager frivilligt. Det betyder, at der forventes
et vist mål af ressourcer, en motivation for at ville deltage aktivt,
arbejde med sin forældrerolle og skabe forandringer i hjemmet.
21-05-2015FØR- OG EFTERMÅLING 17

18. MÅLGRUPPE
Eksklusionskriterier
EKS: PROJEKTET ‘KÆRLIGHED I KAOS’ (KIK)
• Barnets primære diagnose er ikke ADHD
• Familien har svære psykiske og sociale problemer, som kræver
professionel støtte
• Forældrene har et aktivt misbrug
• Forældrene har fysisk eller psykisk sygdom, der forstyrrer
gennemførelse af de ugentlige gruppemøder eller forhindrer
fremmøde
21-05-2015FØR- OG EFTERMÅLING 18

19. SPØRGSMÅL:
Har den indsats du skal evaluere en klar
defineret målgruppe?
Er der klare inklusions- og
eksklusionskriterier?
21-05-2015FØR- OG EFTERMÅLING 19

20. INDSATS
Indsatsen skal være afgrænset og defineret
Indhold og omfang skal være beskrevet
Ellers ved man ikke hvad man undersøger
Mange indsatser beskrives med overfladiske
og generelle termer.
Vær konkret i beskrivelsen
21-05-2015FØR- OG EFTERMÅLING 20

21. INDSATS, EKS. KIK
Forløbet er et standardiseret gruppeforløb. Der kan deltage 12-
14 forældre (6-7 par), og de mødes en gang om ugen i 12 uger.
Hver mødegang varer 2,5 time, og der bruges samme dagsorden
hver gang. Dagsordenen består af en række fast
tilbagevendende elementer:
• Siden sidst (30 min.)
• Dagens emne – oplæg ved forældretræneren (30 min.)
• Kaffesnak (30 min.)
• Pause (10 min.)
• Øvelse (30 min.)
• Præsentation af hjemmeopgaven (10 min.)
• Uddeling af forældrematerialet (5 min.)
• Evaluering (5 min.)
21-05-2015FØR- OG EFTERMÅLING 21

22. INDSATS, EKS. KIK
Emnerne på de 12 kursusgange er:
• Introduktion til forløbet og ADHD
• Barnet med ADHD
• Familien
• Opmærksomhed og anerkendelse
• Se bort fra negativ adfærd
• Konflikter
• Rutiner og faste rammer
• Planlægning og visualisering
• Pauser og andre konsekvenser
• Positive belønningssystemer
• Problemløsning og selvkontrol
• Opsamling
21-05-2015FØR- OG EFTERMÅLING 22

23. SPØRGSMÅL:
Hvilke elementer indeholder den indsats du
skal evaluere?
Opgave til den der lytter:
Er der steder, hvor beskrivelsen kan blive
mere konkret?
21-05-2015FØR- OG EFTERMÅLING 23

24. HVAD SKAL TIL FOR AT LAVE EN GOD
FØR-EFTERMÅLING?
• Veldefineret målgruppe
• Klar og afgrænset indsats
• Klare succeskriterier/mål
• Gode måle redskaber
21-05-2015FØR- OG EFTERMÅLING 24

25. FORANDRINGSTEORI
Indsats/aktivitet Resultat
21-05-2015FØR- OG EFTERMÅLING 25

26. SUCCESKRITERIER/MÅL
Skal passe med formålet med indsatsen.
Skal være besluttet inden man starter undersøgelsen.
På hvilke områder forventer man at se ændringer?
Hvor store ændringer forventer man? VÆR REALISTSIK
Vælg gerne primære/vigtigste og sekundære/interessante
21-05-2015FØR- OG EFTERMÅLING 26

27. SUCCESKRITERIER/MÅL
Skal være:
• Relevante
• Målbare
• Praktisk mulige
• Målt på samme tidspunkt for alle
Og gerne målt på de personer, der modtog indsatsen
(i modsætning til sagsbehandler, lærer, forældre mm.)
21-05-2015FØR- OG EFTERMÅLING 27

28. SUCCESKRITERIER/MÅL
EKS. PÅ SUCCESKRITERIER FRA PROJEKTET ‘KÆRLIGHED I KAOS’
• en positiv ændring i forældrekompetencer i forhold til barnet (målt
ved PSI-SF)
• en positiv ændring i forældrenes vurdering af sig selv som forældre
(målt ved PSOC)
• Givet vi observerer en positiv ændring i forældrekompetencer,
forventer vi en positiv ændring i barnets og familiens dagligdag og
livskvalitet (målt ved AIM-C)
• Givet vi observerer en positiv ændring i forældrekompetencer,
forventer vi en positiv ændring i barnets adfærd (målt ved ECBI)
21-05-2015FØR- OG EFTERMÅLING 28

29. SPØRGSMÅL:
Hvilke succeskriterier er der for den
indsats, du skal evaluere?
21-05-2015FØR- OG EFTERMÅLING 29

30. RESULTATER
• Afrapporter
• Offentliggør
Så vi kan lære af hinandens gode erfaringer og succeser.
HUSK at vær specifikke omkring hvordan I har lavet
undersøgelsen, så andre kan bruge resultaterne.
21-05-2015FØR- OG EFTERMÅLING 30

31. FØR-EFTERMÅLING
Tre vigtige ting:
1. Der skal måles både før og efter indsatsen
2. Der skal måles på samme måde hver gang
Så man kan vise forskel fra start til slut
3. HUSK KONTROLGRUPPE, hvis det er muligt
21-05-2015FØR- OG EFTERMÅLING 31

32. 21-05-2015FØR- OG EFTERMÅLING 32
SPØRGSMÅL?
Spørgsmål?