Sosiaalityön arviointi ja vaikuttavuus
Kuntouttavan sosiaalityön arviointi- ja
kehittäminen
• Jakson oppimistavoitteet: erikoistuva opiskelija hallitsee
arviointi- ja vaikuttavuustutkimuksen peruskäsitteet ja
-suuntaukset ja osaa soveltaa monipuolisesti arviointi- ja
kehittämistyön menetelmiä omassa työssä ja siihen
liittyvässä tiedontuotannossa
• Luennon (1,5 tuntia) oppimistavoitteet:
– Opiskelija ymmärtää sosiaalityön arvioinnin merkityksen
– Opiskelija hahmottaa erilaisia arviointi- ja
vaikuttavuustiedon käyttötarkoituksia kuntouttavassa
sosiaalityössä
– Opiskelija tunnistaa sosiaalityön arviointi- ja
vaikuttavuustutkimuksen perussuuntaukset
2
Oppimistavoitteet
30.11.2017
Tavoite ja vaikuttavuus
• Mikä on työsi tavoite?
• Mikä on työsi vaikuttavuus?
30.11.2017 3
Mitä on arviointi, mitä vaikuttavuus?
Arviointi
• Käytännöllisyys,
pragmaattisuus
• Millaisia tuloksia
interventiolla saatiin
aikaan?
(kokonaisvaikutus)
• Kuvailu
Vaikuttavuus
• Tieteellisyys,
teoriapohjaisuus
• Miten jokin interventio
vaikuttaa jonkin prosessin
kautta tulokseen?
• Vaikuttavuuden osa-
alueiden tunnistaminen
• Kysymys
kausaalisuudesta
• Selitys
4
• Tiedon arvottaminen, kantaaottavuus
• Poliittisuus
• Kriittisyys
30.11.2017
• Mukana hallinnollisessa diskurssissa -80 –
luvulta lähtien eri tavoin (Rajavaara 2007)
• Kustannus- ja vaikuttavuustiedon tarve
kasvanut viimeisen vuosikymmenen aikana
dramaattisesti (Kettner ym. 2017)
• Suomessa: hallitusohjelma, sosiaalialan
kehittämishankkeet, lainsäädäntö, rahoittajat
edellyttävät vaikuttavuutta
5
Arviointi- ja vaikuttavuustiedon tarve
30.11.2017
• Sosiaalityöllä tarkoitetaan asiakas- ja
asiantuntijatyötä, jossa rakennetaan yksilön, perheen
tai yhteisön tarpeita vastaava sosiaalisen tuen ja
palvelujen kokonaisuus, sovitetaan se yhteen muiden
toimijoiden tarjoaman tuen kanssa sekä ohjataan ja
seurataan sen toteutumista ja vaikuttavuutta
• Asiakassuunnitelman arviointi
• Rakenteellinen sosiaalityö
• Erityistä tukea tarvitsevien henkilöiden hyvinvoinnin
seuraaminen ja edistäminen
• Lasten ja nuorten hyvinvoinnin seuraaminen ja
edistäminen
30.11.2017 6
Sosiaalihuoltolaki
7
Kuvio 1. Sosiaalityön arviointi- ja
vaikuttavuustiedon perusteluja
30.11.2017
Yksilökohtaisen työn vaikuttavuuden tunnistaminen
• Asiakkaan taloustilanteen pysyvämpi edistäminen
edellyttää useita tukevia sosiaalityön menetelmiä
(Kivipelto ym. 2013; Johansen 2014; Malmberg-Heinonen
2011). Pelkkä taloudellinen tuki ehkäisee jossain määrin
köyhyysloukkuun putoamista (Szulc 2012), mutta ei
paranna asiakkaan taloudellisia ongelmia (Kivipelto ym.
2013)
Yhteisöllisten panostusten merkityksen osoittaminen
• Kriittinen ja asiakkaita osallistava arviointi lisää
osallistujien valtaistumista ja itsemääräämisoikeutta
(Kivipelto & Yliruka 2013)
• Yhdyskuntatyö lisää osallisuutta ja hyvinvoinnin
kokemuksia (Karjalainen & Kivipelto 2013)
Sosiaalisten investointien merkityksen esiin saaminen
• Terveyserojen poistaminen edellyttää laajoja sosiaalisia
investointeja (Sipilä 2011; WHO). Myös BKT korkeampi
niissä maissa, joissa panostettu esim. koulutukseen ja
päivähoitojärjestelmään (Sipilä 2011)
8
Sosiaalityön sisäiset tarpeet –
esimerkkejä arviointi- ja
vaikuttavuustiedosta
30.11.2017
30.11.2017 9
Arviointi- ja vaikuttavuustutkimuksen
suuntauksia
Realistinen arviointi: AVAIN-mittari
• Tavoitteet
• Menetelmät
• Tilannetekijät
• Arviointi kaksi kertaa
• Asiakaskohtainen seuranta
• Laajat aineistot
• Avain THL:n koodistopalvelimella
http://91.202.112.142/codeserver/pages/classification-view-
page.xhtml?classificationKey=2763&versionKey=3083
• Seuraa Avainta: https://twitter.com/avainthl
30.11.2017 10
Konstruktivistinen arviointi
• Ontologia: relativismi
• Metodi: Hermeneuttinen dialogi
• Tiedonkeruun tavoite: konsensus
• Prosessi jatkuva, uusia asioita esiin nostava
• Cuba & Lincoln:
https://wmich.edu/sites/default/files/attachments/u35
0/2014/constructivisteval.pdf
• Responsiivinen arviointi, esim BIKVA
30.11.2017 11
Kriittinen / poliittinen arviointi
• Transformatiivinen osallistava arviointi
• Angela Everitt & Pauline Hardiker
• Cousins & Whitmore
• Sharon Brisolara
• Kehittyvät maat
• Paulo Freire
30.11.2017 12
Empiristinen arviointi
• Systemaattiset kirjallisuuskatsaukset
• Advocacy /asianajon vaikuttavuus naisten
hyvinvointiin ja perheväkivallan ehkäisyyn
• Pyrkimys objektiivisuuteen
30.11.2017 13
• Kunnissa käytössä lähinnä ”hyvät käytännöt”;
kokeiluhankkeet, talousseuranta sekä tilastot
(esim. toimeentulotuen määräaikojen seuraaminen
(Saikkonen 2015 ym.) # kustannusvaikuttavuus
• Case-tutkimukset (simulaatiomallit, opinnäytteet,
arvioinnit jne)
• Systemaattiset katsaukset (ei juurikaan)
• Systemaattinen ja jatkuva vaikuttavuustiedon
keruu (puuttuu) (esim. Kivipelto ym. 2015)
• Kunnallisen päätöksenteon tietopohja uudistettava
(Saikkonen ym. 2015)
• Valtakunnalliset mittaritiedon ja –järjestelmien
kehittämishankkeet (sote, VNK jne)
14
Arviointi- ja vaikuttavuustiedon nykytila
30.11.2017
Sosiaalityön vaikuttavuuden arvioinnin
Facebook-ryhmä
• https://www.facebook.com/groups/finsoc
30.11.2017 15
16
Lähteitä ja lisälukemista
• Johansen, Sissel (2014) Psycho-social processes and outcomes of
family group conferences for long-term social assistance recipients.
British Journal of Social Work, 44 (1), 145–162.
• Karjalainen, Pekka & Kivipelto, Minna (2014) Yhdyskuntatyö kansalaisia
kohtaamassa. Teoksessa: Haverinen, Riitta & Kuronen, Marjo & Pösö,
Tarja (toim.) Sosiaalihuollon tila ja tulevaisuus. Tampere: Vastapaino,
219–240.
• Kettner, Peter M. & Moroney, Robert M. & Martin, Lawrence L. (2017)
Designing and managing programs. An Effectiveness-based approach.
Los Angeles: Sage.
• Kivipelto, Minna & Blomgren, Sanna & Karjalainen, Pekka & Saikkonen,
Paula (toim.) (2013) Vaikuttavaa aikuissosiaalityötä – arviointimalleista
mittareihin. Tutkimus- ja kehittämishankkeen loppuraportti. Raportteja 8.
Helsinki: THL.
30.11.2017
• Kivipelto, Minna & Karjalainen, Pekka & Blomgren, Sanna &
Saikkonen, Paula (2015) Web-based tool for social work
effectiveness evaluation. Social Work Review (3).
• Kivipelto, Minna & Yliruka, Laura (2012) Mirror method as an
approach for critical evaluation in social work. 13 (2) Critical Social
Work.
• Malmberg-Heinonen, Ira (2011) The effects of family group
conferences on social support and mental health for longer-term
social assistance recipients in Norway. The British Journal of Social
Work, 41 (5), 949–967.
• Mertens, Donna & Wilson, Amy T. (2012) Program evaluation –
theory and practice. A comprehensive guide. London: The Guildford
Press.
• Rieper, Olaf & Leeuw, Frans L. & Ling, Tom (2017) The evidence
book. Concepts, generation, and use of evidence. Comparative
Policy Evaluation 15. London: Routledge.
1730.11.2017
• Rajavaara, Marketta (2007) Vaikuttavuusyhteiskunta. Sosiaalisten
olojen arvostelusta vaikutusten todentamiseen. Sosiaali- ja
terveysturvan tutkimuksia 84. Helsinki: Kelan tutkimusosasto.
• Saikkonen, Paula & Blomgren, Sanna & Karjalainen, Pekka &
Kivipelto, Minna (2015) Poistaako sosiaalityö huono-osaisuutta?
Tutkimusjulkaisu 89. Helsinki, Kunnallisalan kehittämissäätiö.
• Sipilä, Jorma (2011) Hyvinvointivaltio sosiaalisena investointina: älä
anna köyhälle kalaa vaan koulutus! Yhteiskuntapolitiikka (4), 359–
372.
• Sosiaalihuoltolaki (1301/2014) Helsinki: Eduskunta.
• Szulc, Adam (2012) Social policy and poverty checking the
efficiency of the social assistance system in Poland. Eastern
European Economics, 50 (5), 66–92.
• WHO. Evidence on Social Determinants of Heath.
http://www.who.int/social_determinants/themes/en/
1830.11.2017

Sosiaalityön arviointi ja vaikuttavuus

  • 1.
    Sosiaalityön arviointi javaikuttavuus Kuntouttavan sosiaalityön arviointi- ja kehittäminen
  • 2.
    • Jakson oppimistavoitteet:erikoistuva opiskelija hallitsee arviointi- ja vaikuttavuustutkimuksen peruskäsitteet ja -suuntaukset ja osaa soveltaa monipuolisesti arviointi- ja kehittämistyön menetelmiä omassa työssä ja siihen liittyvässä tiedontuotannossa • Luennon (1,5 tuntia) oppimistavoitteet: – Opiskelija ymmärtää sosiaalityön arvioinnin merkityksen – Opiskelija hahmottaa erilaisia arviointi- ja vaikuttavuustiedon käyttötarkoituksia kuntouttavassa sosiaalityössä – Opiskelija tunnistaa sosiaalityön arviointi- ja vaikuttavuustutkimuksen perussuuntaukset 2 Oppimistavoitteet 30.11.2017
  • 3.
    Tavoite ja vaikuttavuus •Mikä on työsi tavoite? • Mikä on työsi vaikuttavuus? 30.11.2017 3
  • 4.
    Mitä on arviointi,mitä vaikuttavuus? Arviointi • Käytännöllisyys, pragmaattisuus • Millaisia tuloksia interventiolla saatiin aikaan? (kokonaisvaikutus) • Kuvailu Vaikuttavuus • Tieteellisyys, teoriapohjaisuus • Miten jokin interventio vaikuttaa jonkin prosessin kautta tulokseen? • Vaikuttavuuden osa- alueiden tunnistaminen • Kysymys kausaalisuudesta • Selitys 4 • Tiedon arvottaminen, kantaaottavuus • Poliittisuus • Kriittisyys 30.11.2017
  • 5.
    • Mukana hallinnollisessadiskurssissa -80 – luvulta lähtien eri tavoin (Rajavaara 2007) • Kustannus- ja vaikuttavuustiedon tarve kasvanut viimeisen vuosikymmenen aikana dramaattisesti (Kettner ym. 2017) • Suomessa: hallitusohjelma, sosiaalialan kehittämishankkeet, lainsäädäntö, rahoittajat edellyttävät vaikuttavuutta 5 Arviointi- ja vaikuttavuustiedon tarve 30.11.2017
  • 6.
    • Sosiaalityöllä tarkoitetaanasiakas- ja asiantuntijatyötä, jossa rakennetaan yksilön, perheen tai yhteisön tarpeita vastaava sosiaalisen tuen ja palvelujen kokonaisuus, sovitetaan se yhteen muiden toimijoiden tarjoaman tuen kanssa sekä ohjataan ja seurataan sen toteutumista ja vaikuttavuutta • Asiakassuunnitelman arviointi • Rakenteellinen sosiaalityö • Erityistä tukea tarvitsevien henkilöiden hyvinvoinnin seuraaminen ja edistäminen • Lasten ja nuorten hyvinvoinnin seuraaminen ja edistäminen 30.11.2017 6 Sosiaalihuoltolaki
  • 7.
    7 Kuvio 1. Sosiaalityönarviointi- ja vaikuttavuustiedon perusteluja 30.11.2017
  • 8.
    Yksilökohtaisen työn vaikuttavuudentunnistaminen • Asiakkaan taloustilanteen pysyvämpi edistäminen edellyttää useita tukevia sosiaalityön menetelmiä (Kivipelto ym. 2013; Johansen 2014; Malmberg-Heinonen 2011). Pelkkä taloudellinen tuki ehkäisee jossain määrin köyhyysloukkuun putoamista (Szulc 2012), mutta ei paranna asiakkaan taloudellisia ongelmia (Kivipelto ym. 2013) Yhteisöllisten panostusten merkityksen osoittaminen • Kriittinen ja asiakkaita osallistava arviointi lisää osallistujien valtaistumista ja itsemääräämisoikeutta (Kivipelto & Yliruka 2013) • Yhdyskuntatyö lisää osallisuutta ja hyvinvoinnin kokemuksia (Karjalainen & Kivipelto 2013) Sosiaalisten investointien merkityksen esiin saaminen • Terveyserojen poistaminen edellyttää laajoja sosiaalisia investointeja (Sipilä 2011; WHO). Myös BKT korkeampi niissä maissa, joissa panostettu esim. koulutukseen ja päivähoitojärjestelmään (Sipilä 2011) 8 Sosiaalityön sisäiset tarpeet – esimerkkejä arviointi- ja vaikuttavuustiedosta 30.11.2017
  • 9.
    30.11.2017 9 Arviointi- javaikuttavuustutkimuksen suuntauksia
  • 10.
    Realistinen arviointi: AVAIN-mittari •Tavoitteet • Menetelmät • Tilannetekijät • Arviointi kaksi kertaa • Asiakaskohtainen seuranta • Laajat aineistot • Avain THL:n koodistopalvelimella http://91.202.112.142/codeserver/pages/classification-view- page.xhtml?classificationKey=2763&versionKey=3083 • Seuraa Avainta: https://twitter.com/avainthl 30.11.2017 10
  • 11.
    Konstruktivistinen arviointi • Ontologia:relativismi • Metodi: Hermeneuttinen dialogi • Tiedonkeruun tavoite: konsensus • Prosessi jatkuva, uusia asioita esiin nostava • Cuba & Lincoln: https://wmich.edu/sites/default/files/attachments/u35 0/2014/constructivisteval.pdf • Responsiivinen arviointi, esim BIKVA 30.11.2017 11
  • 12.
    Kriittinen / poliittinenarviointi • Transformatiivinen osallistava arviointi • Angela Everitt & Pauline Hardiker • Cousins & Whitmore • Sharon Brisolara • Kehittyvät maat • Paulo Freire 30.11.2017 12
  • 13.
    Empiristinen arviointi • Systemaattisetkirjallisuuskatsaukset • Advocacy /asianajon vaikuttavuus naisten hyvinvointiin ja perheväkivallan ehkäisyyn • Pyrkimys objektiivisuuteen 30.11.2017 13
  • 14.
    • Kunnissa käytössälähinnä ”hyvät käytännöt”; kokeiluhankkeet, talousseuranta sekä tilastot (esim. toimeentulotuen määräaikojen seuraaminen (Saikkonen 2015 ym.) # kustannusvaikuttavuus • Case-tutkimukset (simulaatiomallit, opinnäytteet, arvioinnit jne) • Systemaattiset katsaukset (ei juurikaan) • Systemaattinen ja jatkuva vaikuttavuustiedon keruu (puuttuu) (esim. Kivipelto ym. 2015) • Kunnallisen päätöksenteon tietopohja uudistettava (Saikkonen ym. 2015) • Valtakunnalliset mittaritiedon ja –järjestelmien kehittämishankkeet (sote, VNK jne) 14 Arviointi- ja vaikuttavuustiedon nykytila 30.11.2017
  • 15.
    Sosiaalityön vaikuttavuuden arvioinnin Facebook-ryhmä •https://www.facebook.com/groups/finsoc 30.11.2017 15
  • 16.
    16 Lähteitä ja lisälukemista •Johansen, Sissel (2014) Psycho-social processes and outcomes of family group conferences for long-term social assistance recipients. British Journal of Social Work, 44 (1), 145–162. • Karjalainen, Pekka & Kivipelto, Minna (2014) Yhdyskuntatyö kansalaisia kohtaamassa. Teoksessa: Haverinen, Riitta & Kuronen, Marjo & Pösö, Tarja (toim.) Sosiaalihuollon tila ja tulevaisuus. Tampere: Vastapaino, 219–240. • Kettner, Peter M. & Moroney, Robert M. & Martin, Lawrence L. (2017) Designing and managing programs. An Effectiveness-based approach. Los Angeles: Sage. • Kivipelto, Minna & Blomgren, Sanna & Karjalainen, Pekka & Saikkonen, Paula (toim.) (2013) Vaikuttavaa aikuissosiaalityötä – arviointimalleista mittareihin. Tutkimus- ja kehittämishankkeen loppuraportti. Raportteja 8. Helsinki: THL. 30.11.2017
  • 17.
    • Kivipelto, Minna& Karjalainen, Pekka & Blomgren, Sanna & Saikkonen, Paula (2015) Web-based tool for social work effectiveness evaluation. Social Work Review (3). • Kivipelto, Minna & Yliruka, Laura (2012) Mirror method as an approach for critical evaluation in social work. 13 (2) Critical Social Work. • Malmberg-Heinonen, Ira (2011) The effects of family group conferences on social support and mental health for longer-term social assistance recipients in Norway. The British Journal of Social Work, 41 (5), 949–967. • Mertens, Donna & Wilson, Amy T. (2012) Program evaluation – theory and practice. A comprehensive guide. London: The Guildford Press. • Rieper, Olaf & Leeuw, Frans L. & Ling, Tom (2017) The evidence book. Concepts, generation, and use of evidence. Comparative Policy Evaluation 15. London: Routledge. 1730.11.2017
  • 18.
    • Rajavaara, Marketta(2007) Vaikuttavuusyhteiskunta. Sosiaalisten olojen arvostelusta vaikutusten todentamiseen. Sosiaali- ja terveysturvan tutkimuksia 84. Helsinki: Kelan tutkimusosasto. • Saikkonen, Paula & Blomgren, Sanna & Karjalainen, Pekka & Kivipelto, Minna (2015) Poistaako sosiaalityö huono-osaisuutta? Tutkimusjulkaisu 89. Helsinki, Kunnallisalan kehittämissäätiö. • Sipilä, Jorma (2011) Hyvinvointivaltio sosiaalisena investointina: älä anna köyhälle kalaa vaan koulutus! Yhteiskuntapolitiikka (4), 359– 372. • Sosiaalihuoltolaki (1301/2014) Helsinki: Eduskunta. • Szulc, Adam (2012) Social policy and poverty checking the efficiency of the social assistance system in Poland. Eastern European Economics, 50 (5), 66–92. • WHO. Evidence on Social Determinants of Heath. http://www.who.int/social_determinants/themes/en/ 1830.11.2017