SlideShare a Scribd company logo
1 of 11
Download to read offline
Sitä tehdään, mitä
mitataan
8.5.2020Minna Kivipelto 1
Näkökulmia vaikutusten ja vaikuttavuuden arviointiin
Asiakas- ja palveluohjauksen erikoistumiskoulutus
Mitä on vaikuttavuuden arviointi?
Vaikuttavuus on saanut merkillisen paljon sananvaltaa
yhteiskunnassa ottaen huomioon, että se on tyhjä käsite.
Vasta kun tiedustellaan sitä, millaisten pyrkimysten valossa
jokin yhteiskunnallinen käytäntö on vaikuttava, käsite tulee
tärkeäksi. (Rajavaara 2007, 200.)
Esimerkkejä vaikuttavuudesta:
• Talous: säästöt, voitot, kustannukset..
• Hyvinvointi: koettu hv, sairauksien vähentyminen,
eriarvoistavien tekijöiden poistuminen, vähimmäisturvan
käyttö..
8.5.2020Minna Kivipelto 2
Miksi vaikuttavuutta tulee arvioida?
• Sosiaali- ja terveydenhuollolla on
erilaisia vaikutuksia yksilöön,
yhteisöihin ja yhteiskuntaan
• Vaikutukset voivat olla ennakoituja tai
ennakoimattomia
• Asiakkaat, potilaat, palvelujen ja
etuuksien käyttäjät
• Työntekijät, työmenetelmät
• Talous, rahoittajat
8.5.2020Minna Kivipelto 3
Hyvinvoinnin mittaaminen
8.5.2020Minna Kivipelto 4
• Mittaaminen = asioiden ja ilmiöiden määrän määrittämistä;
muutoksen näkyväksi tekemistä
• Mittaaminen edellyttää ilmiön tai asian käsitteellistämistä ja
operationalisointia mitattavaan muotoon
• Esimerkki: Taloudellisen tilanteesi arviointi asteikolla 1-5
• Mittari=väline, jolla muutos todetaan
• Mittarissa useita asiaa mittaavia kysymyksiä
• Validi mittari mittaa sitä, mitä on tarkoituskin mitata
• Pysyvä ja vakaa mittari mittaa samaa asiaa eri mittauskerroilla
”Kun mittarista tulee tulostavoite, se lakkaa
olemasta hyvä mittari”
• Parhaimmillaan mittarit nostavat esiin oivaltavaa tietoa siitä,
miten organisaatio toimii ja kykenee vastaamaan
asiakkaiden tarpeisiin.
• Tarkoituksenmukaiset mittarit antavat luotettavaa dataa,
jota organisaatio voi hyödyntää työn kehittämisessä.
• Mittaaminen ei vielä kerro kaikkea.
• Liian kapea mittaaminen voi johtaa vääristyneeseen
ajatteluun (”tulos tai ulos”).
(Lahtinen 2018)
8.5.2020Minna Kivipelto 5
Mittaamisesta arviointiin: AVAIN-mittari
8.5.2020Minna Kivipelto 6
• Tavoitteet  tavoitteiden saavuttaminen
• Mekanismit / tilannetekijät
• Vaikeuttavat mekanismit
• Tukevat mekanismit
• Käytetyt menetelmät
• Vaikuttavuus:
• Ennen: tavoitetulos
• Nyt: tavoitemenetelmät
+mekanismittulos
Esimerkki arviointituloksista (1/3)
8.5.2020Minna Kivipelto 7
(Koponen 2020, 103)
Esimerkki arviointituloksista (2/3)
8.5.2020Minna Kivipelto 8
(Koponen 2020, 108)
Esimerkki arviointituloksista (3/3)
8.5.2020Minna Kivipelto 9
(Koponen 2020, 123)
Lopuksi
• Vaikuttavuuden arviointi edellyttää vaikuttavuuden
määrittelyä
• Luotettava vaikuttavuustieto tuotetaan
mittaamiskohteeseen soveltuvilla mittareilla
• Vaikuttavuustiedon käsittely
• Vieminen päätöksentekoon
8.5.2020Minna Kivipelto 10
Lähteet
• Koponen, Erja (2020) Arviointitulokset. Teoksessa Kivipelto,
Minna (toim.) Osallistavaa aikuissosiaalityötä : Osallistavan
sosiaaliturvan kuntakokeilun tulokset. Raportteja 7/2020.
Helsinki: THL, 101-131.
• Lahtinen, Eero (2018) Kun mittarista tulee tulostavoite, se
lakkaa olemasta hyvä mittari. FA Blogi. Mittaamisen
merkitys.
8.5.2020Minna Kivipelto 11

More Related Content

Similar to Vaikuttavuuden arviointi

Similar to Vaikuttavuuden arviointi (20)

Vaikuttavuus – mitä se on ja mitä sitten?
Vaikuttavuus – mitä se on ja mitä sitten?Vaikuttavuus – mitä se on ja mitä sitten?
Vaikuttavuus – mitä se on ja mitä sitten?
 
Vaikuttavuuden mallintamisen ABC
Vaikuttavuuden mallintamisen ABC Vaikuttavuuden mallintamisen ABC
Vaikuttavuuden mallintamisen ABC
 
Marika Kylänen: HYTE-toimintamallien vaikuttavuuden arviointi
Marika Kylänen: HYTE-toimintamallien vaikuttavuuden arviointiMarika Kylänen: HYTE-toimintamallien vaikuttavuuden arviointi
Marika Kylänen: HYTE-toimintamallien vaikuttavuuden arviointi
 
Tiedon hyödyntämisestä vaikuttavuudella johtamiseen 2021 05-11
Tiedon hyödyntämisestä vaikuttavuudella johtamiseen 2021 05-11Tiedon hyödyntämisestä vaikuttavuudella johtamiseen 2021 05-11
Tiedon hyödyntämisestä vaikuttavuudella johtamiseen 2021 05-11
 
Temaararaha webinaari hankesuunnitelma Savolainen 130820
Temaararaha webinaari hankesuunnitelma Savolainen 130820Temaararaha webinaari hankesuunnitelma Savolainen 130820
Temaararaha webinaari hankesuunnitelma Savolainen 130820
 
Liisa Penttinen ja Heli Valkeinen: Kohti kuntoutuksen tietopohjaa - Tuloksia ...
Liisa Penttinen ja Heli Valkeinen: Kohti kuntoutuksen tietopohjaa - Tuloksia ...Liisa Penttinen ja Heli Valkeinen: Kohti kuntoutuksen tietopohjaa - Tuloksia ...
Liisa Penttinen ja Heli Valkeinen: Kohti kuntoutuksen tietopohjaa - Tuloksia ...
 
Vaikuttavuus sosiaali- ja terveydenhuollossa TERVE-SOS 2018
Vaikuttavuus sosiaali- ja terveydenhuollossa TERVE-SOS 2018Vaikuttavuus sosiaali- ja terveydenhuollossa TERVE-SOS 2018
Vaikuttavuus sosiaali- ja terveydenhuollossa TERVE-SOS 2018
 
AVAIN-tietosisältö sosiaalityön vaikuttavuuden arvioinnissa
AVAIN-tietosisältö sosiaalityön vaikuttavuuden arvioinnissaAVAIN-tietosisältö sosiaalityön vaikuttavuuden arvioinnissa
AVAIN-tietosisältö sosiaalityön vaikuttavuuden arvioinnissa
 
Vaikuttavuusinvestointi: Social Impact Bond, Anne Bland, 0615
Vaikuttavuusinvestointi: Social Impact Bond, Anne Bland, 0615Vaikuttavuusinvestointi: Social Impact Bond, Anne Bland, 0615
Vaikuttavuusinvestointi: Social Impact Bond, Anne Bland, 0615
 
Olli Kangas: Perustulokokeilu Suomessa
Olli Kangas: Perustulokokeilu SuomessaOlli Kangas: Perustulokokeilu Suomessa
Olli Kangas: Perustulokokeilu Suomessa
 
Mittaaminen ja työkykyjohtamisen haasteet
Mittaaminen ja työkykyjohtamisen haasteetMittaaminen ja työkykyjohtamisen haasteet
Mittaaminen ja työkykyjohtamisen haasteet
 
Lean 2015 10-21
Lean 2015 10-21Lean 2015 10-21
Lean 2015 10-21
 
Työterveytoiminnan ja -yhteistyön laadusta
Työterveytoiminnan ja  -yhteistyön laadusta Työterveytoiminnan ja  -yhteistyön laadusta
Työterveytoiminnan ja -yhteistyön laadusta
 
Julkishallinnon raportointi- ja analysointipalvelu, Olli Ahonen, Valtiokonttori
Julkishallinnon raportointi- ja analysointipalvelu, Olli Ahonen, ValtiokonttoriJulkishallinnon raportointi- ja analysointipalvelu, Olli Ahonen, Valtiokonttori
Julkishallinnon raportointi- ja analysointipalvelu, Olli Ahonen, Valtiokonttori
 
Tietoa päätöksenteon tueksi, Olli Ahonen, Valtiokonttori
Tietoa päätöksenteon tueksi, Olli Ahonen, ValtiokonttoriTietoa päätöksenteon tueksi, Olli Ahonen, Valtiokonttori
Tietoa päätöksenteon tueksi, Olli Ahonen, Valtiokonttori
 
Tiedon tuotanto ja kuntapäätöksenteko, tapauksena sosiaalityö
Tiedon tuotanto ja kuntapäätöksenteko, tapauksena sosiaalityö Tiedon tuotanto ja kuntapäätöksenteko, tapauksena sosiaalityö
Tiedon tuotanto ja kuntapäätöksenteko, tapauksena sosiaalityö
 
Esitys+l klle
Esitys+l klleEsitys+l klle
Esitys+l klle
 
Tietojohtaminen sosiaali- ja terveyspiirissä
Tietojohtaminen sosiaali- ja terveyspiirissäTietojohtaminen sosiaali- ja terveyspiirissä
Tietojohtaminen sosiaali- ja terveyspiirissä
 
Tuloksellisuusdialogi - tiedolla johtamisen seuraava askel
Tuloksellisuusdialogi - tiedolla johtamisen seuraava askelTuloksellisuusdialogi - tiedolla johtamisen seuraava askel
Tuloksellisuusdialogi - tiedolla johtamisen seuraava askel
 
Tiivistelmä - Eläketurvakeskuksen tilastotoimen ulkoinen arviointi
Tiivistelmä - Eläketurvakeskuksen tilastotoimen ulkoinen arviointiTiivistelmä - Eläketurvakeskuksen tilastotoimen ulkoinen arviointi
Tiivistelmä - Eläketurvakeskuksen tilastotoimen ulkoinen arviointi
 

More from Minna Kivipelto

More from Minna Kivipelto (20)

Measuring effectiveness in the finnish inclusive social security
Measuring effectiveness in the finnish inclusive social securityMeasuring effectiveness in the finnish inclusive social security
Measuring effectiveness in the finnish inclusive social security
 
Experiences on Effectiveness Evaluation since 1986 in Finland, researcher Pet...
Experiences on Effectiveness Evaluation since 1986 in Finland, researcher Pet...Experiences on Effectiveness Evaluation since 1986 in Finland, researcher Pet...
Experiences on Effectiveness Evaluation since 1986 in Finland, researcher Pet...
 
Measuring life-situations of the youngsters with 3X10D Survey, adjunct profes...
Measuring life-situations of the youngsters with 3X10D Survey, adjunct profes...Measuring life-situations of the youngsters with 3X10D Survey, adjunct profes...
Measuring life-situations of the youngsters with 3X10D Survey, adjunct profes...
 
Realist Evaluation of the Systemic Practice Model for Child Protection, visit...
Realist Evaluation of the Systemic Practice Model for Child Protection, visit...Realist Evaluation of the Systemic Practice Model for Child Protection, visit...
Realist Evaluation of the Systemic Practice Model for Child Protection, visit...
 
Realist Evaluation Can Investigate What Works and for Whom: Utilizing Live Bi...
Realist Evaluation Can Investigate What Works and for Whom: Utilizing Live Bi...Realist Evaluation Can Investigate What Works and for Whom: Utilizing Live Bi...
Realist Evaluation Can Investigate What Works and for Whom: Utilizing Live Bi...
 
Etuus- ja palvelujärjestelmän yhteinen vaikuttavuus
Etuus- ja palvelujärjestelmän yhteinen vaikuttavuusEtuus- ja palvelujärjestelmän yhteinen vaikuttavuus
Etuus- ja palvelujärjestelmän yhteinen vaikuttavuus
 
AVAIN-mittari sosiaalityön vaikuttavuuden jäljillä
AVAIN-mittari sosiaalityön vaikuttavuuden jäljilläAVAIN-mittari sosiaalityön vaikuttavuuden jäljillä
AVAIN-mittari sosiaalityön vaikuttavuuden jäljillä
 
Realistinen arviointi
Realistinen arviointiRealistinen arviointi
Realistinen arviointi
 
Rakenteellinen sosiaalityö- tiedontuotantoa vai kriittistä vaikuttavuustutkim...
Rakenteellinen sosiaalityö- tiedontuotantoa vai kriittistä vaikuttavuustutkim...Rakenteellinen sosiaalityö- tiedontuotantoa vai kriittistä vaikuttavuustutkim...
Rakenteellinen sosiaalityö- tiedontuotantoa vai kriittistä vaikuttavuustutkim...
 
Arviointi- ja vaikuttavuus sosiaalialan tutkimuksessa ja käytännöissä
Arviointi- ja vaikuttavuus sosiaalialan tutkimuksessa ja käytännöissäArviointi- ja vaikuttavuus sosiaalialan tutkimuksessa ja käytännöissä
Arviointi- ja vaikuttavuus sosiaalialan tutkimuksessa ja käytännöissä
 
Petteri Paasio: Miten tästä eteenpäin?
Petteri Paasio: Miten tästä eteenpäin?Petteri Paasio: Miten tästä eteenpäin?
Petteri Paasio: Miten tästä eteenpäin?
 
Sakari Kainulainen: Hyvinvoinnin monet muodot ja niiden mittaaminen
Sakari Kainulainen: Hyvinvoinnin monet muodot ja niiden mittaaminenSakari Kainulainen: Hyvinvoinnin monet muodot ja niiden mittaaminen
Sakari Kainulainen: Hyvinvoinnin monet muodot ja niiden mittaaminen
 
Realist evaluation integrated into the social work client database system
Realist evaluation integrated into the social work client database systemRealist evaluation integrated into the social work client database system
Realist evaluation integrated into the social work client database system
 
Yksi yritys mitata lasten ja perheiden saamien palvelujen vaikuttavuutta enne...
Yksi yritys mitata lasten ja perheiden saamien palvelujen vaikuttavuutta enne...Yksi yritys mitata lasten ja perheiden saamien palvelujen vaikuttavuutta enne...
Yksi yritys mitata lasten ja perheiden saamien palvelujen vaikuttavuutta enne...
 
Sosiaalityön yhteiskunnallinen tehtävä ennen perustoimeentulotuen Kela-siirtoa
Sosiaalityön yhteiskunnallinen tehtävä ennen perustoimeentulotuen Kela-siirtoaSosiaalityön yhteiskunnallinen tehtävä ennen perustoimeentulotuen Kela-siirtoa
Sosiaalityön yhteiskunnallinen tehtävä ennen perustoimeentulotuen Kela-siirtoa
 
AVAIN - mittari sosiaalityön vaikuttavuuden arviointiin
AVAIN - mittari sosiaalityön vaikuttavuuden arviointiinAVAIN - mittari sosiaalityön vaikuttavuuden arviointiin
AVAIN - mittari sosiaalityön vaikuttavuuden arviointiin
 
Asiakaslähtöinen palveluiden arviointi
Asiakaslähtöinen palveluiden arviointiAsiakaslähtöinen palveluiden arviointi
Asiakaslähtöinen palveluiden arviointi
 
Rakenteellinen sosiaalityö käsitteenä
Rakenteellinen sosiaalityö käsitteenäRakenteellinen sosiaalityö käsitteenä
Rakenteellinen sosiaalityö käsitteenä
 
Vaikuttaako tieto kuntapäätöksenteossa?
Vaikuttaako tieto kuntapäätöksenteossa?Vaikuttaako tieto kuntapäätöksenteossa?
Vaikuttaako tieto kuntapäätöksenteossa?
 
FinSoc-tiimin esittely
FinSoc-tiimin esittelyFinSoc-tiimin esittely
FinSoc-tiimin esittely
 

Vaikuttavuuden arviointi

  • 1. Sitä tehdään, mitä mitataan 8.5.2020Minna Kivipelto 1 Näkökulmia vaikutusten ja vaikuttavuuden arviointiin Asiakas- ja palveluohjauksen erikoistumiskoulutus
  • 2. Mitä on vaikuttavuuden arviointi? Vaikuttavuus on saanut merkillisen paljon sananvaltaa yhteiskunnassa ottaen huomioon, että se on tyhjä käsite. Vasta kun tiedustellaan sitä, millaisten pyrkimysten valossa jokin yhteiskunnallinen käytäntö on vaikuttava, käsite tulee tärkeäksi. (Rajavaara 2007, 200.) Esimerkkejä vaikuttavuudesta: • Talous: säästöt, voitot, kustannukset.. • Hyvinvointi: koettu hv, sairauksien vähentyminen, eriarvoistavien tekijöiden poistuminen, vähimmäisturvan käyttö.. 8.5.2020Minna Kivipelto 2
  • 3. Miksi vaikuttavuutta tulee arvioida? • Sosiaali- ja terveydenhuollolla on erilaisia vaikutuksia yksilöön, yhteisöihin ja yhteiskuntaan • Vaikutukset voivat olla ennakoituja tai ennakoimattomia • Asiakkaat, potilaat, palvelujen ja etuuksien käyttäjät • Työntekijät, työmenetelmät • Talous, rahoittajat 8.5.2020Minna Kivipelto 3
  • 4. Hyvinvoinnin mittaaminen 8.5.2020Minna Kivipelto 4 • Mittaaminen = asioiden ja ilmiöiden määrän määrittämistä; muutoksen näkyväksi tekemistä • Mittaaminen edellyttää ilmiön tai asian käsitteellistämistä ja operationalisointia mitattavaan muotoon • Esimerkki: Taloudellisen tilanteesi arviointi asteikolla 1-5 • Mittari=väline, jolla muutos todetaan • Mittarissa useita asiaa mittaavia kysymyksiä • Validi mittari mittaa sitä, mitä on tarkoituskin mitata • Pysyvä ja vakaa mittari mittaa samaa asiaa eri mittauskerroilla
  • 5. ”Kun mittarista tulee tulostavoite, se lakkaa olemasta hyvä mittari” • Parhaimmillaan mittarit nostavat esiin oivaltavaa tietoa siitä, miten organisaatio toimii ja kykenee vastaamaan asiakkaiden tarpeisiin. • Tarkoituksenmukaiset mittarit antavat luotettavaa dataa, jota organisaatio voi hyödyntää työn kehittämisessä. • Mittaaminen ei vielä kerro kaikkea. • Liian kapea mittaaminen voi johtaa vääristyneeseen ajatteluun (”tulos tai ulos”). (Lahtinen 2018) 8.5.2020Minna Kivipelto 5
  • 6. Mittaamisesta arviointiin: AVAIN-mittari 8.5.2020Minna Kivipelto 6 • Tavoitteet  tavoitteiden saavuttaminen • Mekanismit / tilannetekijät • Vaikeuttavat mekanismit • Tukevat mekanismit • Käytetyt menetelmät • Vaikuttavuus: • Ennen: tavoitetulos • Nyt: tavoitemenetelmät +mekanismittulos
  • 7. Esimerkki arviointituloksista (1/3) 8.5.2020Minna Kivipelto 7 (Koponen 2020, 103)
  • 8. Esimerkki arviointituloksista (2/3) 8.5.2020Minna Kivipelto 8 (Koponen 2020, 108)
  • 9. Esimerkki arviointituloksista (3/3) 8.5.2020Minna Kivipelto 9 (Koponen 2020, 123)
  • 10. Lopuksi • Vaikuttavuuden arviointi edellyttää vaikuttavuuden määrittelyä • Luotettava vaikuttavuustieto tuotetaan mittaamiskohteeseen soveltuvilla mittareilla • Vaikuttavuustiedon käsittely • Vieminen päätöksentekoon 8.5.2020Minna Kivipelto 10
  • 11. Lähteet • Koponen, Erja (2020) Arviointitulokset. Teoksessa Kivipelto, Minna (toim.) Osallistavaa aikuissosiaalityötä : Osallistavan sosiaaliturvan kuntakokeilun tulokset. Raportteja 7/2020. Helsinki: THL, 101-131. • Lahtinen, Eero (2018) Kun mittarista tulee tulostavoite, se lakkaa olemasta hyvä mittari. FA Blogi. Mittaamisen merkitys. 8.5.2020Minna Kivipelto 11