Laadullisen tutkimuksen päivä, THL 5.9.2017 Sosiaalipsykologian apulaisprofessori, Sosiaalipsykologian & terveys- ja liikuntapsykologian dosentti

1. Monimenetelmällinen
terveystutkimus:
Esimerkkinä tutkimusperustaisen
intervention kehittäminen ja evaluaatio
Nelli Hankonen
Sosiaalipsykologian apulaisprofessori,
Sosiaalipsykologian & terveys- ja liikuntapsykologian dosentti
Laadullisen tutkimuksen päivä, THL
5.9.2017

2. Kuinka monella kokemusta metodien
yhdistämisestä
• Samassa tutkimushankekokonaisuudessa?
• Samassa tutkimusjulkaisussa?

3. Tänään: Menetelmien yhdistämisen…
• …hyötyjä ja tavoitteita
• …esimerkkejä sovelluksista hyvinvoinnin edistämisen interventioiden
• tutkimusperustaisessa kehittämisessä sekä
• arvioinnissa?
• …jälkeen: tutkimustulosten integroiminen (Triangulation Protocol)

4. •Mikä on tarkoituksenmukainen tapa
vastata tutkimuskysymykseen?

5. BurkeJohnson&Onwuegbuzie(2004).MixedMethodsResearch:
AResearchParadigmWhoseTimeHasCome.
EducationalResearcher,33(7),14-26
“- - research approaches should be mixed in ways
that offer the best opportunities for answering
important research questions.”

6. • “Today's research world is becoming increasingly interdisciplinary,
complex, and dynamic; therefore, many researchers need to
complement one method with another, and all researchers need a
solid understanding of multiple methods used by other scholars to
facilitate communication, to promote collaboration, and to provide
superior research. Taking a non-purist or compatibilist or mixed
position allows researchers to mix and match design components
that offer the best chance of answering their specific research
questions. - - We contend that epistemological and paradigmatic
ecumenicalism is within reach in the research paradigm of mixed
methods research.”
Burke-Johnson & Onwuegbuzie 2004

8. Let’s Move It -kehittäminen UK Medical Research
Councilin ohjeistuksen mukaan
Toteutuskelpoisuus ja pilotointi
2014
Arviointi (RCT)
2015-17 .
Vaikuttavuusevaluaation jälkeinen
implementointi (toimeenpano)
2017-18
Kehittäminen
2013
Jokaisessa vaiheessa
tarvitaan monipuolista
ymmärrystä –
monipuoliset metodit
kullanarvoisia
Craig et al 2008 Complex intervention guidance

9. Intervention kehittämiseksi:
teorioiden käyttö &
monimenetelmäinen tutkimus

10. I
N
T
E
R
V
E
N
T
I
O
S
U
U
N
N
I
T
T
E
L
U
2 0 1 2 2 0 1 3 2 0 1 4 2 0 1 4 – 1 7
Toteu-
tuskelpoi
-suus-
tutkimus
Ryväs-
satunnais-
tettu
vaikuttavuus
-tutkimus
(RCT)
KIRJALLISUUSKATSAUKSET
ALKUPERÄISTUTKIMUSTA
SIDOSRYHMÄYHTEISTYÖ

11. Katsaus: Osallistamisstrategiat interventiokehityksessä
I
N
T
E
R
V
E
N
T
I
O
S
U
U
N
N
I
T
T
E
L
U
2 0 1 2 2 0 1 3 2 0 1 4 2 0 1 4 – 1 7
Toteu-
tuskelpoi-
suus-
tutkimus
Ryväs-
satunnais-
tettu
vaikuttavuus
-tutkimus
(RCT)
KIRJALLISUUSKATSAUKSET
ALKUPERÄISTUTKIMUSTA
SIDOSRYHMÄYHTEISTYÖ
Katsaus: Itsemääräämisteoria nuorten liikunnan edistämisessä
Systemaattinen katsaus: Liikuntainterventioiden vaikuttamiskeinot

12. MITÄ TIEDETÄÄN KOULUPERUSTAISISTA
LIIKUNTAINTERVENTIOISTA NUORILLA?
• Vain 10 aiempaa testattua interventiota
• Pitkäaikainen vaikuttavuus vähäistä
• Huono metodologinen laatu
Hynynen, S-T.; van Stralen, M., Sniehotta, F., Araujo-Soares, V., Hardeman, W.,
Chinapaw, M., Vasankari, T. & Hankonen, N. (2015). A systematic review of school-
based interventions targeting physical activity and sedentary behavior among older
adolescents. International Review of Sport and Exercise Psychology.

13. Katsaus: Osallistamisstrategiat interventiokehityksessä
I
N
T
E
R
V
E
N
T
I
O
S
U
U
N
N
I
T
T
E
L
U
2 0 1 2 2 0 1 3 2 0 1 4 2 0 1 4 – 1 7
Toteu-
tuskelpoi-
suus-
tutkimus
Ryväs-
satunnais-
tettu
vaikuttavuus
-tutkimus
(RCT)
KIRJALLISUUSKATSAUKSET
ALKUPERÄISTUTKIMUSTA
SIDOSRYHMÄYHTEISTYÖ
Yksilöhaastattelut & IPA
SOLE Survey: Tarvearviointi (n=765)
Kirjoituskilpailu &
narratiivinen analyysi
Koulutason tarvearviointi
Keskustelut,
kouluvierailut
Henkilökunta-
survey, n=375
Opettaja-
survey
Fokusryhmä-
haastattelut
Katsaus: Itsemääräämisteoria nuorten liikunnan edistämisessä
Systemaattinen katsaus: Liikuntainterventioiden vaikuttamiskeinot

15. Kostamo, Vesala, Hankonen (2017)

17. Katsaus: Osallistamisstrategiat interventiokehityksessä
I
N
T
E
R
V
E
N
T
I
O
S
U
U
N
N
I
T
T
E
L
U
2 0 1 2 2 0 1 3 2 0 1 4 2 0 1 4 – 1 7
Toteu-
tuskelpoi-
suus-
tutkimus
Ryväs-
satunnais-
tettu
vaikuttavuus
-tutkimus
(RCT)
KIRJALLISUUSKATSAUKSET
ALKUPERÄISTUTKIMUSTA
SIDOSRYHMÄYHTEISTYÖ
Yksilöhaastattelut & IPA
SOLE Survey: Tarvearviointi (n=765)
Kirjoituskilpailu &
narratiivinen analyysi
Koulutason tarvearviointi
Keskustelut,
kouluvierailut
Henkilökunta-
survey, n=375
Opettaja-
survey
Fokusryhmä-
haastattelut
Sidosryhmistä koostuva
asiantuntijaryhmä
Opiskelijapaneeli
Katsaus: Itsemääräämisteoria nuorten liikunnan edistämisessä
Systemaattinen katsaus: Liikuntainterventioiden vaikuttamiskeinot

18. 1. RYHMÄOHJELMA OPISKELIJOILLE
6 viikoittaista tapaamista
3. LIIKUNTA-
TARJONTAMOTIVATION CAPABILITY
ISTUMISENVÄHENTÄMIS-
OHJELMA OPETTAJILLE
2. AKTIIVISEMMAT
OPPITUNNIT
Kotitreenivideot
OPPORTUNITY
Julistekampanja
Internet-resurssit
BEHAVIOUR
Koulun tilojen
hyödyntäminen
Lähiympäristön
mahdollisuudet
OHJELMAKOKONAISUUS
Motivaatio Kyvyt
Mahdollisuudet
Käyttäytyminen Hankonen, N., Hynynen, S. & Laine, H. (2014). Lisää
liikuntaa opiskelevan nuoren arkeen – Miten
rakentaa teoriaan ja tutkimusnäyttöön perustuva
interventio? Liikunta & Tiede 51 (4), 51–57.

19. Miksi miksata metodeja?
1) Korroboraatio (Vahvistaminen, tukeminen)
Eri menetelmiä käytetään saman ilmiön kuvailemiseksi, jotta usko johtopäätöksiin
vahvistuu (jos saadaan konsistentteja tai konvergentteja tuloksia)
2) Täydentäminen
Menetelmiä käytetään tarkastelemaan saman ilmiön eri aspekteja tai dimensioita,
jotta syvennetään tai laajennetaan tulkintoja ja johtopäätöksiä
3) Kehittäminen
Yhdellä menetelmällä saatuja tuloksia käytetään informoimaan toisen
menetelmän (esim. mittarin) kehittämistä, mutta myös otantaa ja implementointia
4) Alullepano (uusien ymmärrysten)
Eri menetelmiä käytetään tarkastelemaan saman ilmiön eri aspekteja tai
dimensioita, aikeena divergenssi, jotta tuotetaan uutta ymmärrystä
5) Laajentaminen
Eri menetelmiä käytetään arvioimaan eri ilmiöitä, jotta saadaan lavennettua
tutkimuksen alaa ja kantamaa
Farquhar et al 2011; Greene JC. Mixed methods in social inquiry. San Francisco, CA: John Wiley & Sons, 2007.

20. 2) Toisiaan täydentävät osatutkimukset
• Useita intervention kehittämistä koskevia tutkimuksia
• Esimerkki: Opettajien interventiota koskeva hyväksyttävyystutkimus
(Laine et al 2017, Health Promotion Practice)
• Halusimme
• tietää, millaisia istumisen vähentämisen keinoja opettajat jo käyttivät ja mihin olisivat
keskimäärin valmiita
• ymmärtää
tarkemmin
mahdollisia ongelmia ja
käytännön implementoinnin
esteitä opettajien näkökulmasta

21. Laine,Araujo-Soares,Haukkala,Hankonen(2017)
HealthPromotionPractice

22. Laine, Araujo-Soares et al. (2017) Health Promotion Practice

23. Laine, Araujo-Soares et al. (2017) Health Promotion Practice

24. Laine, Araujo-Soares et al. (2017) Health Promotion Practice

25. Miksi miksata metodeja?
1) Korroboraatio (Vahvistaminen, tukeminen)
Eri menetelmiä käytetään saman ilmiön kuvailemiseksi, jotta usko johtopäätöksiin
vahvistuu (jos saadaan konsistentteja tai konvergentteja tuloksia)
2) Täydentäminen
Menetelmiä käytetään tarkastelemaan saman ilmiön eri aspekteja tai dimensioita,
jotta syvennetään tai laajennetaan tulkintoja ja johtopäätöksiä
3) Kehittäminen
Yhdellä menetelmällä saatuja tuloksia käytetään informoimaan toisen
menetelmän (esim. mittarin) kehittämistä, mutta myös otantaa ja implementointia
4) Alullepano (uusien ymmärrysten)
Eri menetelmiä käytetään tarkastelemaan saman ilmiön eri aspekteja tai
dimensioita, aikeena divergenssi, jotta tuotetaan uutta ymmärrystä
5) Laajentaminen
Eri menetelmiä käytetään arvioimaan eri ilmiöitä, jotta saadaan lavennettua
tutkimuksen alaa ja kantamaa
Farquhar et al 2011; Greene JC. Mixed methods in social inquiry. San Francisco, CA: John Wiley & Sons, 2007.

26. 3) Metodilla kehitetään toista metodia
• Tavoite: Asenteiden taustalla olevien uskomusten mittaaminen
• Järkeillyn toiminnan lähestymistapa:
• Asenteiden taustalla uskomukset/käsitykset seurauksista (Fishbein & Ajzen 2010)
• Tulee tutkia kohderyhmän näkökulmasta relevantteja uskomuksia (esim. Francis ym.
2004; Ajzen & Fishbein, etc.)
MITEN?
Lomakkeen kysymysten muodostamista varten
uskomusten elisitaatiotutkimus, ”belief elicitation study”
Saadaan kyselylomakkeeseen juuri kyseisen
kohderyhmän joukossa korostuneet uskomukset
Francis, J., Eccles, M. P., Johnston, M., Walker, A. E., Grimshaw, J. M., Foy, R., Kaner, E. F.
S., Smith, L. & Bonetti, D. (2004). Constructing questionnaires based on the theory of
planned behaviour: A manual for health services researchers. Newcastle upon Tyne,
UK: Centre for Health Services Research, University of Newcastle upon Tyne.
http://openaccess.city.ac.uk/1735/

30. Suomalaisnuorten mieltämät hyödyt ja haitat:
Liikunta & ruutuaika
Hankonen, Konttinen, Kujala, et al, in prep

31. 3) Metodilla kehitetään toista metodia
• Hyödynnetään kvantitatiivista aineistoa kvalitatiivisen aineiston
otannassa
• Harkintaan perustuva otanta (”purposeful sampling”)

32. Haastatteluun valinnan kriteereinä mm.:
1. Perustutkintokoulutusohjelma
(ei lukiopohjainen tai yhdistelmälinja)
2. Ikä 15-19 v.
3. Vähäinen liikunta lähtömittauksessa
4. Osallistui vähintään 4 sessioon
• Lisäksi: sukupuolet & muutosten suunta
3) Metodilla kehitetään toista metodia

34. Nuorten…
Lisääntynyt
liikunta
Vähentynyt
istuminen
-ohjelma
Opettajien
toiminta
Koulu-
ympäristö
Omaehtoinen
motivaatio
Liikunta-
käyttäytymisen
säätelytaidot
Liikuntakokeilut
? ?
€?

35. Data collection
II
Primary
outcomes
Process
evaluation

36. Prosessiarviointi
Toimeenpano
Miten toimitetaan
(koulutus, resurssit, jne.)
Mitä toimitetaan:
Uskollisuus, annos,
muokkaukset,
saavuttavuus
Vaikutusmekanismit
* Osallistujien reaktiot
interventioon ja vuorovaikutus
sen kanssa (käyttö)
* Mediaattorit
* Ei-odotetut polut ja seuraukset
Tulokset
(outcomes)
Intervention
ja sen
kausaali-
oletusten
kuvaus
Konteksti
* Kontekstin tekijät, jotka muokkaavat teorioita siitä, miten interventio toimii
* Kontekstin tekijät, jotka vaikuttavat implementaatioon, interventiomekanismeihin ja lopputuloksiin
* Kontekstissa olevat kausaalimekanismit, jotka ylläpitävät status quota, tai lisäävät efektiä
UK MRC Guidance
Moore et al 2015

37. Prosessiarviointi
Toimeenpano
Miten jakelu
aikaansaadaan (koulutus,
resurssit, jne.)
Mitä jaellaan: Uskollisuus,
annos, muokkaukset,
saavuttavuus
Vaikutusmekanismit
* Osallistujien reaktiot
interventioon ja vuorovaikutus
sen kanssa (käyttö)
* Mediaattorit
* Ei-odotetut polut ja seuraukset
Tulokset
(outcomes)
Intervention
ja sen
kausaali-
oletusten
kuvaus
Konteksti
* Kontekstin tekijät, jotka muokkaavat teorioita siitä, miten interventio toimii
* Kontekstin tekijät, jotka vaikuttavat implementaatioon, interventiomekanismeihin ja lopputuloksiin
* Kontekstissa olevat kausaalimekanismit, jotka ylläpitävät status quota, tai lisäävät efektiä
Mitä muuta tutkimuskouluissa tapahtui
samaan aikaan – kampanjat,
aamupalatarjoilut, uudistukset, jne?
Erilaiset organisaatiotekijät:
koulun johdon suhtautuminen
interventioon?
Mitä nuoret tulkitsivat
intervention keskeiseksi
sanomaksi? Miten puhuivat
liikunnasta sen jälkeen? Millainen
suhtautuminen ja motivaatio on
vuoden kuluttua?
Montako osallistujaa oli
interventio-tapaamisissa?
Mitkä osat vedettiin /jäi
vetämättä?
Pysyivätkö julisteet seinillä?
Käytettiinkö videoita ja
nettisivuja?
Mikä esti / helpotti
opettajien istumisen
vähentämistä?
Mitä muutoskeinoja
osallistujat hyödynsivät –
esim. sosiaalinen tuki vai
suunnittelu, jne?
Minkä psykososiaalisten
mekanismien kautta interventio
lisää liikuntaa – ja missä
osaryhmissä (esim. vähän
liikkuvat, pojat/tytöt)?
Vaikuttaako tottumusteorian
mukainen toiminta opejen
tottumusten muodostumiseen?
Mitä avaintapahtumia
nuoret tunnistivat
olennaiseksi muutoksensa
kannalta?
Kvali
Kvanti
Molemmat
Moore et al 2015: Process evaluation of complex interventions. UK MRC Guidance.

38. Miten integroida kaikki
löydökset?
Triangulation protocol (e.g. Farmer et al 2006)
Mahdollistaa eri datasettien/osatutkimuksen
päälöydösten välisen
dissonanssin/samanmielisyyden/”hiljaisuuden”
tarkastelun

40. Missä vaiheessa integrointitekniikoita
sovelletaan? (O’Cathain et al., 2010, BMJ)
O’Cathain et al 2010 Three techniques for integrating
data in mixed methods studies, BMJ

42. Triangulation protocol
(Farmer et al 2006)
1. Sorting
2. Convergence coding:
A) essence of the meaning and
prominence of the themes?
B) provincial coverage and spec
examples
1. Agreement, Partial agreement,
Silence, Dissonance
3. Convergence assessment
4. Completeness assessment
5. Researcher comparison to
a) clarify interpretations and
b) determine degree of agreement
among researchers
6. Feedback

43. blogs.helsinki.fi/LetsMoveIt

44. The team
• Matti Heino
• Katariina Köykkä
• Elisa Kaaja
• Noora Hagman
• Sini Hynynen
• Hanna Laine
• Anni Nelimarkka
• Mikko Annala
• Niko Nummela
• Johanna Nurmi
• Pauliina Muinonen
• Annika Skogster
• Verena Kortelainen
• Petja Sjö
• Nella Heiskanen
• Tapio Kumpula
• Tanja Partanen
• Jere Partanen
Thank you
to our collaborating
teachers & students!
Punk Helsinki
Funding: Sports Sciences Funding /Ministry of Education and Culture, Academy of Finland,
Appropriations for Health Promotion / Ministry for Social and Health Affairs, Finland
Kunnossa Kaiken Ikää
-program
Co-investigators
• Vera Araujo-
Soares
• Falko Sniehotta
• Pilvikki Absetz
• Wendy
Hardeman
• Ari Haukkala
• Antti Uutela
• Taru Lintunen
• Tommi Vasankari
• Katja Borodulin
• Reijo Sund
and many others!
Suomen TULE ry
Acknowledgments
Thank you for your attention!

45. EXTRA SLIDES

46. Prosessiarviointi
Toimeenpano
Miten toimitetaan
(koulutus, resurssit, jne.)
Mitä toimitetaan:
Uskollisuus, annos,
muokkaukset,
saavuttavuus
Vaikutusmekanismit
* Osallistujien reaktiot
interventioon ja vuorovaikutus
sen kanssa (käyttö)
* Mediaattorit
* Ei-odotetut polut ja seuraukset
Tulokset
(outcomes)
Intervention
ja sen
kausaali-
oletusten
kuvaus
Konteksti
* Kontekstin tekijät, jotka muokkaavat teorioita siitä, miten interventio toimii
* Kontekstin tekijät, jotka vaikuttavat implementaatioon, interventiomekanismeihin ja lopputuloksiin
* Kontekstissa olevat kausaalimekanismit, jotka ylläpitävät status quota, tai lisäävät efektiä
UK MRC Guidance
Moore et al 2015

47. Toteutuskelpoisuus ja pilotointi
Vaikuttavuuden arviointi
Vaikuttavuusevaluaation jälkeinen
implementointi (toimeenpano)
1) Implementaation uskollisuus
(fidelity), 2) vaikutusmekanismit ja
3) olosuhteiden vaikutteet
implementaatioon ja lopputuloksiin.
Mihin Let’s Move It -hankkeen
prosessiarviointi kohdistuu eri vaiheissa?
Craig et al 2008 Complex intervention guidance