Kommenttipuheenvuoro: Miten prosessievaluaatioohjeistusta voidaan hyödyntää Suomessa? Nelli Hankonen Akatemiatutkija Tampereen yliopisto SLY/Käyttäytymislääketieteen jaoksen kevätseminaari Vaikuttavuutta hyvinvoinnin edistämisen interventioihin: Käyttäytymis- ja yhteiskuntatieteiden anti 2.5.2017
Huomioita Mitä terveyden edistämisen interventioissa todella tapahtuu? Suomessa tehdään hyvää ja tarkoituksenmukaista prosessiarviointia monista interventioista Esim. KiVa-koulu: implementoinnin aste -> vaikuttavuus Kokeilukulttuuri: Arvioivasta otteesta hyötyä eri vaiheiden kokeiluihin laadukkaiden & käyttökelpoisten ratkaisujen kehittäminen Kaikkea ei tarvitse tutkimuksellisesti raportoida, mutta jo prosessien mallintaminen & PE:n käsitteiden hyödyntäminen ajattelun sparraajana voi olla tuottaa oivalluksia ja laadunparannusta Vaikuttavuuden arviointia ei tule unohtaa
Prosessiarviointi Konteksti * Kontekstin tekijät, jotka muokkaavat teorioita siitä, miten interventio toimii * Kontekstin tekijät, jotka vaikuttavat implementaatioon, interventiomekanismeihin ja lopputuloksiin * Kontekstissa olevat kausaalimekanismit, jotka ylläpitävät status quota, tai lisäävät efektiä Intervention ja sen kausaalioletusten kuvaus Toimeenpano Miten toimitetaan (koulutus, resurssit, jne.) Mitä toimitetaan: Uskollisuus, annos, muokkaukset, saavuttavuus Vaikutusmekanismit * Osallistujien reaktiot interventioon ja vuorovaikutus sen kanssa (käyttö) * Mediaattorit * Ei-odotetut polut ja seuraukset Tulokset (outcomes) UK MRC Guidance Moore et al 2015
INTERVENTIOTUTKIMUKSEN KULKU (UK Medical Research Council, 2000) Esitutkimus Vaihe I Vaihe II Vaihe III Vaihe IV Lisääntyvän näytön jatkumo Campbell, M et al. (2000). MRC framework for designing and evaluating complex interventions. BMJ 321: 694-6. Suomeksi: Hankonen (2012). Sosiaalipsykologia vaikuttamisen tieteenä, vaikuttajana yhteiskunnassa. Sosiaalipsykologian sukupolvet, Vastapaino; ja Rautava et al. Vaikuttavuuden mittaaminen ja palvelujärjestelmätutkimus (TuY)
INTERVENTIOTUTKIMUKSEN KULKU (UK Medical Research Council, 2008) Craig et al 2008
Toimeenpanorakenteiden ja aiotun arviointiasetelman toteutettavuus ja hyväksyttävyys Välittävien prosessien testaaminen PE:n funktiot eri arvioinnin vaiheissa (Moore et al., UK MRC Guidance, 2015) Toteutuskelpoisuus ja pilotointi 1) Implementaation uskollisuus (fidelity), 2) vaikutusmekanismit ja 3) olosuhteiden vaikutteet implementaatioon ja lopputuloksiin. Vaikuttavuuden arviointi. Vaikuttavuusevaluaation jälkeinen implementointi (toimeenpano) Intervention rutiininomaiseksi tekeminen / normalisointi uusiin konteksteihin Pitkäaikainen implementaatio / ylläpito
Mitä tiedetään kouluperustaisista liikuntainterventioista nuorilla? Vain 10 aiempaa testattua interventiota Pitkäaikainen vaikuttavuus vähäistä Kenttäkokeiden metodologian laadussa parantamisen varaa Hynynen, S-T.; van Stralen, M., Sniehotta, F., Araujo-Soares, V., Hardeman, W., Chinapaw, M., Vasankari, T. & Hankonen, N. (2016). A systematic review of schoolbased interventions targeting physical activity and sedentary behavior among older adolescents. International Review of Sport and Exercise Psychology.
-intervention tausta Kohderyhmän tutkiminen Kirjallisuus katsaukset, teoriaymmärrys Hyvät käytännöt ja uudet ideat Hyväksyttävä, toteutuskelpoinen & käytännöllinen, levitettävissä oleva ohjelma
OHJELMAKOKONAISUUS Mahdollisuudet OPPORTUNITY Motivaatio MOTIVATION Kyvyt CAPABILITY 1. RYHMÄOHJELMA OPISKELIJOILLE 6 viikoittaista tapaamista ISTUMISENVÄHENTÄMIS- OHJELMA OPETTAJILLE 2. AKTIIVISEMMAT OPPITUNNIT 3. LIIKUNTA- TARJONTA Koulun tilojen hyödyntäminen Lähiympäristön mahdollisuudet Kotitreenivideot Internet-resurssit Julistekampanja Käyttäytyminen BEHAVIOUR Hankonen, N., Hynynen, S. & Laine, H. (2014). Lisää liikuntaa opiskelevan nuoren arkeen Miten rakentaa teoriaan ja tutkimusnäyttöön perustuva interventio? Liikunta & Tiede 51 (4), 51 57.
MATERIAALEJA, ESIM. Julisteita Open opas Opiskelijan työkirja Treenivideot: SYKE-, VOIMA- ja VENY-treenit
Millaista prosessiarviointia Let s Move It -hankkeessa tehdään?
Prosessiarvioinnin menetelmiä Let s Move It Moore et al., 2014
Mihin Let s Move It -hankkeen prosessiarviointi kohdistuu eri vaiheissa? Toimeenpanorakenteiden ja aiotun arviointiasetelman toteutettavuus ja hyväksyttävyys Välittävien prosessien testaaminen 2014 Toteutuskelpoisuus ja pilotointi 1) Implementaation uskollisuus (fidelity), 2) vaikutusmekanismit ja 3) olosuhteiden vaikutteet implementaatioon ja lopputuloksiin. 2015-17 Vaikuttavuuden arviointi 2017-18 Vaikuttavuusevaluaation jälkeinen implementointi (toimeenpano) Intervention rutiininomaiseksi tekeminen / normalisointi uusiin konteksteihin Pitkäaikainen implementaatio / ylläpito Moore et al., 2014
Mihin Let s Move It -hankkeen prosessiarviointi kohdistuu eri vaiheissa? Toimeenpanorakenteiden ja aiotun arviointiasetelman toteutettavuus ja hyväksyttävyys Välittävien prosessien testaaminen Toteutuskelpoisuus ja pilotointi Vaikuttavuuden arviointi Vaikuttavuusevaluaation jälkeinen implementointi (toimeenpano) Moore et al., 2014
OPISKELIJOIDEN KOKEMUKSIA PILOTTITUTKIMUKSESTA Tää ohjelma oli virkistävä, koska useimmat kurssit on aika semmosii luennollisii, niin sit on kiva päästä tekee jotain ja oppiikki asiasta. Ei tarttenu kokoajan vaan istuu ja kuunnella. Osallistuja, 17v Tosi mukavaa, sai tehä ja kokeilla ja just tota suunnitelman tekoo, koska mulla toi urheilu on jäänyt niin on kiva yrittää päästä siihen mukaan taas ja suunnitella vähän pienemmis määrin sellasii realistisii suunnitelmii, että siihen voi vaikuttaa. Osallistuja, 17v.
Results: Acceptability Student feedback* *Anonyymit lomakkeet
Mitä muutoskeinoja nuoret ottivat käyttöön? Hankonen et al., 2017
Mihin Let s Move It -hankkeen prosessiarviointi kohdistuu eri vaiheissa? Toteutuskelpoisuus ja pilotointi 1) Implementaation uskollisuus (fidelity), 2) vaikutusmekanismit ja 3) olosuhteiden vaikutteet implementaatioon ja lopputuloksiin. Vaikuttavuuden arviointi Vaikuttavuusevaluaation jälkeinen implementointi (toimeenpano)
Prosessiarviointikysymyksiä LMI:ssa Konteksti Intervention nettisivuja? ja sen kausaalioletusten kuvaus Toimeenpano Miten jakelu aikaansaadaan (koulutus, resurssit, jne.) Mitä jaellaan: Uskollisuus, annos, muokkaukset, saavuttavuus Mitä muuta tutkimuskouluissa tapahtui samaan aikaan kampanjat, aamupalatarjoilut, uudistukset, jne? * Kontekstin tekijät, jotka muokkaavat teorioita siitä, miten interventio toimii * Kontekstin tekijät, jotka vaikuttavat implementaatioon, interventiomekanismeihin ja lopputuloksiin Mitä nuoret tulkitsivat * Kontekstissa olevat kausaalimekanismit, jotka ylläpitävät status quota, tai lisäävät efektiä intervention keskeiseksi sanomaksi? Miten puhuivat Montako osallistujaa oli liikunnasta sen jälkeen? interventio-tapaamisissa? Muuttuiko suhtautuminen ja Mitkä osat vedettiin /jäi motivaatio pysyvästi? vetämättä? Pysyivätkö julisteet seinillä? Käytettiinkö videoita ja Vaikutusmekanismit * Osallistujien reaktiot interventioon ja vuorovaikutus sen kanssa (käyttö) * Mediaattorit * Ei-odotetut polut ja seuraukset Tulokset (outcomes) Erilaiset organisaatiotekijät: koulun johdon suhtautuminen interventioon? Mitä muutoskeinoja osallistujat hyödynsivät esim. sosiaalinen tuki vai suunnittelu, jne? Vaikuttaako tottumusteorian mukainen toiminta opejen tottumusten muodostumiseen? Minkä psykososiaalisten mekanismien kautta interventio lisää liikuntaa ja missä osaryhmissä (esim. vähän liikkuvat, pojat/tytöt)? Mikä esti / helpotti opettajien istumisen vähentämistä?
?? Omaehtoinen motivaatio Nuorten Liikuntakokeilut Liikuntakäyttäytymisen säätelytaidot Lisääntynyt liikunta -ohjelma Opettajien toiminta Kouluympäristö Vähentynyt istuminen?
Let s Move It -teesit 1. KAIKKI LIIKE ON PLUSSAA Pienikin lisäys liikuntaan on aina parempi kuin täysi liikkumattomuus. 2. OMA VALINTA Päätä itse, liikutko ja miten. 3. LIIKUNTA KUULUU KAIKILLE Kenenkään ei tarvitse olla huippu-urheilija tai pitkäaikainen harrastaja voidakseen hyötyä tai oppia nauttimaan liikunnasta. 4. TIEDÄ, MIKÄ SUA LIIKUTTAA Kaikki liikuntamuodot eivät voi sopia kaikille. Tärkeintä on löytää itselle mieluisia ja omaan arkeen sopivia tapoja liikkua. 5. TAVOITTEENA HYVÄ OLO, EI RASVATON RUNKO Liikunta yhdistettynä terveelliseen ruokavalioon auttaa painonhallinnassa, mutta ulkonäköä tärkeämpi liikunnan seuraus on hyvinvoiva mieli ja keho! 6. ISTUMINEN ON PYLLYSTÄ Lepo on tärkeää, mutta rajansa kaikella: Nykymaailmassa istuminen on tehty luonnottoman helpoksi. Istumisen vähentäminen ja pienetkin tauot istumisesta tekee kropalle ja mielelle gutaa!
Yhteenveto: Prosessievaluaatio helpottaa laadukkaiden interventioiden muotoilua Harva asia menee heti kuin Strömsössä! Prosessien arviointi eri vaiheissa! on mahdollistanut ohjelman parantamisen ymmärrettävämmäksi hyväksyttävämmäksi käyttökelpoisemmaksi vaikuttavammaksi? Laadukas terveydenedistäminen pohjautuu iteratiiviseen, osallistavaan, kokeilujen ja tutkimusnäytön informoimaan pitkäjänteiseen kehitystyöhön
Acknowledgments Punk Helsinki Kunnossa Kaiken Ikää -program Suomen TULE ry Co-investigators Vera Araujo- Soares Falko Sniehotta Pilvikki Absetz Wendy Hardeman Ari Haukkala Antti Uutela Taru Lintunen Tommi Vasankari Katja Borodulin Reijo Sund and many others Funding: Sports Sciences Funding /Ministry of Education and Culture; Appropriations for Health Promotion / Ministry for Social and Health Affairs, Finland The team Matti Heino Katariina Köykkä Elisa Kaaja Noora Hagman Sini Hynynen Hanna Laine Anni Nelimarkka Mikko Annala Niko Nummela Johanna Nurmi Pauliina Muinonen Annika Skogster Verena Kortelainen Petja Sjö Nella Heiskanen Tapio Kumpula Tanja Partanen Jere Partanen Thank you to our collaborating teachers & students!
EXTRA SLIDES
Let s Move It -ohjaajan vuorovaikutusperiaatteet 1. Osoita empatiaa 2. Kysy avoimia kysymyksiä 3. Myötäile vastarintaa 4. Herättele muutospuhetta 5. Osoita kiinnostusta nuorten kokemuksiin ja näkökulmaan 6. Anna nuorille vaihtoehtoja ja valinnanvaraa 7. Anna rakenne ja agenda 8. Käytä heijastavaa kuuntelua 9. Validoi nuorten huolia 10. Anna myönteistä palautetta Hankonen et al., 2016
OPETTAJIEN KOKEMUKSIA PILOTTITUTKIMUKSESTA Helpottaa omaa työtä ja tuo vaihtelua työhön (ammattiaineen opettaja, mies) Monipuolisuus on ollut hauskaa (ATTO-aineen opettaja, nainen) Toi sisältöä opetukseen (ATTO-aineen opettaja, mies)
Vaikuttaako Let s Move It tarkoitetusti? Ryväs-satunnaistettu kontrolloitu trial (CRCT) Satunnaistus ja interventio kouluittain, analyysi oppilasryhmän tasolla (noin 70 opiskelijaryhmää) Seuranta 14 kk asti Hankonen et al., 2016
Study timeline & data collection T1 T2 T3 T4 C1 C2 C3 C4 C5 C6 B1 B2 sq1 sq2 sq3 T H1 H2 H4 A1 A4 0 ~1 mo 2 mo 14 mo Q1-sQ5 = Questionnaires / students H1-H4 = Physical activity measurements (Hookie) C1-C6 = Classroom intervention sessions A1-A4 = Anthropometric measurements F = Focus group interviews T = Thematic interviews Hankonen et al., 2016
Moore et al., 2014