Asiakashyötyjen arviointi

Transkriptio

1 Asiakashyötyjen arviointi esimerkkinä lastensuojelun systeemisen toimintamallin arviointitutkimus Elina Aaltio Tutkija Lapset, nuoret ja perheet THL

2 Systeemisen mallin pilotointi Pilotoidaan valtakunnallisesti osana LAPE-ohjelmaa Pilotoivia maakuntia 14, joissa tällä tietoa 37 pilottikuntaa/kuntien yhteenliittymää ja n pilotoivaa lastensuojelutiimiä Pilottikunnat kooltaan asukasta Pilotointi tapahtuu lastensuojelun sosiaalityön tiimeissä THL:n toteuttama toimeenpanon tuki Kansallinen kouluttajakoulutus Esimiesten työpajat Yhteiskehittämispäivät ja muut tilaisuudet Mallinnusraportti ja muu kirjallinen materiaali (mm. Lahtinen ym. 2017, Fagerström 2016) Lähde: THL

3 Implementoinnin ja vaikuttavuuden arvioinnista Implementoinnilla tarkoitetaan käyttöönottoa Jokin malli voidaan ottaa käyttöön suoraan tai soveltaen, hyvin tai huonosti Ennen kuin voidaan arvioida toiminnan X vaikuttavuutta, on tiedettävä, toimitaanko tavalla X (vai sittenkin tavalla Y tai Z?) Vaikuttavuudella tarkoitetaan toivottujen tulosten saavuttamista Vaikuttavuuden arviointi tärkeää, jotta tehdään asiakkaita aidosti hyödyttäviä interventioita vältetään tekemästä haitallisia interventioita hyödynnetään käytössä olevat resurssit mahdollisimman hyvin

4 Implementoinnin arviointi systeeminen lastensuojelun toimintamalli TUTKIMUSKYSYMYKSET Toimivatko pilotit systeemisen mallin mukaisesti? Onko pilotoinnin aikana tapahtunut toivottuja muutoksia asiakastyössä, työhyvinvoinnissa, asiakkaiden hyvinvoinnissa ja järjestelmätasolla? Miten toimintaympäristö on vaikuttanut pilotoinnin onnistumiseen? Mitkä tekijät edesauttavat ja mitkä estävät mallin implementointia? Mitä työntekijät, esimiehet ja kouluttajat ajattelevat mallista ja implementoinnista? Mitä asiakkaat ajattelevat mallista? TUTKIMUSAINEISTO Pilottitiimien esimiehiltä kerätty työpaja-aineisto ja kyselyt Pilottitiimien ja kontrollitiimien työntekijöiltä kerättävä kyselyaineisto Kouluttajakoulutuskysely Työntekijöiden, esimiesten ja kouluttajien haastattelut (pilotti- ja kontrollitiimit) Asiakkailta kerättävä kyselyaineisto (pilotti- ja kontrollitiimit) Asiakkaiden haastattelut (pilotti- ja kontrollitiimit)

5 TUTKIMUSKYSYMYKSET Onko systeeminen malli kyennyt tukemaan ja auttamaan asiakasperheitä perinteistä lastensuojelun asiakastyöskentelyä paremmin? Muuttuiko perheen hyvinvointi? Kokivatko asiakkaat asiakastyön aiempaa laadukkaammaksi? TUTKIMUSAINEISTO Vaikuttavuuden arviointi systeeminen lastensuojelun toimintamalli Asiakkaiden hyvinvointia, palvelutarpeita ja palvelukokemuksia koskeva lomakeaineisto työntekijän lomake itsearviointilomakkeet vanhemmille Itsearviointilomakkeet lapsille Asiakkaiden haastattelut vanhempien haastattelut nuorten haastattelut

6 INTERVENTIO A INTERVENTIO B AIKA Systeemisen mallin arviointi - Elina Aaltio

7 PILOTTI 75 % EI-PILOTTI 50 % AIKA Systeemisen mallin arviointi - Elina Aaltio

8 Miksi arvioida? Tilivelvollisuus rahoittajan ja asiakkaan suuntaan Arviointi on tarpeen silloin, kun palvelun toteuttamiselle on erilaisia vaihtoehtoja, joista valita mikä niistä on toimivin, hyödyllisin, vaikuttavin?

9 Mitä ja miten arvioida? Arvioitava i) mitä on tehty ja ii) mitä hyötyä siitä on ollut Aina ei ole kustannus-hyöty-näkökulmasta järkevää tuottaa huolellista tutkimusnäyttöä intervention toimivuudesta Näyttöä on kaikki systemaattisesti kerätty informaatio, joka on relevanttia käytännön informoimisen kannalta (Pollion 2006). Näyttö voi olla kvantitatiivista tai kvalitatiivista objektiivisia mittareita tai subjektiivisia kokemuksia kerätty rekistereistä, työntekijöiltä, asiakkailta empiiristä tutkimusnäyttöä (meta-analyysit, RCT, kvasikokeelliset asetelmat jne.) toiminnasta kerättyä seurantatietoa ilman tutkimusorientaatiota Jos tutkimusnäyttöä ei ole käytettävissä, myös muuta näyttöä voi kriittisesti käyttää. On parempi arvioida interventiota jollain tavalla, kuin olla arvioimatta lainkaan. Korteniemi & Borg (2008) Kohti näyttöön perustuvaa ammatillista käytäntöä?

10 Kiitos! Tutkija Elina Aaltio Lapset, nuoret ja perheet Terveyden ja hyvinvoinnin laitos