Vaikuttavuuden mittaus lastensuojelussa ja työvoimapalveluissa Kuntamarkkinat 11.-12.9.2013 Elina Aaltio, projektitutkija Mikko Mehtonen, erityisasiantuntija Kuntaliitto, kuntatalous 1
Vaikuttavuus osana mielekkäämpää tuottavuusmittausta Hyvinvointipalvelujen perimmäinen tavoite on nimensä mukaisesti asiakkaiden hyvinvoinnin kohottaminen. Siksi hyvinvointipalvelujen tuotosten tulisi kuvata yksityisen sektorin tapaan vaikutuksia tai vaikuttavuutta eli sitä, kuinka potilaat paranevat ja mitä oppilaat oppivat (eli muutosta potilaiden ja oppilaiden ominaisuuksissa). [ ] hyvinvointipalvelujen eri palvelusuoritteita ja -kokonaisuuksia tulisi tuottavuuslaskennassa painottaa kustannusten sijaan niin, että eniten vaikuttavuutta aikaan saavat suoritteet saavat suurimman painon. (Kangasharju 2008, 16) 2
Huom. Laatu vaikuttavuus Esim. henkilöstön pätevyys, motivaatio, asiakastyytyväisyys, palvelun saatavuus, jonotilanne, asiakastilojen viihtyisyys jne. ovat tärkeitä tuotannon osatekijöitä, mutta niistä ei voi suoraan päätellä vaikuttavuutta Esim. Asiakastyytyväisyys voi olla huono, jos asiantuntijan näkemys asiakkaan tarpeista ei vastaa asiakkaan mielihaluja Pätevä työntekijä ei välttämättä ehdi tekemään vaikuttavaa työtä 3
Vaikuttavuus vaikuttavuus = tavoitellut positiiviset vaikutukset asiakkaassa Kuntien pitkäaikaistyöttömille tarjoamissa työvoimapalveluissa tavoitellaan työllistymisen ohella toimintakyvyn paranemista yleensä Lastensuojelussa tavoitellaan vanhempien ja lapsen toimintakyvyn paranemista 4
Toimintakyky kykyä osallistua mahdollisimman täysipainoisesti sen yhteisön elämään, jossa elää edellyttää terveyttä ja elämänhallintaa hyvä terveys ja elämänhallinta kehittyvät vuorovaikutuksessa ympäristön kanssa kunnalliset palvelut (kuten päivähoito, koulu ja perusterveydenhuolto) sekä luovat edellytyksiä että tukevat tarvittaessa (korjaavat palvelut) hyvä toimintakyky mahdollistaa osallistumisen ja valinnanvapauden = hyvinvoinnin (Doyal & Gough 1991) Kunnan ja asiakkaan kokonaisedun kannalta kaikissa hyvinvointipalveluissa kannattaa tavoitella asiakkaan toimintakyvyn paranemista Inhimillinen hyöty: hyvinvointi kasvaa Kustannushyöty: (erityis)palveluiden tarve vähenee 5
Kuntaliiton tutkimusprojektit 2013-2015 Mitä Miten Kunnallisten työvoimapalvelujen vaikuttavuus Pitkäaikaistyöttömille tarjottujen työvoimapalvelujen vaikuttavuuden arviointi Luodaan pitkäaikaistyöttömän toimintakykyä ja siihen vaikuttavia tekijöitä kuvaava mittari Lastensuojelun vaikuttavuus Lastensuojelun vaikuttavuuden arviointi Luodaan lapsen ja vanhemman toimintakykyä ja siihen vaikuttavia tekijöitä kuvaava mittari Kerätään aineisto kahtena ajankohtana, josta käy ilmi - Toimintakyky ja sen muutos - Asiakkaan taustatiedot - Asiakkaalle tarjotut palvelut - Tilanteeseen vaikuttavat ulkoiset muuttujat Ensimmäisen aineiston analyysivaiheessa arvioidaan mittarin toimivuutta, seuranta- aineiston analyysivaiheessa arvioidaan annettujen palvelujen vaikuttavuutta Missä Miksi Mittaria pilotoidaan 18 Työllisyyden kuntakokeiluhankkeessa (35 kuntaa) Mittaria pilotoidaan 11 kunnan lastensuojelussa Väline vaikuttavuuden arviointiin Väline asiakastyöhön (välitön muutostyö, palvelutarpeen arviointi, palveluohjaus) 6
Projektin tausta Kuntaliitto selvittänyt vanhuspalveluiden vaikuttavuutta yhdessä VATT:n kanssa Vaikuttavuuden huomioon ottava tuottavuus vanhuspalveluissa (Kangasharju ym. 2010) Vanhuspalveluiden tuottavuus ja vanhuksen toimintakyvyn heikkeneminen (Saxell & Luoma 2013)» Vaikuttavuusmittarina käytetty vanhusikäisen väestön toimintakykyä ja avuntarvetta kuvaavaa RAVAmittaria 7
Mittari Yksilötasoista numeerista tietoa asiakkaan toimintakyvystä strukturoidulla kyselylomakkeella Sisältää sekä subjektiivista (itsearviointi) että objektiivista (ammattilaisen arvio) tietoa Summamuuttuja, joka muodostuu osamittareista» Fyysinen tk» Psyykkinen tk» Sosiaalinen tk» Kognitiivinen tk» Päivittäisistä toiminnoista suoriutuminen» Käytettävissä olevat voimavarat» Kuormitus Yhden ulottuvuuden (kokonaispistemäärän) sijaan voidaan tarkastella kutakin osatekijää erikseen -> ns. toimintakykyprofiili 8
Asiakkaan toimintakykyprofiili voisi näyttää vaikka tältä Toimintakyvyn vajaus Voimavara / Ei vajausta Terveys Mieliala Kognitiiviset taidot Päivittäisistä asioista suoriutuminen Päihteiden käytön hallinta Toiminnalliset riippuvuudet Sosiaaliset voimavarat Koettu kuormitus Luottamus omaan pärjäämiseen Luottamus palvelujärjestelmään 9
TUTKIMUSASETELMA (Selittävät muuttujat) (Kontrolloitava muuttuja) Yhteiskunnalliset tekijät (esim. työvoiman kysyntä) Toimintakyky P1 Erilaisia palveluita ja palvelumalleja P2 P3 Yhteiskunnalliset tekijät Toimintakyky Yksilölliset tekijät Mittauksen kohde (Selitettävä muuttuja) Yksilölliset tekijät (Kontrolloitava muuttuja) T T+1 10 Aika
Mittaamisen vaikeus Palveluprosessin ulkopuolisia tekijöitä on vaikea kontrolloida Kaikkia palveluprosessinkaan ominaisuuksia ei pystytä täysin dokumentoimaan aineistoon Toimintakyky voi muuttua palveluista huolimatta Mutta: jos ihmisten arkea halutaan tutkia, on hyväksyttävä, ettei sitä voi tehdä laboratoriossa. 11 11.9.2013 Elina Aaltio projektitutkija
Mittaamisen tarpeellisuus 1) Palvelujärjestelmän hallinnointi sellaisten tuottavuuslukujen valossa, joissa vaikuttavuutta ei ole huomioitu, voi johtaa epätarkoituksenmukaisiin lopputuloksiin NÄIN EI PIDÄ KÄYDÄ! Tulosvastuu vs. kokonaistaloudellisuus Säästöt vs. inhimillinen hyvinvointi tuottavuus vaikuttavuus T Palveluiden tuottaminen ilman vaikuttavuutta käy pidemmän päälle kalliiksi 12 11.9.2013 Elina Aaltio projektitutkija
Mittaamisen tarpeellisuus 2) Vaikuttavuusmittari tekee asiakastyön sisällöstä näkyvää Hyvä vaikuttavuusmittari tekee sekä asiakkaan palvelutarpeen (kuormitus, vaikeahoitoisuus, moniongelmaisuus jne.) että työntekijän työmäärän näkyväksi Auttaa keräämään tietoa työn kuormittavuudesta, resurssien tarpeesta ja palvelun hyödyllisyydestä päätöksenteon pohjaksi Tuottavuusmittarit kuvaavat tyypillisesti palvelua ulkokohtaisesti, jolloin työn tuloksellisuuteen olennaisesti vaikuttavat tekijät jäävät huomiotta 13 11.9.2013 Elina Aaltio projektitutkija
Mittaamisen tarpeellisuus 3) Vaikuttavuusmittarilla voidaan muuttaa suositukset työkäytännöiksi Hyvä vaikuttavuusmittari ohjaa työn tekemistä oikeaan suuntaan Esim. terveydenhuollossa kuntoutuksessa käytettäviä mittareita on laadittu hoitosuositusten pohjalta, jolloin mittarin käyttö ja suositusten mukainen hoito ovat saumaton kokonaisuus (THL:n koordinoima TOIMIA-verkosto) Toimii myös toisinpäin: pelkkä tuottavuusmittaus voi muuttaa palvelun suoritteiksi vailla mielekästä sisältöä (Ball 2003) 14 11.9.2013 Elina Aaltio projektitutkija
Yhteenvetona Toimintakykymittari ja vaikuttavuuden arviointi hyödyttää Asiakasta: näennäispalvelusta vaikuttavaan palveluun Työntekijöitä: väline asiakkaan kanssa työskentelyyn työn kuormittavuus näkyviin Työn kehittämistä: suositellut toimintamallit systemaattisesti käytäntöön Taloushallintoa: vaikuttavuudesta säästöjä pitkällä aikavälillä Päättäjiä: parempaa informaatiota päätöksenteon tueksi Yhteiskuntaa: hyvinvointieroista kärsivät lopulta kaikki 15 11.9.2013 Elina Aaltio projektitutkija