Työllisyyspalvelujen toimintakykymittari ja vaikuttavuuden arviointi

Transkriptio

1 Työllisyyspalvelujen toimintakykymittari ja vaikuttavuuden arviointi Vaikuttavuuden arviointi ja toimintakyvyn mittaaminen sosiaalipalveluissa Kuntatalo, Helsinki Projektitutkija Elina Aaltio Kuntaliitto

2 Taustahavainnot 1 Tuottavin palvelu ei välttämättä ole kustannusvaikuttavin palvelu Vaikuttavuuden huomioon ottava tuottavuus vanhuspalveluissa (Kangasharju ym. 2010, VATT Tutkimukset 160) RAVA-indeksiä hyödyntäen arvioitiin palvelun vaikuttavuutta eli kykyä parantaa tai ylläpitää asiakkaan toimintakykyä Otoksessa 21 kuntaa Havaittiin, että yksityisissä vanhuspalveluissa oli parempikuntoisia vanhuksia kuin kunnallisissa Yksityisten palvelujen yksikkökustannukset olivat edullisempia, mutta vaikuttavuus oli heikompaa 2

3 Taustahavainnot 2 Hyvä työllisyyspalvelu ei aina johda työllistymiseen, jos työvoimalle ei ole kysyntää. voi silti parantaa asiakkaan hyvinvointia - osallisuutta, terveyttä, mielialaa, elämänhallintaa eli toimintakykyä 3

4 Ratkaisu: arvioidaan työllisyyspalvelujen vaikuttavuutta mittaamalla toimintakykyä» Vaikeasti työllistyvien työllisyyspalveluissa on usein kyse tilanteista, joissa hyvinvointi on tilapäisesti tai kroonistuneesti kärsinyt, koska elämäntilanteen kuormitus on ylittänyt omatoimiseen selviytymiseen käytettävissä olevat voimavarat (Antonovsky)» Kunta on useiden lakien nojalla vastuussa kuntalaisten hyvinvoinnista. Hyvinvointi on toimintakykyä (Doyal & Gough, Sen)» Tavoitellaan tilannetta, jossa asiakkaan toimintakyky on palautunut sille tasolle, ettei hän ole akuutisti palvelun tarpeessa.» Toimintakyky on työkyvyn edellytys. 4

5 Työllisyyspalvelujen toimintakykymittari Kuntaliiton tutkimusprojekti 1/2013-5/2015 Luodaan työikäisen henkilön toimintakykyä kartoittava mittari Vertailukelpoinen numeerinen tieto mahdollistaa suurten massojen tarkastelun ja vertailun eri palvelumuotojen / toimipisteiden / kuntien välillä Mittarin pilotointi 19 Työllisyyden kuntakokeiluhankkeessa (36 kuntaa) Kaksi mittausta -> toimintakyvyn muutos näkyviin 5

6 Mittarilomakkeisto ja käyttöympäristö Kyselylomakkeessa kysymyksiä yhteensä 21» alakohtineen lomakkeessa kaikkiaan 77 muuttujaa Kysymyksillä» mitataan asiakkaan olemassa olevaa toimintakykyä» kartoitetaan tekijöitä, joiden aiemman tutkimuskirjallisuuden perusteella tiedetään rajoittavan työ- ja toimintakykyä» kartoitetaan käytettävissä olevia voimavaroja Kyselylomake suunniteltu käsiteltäväksi työllisyyspalvelussa ensisijaisesti toimistolla tapahtuvan asiakastapaamisen yhteydessä» Kerätään itsearviointitietoa, joka ideaalitapauksessa tuotetaan reflektiivisesti työntekijän ja asiakkaan vuorovaikutuksessa 6

7 Lomakkeeseen on sisällytetty TOIMIA-suositusten mukaisia toimintakykymittareita ja -kysymyksiä, joiden on arvioitu soveltuvan itsearviointitiedon tuottamiseen» Työkykypistemäärä (Ilmarinen 1985)» Mielialaa mittaava MHI-5 (Hays, Sheborne & Mazel 1995)» AUDIT (alkoholin riskikäyttö)» koherenssin tunne (Antonovsky 1987)» kognitiivinen toimintakyky Hyödynnetty muissa yhteyksissä käytettyjä kysymyspatteristoja soveltuvin osin» Työllistymisusko (Kirves ym. 2011, Kinnunen ym. 2011)» DUDIT (huumausaineiden riskikäyttö, yhdistettiin AUDIT-kysymyksiin)» Uhkapelaamista mittaava BBGS-seula (Gebauer ym. 2010)» Nettiriippuvuutta kartoittavia kysymyksiä (Youngin 1998 pohjalta) Lisäksi tätä mittaristoa varten muotoiltuja kysymyksiä hypoteesien sekä ohjausryhmän ja pilottikuntien asiantuntemuksen pohjalta» Työllistymismotivaatio» Päivittäisten asioiden hoito, sis. työnhakutaidot» Tekijät, jotka voivat vaikuttaa negatiivisesti työllistymismotivaatioon ja työnhakuun (mm. sosiaalisten tilanteiden pelko, hankala perhetilanne, työllistymishalu, kiusaamiskokemukset, velkaantuneisuus)» Voimavarat (mm. sosiaalisen tuen saatavuus, luottavainen elämänasenne, luottamus palveluihin) 7

8 Otteita lomakkeesta Elina Aaltio projektitutkija

9 Ensimmäisiä tuloksia Ensimmäinen tiedonkeruu 12/2013-3/2014 Tutkimusaineistossa toimintakykytietoa 651 vaikeasti työllistyvästä henkilöstä Analysointivaiheessa 77 muuttujasta on muodostettu 16 työ- ja toimintakyvyn eri osatekijöitä kuvaavaa muuttujaa 9

10 Toimintakykyä kuvaavat muuttujat ja summamuuttujat Muuttuja α Kysymys / kysymykset Koettu työkyky Millaiseksi arvioit nykyisen työkykysi? Työkykypistemäärä (Ilmarinen 1985) Työllistymismotivaatio 0,76 Kuinka valmis olisit juuri nyt vastaanottamaan nykyistä työkokemustasi vastaavaa täysipäiväistä palkkatyötä? nykyistä työkokemustasi vastaavaa osa-aikaista palkkatyötä? jotain muuta täysipäiväistä työtä? jotain muuta osa-aikaista työtä? Koulutusvalmius Olisitko valmis kouluttautumaan uuteen ammattiin? Yrittäjävalmius Olisitko valmis ryhtymään yrittäjäksi? Työnhakutaidot 0,82 Miten seuraavat asiat sinulta sujuvat? työhakemusten teko ansioluettelon teko internetin käyttö Arkitaidot 0,84 Miten seuraavat asiat sinulta sujuvat? sovittujen aikojen noudattaminen raha-asioiden hoito kaupassakäynti liikkuminen julkisilla paikoilla säännöllinen päivärytmi kodin puhtaanapito pukeutuminen peseytyminen Elina Aaltio projektitutkija

11 Toimintakykyä kuvaavat muuttujat ja summamuuttujat Muuttuja α Kysymys / kysymykset Fyysinen toimintakyky 0,78 Millaiseksi koet terveydentilasi nykyisin? Haittaako jokin sairaus tai vamma päivittäisten asioiden hoitamista? Psyykkinen toimintakyky Kognitiivinen toimintakyky Sosiaalinen toimintakyky 0,85 Kuinka suuren osan ajasta olet neljän viime viikon aikana ollut hyvin hermostunut? tuntenut mielialasi niin matalaksi, ettei mikään ole voinut piristää sinua? tuntenut itsesi alakuloiseksi ja apeaksi? tuntenut itsesi tyyneksi ja rauhalliseksi? [käännettynä] ollut onnellinen? [käännettynä] MHI-5-mittari (Hays, Sherborne & Mazel 1995) 0,82 Miten muistisi toimii? uusien tietojen omaksuminen ja asioiden oppiminen sinulta sujuu? pystyt yleensä keskittymään asioihin? 0,63 Miten seuraavat väittämät pitävät sinun kohdallasi paikkansa? Minulla on lähipiirissä ihmisiä, joilta saan tarvittaessa apua. Tulen yleensä ihmisten kanssa toimeen. Vietän vapaa-aikaa harrastusten parissa. Pelkään tilanteita, joissa joudun tekemisiin vieraiden ihmisten kanssa [käännettynä] Kuinka paljon seuraavat asiat painavat mieltäsi? Yksinäisyys [käännettynä] Kokemukset koulu- tai työpaikkakiusaamisesta [käännettynä] 11

12 Toimintakykyä kuvaavat muuttujat ja summamuuttujat Muuttuja α Kysymys / kysymykset Päihteiden haitallinen käyttö 0,88 Kuinka usein viime vuoden aikana sinulle kävi niin, ettet pystynyt lopettamaan päihteiden käyttöä, kun aloit ottaa? et ole päihteiden käytön vuoksi saanut tehtyä jotain, mikä tavallisesti kuuluu tehtäviisi? päihteiden käytön jälkeen tarvitsit aamulla lisää päihteitä päästäksesi paremmin liikkeelle? tunsit syyllisyyttä tai katumusta päihteiden käytön jälkeen? sinulle kävi niin, että et päihteiden käytön vuoksi pystynyt muistamaan edellisen illan tapahtumia? Oletko itse tai onko joku muu satuttanut tai loukannut itseään sinun päihteiden käyttösi seurauksena? Onko läheisesi, ystäväsi tai lääkäri tai joku muu ollut huolissaan päihteiden käytöstäsi tai ehdottanut, että vähentäisit sitä? Kysymykset ja pisteytys AUDIT- ja DUDIT-testien pohjalta (WHO, Berman et al.) Haitallinen pelaaminen 0,80 Onko seuraavia asioita tapahtunut sinulle viimeisten 12 kuukauden aikana? Pelaamisen lopettaminen tai vähentäminen on aiheuttanut minussa levottomuutta, ahdistusta tai ärtyneisyyttä. Olen yrittänyt salata perheeltäni tai ystäviltäni paljonko pelasin. Olen pelaamisen takia joutunut sellaisiin taloudellisiin ongelmiin, että olen joutunut pyytämään rahaa perheeltä, läheisiltä tai sosiaalipalveluista. BBGS-seula (Gebauer et al. 2010) Haitallinen netin käyttö 0,75 Joudun tinkimään nukkumisesta öisen netin käytön vuoksi. Kun en ole nettiyhteydessä, netti pyörii mielessäni tai toivoisin olevani netissä. Tunnen itseni masentuneeksi, alakuloiseksi tai hermostuneeksi, jos en pääse nettiin silloin kun haluan. Kysymykset poimittu Youngin (1998) nettiriippuvuustestistä Elina Aaltio projektitutkija

13 Toimintakykyä kuvaavat muuttujat ja summamuuttujat Muuttuja α Kysymys / kysymykset Koherenssin tunne 0,87 Kuinka usein sinulla on tunne, ettet oikeastaan välitä siitä, mitä ympärilläsi tapahtuu? Kuinka usein olet yllättynyt sellaisten henkilöiden käyttäytymisestä, jotka uskoit tuntevasi hyvin? Oletko joskus pettynyt ihmisiin, joihin luotit? Tähän asti elämäsi on on ollut täysin vailla selvää tarkoitusta ja päämäärää Kuinka usein sinusta tuntuu, että sinua kohdellaan epäoikeudenmukaisesti? Kuinka usein sinulla on sellainen tunne, että olet oudossa tilanteessa etkä tiedä, mitä tehdä? Koetko, että päivittäisten tehtäviesi hoitaminen on suuren mielihyvän ja tyydytyksen tunne Kuinka usein tunteesi ja ajatuksesi ovat oikein sekaisin Kuinka usein koet tunteita, joita et sallisi itsellesi? Monet ihmiset - jopa lujaluonteiset - kokevat joskus tietyissä tilanteissa olevansa vain toisten tiellä. Kuinka usein sinä olet kokenut näin? Kun jotain epätavallisempaa on tapahtunut, oletko jälkikäteen yleensä todennut, että olit yli- tai aliarvioinut asian merkityksen? Kuinka usein sinulla on tunne, että päivittäiset tekemisesi ovat jokseenkin merkityksettömiä? Kuinka usein sinulla on tunteita, joita et koe voivasi varmuudella pitää kurissa? Luottamus palveluun Kuinka paljon uskot saavasi täältä tukea elämäntilanteesi muuttamiseen? Huolten määrä 0,72 Kuinka paljon seuraavat asiat painavat mieltäsi? huoli omasta tulevaisuudesta huoli perheenjäsenen tulevaisuudesta vaikeus järjestää ikääntyneen tai sairaan omaisen hoito vaikeus järjestää lapsen hoito vaikeus suoriutua päivittäisistä raha-asioista velkojen hoito läheisen uhkaava käytös parisuhdeongelmat yksinäisyys kokemukset koulu- tai työpaikkakiusaamisesta Elina Aaltio projektitutkija

14 Toimintakykymittari asiakkaiden palvelutarpeen ja palvelujen vaikuttavuuden arvioinnissa Kaikki summamuuttujat on skaalattu saman pituisiksi asteikolle 0-100, jotta niitä voidaan tarkastella rinnakkain Kunkin muuttujan saama arvo kuvaa prosenttiosuutta kyseisen muuttujan maksimipistemäärästä (100 p.) 14

15 % maksimipistemäärästä Havainnekuva toimintakykyprofiilista 1. mittauksen jälkeen 90 Asiakkaan toimintakykyprofiili 1/ Toimintakyvyn osatekijät 15

16 % maksimipistemäärästä Havainnekuva toimintakykyprofiilista 2. mittauksen jälkeen 90 Asiakkaan toimintakykyprofiili 1/14 11/14 (kuvitteellinen) Toimintakyvyn osatekijät 16

17 % maksimipisteistä Miksi toimintakyvyn kokonaisvaltainen tarkastelu on tärkeää? Muuttujien keskiarvot psyykkisesti kuormittuneiden ja ei-kuormittuneiden ryhmissä ei merkittävää kuormitusta merkittävästi kuormittunut Erojen tilastollinen merkitsevyys: *** p < 0,001 17

18 % maksimipistemäärästä Havainnekuva makrotason tarkastelusta kahden tiedonkeruun jälkeen 90 Työllistymismotivaatio vastaajien keskiarvot kunnittain Kunta 1 Kunta 2 Kunta 3 Kunta 4 Kunta 5 Kunta 6 Kunta 7 Kunta 8 Kunta 9 Kunta 10 Kaikki Miksi onnistuttu? 1/14 11/14 Miksi ei ole onnistuttu? 18

19 Pohdintaa Toimintakykytieto on hyvää dataa palvelujen vaikuttavuuden tutkimiseksi Toimintakykytiedon tuottaminen voi itsessään parantaa palvelun vaikuttavuutta (osuvampi palveluohjaus, dialogisuus työvälineenä) Vaikuttavuuden arviointi voi pitkällä tähtäimellä tuottaa säästöjä, mutta vaikuttavuuden arviointivälineiden kehittäminen ja implementointi aiheuttaa lyhyellä tähtäimellä lisäkustannuksia 19

20 Työllisyyspalvelujen toimintakykymittarin väliraportti ja lisätietoa projektin sivuilla: tatalous/tuottavuus/vaikuttavuus/tyovoimapalvelu jen_vaikuttavuusmittari/sivut/default.aspx Loppuraportti ilmestyy keväällä