Kokemuksia ja haasteita ASCOT -mittarin kääntämisestä ja soveltamisesta Suomessa. Ismo Linnosmaa Terveyden ja hyvinvoinnin laitos/chess

Transkriptio

1 Kokemuksia ja haasteita ASCOT -mittarin kääntämisestä ja soveltamisesta Suomessa Ismo Linnosmaa Terveyden ja hyvinvoinnin laitos/chess

2 Puheen kulku I. Kustannus-vaikuttavuus II. ASCOT mittari vaikuttavuuden mittaamisessa III. ASCOT Suomessa: kääntäminen ja soveltaminen IV. ASCOT sovellus: Palvelusetelitutkimus V. Yhteenveto 11/02/2013 Ismo Linnosmaa / CHESS 2

3 I,1 Panokset, kustannukset, tuotos ja vaikuttavuus Panokset - kustannukset Tuotos - palvelut Vaikuttavuus - hyvinvoinnin muutos Tuottavuus = tuotos/panos Kustannusvaikuttavuus-suhde = kustannukset /vaikuttavuus Ismo Linnosmaa 3

4 I,2 Palvelujen kustannusvaikuttavuus: mihin tarvitaan Palvelujen kustannusten ja vaikuttavuuden arvioiminen kertoo Mitä palvelujen tuottaminen maksaa? Miten palvelujen käyttö vaikuttaa asiakkaiden hyvinvointiin? Vastauksia kysymyksiin Mitä palveluihin sijoitettu raha tuottaa? Mihin palveluihin niukat varat kannattaa sijoittaa (geneerinen mittari)? Tieto palvelujen kustannusvaikuttavuudesta auttaa kohdentamaan julkiset voimavarat tuottavasti 11/02/2013 Ismo Linnosmaa / CHESS 4

5 I,3 Vaikuttavuus Hyvinvointi Hyvinvointi palvelun kanssa; havaittu hyvinvointi E = vaikuttavuus Hyvinvointi ilman palvelua palvelun ajankohta aika 11/02/2013 Ismo Linnosmaa / CHESS 5

6 II,1 ASCOT -mittari Prof. Ann Netten (U of Kent, PSSRU) on kehittänyt ASCOT (= Adult Social Care Outcomes Toolkit) mittarin Mittaria käytetään aikuisten sosiaalipalvelujen käyttöön liittyvän elämänlaadun (SCRQol) ja palvelujen vaikuttavuuden mittaamiseen Vaikuttavuuden mittaaminen ASCOT:lla: Vaikuttavuus palvelulla aikaansaatu muutos SCRQoL:ssa = SCRQoL palvelun kanssa - (odotettu) SCRQoL ilman palvelua Vaikutukset pyritään saamaan esille asiakkaille suunnatuilla kysely-, haastattelu- ja havainnointityökaluilla Palvelusetelit sosiaalipalveluissa / Ismo Linnosmaa 6

7 II,2 ASCOT -mittari: Osa-alueet 1. Mahdollisuus vaikuttaa päivittäiseen elämään: Voi vaikuttaa päivittäiseen elämään haluamallaan tavalla 2. Henkilökohtainen puhtaus ja siisti ulkoasu: Voi olla sen näköinen ja niin puhdas kuin haluaa 3. Ruoka ja juoma: Saa riittävästi ja mieleistä ruokaa ja juomaa sopivaan aikaan 4. Turvallisuus: Tuntee olonsa turvalliseksi 5. Sosiaalinen osallistuminen ja osallisuus: On tekemisissä ihmisten kanssa niin paljon kuin haluaa (ja niiden, joiden kanssa haluaa ) 6. Mielekäs tekeminen: Voi tehdä itselleen tärkeitä tai mieluisia asioita (haluamallaan tavalla) 7. Asumisen siisteys ja miellyttävyys: Kotini/huone on siisti ja viihtyisä (omasta mielestä) 8. Kohtelun arvokkuus: Kokee tulevansa kohdelluksi arvostavasti asiakkaana Palvelusetelit sosiaalipalveluissa / Ismo Linnosmaa 7

8 II,3 ASCOT -mittari Mikä seuraavista vaihtoehdoista kuvaa parhaiten kotisi siisteyttä ja viihtyisyyttä? Kotini on niin siisti ja viihtyisä kuin haluan Kotini on riittävän siisti ja viihtyisä Kotini ei ole riittävän siisti ja viihtyisä Kotini ei ole lainkaan siisti ja viihtyisä Teoreettinen tausta: A. Sen, Capability approach to welfare: Mahdollisuus tehdä arvostamiaan asioita sen verran kuin haluaa 11/02/2013 Ismo Linnosmaa / CHESS 8

9 II,4 ASCOT -mittari ASCOT tuottaa yhden asiakkaan elämänlaatua kuvaavan indeksiluvun (SCRQoL) Osa-alueiden hyötypainot: Best-worst tekniikan (Netten ym., 2011; Marley and Louviere, 2005) sovellus väestökyselynä Diskreetin valinnan koe (Ryan ym., 2006) väestökyselynä Ankkurointi: 0 = kuollut, 1 = paras tila 11/02/2013 Ismo Linnosmaa / CHESS 9

10 III,1 ASCOT Suomessa: käännosprosessi ASCOT mittaria ryhdyttiin (DIAK ja THL) kääntämään (A. Nettenin suostumuksella) Suomeksi keväällä 2011 ja varsinainen kääntäminen tapahtui kesällä 2011 Käännöksen teki Semantix kielitoimisto ASCOT lomakkeet SCT4, CHINT3 ja CHINT3ResidenT mukana käännöksessä Käännöksessä sovellettiin ns. forward-and-back tekniikkaa käännöksen laadun takaamiseksi: i. Alkuperäiset lomakkeet käännettiin suomeksi ii. Suomennetut lomakkeet käännettiin takaisin englanniksi (vertailu alkuperäisiin lomakkeisiin) Prosessin lopuksi kysyttiin A. Nettenin kommentteja takaisinkäännettyihin lomakkeisiin. 11/02/2013 Ismo Linnosmaa / CHESS 10

11 III,2 ASCOT Suomessa: käännöksen haasteita Miten saada ASCOT käännettyä niin, että myös suomennettuna se on validi elämänlaadun ja vaikuttavuuden mittari? Paino ei pelkästään tilojen (esim. puhdas koti) vaan myös asiakkaan arvostusten (niin puhdas kuin haluan) kuvaamisessa Tarkka kääntäminen ei mahdollista, koska kaikille englannin kielen ilmaisuille ei löydy vastinetta Suomen kielestä Kääntäjien ja sisällön asiantuntijoiden välisen yhteistyön merkitys korostuu: kääntäjät tuntevat kielen mutta eivät sisältöä asiantuntijat tuntevat sisällön mutta eivät aina tarkkaa kielellistä ilmaisua 11/02/2013 Ismo Linnosmaa / CHESS 11

12 III,3 ASCOT Suomessa: yleisiä kysymyksiä Suomalaiset hyötypainot puuttuvat hyötypainojen mittaaminen Suomessa englantilaisten painojen käyttö Suomessa Yleinen kyselytutkimuksen valikoitumisongelma: Usein tutkimuksen lähtökohtana on edustava otos, mutta lopullinen otos voi olla valikoitunut, koska a) kaikki eivät vastaa kyselyyn. Esimerkiksi parempiosaiset vastaavat todennäköisemmin kuin huono-osaiset. b) osa vastaajista ei vastaa kaikkiin kysymyksiin. 11/02/2013 Ismo Linnosmaa / CHESS 12

13 IV,1 Palvelusetelitutkimus THL:n, VATTin ja Helsingin Sosiaaliviraston yhteishanke. Kesto: Kohde: Helsingin kaupungin palvelusetelipilotit Käytännössä tutkimus keskittyy paljolti vanhusten palveluasumisen palveluseteliin ja yrityksistä kerättävään aineistoon, koska näistä on saatavilla riittävästi aineistoa. Muista palveluista kuvailevaa tietoa Palvelusetelit sosiaalipalveluissa / Ismo Linnosmaa 13

14 IV,2 Palvelusetelitutkimus: tavoite Yleisenä tavoitteena tarkastella kysymyksiä: 1. Miten palvelusetelin arvo määritetään/tulisi määrittää? 2. Mitkä ovat palvelusetelin vaikutukset sosiaalipalvelujen asiakkaisiin, markkinoihin ja palvelujen järjestämisestä kunnille aiheutuviin kustannuksiin? Ja tarkentuvia kysymyksiä (esityksessä keskitytään näihin): I. Mikä selittää palvelusetelin valintaa? Miten esimerkiksi tulot ja ikä vaikuttavat tähän valintaan? (Rekisteriaineisto) II. III. Miten palveluseteli vaikuttaa asiakkaiden hyvinvointiin? (Asiakaskysely) Miten yritykset suhtautuvat palveluseteliin? Miten palveluseteli vaikuttaa yrityksiin? (Yrityskysely) Palvelusetelit sosiaalipalveluissa / Ismo Linnosmaa 14

15 IV,3 Palvelusetelitutkimus Osa II: Miten palveluseteli vaikuttaa palveluja käyttävien asiakkaiden hyvinvointiin? Palvelusetelijärjestelmässä Kunta päättää palvelusetelin käyttöönotosta, arvosta ja hyväksyy palveluntuottajat Palvelusetelin hyväksynyt asiakas valitsee yksityisen palveluntuottajan, jolta hankkii palvelun Järjestelmän tavoitteena on lisätä asiakkaan valinnanvapautta. Väite: Palveluseteliasiakkaiden hyvinvointi korkeampi kuin ei-palveluseteliasiakkaiden, koska he voivat valita (palvelun ja) palveluntuottajan, joka vastaa heidän tarpeitaan ja mieltymyksiään Palvelusetelit sosiaalipalveluissa / Ismo Linnosmaa 15

16 IV,4 Palvelusetelitutkimus: hyvinvointivaikutukset Palvelu: vanhusten palveluasuminen (tehostettu) Kyselyyn valittiin satunnaisesti 60 palveluseteliä käyttävää asiakasta (koeryhmä) Kontrolliryhmään 60 kaupungin järjestämiä palveluja käyttävää asiakasta (kaltaistettiin iän, sukupuolen ja tulojen mukaan propensity score-menetelmällä) Lomakkeet toimitettiin hoitokotien kautta omaisille Tähän mennessä vastauksia on 46 (koeryhmä n = 25, kontrolliryhmä n = 21) ja vastausprosentti 49,5 % (niistä asiakkaista, jotka potentiaalisesti kykeneviä vastaamaan) Palvelusetelit sosiaalipalveluissa / Ismo Linnosmaa 16

17 [1. IV,5 Palvelusetelitutkimus: vastaajat Vastanneiden taustatiedot Palveluseteliä käyttävät asiakkaat Kaupungin järjestämiä palveluja käyttävät asiakkaat n Nainen (%) 92 % 76 % Ikä Keskiarvo % CI 2,45 2,76 Tulot n Keskiarvo 1619, ,78 95 % CI 227,28 247,40 Rava-indeksi n Keskiarvo 3,08 3,16 95 % CI 0,181 0,291 11/02/2013 Ismo Linnosmaa / CHESS 17

18 Seteli Seteli Seteli Seteli Seteli Seteli Seteli koe kontrolli IV,6 Elämänlaatu palvelujen kanssa 100 % 90 % 80 % 70 % 60 % 50 % 40 % Paljon tarpeita % Jonkin verran tarpeita % Ei tarpeita % 30 % 20 % 10 % 0 % Vaikuttaminen Puhtaus Ruoka ja juoma Turvallisuus Sosiaalinen osallistuminen Mielekäs tekeminen Asumisen siisteys Arvokkuus Palvelusetelit sosiaalipalveluissa / Ismo Linnosmaa 18

19 Seteli Seteli Seteli Seteli Seteli Seteli Seteli koe kontrolli IV,7 Elämänlaatu ilman palveluita 100 % 90 % 80 % 70 % 60 % 50 % 40 % 30 % Paljon tarpeita % Jonkin verran tarpeita % Ei tarpeita % 20 % 10 % 0 % Vaikuttaminen Puhtaus Ruoka ja juoma Turvallisuus Sosiaalinen osallistuminen Mielekäs tekeminen Asumisen siisteys Arvokkuus Palvelusetelit sosiaalipalveluissa / Ismo Linnosmaa 19

20 IV,8 Vertailtavien ryhmien elämänlaatu palveluja käytettäessä Asumisen siisteys Arvokkuus Vaikuttaminen 100 % 90 % 80 % 70 % 60 % 50 % 40 % 30 % 20 % 10 % 0 % Puhtaus Ruoka ja juoma Palveluseteliasiakkaat (% maksimista) Kaupungin asiakkaat (% maksimista) Mielekäs tekeminen Turvallisuus Sosiaalinen osallistuminen 11/02/2013 Ismo Linnosmaa / CHESS 20

21 IV,9 Odotettu elämänlaatu ilman palveluja Asumisen siisteys Mielekäs tekeminen Vaikuttaminen 100 % 90 % 80 % 70 % 60 % 50 % 40 % 30 % 20 % 10 % 0 % Puhtaus Ruoka ja juoma Palveluseteliasiakkaat (% maksimista) Kaupungin asiakkaat (% maksimista) Sosiaalinen osallistuminen Turvallisuus SCRQol-muutos: Palveluseteliasiakkaat: ( ) = (n =14) Ei-palveluseteliasiakkaat: = (n = 7) 11/02/2013 Ismo Linnosmaa / CHESS 21

22 IV,10 Johtopäätöksiä ja arvioita Palveluasumisen vaikuttavuus parempi palveluseteliasiakkailla kuin asiakkailla, joille kunta järjestää palvelun Huomioita n:t suhteellisen pieniä koe- ja kontrolliryhmissä johtuen puuttuvista havainnoista Tilastollisen merkitsevyyden testaus puuttuu vielä Palveluseteliasiakkaiden omaiset arvioivat odotetun elämänlaadun ilman palvelua alhaisemmaksi kuin kontrolliryhmässä, mutta toisaalta palveluseteliasiakkaiden toimintakyky on hieman alhaisempi (ei tilastollisesti merkitsevästi) kuin eipalveluseteliasiakkaiden, joten tulos voi olla todellinen Omaiset vastausten antajina Palvelusetelit sosiaalipalveluissa / Ismo Linnosmaa 22

23 V Yleisiä johtopäätöksiä ASCOT mittarin soveltaminen mahdollista ja toimivaa Suomennetun mittarin validiteetin tutkiminen Suomalaiset hyötypainot Palvelusetelit sosiaalipalveluissa / Ismo Linnosmaa 23

24 Kiitos mielenkiinnosta! 11/02/2013 Ismo Linnosmaa / CHESS 24