Tieto: totta vai tarua?

Transkriptio

1 Tieto: totta vai tarua? Miten parantaa tiedon luotettavuutta? Sami Laine, Tohtorikoulutettava Tietotekniikan laitos, Aalto-yliopisto

2 Terveydenhuoltoa ja tiedolla johtamista yli 15 vuotta VSSHP Turun yliopisto Empiiristä tutkimusta erikoissairaanhoidon työtavoista ja tietojärjestelmistä Johdon raportoinnin ja tietovarastoinnin kehittämistä Aalto-yliopisto Terveydenhuollon tietojen laadun ja laadunhallinnan tutkimusta Siili Solutions Oyj Asiakastietojen hallinnan kehittämistä Sami Laine, Tohtorikoulutettava Tietotekniikan laitos, Aalto-yliopisto

3 Sote-uudistus tulee muuttamaan kaikkien suomalaisten elämän

4 Sote-uudistusta perustellaan esimerkiksi säästöillä ja palvelujen laadulla Talous Laatu Säästöjä Terveyttä

5 Suunnitelmien taustalla olevat laskelmat perustuvat valtakunnallisesti kerättyihin tietoihin Miehikkälä (4.) Paras? Paras Keskiverto Keskiverto Miehikkälä Heikoin Miehikkälä Heikoin

6 Miten johdetaan tiedolla jos laskelmien mukaan paras on huonoin tai jotain siltä väliltä? Ei mitenkään! Tarvitaan laadukkaampaa tietoa ja pätevämpiä laskelmia!

7 Tiedon laadunhallinta on monitieteellinen ala, jonka perusta rakennettiin MIT:issa MIT Information Qualitytutkimusohjelma yhdisti luvuilla tuotantotalouden laadunhallinnan opit moderniin tietojenkäsittelyyn.

8 Tietotuotantoprosessi sisältää tietojen syntymisen, muokkaamisen ja hyödyntämisen vaiheet Tiedon syntyminen Tiedon muokkaaminen Tiedon hyödyntäminen Kirjaa tietoja Kerää tietoaineistoja ja raportoi Tulkitsee ja tekee päätöksiä Elektroninen Potilaskertomus Sisäiset tilastot Kuvantamisen tietojärjestelmä Wang, R. Y., Lee, Y. W., Pipino, L. L. and Strong, D. M. (1998) Manage Your Information as a Product. Sloan Management Review, 39, 4, pp Sairaaloiden tuottavuuden vertailu

9 MIT:in mukaan tietotuotantoakin tulee hallinnoida järjestelmällisesti tuotantoprosessina Tiedon syntyminen Tiedon muokkaaminen Tiedon hyödyntäminen Ymmärrä tiedon hyödyntäjän tarpeet. Kirjaa tietoja Kerää tietoaineistoja ja raportoi Tulkitsee ja tekee päätöksiä Hallinnoi koko prosessia tiedon tuottajista sen hyödyntäjiin. Elektroninen Potilaskertomus Sisäiset tilastot Hallitse tiedon koko elinkaarta sen syntymästä lopulliseen tuhoamiseen. Kuvantamisen tietojärjestelmä Wang, R. Y., Lee, Y. W., Pipino, L. L. and Strong, D. M. (1998) Manage Your Information as a Product. Sloan Management Review, 39, 4, pp Sairaaloiden tuottavuuden vertailu Aseta tiedolle vastuullinen omistaja.

10 Tiedon laadunhallinta perustuu kaikkien tuntemaan laatuympyrään Tiedolla johtaminen mahdollistuu vain laadukkaalla tiedolla ja pätevillä laskelmilla Sote-palvelujen järjestäjällä ja tuottajalla tulee olla tiedon laadunhallinnan järjestelmä. 3. Wang, R. Y., Lee, Y. W., Pipino, L. L. and Strong, D. M. (1998) Manage Your Information as a Product. Sloan Management Review, 39, 4, pp

11 Tiedon laadunhallinta tulee sulauttaa organisaatioiden kaikkeen toimintaan Tiedon syntyminen Tiedon muokkaaminen Tiedon hyödyntäminen Ymmärrä tiedon hyödyntäjän tarpeet. Hallinnoi koko prosessia tiedon tuottajista sen hyödyntäjiin. Kirjaa tietoja Kerää tietoaineistoja ja raportoi Tulkitsee ja tekee päätöksiä Hallitse tiedon koko elinkaarta syntymästä tuhoamiseen. Aseta tiedolle vastuullinen omistaja. Elektroninen Potilaskertomus Sisäiset tilastot Kuvantamisen tietojärjestelmä Wang, R. Y., Lee, Y. W., Pipino, L. L. and Strong, D. M. (1998) Manage Your Information as a Product. Sloan Management Review, 39, 4, pp Sairaaloiden tuottavuuden vertailu

12 Mutta kuka hallinnoi laatua ja miten se varmistetaan soteuudistuksen tavoittelemassa monitoimijaympäristössä? Tiedon syntyminen Tiedon muokkaaminen Tiedon hyödyntäminen Kuka ymmärtää kaikkien tarpeet? Kirjaa tietoja Kerää tietoaineistoja ja raportoi Tulkitsee ja tekee päätöksiä Kuka hallinnoi organisaatioiden ylitse jatkuvaa prosessia? Elektroninen Potilaskertomus Sisäiset tilastot Kuka seuraa tiedon koko elinkaarta organisaatioiden ylitse? Kuvantamisen tietojärjestelmä Wang, R. Y., Lee, Y. W., Pipino, L. L. and Strong, D. M. (1998) Manage Your Information as a Product. Sloan Management Review, 39, 4, pp Sairaaloiden tuottavuuden vertailu Kuka omistaa koko tietoavaruuden?

13 Minkälaisia tiedonlaatuongelmia esiintyy terveydenhuollon monitoimijaympäristössä? Viheliäisiä ongelmia! Perinteinen laadunhallintakaan ei riitä vaan tarvitaan aitoa läpinäkyvyyttä. Tekes-rahoitteinen Qualidat-tutkimusprojekti Aalto-yliopisto, VSSP, PSHP

14 DATA ANALYTIIKKA SELITTÄVÄ TUTKIMUS Rakentaa algoritmeja ja johtaa laskennallisia tuloksia datasta Tavoite Manipuloi algoritmeja ja selittää loogisia mekanismeja Qualidat-tutkimusprojekti Tavoitteiden ja oletusten kääntäminen päälaelleen avaa uusia näkökulmia tuottavuusvertailuun Olettaa satunnaisuutta ja Gaussin käyrää Virheet Etsii systemaattisia syitä ja piileviä muuttujia

15 Qualidat-projekti tunnisti ja selitti mekanismeja, jotka johtavat virheellisiin johtopäätöksiin Bias on systemaattinen virhe, jonka vuoksi todellisuus on jotain muuta kuin mitä data ja laskelmat väittävät. Biasoitumisella on epäsuotuisia seurauksia tuottavuusvertailun validiudulle, palvelujen vaikuttavuuden arvioinnille ja terveyspalvelujärjestelmän insentiiveille. Qualidat-projekti tutki kansallista sairaaloiden tuottavuusvertailua VSSHP:n ja PSHP:n kanssa.

16 Tuottavuusvertailussa esiintyy systemaattisia biaseja jotka johtuvat mekanismeista Potilasaineksen mekanismit Potilaiden poiminta Potilaiden hylkääminen Palvelujen pirstoutuminen Potilasaineksen heterogeenisuus Toimijoiden insentiivit Datan laajuus Dokumentaation taso Tiedon virheet Tiedon korjaukset Pirstoutumisen mekanismit Palvelujen pilkkominen Palvelujen nimeäminen

17 Esimerkiksi tuottavuusvertailun mukaan toinen sairaala tuottaa samalla rahamäärällä enemmän palveluja Sairaala Sairaala

18 Mutta palvelujen pirstoutuminen palkitsee hajanaisuudesta ja monimutkaisuudesta Episode 1 DRG X DRG A DRG B DRG C Vähemmän tuottavuutta mutta enemmän terveyttä! Episode A DRG X Sairaala Sairaala Enemmän tuottavuutta mutta vähemmän terveyttä! Pilkotaan hoitopolku 3 osaan JA Nimetään palvelut uudelleen

19 Todellisuus poikkeaa tuottavuuslaskelmista ja huonoimmat tuotantolaitokset ovatkin parhaita terveyslaitoksia! Episode 1 DRG X DRG A DRG B DRG C Vähemmän tuottavuutta mutta enemmän terveyttä! Episode A DRG X Sairaala Sairaala Enemmän tuottavuutta mutta vähemmän terveyttä! Pilkotaan hoitopolku 3 osaan JA Nimetään palvelut uudelleen

20 Bias-mekanismeja voidaan rakentaa tietoisesti organisaatioiden toimintaan tai tietotuotantoprosessiin! Tiedon syntyminen Tiedon muokkaaminen Tiedon hyödyntäminen Sote-palvelujen tuotantomalli Palvelujen pirstoutuminen Potilasaineksen heterogeenisuus Kirjaa tietoja Kerää tietoaineistoja ja raportoi Tulkitsee ja tekee päätöksiä Toimijoiden insentiivit Hoitokäytännöt Elektroninen Potilaskertomus Sisäiset tilastot Datan laajuus Dokumentaation taso Kuvantamisen tietojärjestelmä Tiedon virheet Ohjelmistojen ominaisuudet Inhimillinen toiminta Sairaaloiden tuottavuuden vertailu Tiedon korjaukset

21 Bias-mekanismeilla saadaan hyvät näyttämään huonoilta ja huonot hyviltä! Bias-mekanismit aiheuttavat systemaattisia variaatioita eivätkä satunnaisia virheitä! Tietyt sairaanhoitopiirit ovat järjestelmällisesti parempia johtuen esimerkiksi kirjaamiskäytännöistä, vaikka todellisuus on jotain muuta. Bias-mekanismit aiheuttavat erittäin suuria muutoksia laskelmiin vaikka eivät liity mitattavaan ilmiöön! Qualidat-projektin aikana PSHP nosti tuottavuuttaan noin 10% lähes pelkästään korjaamalla kirjaamiskäytäntöjä ja ohjelmistojen laskentasääntöjä.

22 Perinteinen keskitetty laadunhallinta ei riitä monitoimijaympäristössä, vaan tarvitaan aitoa läpinäkyvyyttä! Perustavanlaatuinen ongelma on se, että biasoitumista ei voi tunnistaa suoraan palvelujen standardoitusta datasta! Eksakti ja biasoitunut data näyttävät identtisiltä ja täyttävät standardit täydellisesti. Eron voi tunnistaa vain tutkimalla tiedon tuottamisen taustalla vallinneita olosuhteita ja tuotantotapoja. Sote-tietojen ja tuotteiden standardointi ei riitä, vaan koko tietotuotantoprosessi on avattava läpinäkyväksi piilevien virheiden ja biasoitumisen tunnistamiseksi! Tiedot pitää avata tarkemmalla raaka-data tasolla, sillä standardit voidaan täyttää biasoiduilla tiedoilla, eikä biasoitumista voi tunnistaa standardoidusta datasta. Tiedon laatua pitää mitata yksittäisen palvelujen ylitse ja suhteessa toisiinsa, sillä piilevät erot tulevat esiin vain suhteessa toisiinsa sekä ympäristömuuttujista.

23 Kokonaisuuden pitää olla avointa, koska jos prosessissa on mustia laatikkoja tai tunnistamattomia poikkeamia niin johtopäätöksiin ei voi luottaa! Tiedon syntyminen Tiedon muokkaaminen Tiedon hyödyntäminen Kuka ymmärtää kaikkien tarpeet? Paikallinen Kirjaa kirjaamiskäytäntö tietoja Kerää tietoaineistoja Nämä tulee avata ja raportoi läpinäkyviksi! Tulkitsee ja tekee päätöksiä Kuka hallinnoi organisaatioiden ylitse jatkuvaa prosessia? Elektroninen Suljettu potilasjärjestelmä Potilaskertomus Kuvantamisen tietojärjestelmä Laskentalogiikka liikesalaisuus Epäyhtenäinen tietoaineisto Wang, R. Y., Lee, Y. W., Pipino, L. L. and Strong, D. M. (1998) Manage Your Information as a Product. Sloan Management Review, 39, 4, pp Sisäiset tilastot Sairaaloiden tuottavuuden vertailu Kuka seuraa tiedon koko elinkaarta organisaatioiden ylitse? Kuka omistaa koko tietoavaruuden?

24 Pahin mahdollinen tilanne olisi, mikäli luotaisiin liikesalaisuuksien ja suljettujen järjestelmien kilpailumarkkinat, jossa tuotantotapaan voisi rakentaa biasmekanismeja ja samalla piilottaa ne standardoitujen rajapintojen ja tuotteiden taakse. Tiedon syntyminen Tiedon muokkaaminen Tiedon hyödyntäminen Biasoitu sotepalvelujen tuotantomalli Kirjaa tietoja Biasoituneet hoitokäytännöt Elektroninen Potilaskertomus Kerää tietoaineistoja ja raportoi Tulkitsee ja tekee päätöksiä Sisäiset tilastot Palvelujen pirstomista tehokkaisiin yksiköihin Potilasaineksen valikoimista ja hylkimistä Toimijoiden taloudellisten insentiivien vahvistaminen Datan laajuuden manipulointi Dokumentaation tason koneellinen nostaminen Kuvantamisen tietojärjestelmä Ohjelmistojen biasominaisuudet Biasoitunut inhimillinen toiminta Sairaaloiden tuottavuuden vertailu Kirjaamisen manipulointi Tiedon korjaukset taloudellisin prioriteetein.

25 Johtopäätökset sote-uudistukselle ja terveyden huollon tiedolla johtamiselle Tekes-rahoitteinen Qualidat-tutkimusprojekti Aalto-yliopisto, VSSP, PSHP

26 Tiedon laadunhallinta tulee sulauttaa organisaatioiden kaikkeen toimintaan Tiedon syntyminen Tiedon muokkaaminen Tiedon hyödyntäminen Kirjaa tietoja Perinteinen laadunhallinta, joka toimii yksittäiselle Kerää tietoaineistoja toimijalle. ja raportoi Tulkitsee ja tekee päätöksiä Ymmärrä tiedon hyödyntäjän tarpeet. Hallinnoi koko prosessia tiedon tuottajista sen hyödyntäjiin. Hallitse tiedon koko elinkaarta syntymästä tuhoamiseen. Aseta tiedolle vastuullinen omistaja. Elektroninen Potilaskertomus Sisäiset tilastot Kuvantamisen tietojärjestelmä Wang, R. Y., Lee, Y. W., Pipino, L. L. and Strong, D. M. (1998) Manage Your Information as a Product. Sloan Management Review, 39, 4, pp Sairaaloiden tuottavuuden vertailu

27 Tuottavuusvertailu on kuitenkin viheliäinen ongelma, sillä biasoitumista voidaan rakentaa palvelu- tai tietotuotantoon! Tiedon syntyminen Tiedon muokkaaminen Tiedon hyödyntäminen Sote-palvelujen tuotantomalli Palvelujen pirstoutuminen Potilasaineksen heterogeenisuus Kirjaa tietoja Hoitokäytännöt Elektroninen Potilaskertomus Kerää tietoaineistoja ja raportoi Viheliäinen ongelma monitoimijamarkkinoilla. Tulkitsee ja tekee päätöksiä Sisäiset tilastot Toimijoiden insentiivit Datan laajuus Dokumentaation taso Kuvantamisen tietojärjestelmä Tiedon virheet Ohjelmistojen ominaisuudet Inhimillinen toiminta Sairaaloiden tuottavuuden vertailu Tiedon korjaukset

28 Osa tiedon viheliäisistä laatuongelmista voidaan tunnistaa vain tietojen lähteen *raaka-datasta*! Tiedon syntyminen Tiedon muokkaaminen Tiedon hyödyntäminen Kirjaa tietoja Elektroninen Potilaskertomus Kuvantamisen tietojärjestelmä Kerää tietoaineistoja ja raportoi Tulkitsee ja tekee päätöksiä Sisäiset tilastot Sairaaloiden tuottavuuden vertailu Bias näkyvissä Bias piilossa Sokea piste

29 Palvelutuottaja voi sokeuttaa sote-alueen palvelujärjestäjän piilottamalla todellisuuden tarjoilemalla standardien biasoimaa dataa ilman pääsyä aitoon raaka-dataan! Tiedon syntyminen Tiedon muokkaaminen Tiedon hyödyntäminen Kirjaa tietoja Elektroninen Potilaskertomus Kerää tietoaineistoja ja raportoi Tulkitsee ja tekee päätöksiä Sisäiset tilastot Tuottajan bias näkyvissä Ongelman piilotus Kuvantamisen tietojärjestelmä Sokea järjestäjä Sairaaloiden tuottavuuden vertailu

30 Tietotuotantoprosessit tulisi avata kaikkien osapuolien näkyville, jotta piilevät virheet ja biasoitumista aiheuttavat erot voidaan tunnistaa, huomioida ja korjata. Läpinäkyvä hoitopolku Läpinäkyvyyden tulee kattaa koko hoitopolun kaikki palvelut tuotteistuksineen sekä kaikki tietotuotantoprosessit järjestelmälogiikkoineen. Pienikin yksityiskohta saattaa aiheuttaa suuria kerrannaisvaikutuksia! Läpinäkyvyyden tulee yltää raakadataan ja sisäisiin prosesseihin! Läpinäkyvyyden tulee kattaa koko tietotuotantoprosessi kaikkien osapuolien osalta: tietojen syntyminen, tietojen muokkaaminen ja tietojen hyödyntäminen. Virhetulkinta tai biasoituminen voi tapahtua missä tahansa vaiheessa! Virheet ja biasoitumisen voi tunnistaa vain suhteessa toisiin tai ympäristömuuttujista! Läpinäkyvä tietotuotantoprosessi

31 Läpinäkyvä hoitopolku Vain aidosti läpinäkyvällä ja laadukkaalla tiedolla voidaan taata sairaalan johtamisen, poliittisen päätöksenteon ja kliinisen tutkimuksen johtopäätöksien validius Läpinäkyvä tietotuotantoprosessi Sami Laine, Tohtorikoulutettava Tietotekniikan laitos, Aalto-yliopisto

32 Kysyttävää? Läpinäkyvä laadukas hoitopolku Vain aidosti läpinäkyvällä ja laadukkaalla tiedolla voidaan taata sairaalan johtamisen, poliittisen päätöksenteon ja kliinisen tutkimuksen johtopäätöksien validius Läpinäkyvä laadukas tietotuotantoprosessi Sami Laine, Tohtorikoulutettava Tietotekniikan laitos, Aalto-yliopisto