Käytettävyyden arviointi ja käytettävyystestauksen soveltaminen terveydenhuollon tietojärjestelmien valinnassa

Transkriptio

1 Käytettävyyden arviointi ja käytettävyystestauksen soveltaminen terveydenhuollon tietojärjestelmien valinnassa Janne Pitkänen Adusso Oy, Aalto yliopisto Matti Pitkäranta Adusso Oy

2 Terveydenhuollon tietojärjestelmien hankinnat ovat ajankohtaisia Osittain valmis ohjelmistotuote hankinnan kohteena Käyttäjäorganisaation tarpeisiin toteutettavia hankintakohtaisia ominaisuuksia Suuria investointeja, joiden vaikutukset ovat pitkäaikaisia Haasteita käyttökelpoisuuden varmistamisessa

3 Tuoteominaisuudet pelkästään eivät takaa käyttökelpoisuutta Ominaisuus 1 Skenaario 1 Ominaisuus 2 Ominaisuus 3 Skenaario 2... Skenaario 3... Mahdollisimman monta samaan hintaan? Rasti ruutuun on helppo täyttää, mutta voiko ominaisuutta käyttää? Miten käyttöskenaariot toteutuvat oikeilla käyttäjillä?

4 Tietojärjestelmien soveltuvuutta oikeaan käyttöön voidaan arvioida Kushniruk, A., Beuscart-Zéphir, M.-C., Grzes, A., Borycki, E., Watbled, L., Kannry, J. (2010) Increasing the Safety of Healthcare Information Systems through Improved Procurement: Toward a Framework for Selection of Safe Healthcare Systems. Healthcare Quarterly, Vol.13, Special Issue September.

5 Kokeilimme käyttäjäkokemusten seurantaa järjestelmien testaukseen

6 Käytettävyystestaukseen pilotointiin osallistui hoitaijia ja lääkäreitä Paritesti: kaksi hoitajaa tai kaksi lääkäriä Skenaariopohjaiset testitehtävät, joiden suorittaminen vei 30 min - 1,5 h Käytettävä järjestelmä ei ollut välttämättä tuttu osallistujille Vain yksi järjestelmä testauskokeiluissa mukana Kokemuksia testauksen soveltuvuudesta Nyt ei oteta kantaa yksittäiseen järjestelmään

7 Testitehtävät liittyivät tyypillisiin työtehtäviin terveydenhuollossa Tyypillisiä työtehtäviä liittyen esim. ajanvaraukseen ja lääkitykseen

8 Kokemuksia testauskokeiluista Merkittyjä käyttötilanteita oli yhteensä käyttötilannetta liittyi kriittisiksi tunnistettuihin ongelmiin. Positiivisiksi merkittyjä käyttötapahtumia oli yhtä paljon kuin negatiivisiksi merkittyjä ongelmallisia tilanteita (29). Käytettävyysasiantuntijalla olisi myös hyvä olla mahdollisuus merkata käyttötilanteita selvästi huomionarvoisten tilanteiden kiinnisaamiseksi.

9 Miten käytettävyystestaus voi tukea hankintalain mukaista kilpailutusta Hankintalain tarkoituksena on varojen käytön tehostaminen ja laadukkaiden hankintojen tekeminen sekä tasapuolisten mahdollisuuksien turvaaminen yrityksille julkisten hankintojen tarjouskilpailuissa. Testaus kohdistuu siihen, miten hyvin järjestelmä tukee käyttäjien tavoitteiden saavuttamista.

10 Käytettävyystestien tulokset osana hankintakriteeristöä LUOTETTAVUUS KATTAVUUS VALIDITEETTI SOVELLETTAVUUS TEHOKKUUS

11 Testitulosten luotettavuuden ja vertailukelpoisuuden parantaminen 1. Kerätään kunkin tuotteen testauksessa ilmenneet käytettävyyshavainnot. 2. Tunnistetaan tuotteiden välillä keskenään samanlaiset havainnot. 3. Arvioidaan havaintoja vastaavien ongelmien ja positiivisten asioiden esiintymismahdollisuutta myös niissä tuotteissa, joiden kohdalla kyseistä havaintoa ei testeissä esiintynyt.

12 Analysointimalli käytettävyystestaustulosten vertailuun

13 Esitetyn mallin oletetaan olevan hyödyllinen silloin kun i. Käytettävyystesteissä otanta on pieni alle 5, suurempaa määrää pidetään yleisesti riittävänä merkittävimpien käytettävyysongelmien löytämiseen ii. Vertailtavat järjestelmät täyttävät toiminnallisuuksiltaan kohtuulliset minimivaatimukset voidaan katsoa olevan soveltuvia samoihin suunniteltuihin käyttötarkoituksiin

14 Yhteenveto Käytettävyystestauksella saadaan toimittajan demonstraatioita vahvempaa näyttöä terveydenhuollon tietojärjestelmien laadusta. Testausjärjestely soveltuu kilpailutuksiin jäljitettävyytensä ansiosta (myös mobiililaitteet). Testitulosten analysointiin kehitetty malli vaatii tutkimusta täysimittaisten testien yhteydessä. Tilastollinen pätevyys Toistettavuus