Käytettävyyden arviointi ja käytettävyystestauksen soveltaminen terveydenhuollon tietojärjestelmien valinnassa Janne Pitkänen Adusso Oy, Aalto yliopisto Matti Pitkäranta Adusso Oy
Terveydenhuollon tietojärjestelmien hankinnat ovat ajankohtaisia Osittain valmis ohjelmistotuote hankinnan kohteena Käyttäjäorganisaation tarpeisiin toteutettavia hankintakohtaisia ominaisuuksia Suuria investointeja, joiden vaikutukset ovat pitkäaikaisia Haasteita käyttökelpoisuuden varmistamisessa
Tuoteominaisuudet pelkästään eivät takaa käyttökelpoisuutta Ominaisuus 1 Skenaario 1 Ominaisuus 2 Ominaisuus 3 Skenaario 2... Skenaario 3... Mahdollisimman monta samaan hintaan? Rasti ruutuun on helppo täyttää, mutta voiko ominaisuutta käyttää? Miten käyttöskenaariot toteutuvat oikeilla käyttäjillä?
Tietojärjestelmien soveltuvuutta oikeaan käyttöön voidaan arvioida Kushniruk, A., Beuscart-Zéphir, M.-C., Grzes, A., Borycki, E., Watbled, L., Kannry, J. (2010) Increasing the Safety of Healthcare Information Systems through Improved Procurement: Toward a Framework for Selection of Safe Healthcare Systems. Healthcare Quarterly, Vol.13, Special Issue September.
Kokeilimme käyttäjäkokemusten seurantaa järjestelmien testaukseen
Käytettävyystestaukseen pilotointiin osallistui hoitaijia ja lääkäreitä Paritesti: kaksi hoitajaa tai kaksi lääkäriä Skenaariopohjaiset testitehtävät, joiden suorittaminen vei 30 min - 1,5 h Käytettävä järjestelmä ei ollut välttämättä tuttu osallistujille Vain yksi järjestelmä testauskokeiluissa mukana Kokemuksia testauksen soveltuvuudesta Nyt ei oteta kantaa yksittäiseen järjestelmään
Testitehtävät liittyivät tyypillisiin työtehtäviin terveydenhuollossa Tyypillisiä työtehtäviä liittyen esim. ajanvaraukseen ja lääkitykseen
Kokemuksia testauskokeiluista Merkittyjä käyttötilanteita oli yhteensä 58. 8 käyttötilannetta liittyi kriittisiksi tunnistettuihin ongelmiin. Positiivisiksi merkittyjä käyttötapahtumia oli yhtä paljon kuin negatiivisiksi merkittyjä ongelmallisia tilanteita (29). Käytettävyysasiantuntijalla olisi myös hyvä olla mahdollisuus merkata käyttötilanteita selvästi huomionarvoisten tilanteiden kiinnisaamiseksi.
Miten käytettävyystestaus voi tukea hankintalain mukaista kilpailutusta Hankintalain tarkoituksena on varojen käytön tehostaminen ja laadukkaiden hankintojen tekeminen sekä tasapuolisten mahdollisuuksien turvaaminen yrityksille julkisten hankintojen tarjouskilpailuissa. Testaus kohdistuu siihen, miten hyvin järjestelmä tukee käyttäjien tavoitteiden saavuttamista.
Käytettävyystestien tulokset osana hankintakriteeristöä LUOTETTAVUUS KATTAVUUS VALIDITEETTI SOVELLETTAVUUS TEHOKKUUS
Testitulosten luotettavuuden ja vertailukelpoisuuden parantaminen 1. Kerätään kunkin tuotteen testauksessa ilmenneet käytettävyyshavainnot. 2. Tunnistetaan tuotteiden välillä keskenään samanlaiset havainnot. 3. Arvioidaan havaintoja vastaavien ongelmien ja positiivisten asioiden esiintymismahdollisuutta myös niissä tuotteissa, joiden kohdalla kyseistä havaintoa ei testeissä esiintynyt.
Analysointimalli käytettävyystestaustulosten vertailuun
Esitetyn mallin oletetaan olevan hyödyllinen silloin kun i. Käytettävyystesteissä otanta on pieni alle 5, suurempaa määrää pidetään yleisesti riittävänä merkittävimpien käytettävyysongelmien löytämiseen ii. Vertailtavat järjestelmät täyttävät toiminnallisuuksiltaan kohtuulliset minimivaatimukset voidaan katsoa olevan soveltuvia samoihin suunniteltuihin käyttötarkoituksiin
Yhteenveto Käytettävyystestauksella saadaan toimittajan demonstraatioita vahvempaa näyttöä terveydenhuollon tietojärjestelmien laadusta. Testausjärjestely soveltuu kilpailutuksiin jäljitettävyytensä ansiosta (myös mobiililaitteet). Testitulosten analysointiin kehitetty malli vaatii tutkimusta täysimittaisten testien yhteydessä. Tilastollinen pätevyys Toistettavuus