OPH Opintopolku, ammatillisen koulutuksen haku Käytettävyystestitulokset Anne Kaikkonen 29.08.2013
Projektin yhteenveto Asiakas Opetushallitus www.cresense.com Projektin kesto Yhteyshenkilöt Arvioitu palvelu Projektin tavoitteet 20.08.2013 28.08.2013 Opetushallitus Satu Meriluoto, verkkopäätoimittaja Satu.Meriluoto@oph.fi Cresense Anne Kaikkonen, Senior UX Strategy Consultant anne.kaikkonen@cresense.com Opintopolku.fi palvelu, ammatilliseen koulutukseen haku prosessi. Arvioida opintoihin haun käytön helppoutta ja käytettävyyttä, sekä testata sitä nuorilla kohdekäyttäjillä Cresense Oy Vilhonkatu 6A 00100 Helsinki, Finland info@cresense.com Luottamuksellinen 2
Tiivistelmä Tässä raportissa esitellään Opetushallituksen kehittämän Opintopolku.fi palvelun käytettävyystestauksen tulokset. Testin teki Cresense Oy:n vanhempi asiantuntija. Käytettävyystesteihin osallistui 12 teini ikäistä nuorta, joilla oli vähintään yksi kokemus yhteishausta. Tämän dokumentin sisältönä ovat arvioinnin tärkeimmät löydökset. Tarkempi, priorisoitu löydöslistaus toimitetaan Excel-muodossa. Keskeisimmät löydökset ovat: Palvelun tarjoama hakuprosessi koetaan pääsääntöisesti selkeäksi ja koulutuskuvaukset informatiivisiksi. Hakukone ei ole visuaalisesti eikä toiminnallisesti täysin selvä kaikille käyttäjille. Palvelun etusivu ei ohjaa käyttäjää tarpeeksi siihen tehtävänkulkuun, jota palvelu ensisijaisesti tukee, eikä tee tätä polkua läpinäkyväksi käyttäjälle Optimaalinen prosessi tuntuu olevan Haku-muistilista-hakulomake Hakulomakkeen prosessi on käyttäjälle selkeä, mutta lomakkeessa on termejä joita käyttäjät eivät ymmärrä ja kohtia, joissa riski virheelliseen hakuun on suuri Luottamuksellinen 3
Sisältö 1 Johdanto Tavoitteet Kuinka löydöksiä luetaan 2 Tärkeimmät löydökset Etusivu Koulutuksen etsiminen Hakulomakkeen täyttö Vuorovaikutus 3 Johtopäätökset Liitteet: A) Käyttäjät Luottamuksellinen 4
Johdanto
Tavoitteet Projektin tavoitteena oli tutkia Opetushallituksen kehittämää Opintopolku.fi palvelua, ja havaita järjestelmän yleiset käytettävyysongelmat, sekä esittää niille parannusehdotuksia. Erityisesti tarkastelun kohteena olivat: Koulutuksen etsiminen palvelusta Löydetyn koulutuksen tallentaminen muistilistalle Hakulomakkeen täyttö ja hakeminen koulutukseen Tämä dokumentti kuvaa 21. -23. elokuuta tehdyn käytettävyystestin tärkeimpiä tuloksia. Yksityiskohtaiset löydökset on esitetty Testitulokset_OPH.xlsm Excel tiedostossa. Käytettävyystesti tehtiin Cresensen tiloissa, 12 nuorella testihenkilöllä. Testi alkoi alkuhaastattelulla, minkä jälkeen nuoret tekivät 3 tehtävää palvelussa. Tehtävien jälkeen suoritettiin loppuhaastattelu. 1. Olet nyt tekemässä opiskeluvalintaa. Valitset itsellesi sopivat 6 opiskelupaikkaa muistilistalle 2. Haluat siirtää muistilistan hakulomakkeelle. Miten saat tämän tehtyä? 3. Haluat vaihtaa ensimmäisen ja toisen valintasi järjestystä. Saatko tehtyä tämän ja jos saat, miten? Luottamuksellinen 6
Kuinka löydöksiä luetaan Käytettävyyslöydökset on jaoteltu sivuston osa-alueiden mukaan, kuten: Palautekirjaus Palaute-välilehti Seuraavia notaatioita on käytetty esittämään löydöksiä ja huomioita palvelusta: Idealampulla esitetään parannusehdotuksia raportoituihin ongelmiin. Puhekuplilla käyttäjien kommentit Löydökset on jaoteltu neljään eri ryhmään niiden vakavuuden mukaan: Kriittinen Tällä löydöksellä on suuri vaikutus käyttökokemukseen. Korjattava. Tärkeä Heikentää käyttökokemusta merkittävästi. Tulisi korjata. Vähemmän tärkeä Voi vaikuttaa käyttökokemukseen. Korjaamista tulisi harkita. Tämä on positiivinen kommentti. Käy.äjä ID Tämä on negatiivinen kommentti. Käy.äjä ID Positiivinen Tämä on neutraali kommentti. Käy.äjä ID Introduction 7
Tärkeimmät löydökset
Etusivu Etusivua pidettiin pääsääntöisesti miellyttävänä Kaikki käyttäjät eivät havainneet hakukonetta etusivulla Kolmannes käyttäjistä alkoi täyttää hakulomaketta. Nämä käyttäjät olisivat toivoneet että koulutuspaikkoja olisi päässyt lisäämään hakulomakkeelta käsin. Muutama käyttäjä lähti ohjeet ja vinkit osion kautta. Tämä osio ei antanut käyttäjille kaikkea sitä tietoa jota he olisivat toivoneet. (mitä koulutusmahdollisuuksia on) Hakualuetta tulisi korostaa, mutta ei liikaa, jotta muut palvelupolut eivät tulisi mahdottomiksi Palvelu tukee ensisijaisesti käyttäjiä, jotka jo tietävät mihin opintoihin hakevat. Käyttäjä joka ei vielä tiedä mitä lähtisi opiskelemaan ei saa palvelusta tukea Luottamuksellinen Opintopolku.fi kehitys suunnitelma on selkeästi esillä etusivulla. Tämä antaa tietoa esim. julkishallinnon edustajille, mutta ei ole koulutukseen hakevalle relevanttia tietoa. Sivulla voisi visualisoida sitä prosessia, jonka käyttäjä kulkee palvelua käyttäessään. 9
Koulutuksen etsiminen Suurella osalla käyttäjistä oli hankaluuksia koulutuspaikkojen etsimisessä. He eivät tienneet millä hakusanalla koulutusta tulisi etsiä. Palvelun olisi hyvä tarjota tukea koulutustarjonnan esittelyyn myös ilman hakukoneenkäyttöä. Nyt osa käyttäjistä koki että heidän täytyy ensin googlata tiedot muuten ja sitten käyttää tätä palvelua. Käyttäjät kokivat hakutoiminnon toimivan erilaisella logiikalla pääsivulta ja hakutulossivuilta. Käyttäjät eivät hahmottaneet miten hakurajaus toimii. He eivät havainneet että se jäi päälle kunnes käyttäjä kävi palvelun etusivulla. Osa käyttäjistä koki ettei haku löydä mitään jos ei tee hakua etusivulta. Hakurajausta ei voi nollata alasivuilta. Tämä hankaloittaa hakukoneen käyttöä ja ymmärtämistä. Käyttäjillä oli vaikeuksia hahmottaa pohjakoulutus-käsitettä ja sen valinnan vaikutuksia Luottamuksellinen 10
Löydetyn koulutuksen tallentaminen Käyttäjät eivät hahmottaneet muistilistatoiminnon olemassaoloa ennen kuin olivat nähneet keltaisen napin koulutuskuvaussivulla. Kun koulutus oli lisätty muistilistalle, kaikki käyttäjät löysivät muistilistan. Jos muistilistalla oli 5 vaihtoehtoa tai vähemmän, osasivat kaikki käyttäjät siirtää muistilistan hakulomakkeelle. Jos vaihtoehtoja oli enemmän kun 5, lähes kaikilla käyttäjillä oli vaikeuksia Ohjetta korkeintaan 5 hakuvaihtoehdosta ei havaittu Keltaisen napin inaktiivisuutta ei havaittu Suurella osaa käyttäjistä oli vaikeuksia hahmottaa hakulomakkeelle siirretyn muistilistan koulutusvalintojen järjestystä ja järjestyksen merkitystä koulutusvalinnan suhteen. Luottamuksellinen 11
Hakulomakkeen täyttö ja hakeminen Kaikki nuoret löysivät hakulomakkeen palvelusta Hakulomakkeen täyttö oli nuorille pääosin helppoa. Hakulomakkeessa oli täyttöä hankaloittavia yksityiskohtia, joista osa olisi aiheuttanut väärän haun Kaikki osallistujat eivät osanneet antaa henkilötunnusta oikeassa muodossa Kaikki käyttäjät eivät ymmärtäneet hakujärjestyksen merkitystä, eivätkä ainakaan heti osanneet vaihtaa järjestystä nuolinäppäimillä. Osa käytti tyhjennä nappia, joka oli selkeämmin ymmärrettävissä ja kirjoitti käsin haut uuteen järjestykseen. Harkinnanvaraisuus käsite ei ollut yhdellekään nuorelle tuttu ja muutama olisi epähuomiossa jättänyt sen myönteiseksi Vain muutama käyttäjä valitsi pohjakoulutuksen tietoisesti oikein. Osalla valinta vaikutti hakuammunnalta. Arvosanojen laittamista oikeisiin sarakkeisiin valinnaisuuden mukaan ei ymmärtänyt kuin yksi käyttäjä Luottamuksellinen 12
Vuorovaikutus - hakulomake Käyttäjät hahmottivat hyvin sen, miten hakulomakkeessa liikutaan ja miten siellä valitaan asioita Käyttäjät olisivat toivoneet, että esikatselun jälkeen lomakkeen yhden sivun muokkauksen jälkeen pääsisi navigaatiopalkin avulla hyppäämään suoraan takaisin esikatseluun ilman että joutuu käymään kaikki välilehdet läpi Koulutushaun järjestyksen vaihto nuolien avulla ei ollut selkeää noin puolelle käyttäjistä. Tämä ei muuten olisi vakavaa, mutta saattaa johtaa joko väärään hakutoiveiden priorisointiin (joka saattaa vaikeuttaa opintoihin valintaa) tai aiheuttaa lisä työtä käyttäjälle, jos hän lähtee muokkaamaan järjestystä tyhjentämällä hakukenttiä Valintojen tekeminen ja sen ymmärtäminen mihin kenttiin kirjoitetaan hakulomakkeessa oli selkeää Joillekin käyttäjille ei ollut selkeää se, mitkä kentät olivat palkollisia kenttiä Virheilmoitus oli käyttäjille selkeä, jos pakollista kenttää ei oltu täytetty. Jotkut muut ohjeet eivät olleet aina ymmärrettäviä Luottamuksellinen 13
Johtopäätökset
Johtopäätökset Palvelussa on muutama kriittinen ongelma, joiden korjaaminen olisi tärkeää ennen palvelun julkistamista: Hakutoiminnon selkeyttäminen Visuaalisesti jotta hakukenttä on havaittavissa Toiminnallisesti, jotta käyttäjät ymmärtävät millaisilla hakusanoilla voidaan hakea, miten ja millä logiikalla hakurajaus toimii Kaikkien sellaisten osioiden selkeyttäminen, jotka saattavat aiheuttaa väärään haun. Termien pohjakoulutus, Harkinnanvaraisuus selkiyttäminen Hakujärjestyksen muuttaminen siten, että käyttäjä ei epähuomiossa tuhoa toiveita tai voi ainakin palauttaa tyhjennetyn kentän Käyttäjän ohjaaminen oikealle polulle pääsivulta. Nyt pääsivulla on vahvemmin tietoa palvelun kehityskaaresta kiinnostuneille kuin ohjeistusta koulutukseen hakeville Lisäksi palvelusta löytyi pienempiä käytettävyysongelmia, joiden parantamisella käytön sujuvuutta voidaan lisätä, mutta joita voidaan parantaa julkistamisen jälkeen Luottamuksellinen 15
Kiitos! ANNE KAIKKONEN, Senior UX Strategy Consultant anne.kaikkonen@cresense.com www.cresense.com
Liite A: Testikäyttäjät
Nuoret testikäyttäjät Sukupuoli Ty#ö Ty#ö Poika Poika Ty#ö Ty#ö Poika Poika Ty#ö Ty#ö Ty#ö Poika Ikä 17 18 17 16 18 16 18 17 17 16 16 16 Keskiarvo peruskoulun pää.ötodistuksessa 9-10 7-8 5-6 7-8 7-8 7-8 9-10 7-8 7-8 7-8 7-8 7-8 Harkinnut ammapllista koulutusta Pääsi yläasteen jälkeen lukioon tai ammarkouluun ei kyllä ei kyllä ei kyllä kyllä kyllä kyllä kyllä kyllä ei kyllä kyllä ei ei kyllä kyllä kyllä kyllä kyllä kyllä kyllä kyllä Luottamuksellinen 18