Nelli-portaalin käytettävyys Saija Lukkarila Pro gradu, kevät 2005 Informaatiotutkimus, OY
Pro gradu -tutkimus Nelli-portaalin hyödyllisyys tutkimustyöhön liittyvän tiedonhankintaprosessin tukemisessa Nellin soveltuvuus tutkijoiden, opiskelijoiden ja informaatikoiden tiedonhakutehtäviin Nellin käyttöliittymän käytettävyys
Nellin käytettävyyden arviointi Millainen on Nelli-portaalin käytettävyys tutkijoiden, opiskelijoiden ja informaatikkojen sekä asiantuntijoiden näkökulmasta? Havaitut käytettävyysongelmat ja niiden laatu Käyttöliittymän subjektiivinen miellyttävyys Parannusehdotukset
Tutkimuskohde: NELLI Nellin uusi käyttöliittymä, joka perustuu MetaLib 3:een Kansalliskirjaston versio Keskeneräinen Koetunnus ja -salasana Toiminnot: Pikahaku, aineistohaku, lehtihaku, monihaku, omat tiedot
Heuristinen evaluointi, syys-lokakuu 2004 4 käytettävyysasiantuntijaa, 1 jätti evaluoinnin kesken Jokainen kävi käyttöliittymän läpi tehtäväskenaarion mukaisesti, käytettävyysongelmat kirjattiin ylös Ongelmien vakavuuden arviointi sähköpostitse asteikolla 0-4
Heuristisen evaluoinnin tulokset 1 37 käytettävyysongelmaa: 0 katastrofia, 9 suurta, 24 vähäistä, 4 kosmeettista Eniten ongelmia epäselvissä termeissä ja oudoissa ikoneissa: aineisto, tee-se-itse, SFX, kielen vaihto maapallosta, poistuminen lukon kautta Web-standardit ja sisäinen yhdenmukaisuus: linkit ulos järjestelmästä eivät erotu, tuplaklikkausta ei voi käyttää, ei toimi eri selaimilla
Heuristisen evaluoinnin tulokset 2 Järjestelmän antama palaute: huomaamattomat ja epäselvät virheilmoitukset, tietokantojen ja viitteiden tallettamisesta ei ilmoitusta, toimintojen välinen hierarkia hämärä Käytön sujuvuus ja joustavuus: hakulauseketta ei voi tallettaa kirjoittaessa eikä pikahaussa, viitteiden lukumäärää voi muuttaa vain omista asetuksista, vahingossa valittujen tietokantojen ja artikkelien poisto vain omista asetuksista
Heuristisen evaluoinnin tulokset 3 Käyttäjän virheiden estäminen: aiempien hakujen poistossa ei varmistusta, aineistoryhmän poistossa varmistusikkunassa ei lue ryhmän nimeä Muita vakavia ongelmia: jos laajennetussa haussa on tekstiä sekä Simple- että Advanced-hakujen hakukentissä, haku tapahtuu vain Simplen perusteella, vaikka Haku-nappulaa painettaisiin Advanced-kentässä. Pitää siis muistaa erikseen tyhjentää toinen kenttä.
Heuristisen evaluoinnin tulokset 4 Nellin ulkonäön miellyttävyys: Yleisesti toimiva ja miellyttävä Rauhallinen ja minimalistinen ulkoasu, ei liikaa asioita ruudulla Värimaailmalle kehuja
Käytettävyystestaus, marraskuu 2004 9 testaajaa eri aloilta: 3 tutkijaa, 3 opiskelijaa, 3 informaatikkoa Tehtävälista sekä kyselylomake Nellin miellyttävyydestä Testitilanteen ja ääneenajattelun nauhoitus lokiohjelmalla ja mikrofonilla Vakavuuden arviointi asteikolla 0-5
Käytettävyystestauksen tulokset 1 Ongelmat: tehtävään kulunut aika, selvä epäröinti, väärät valinnat, kommentit 38 käytettävyysongelmaa: 0 katastrofia, 11 suurta, 11 keskisuurta, 9 pientä, 7 kosmeettista Muutos heuristisesta evaluoinnista: pikahaku ja lehtihaku, käännöstyö lähes valmis, termejä ja kuvakkeita muutettu
Käytettävyystestauksen tulokset 2 Eniten ongelmia järjestelmän antamassa palautteessa: epäselvää mihin aineistoon haku kohdistuu, toimintojen hierarkia hämärä, tietokantojen ja viitteiden tallettamisesta ei ilmoitusta ja on epäselvää mihin tallettuvat, muokatun haun jälkeen loogisin valinta view results viekin pois Nellistä Lähes yhtä ongelmalliset termit ja ikonit sekä toimintalogiikka : aineisto, SFX, hakua omista tietokannoista yritetään omanellistä eikä monihausta, ostoskärry ei kuvaa viitteen tallettamista
Käytettävyystestauksen tulokset 3 Tiedon muistaminen ja ulkoaopettelu vakavia ongelmia: hakusyntaksi epäselvä kun ohjetta ei ole esillä, monihaussa vasemman reunan aineistohierarkiassa ei tiedä mitä pitäisi valita ja mitä mikin sisältää, aineistovalinnalla ja lehtihaulla haettujen lehtien ero epäselvä Käytön joustamattomuus ja tehottomuus: e-lehdissä ei voi hakea aihepiireittäin, aineistovalinnassa aihealueen valinta ei onnistu alueen nimen linkistä, tietokantojen ja e-lehtien tallettaminen +-merkin takaa vaikea hahmottaa, lisääminen ei onnistu nimen linkistä
Nellin yleinen miellyttävyys numeeriset vastaukset, 1 = paras, 5 = huonoin, lisäksi avoimet vastaukset käyttö melko helppoa (2,8): tutkijoista helppo, informaatikoista vaikea, alkuopettelun jälkeen sujuu ulkonäkö miellyttävä (2,1): tutkijat pitivät, ulkoasu selkeä ja värit hyvät, teksti hieman pientä hierarkia melko selkeä (2,8): tutkijoista selkeä, informaatikoista epäselvä, alussa vaikea hahmottaa
Nellin yleinen miellyttävyys 2 halutaan käyttää jatkossa (1,7): opiskelijat ehdottomasti, informaatikot vähemmän, monihaku ja tietojen talletus hyviä ominaisuuksia pientä opastusta kaivataan (2,8): opiskelijat uskovat oppivansa itse, tutkijat kaipaavat opastusta, ei suurta koulutusta vaan Nellin oma tutoriaalikin voisi riittää suositellaan myös kollegoille (2,2): lähes kaikki suosittelisivat, yhdestä informaatikosta liian rajoittunut, opastusta suositellaan
Testaajien palautetta kehittäjille mallihakuja opastukseen FAQ systeemi vaikuttaa vielä kovin keskeneräiseltä, ei kerro käyttäjille rajoitteita = ei voi hakea onnistuneesti eri arkkitehtuurein rakennetuista tietokannoista = ei kannata hakea kovin monista tietokannoista yhtäaikaa hierarkia/logiikka selvemmäksi työtila pitäisi voida laajentaa koko ruudun levyiseksi vaikuttaa hyvältä ja hyödylliseltä ohjelmalta!
Parannusehdotuksia 1 Kun tallennus on tehty, järjestelmän tulisi kertoa näkyvästi, että viite on talletettu omanellin kirjahyllyyn. Sama tietokannoille ja hakulausekkeille. Ala- ja ylätoimintojen suhteita tulisi korostaa graafisesti esimerkiksi nuolilla. Aineisto on liian moniselitteinen termi, tilalle tietokanta.
Parannusehdotuksia 2 SFX-logoon hiirivinkiksi esimerkiksi paikanna dokumentti, lisäksi linkki laajempaan esittelyyn. Aineistoryhmien päivitä-toiminto huonosti nimetty, mieluummin nimeä uudelleen tai muuta nimi. Kullekin hakusivulle lyhyt esimerkki hakusyntaksista (and, or, not, hakusanan katkaisu, jokerimerkki, fraasi, sulkeet).
Parannusehdotuksia 3 Help-osioon vievän kysymysmerkin tilalle sanalliseen muotoon ohje Joka toiminnosta näkyvä suora linkki ohjedokumentin oikeaan kohtaan Keskeneräisyys: löytyi linkkejä laajennettuun / tarkennettuun hakuun Toimivaksi yleisimmillä selaimilla: IE, Mozilla Firefox, Netscape, Opera