RAPORTTI 25.2.2011 SUORITETUISTA KÄYTETTÄVYYSTESTEISTÄ Luuppi-projekti Saila Oldén
1. JOHDANTO Tässä raportissa kuvataan perjantaina 25.2.2011 Luuppi-projektin tiimoilta suoritettujen käytettävyystestien tulokset. Käytettävyystestit suoritettiin Tampereen yliopiston tiloissa perjantaina 25.2.2011. Käytettävyystesteihin osallistui yhteensä kuusi ihmistä. Heistä kolme osallistui testiin ylläpitäjän roolissa, ja kolme peruskäyttäjän. Testihenkilöistä muodostettiin kaksi ryhmää (ylläpitäjät ja peruskäyttäjät). Käytettävyystestit suoritettiin ryhmäläpikäynnin hengessä, eli testiryhmään kuuluvat kolme testihenkilöä olivat yhtä aikaa samassa tilassa, ja suorittivat heille annetut testitehtävät (liitteenä) samaan aikaan. Sekä tehtävien suorittamisen aikana että varsinaisen testin jälkeen testihenkilöt saivat esittää kommentteja testattavasta sivustosta (http://luuppitest.cs.uta.fi/). 2. TULOKSET Tässä luvussa esitellään käytettävyystesteissä ilmitulleet asiat. Ensin käydään läpi ylläpitäjien testitulokset, ja sen jälkeen peruskäyttäjien. 2.1 Ylläpitäjät Ylläpitäjille jaetut testitehtävät ovat tämän raportin liitteenä. Seuraavassa käydään läpi testitehtävien tulokset tehtävä tehtävältä. 2.1.1 Kirjautuminen järjestelmään Kirjautuminen järjestelmään sujui kaikilta testihenkilöiltä hyvin, eikä tehtävässä tai sen suorittamisessa ollut mitään epäselvää. 2.1.2 Osoitteenmuutoksen tekeminen Osoitteen muuttaminen järjestelmään sujui kaikilta testihenkilöiltä hyvin, eikä tehtävästä esitetty kommentteja. 2.1.3 Jäsenen lisääminen järjestelmään ja hänen tietojensa muuttaminen Jäsenen lisääminen järjestelmään ja hänen tietojensa muuttaminen sujui muuten hyvin, mutta jäsentietolomakkeessa olevat kohdat Sähköpostiosoite ja Kotisivut, joiden perässä on check boxit (kuva 1), koettiin hämmentävinä, ts. niiden tarkoitus ei ollut selvä. Testihenkilöiden mielestä kohdassa pitäisi olla jokin selitys siitä, mitä tapahtuu jos check boxin valitsee.
Kuva 1. Hämmennystä aiheuttava kohta jäsentietolomakkeessa. Tässä tehtävässä esitettiin myös, että jäsenen pääaineen lisääminen voisi tapahtua pudotusvalikosta valitsemalla mieluummin kuin kirjoittamalla, koska mahdollisia pääaineita ei ole montaa. 2.1.4 Uutisen lisääminen Tässä tehtävässä testihenkilöt kommentoivat, että pakolliset kentät tulisi ehdottomasti merkitä jotenkin, esim. tähdellä. Lisäksi raportoitiin, että täyttämättömistä kentistä ilmoittava virheilmoitus (kuva 2) ei ole tarpeeksi erottuva. Kuva 2. Täyttämättömistä kentistä tuleva virheilmoitus. 2.1.5 Uutisen poistaminen Uutisen poistaminen sujui kaikilta testihenkilöiltä hyvin. 2.1.6 Tapahtuman luominen Tapahtuman luominen sujui testihenkilöiltä muuten hyvin, mutta he kommentoivat, että kalenterista oli hieman hankala huomata, mikä päivä on (kuva 3). Yksi testihenkilö sijoitti tämän takia tapahtumansa alkavaksi jo menneenä päivämääränä. Ongelmaksi muodostui myös se, että kalenterista pystyi valitsemaan menneitä päivämääriä, eli periaatteessa sivustolle pystyi luomaan tapahtuman, joka oli jo päättynyt.
Kuva 3. Kalenteri. Tapahtuman luomisessa herätti ihmetystä myös sama asia kuin uutisen luomisessa, eli se, että pakollisia kenttiä ei oltu mitenkään merkitty. Lisäksi jos ei huomannut täyttää kaikkia kenttiä, virheilmoituksen saatuaan huomasi, että mm. tapahtuman kuvaus -kenttä oli tyhjentynyt, eli siihen joutui kirjoittamaan tekstin uudelleen. Myös Alkaa ja Loppuu -kentät herättivät ihmetystä, lähinnä sen suhteen mitä jälkimmäiseen kenttään tulisi kirjoittaa (kuva 4). Kuva 4. Kellonaikakenttä. 2.1.7 Tapahtuman muokkaus Tässä tehtävässä testihenkilöt esittivät, että päivämäärät olisi parempi esittää muodossa pp.kk.vvvv, jolloin ne olisivat selkeämmät. Testihenkilöt ihmettelivät myös sitä, missä järjestyksessä heidän luomansa tapahtumat listautuvat. 2.1.8 Staattisen sivun lisääminen Uuden staattisen sivun lisääminen onnistui kaikilta testihenkilöiltä hyvin. Ainoa hankaluus muodostui siitä, että oli vaikea päättää, mihin kategoriaan sivun sijoittaisi. Kaikki testihenkilöt sijoittivatkin luomansa sivun eri kategorian alle. 2.1.9 Kokouksen lisääminen
Tässä tehtävässä testihenkilöt huomasivat, että kalenteri on erilainen kuin esim. tapahtuma-sivulla, eli englanninkielinen. Lisäksi huomattiin, että jos kokousta palasi muokkaamaan, sille annettu aihe ei säilynyt, vaan kenttään ilmestyi teksti Tähän value. Lisäksi ihmetystä herätti se, minne sivustolle lisätyt kokoukset tulevat jäsenille näkyviin, eli mistä jäsenet saavat tietoa järjestettävistä kokouksista. 2.1.10 Muita huomioita Yleisesti sivustoa kommentoitiin ihan näppäräksi. Testihenkilöt huomauttivat kuitenkin, että jäsenrekisteriin on saatava haku-toiminto. Lisäksi testihenkilöt näkivät etusivun Liity jäseneksi -linkin hieman ongelmalliseksi, koska yhdistyksen säännöissä on tarkasti määritelty se, kuka voi liittyä jäseneksi. Jäseneksi pyrkivän oikeus jäsenyyteen pitäisi siis jotenkin todentaa ennen kuin hän voi liittyä jäseneksi verkossa. 2.2 Peruskäyttäjät Peruskäyttäjille jaetut testitehtävät ovat tämän raportin liitteenä. Seuraavassa käydään läpi testitehtävien tulokset tehtävä tehtävältä. 2.2.1 Kirjautuminen järjestelmään Kirjautuminen järjestelmään sujui kaikilta testihenkilöiltä hyvin, eikä tehtävässä tai sen suorittamisessa ollut mitään epäselvää. 2.2.2 Omien tietojen muuttaminen Omien tietojen muuttaminen sujui testihenkilöiltä ongelmitta. He kuitenkin huomasivat, että uusi sukunimi ei päivittynyt laatikkoon, jossa näkyy oma nimi (kuva 5). Kuva 5. Oma nimi. 2.2.3 Tiedon etsiminen sivustolta (tutor-vastaava) Testihenkilöt löysivät tarvitsemansa tiedon hyvin. 2.2.4 Tiedon etsiminen sivustolta (toimisto) Testihenkilöt löysivät tarvitsemansa tiedon hyvin. 2.2.5 Haalarien tilaaminen
Haalarien tilaaminen onnistui hyvin. 2.2.6 Tapahtuman etsiminen Tapahtuman etsiminen sivustolta onnistui hyvin. 2.2.7 Muita huomioita Testihenkilöt ehdottivat, että sivustolla olevasta Luupin logosta painamalla tulisi päästä etusivulle. Sivuston ulkoasu oli testihenkilöiden mielestä hyvä. He pitivät hyvänä asiana sitä, että ulkoasu on samantyyppinen kuin vanhalla sivustolla oli. Testihenkilöt eivät olleet aivan varmoja siitä, onko sivustolla käytettävä murupolku (kuva 6) tarpeellinen, koska sivuston hierarkia ei ole kovin syvä. Kuva 6. Murupolku. Testihenkilöiden mielestä sivustolla ei tällä hetkellä aina oikein hahmota, missä kohtaa sivustoa on. Esimerkiksi jos on mennyt Opiskelu-osioon, ei yläpalkissa oleva Opiskelulinkki muutu erilaiseksi kuin muut linkit. Testihenkilöiden mielestä olisi hyvä, jos sen osion, missä parhaillaan ollaan, linkki olisi jotenkin erilainen, esim. tummempi, kuin muiden osioiden. Lopuksi testihenkilöt huomauttivat, että sivusto sallii sen, että jäsen muuttaa itsensä vuosijäseneksi ainaisjäseneksi (Omat tiedot -sivulla on pudotusvalikko, josta voi valita joko kohdan vuosijäsen tai ainaisjäsen, kuva 7). Tämän ei pitäisi olla mahdollista. Kuva 7. Jäsen pystyy itse muuttamaan jäsenyytensä muodon.
LIITTEET Testitehtävät ylläpitäjille Kirjaudu sisään tunnuksella 00001, salasana testiykkönen. (HUOM! Tässä tehtävässä jokaiselle osallistujalle jaettiin eri tunnus-salasana -pari. Kaksi muuta tunnus-salasana -paria olivat 00002 ja testikakkonen, sekä 00003 ja testikolmonen.) Lisää järjestelmään uusi jäsen. Tiedot voit keksiä itse, mutta kirjoita keksimäsi opiskelijanumero ja salasana muistiin tämän tehtävälapun taakse. Lisättyäsi jäsenen tiedot huomaat että kirjasit hänelle väärän pääaineen. Muuta tieto. Olet muuttanut. Kirjaa uusi osoitteesi järjestelmään. Luet lehdestä, että Kela on päättänyt nostaa asumislisän määrää. Haluat kertoa tästä luuppilaisille, joten kirjoitat asiasta uutisen. Asumislisä-uutinen osoittautuu aprillipilaksi. Luupin sivuilla on siis uutisoitu väärää tietoa. Miten toimit? Helsingissä järjestetään mielenosoitus, jossa vastustetaan lukukausimaksujen käyttöönottoa suomalaisissa kouluissa. Järjestät bussikuljetuksen Helsinkiin ja toivot että mahdollisimman moni luuppilainen lähtee mukaan. Miten toimit? Lukukausimaksuja vastustavan mielenosoituksen ajankohta on muuttunut, joten päivität uudet tiedot Luupin sivuille. Huomaat että Luupin sivuilla ei ole kerrottu yliopistoalueen ruokaloista. Haluat korjata asian, ja lisätä sivun ravintoloille. Luuppi pitää hätäkokouksen ensi viikon tiistaina. Lisää tieto kokouksesta sivuille. Testitehtävät peruskäyttäjille Kirjaudu sisään saamillasi tunnuksilla. (Testihenkilöille jaettiin ylläpitäjien toisessa tehtävissä luomien uusien jäsenten tiedot, eli opiskelijanumero ja siihen liitetty salasana.) Olet mennyt naimisiin, joten järjestelmässä on tallennettuna vanha sukunimesi. Päivitä tietosi. Etsi sivustolta tieto siitä, kuka on tutor-vastaava. Selvitä missä Luupin toimisto sijaitsee ja milloin se on auki. Tilaa itsellesi haalarit. Etsi sivulta joku Luupin järjestämä tapahtuma, ja kerro sen tiedot.