Käytettävyystekniikat

Transkriptio

1 Käytettävyystekniikat Demo 17 Tekijät: Aki, Joonas, Toni Tämän dokumentin materiaali on kerätty suorittamalla testit käyttöjärjestelmien asentamisessa. Kukin osallistuja suoritti kaikki kolme käyttöjärjestelmän asennusta peräkkäin samassa järjestyksessä vanhimmasta uudempaan (win3.11, win95, win7). Osallistujat suorittavat testitapaukset yksittäin, siten ettei toinen ollut kokemassa mitä toinen osallistuja oli tehnyt. Kunkin testintapauksen (yhden käyttöjärjestelmän asentamisen) jälkeen osallistujalta kerättiin arvostelut kustakin pääkategoriasta (asteikolla 1-3) keskustelemalla miten he kokivat prosessin ja siihen liittyvät tekijät. Vaikka alkuperäisessä suunnitelmassa tarkoitus oli suorittaa sekä käyttöjärjestelmien asentaminen, että lähiverkon pystyttäminen kullakin käyttöjärjestelmältä, niin lähiverkon asennuksesta luovuttiin, koska edes ohjelmistoasiantuntijamme ei saanut sitä toimivaan kuntoon Windows 3.11 ja Windows 95 käyttöjärjestelmissä. Tämän lisäksi osallistujilla oli rajoitettu aika minkä he pystyivät käyttämään testitapauksiin. Kuitenkin aika riitti molemmilla suorittaa kaikki kolme käyttöjärjestelmän asennusta. Alla on esitetty kunkin käyttöjärjestelmän asennuksen aikana ylöskirjoitetut muistiinpanot kunkin osallistujan kohdalla ja niiden jälkeen esitetään osallistujien antamat arvostelut sekä niistä luodut analyysit ja yhteenveto. (Analyysi ja yhteenveto on ensiviikon juttu, täksi demoksi riitti testien suorittaminen). Käyttöjärjestelmän asentaminen Kaikkien käyttöjärjestelmäasennuksien aikana osallistujia kehitettiin ajattelemaan ääneen ja heidän merkittävimmät kommenttinsa ja suoritukseen vaikuttavat valintansa kirjattiin ylös. Suorituksissa käytetään termiä askel, jolla tarkoitetaan yhtä näkymää tai valintaruutua asennuksen aikana ja kussakin asennuksessa näkymät etenevät proseduraalisesti. 1.0 Windows Alkuasetukset: Windows 3.11-käyttöjärjestelmäasennusta varten oli järjestetty oma tyhjä virtuaaliympäristö molemmille osallistujille. Koneeseen jouduttiin asentamaan etukäteen Dos-käyttöjärjestelmä ja osallistujille neuvottiin aloittamaan asennus kirjoittamalla: "a:\setup.exe". Ensimmäinen käyttäjä ei suostunut lukemaan manuaalia viitaten ajanpuutteeseen. Tämän takia manuaalia ei annettu toisellekaan käyttäjälle. 1.2 Suoritukset Kummallakaan osallistujalla ei ollut kokemusta Windows 3.11 asentamisesta. Windows 3.11 ei ollut mahdollisuutta vaihtaa asennuskieltä ja molemmat osallistujat suorittivat asentamisen englanninkielisenä.

2 1.2.1 Osallistuja A:n (Kulliveren) suoritus ja kommentit Askel 1: "Tässä ei lue missään mitään asentamisesta (installation) mitään vaan puhutaan setupista. Tarkoittaako setup sitten asentamista?" Joonas vahvistaa asian. "Ok" Askel 2: "Eli siis enter valitsee toisen ja C taas toisen näistä asennustavoista?" Joonas vahvistaa asian. "Olis tään voinut varmaan helpomminkin tehdä." Askel 3: Käyttäjä painaa enteriä luettuaan näyttötekstin. Askel 4: "Vähän tyhmää että alun kohdissa valintoihin käytettiin yksittäisiä näppäinpainalluksia, mutta nyt voi sitten käyttää nuolinäppäimiä." Käyttäjä jatkaa ilman Askel 5: "Mihinköhän tää käyttää mun nimeä seuraavissa asennuksissa?" Käyttäjä jatkaa ilman Askel 6: "Jaa, että vielä pitäisi tarkistaa kirjoitinko nimen äsken oikein, eikö sitä sitten voi jälkikäteen muuttaa?" Käyttäjä jatkaa ilman Askel 7: Joonas kertoo ettei ylimääräisiä palveluita tarvitse asentaa. Käyttäjä jatkaa ilman avuntarvetta, klikaten asennusvaihtoehdot pois päältä ja jatkaen asennusta. Askel 8: Käyttäjä jatkaa ilman Askel 9: "Varmaan eka?" Käyttäjä epäröi valinnassaan, mutta valitsee ensimmäisen ja jatkaa ilman Askel 10: "Ok.." Käyttäjä vaikuttaa hämmentyneeltä, mutta jatkaa silti kyselemättä. Käyttäjä jatkaa ilman Askel 11: "Skippaan varmaankin tutoriaalin ja reboottaan?" Joonas vahvistaa asian. Käyttäjä jatkaa ilman Askel 12: "Oliko tää nyt tässä?" Käyttäjää neuvotaan kirjoittamaan win komentoriville. Askel 13: "On tää hiukan alkeellisen näköinen" Osallistuja B:n (Svittunääs) suoritus ja kommentit Askel 1: Käyttäjä jatkaa ilman Askel 2: "Tässä ei voi käyttää nuolinäppäimiä valitsemiseen? Tyhmää." Käyttäjä jatkaa ilman Askel 3: Käyttäjä painaa enteriä luettuaan näyttötekstin. Käyttäjä jatkaa ilman Askel 4: "Näillä ei varmaan ole mitään vaikutusta mihinkään...". Käyttäjä jatkaa ilman

3 Askel 5: Käyttäjä jatkaa ilman Askel 6: Käyttäjä jatkaa ilman Askel 7: Joonas kertoo ettei ylimääräisiä palveluita tarvitse asentaa. "Eli mä vain klikkaan noi pois?" Joonas vahvistaa asian. Käyttäjä jatkaa ilman avuntarvetta, klikaten asennusvaihtoehdot pois päältä ja jatkaen asennusta. Askel 8: Käyttäjä jatkaa ilman Askel 9: Käyttäjä jatkaa ilman Askel 10: "Mitäköhän vaikutusta tälläkään on mihinkään..." Käyttäjä jatkaa ilman Askel 11: Käyttäjä jatkaa ilman Askel 12: "Miten tästä pääsee Windowsiin?" Käyttäjää neuvotaan kirjoittamaan win komentoriville. Askel 13: "Retroa." 2.0 Windows Alkuasetukset: Manuaalia ei annettua luettavaksi eikä lähiverkkoa asennettu, koska nämä jätettiin 3.11 asennuksessa pois. Windows 95-käyttöjärjestelmäasennusta varten oli järjestetty oma tyhjä virtuaaliympäristö molemmille osallistujille Suoritukset Toinen osallistujista on käyttänyt Windows 95-käyttöjärjestelmää aiemmin, mutta ei ole aikaisemmin asentanut sitä. Myöskään Windows 95:ssä ei ollut mahdollisuutta vaihtaa asennuskieltä ja molemmat osallistujat suorittivat asentamisen englanninkielisenä Osallistuja A:n (Kulliveren) suoritus ja kommentit Askel 1: "Tämähän on sama kuin tuossa äskeisessä (Windows 3.1)". Käyttäjä jatkaa ilman Askel 2: "Tämä on kyllä fiksummin tehty.". Käyttäjä jatkaa ilman Askel 3: "Onpas paljon tekstiä." Käyttäjä jatkaa ilman Askel 4: Käyttäjä jatkaa ilman

4 Askel 5: Käyttäjä jatkaa ilman Askel 6: "Tämä paljon helpommin ymmärrettävä."käyttäjä jatkaa ilman Askel 7: "Tässä ei lue mikä olisi se suositeltu." Käyttäjä jatkaa ilman Askel 8: "Tämä on hyvin selkeä." Käyttäjä jatkaa ilman Askel 9: Käyttäjä jatkaa ilman Askel 10: "Ok.. Mihin tässä jotain companya tarvitsee?" Käyttäjä vaikuttaa hämmentyneeltä, mutta jatkaa silti kyselemättä. Käyttäjä jatkaa ilman Askel 11: "Ei tässä ole taaskaan mitään recommendia." Käyttäjä jatkaa ilman Askel 12: "Varmaan annan näiden valintojen olla?" Joonas vahvistaa asian. Käyttäjä jatkaa ilman Askel 13: "Hyvä, että kertoo mitä nyt tapahtuu." Käyttäjä jatkaa ilman Askel 14: "Hyvä, että kertoo mitä nyt tapahtuu." Käyttäjä jatkaa ilman Askel 15: Käyttäjä jatkaa ilman Askel 16: Käyttäjä jatkaa ilman Askel 17: Käyttäjä jatkaa ilman Askel 18: "Mitä nämä oikein ovat? Workgroup? Access Control? Ei tässä kerrota mitään." Käyttäjä jatkaa Joonaksen avustuksen kanssa. Askel 19: "Selkeää." Käyttäjä jatkaa ilman Askel 20: Käyttäjä jatkaa ilman Askel 21: Käyttäjä jatkaa ilman Askel 22: "Jee, tää toimii." Sarkasmia havaittavissa Osallistuja B:n (Svittunääs) suoritus ja kommentit Askel 1: Käyttäjä jatkaa ilman Askel 2: "No ei kyllä hirveästi infota." Käyttäjä jatkaa ilman Askel 3: "Pitäisikö tää kaikki jaksaa lukeakin?" Käyttäjä jatkaa ilman Askel 4: Käyttäjä jatkaa ilman Askel 5: Käyttäjä jatkaa ilman

5 Askel 6: "Täähän kertoo ihan hyvin." Käyttäjä jatkaa ilman Askel 7: Käyttäjä jatkaa ilman Askel 8: "Tämä on informatiivinen." Käyttäjä jatkaa ilman Askel 9: Käyttäjä jatkaa ilman Askel 10: "Mihin nämä oikein vaikuttavat? Ei anneta siitä kyllä hirveästi infoa." Käyttäjä jatkaa ilman Askel 11: "Mistä minun pitäisi tietää kumpi näistä otetaan?" Käyttäjä valitsee ensimmäisen vaihtoehdon. Käyttäjä jatkaa ilman Askel 12: Käyttäjä jatkaa ilman Askel 13: Käyttäjä jatkaa ilman Askel 14: Käyttäjä jatkaa ilman Askel 15: Käyttäjä jatkaa ilman Askel 16: Käyttäjä jatkaa ilman Askel 17: Käyttäjä jatkaa ilman Askel 18: "Tämä on kyllä aika sekava." Käyttäjä jatkaa Joonaksen avustuksen kanssa. Askel 19: Käyttäjä jatkaa ilman Askel 20: Käyttäjä jatkaa ilman Askel 21: Käyttäjä jatkaa ilman Askel 22: "Jes. Tämä taisi olla tässä." 3.0. Windows Alkuasetukset: Manuaalia ei annettua luettavaksi eikä lähiverkkoa asennettu, koska nämä jätettiin pois kaikissa muissakin asennuksissa. Windows 7-käyttöjärjestelmäasennusta varten oli järjestetty oma tyhjä virtuaaliympäristö molemmille osallistujille Suoritukset

6 Windows 7-käyttöjärjestelmän asennus mahdollisti eri kielivalinnat asennuksen aikana, mutta käyttöön valittiin englanninkieli, koska sitä oli käytetty molemmissa aikaisemmissa asennuksissa. Osallistujilla oli enemmän tietämystä Windows 7 asennuksesta ja termeistä vaikka eivät olleet koskaan aikaisemmin asentaneet sitä. Erityisesti toinen osallistujista tuntui tietävät Windows 7 asennuksen Upgrade- ja Custom asennusvaihtoehtojen tarkoituksen Osallistuja A:n (Kulliveren) suoritus ja kommentit Askel 1: "Erittäin selkeä." Käyttäjä jatkaa ilman Askel 2: "Selkeä." Käyttäjä jatkaa ilman Askel 3: Käyttäjä jatkaa ilman Askel 4: Käyttäjä jatkaa ilman Askel 5: Käyttäjä painaa upgradea. Asennus ohjelma käynnistyy alusta. "Luulin että se piti ottaa koska se oli eka valinta. Eikö toi osaa ottaa tota pois jos siihen ei ole asennettu mitään alle?" Käyttäjä jatkaa ilman avuntarvetta samaan kohtaan ja valitsee alemman vaihtoehdon. Askel 6: "Jaahas. Jospa vain painan nextiä." Käyttäjä jatkaa ilman Askel 7: Käyttäjä jatkaa ilman Askel 8: Käyttäjä jatkaa ilman Askel 9: "Varmaan kannattaa vain ottaa toi vihreä?" Joonas vahvistaa asian. Käyttäjä jatkaa ilman Askel 10: Käyttäjä jatkaa ilman Askel 11: "Tässäkö se oli?" Osallistuja B:n (Svittunääs) suoritus ja kommentit Askel 1: "Hyvin informatiivinen" Käyttäjä jatkaa ilman Askel 2: "Informatiivinen." Käyttäjä jatkaa ilman Askel 3: Käyttäjä jatkaa ilman Askel 4: Käyttäjä jatkaa ilman Askel 5: "Hetkonen, miksi toi upgrade on ekana vaikka tän koneen pitäisi olla tyhjä?" Käyttäjä jatkaa ilman Askel 6: "Selvä.." Käyttäjä jatkaa ilman

7 Askel 7: Käyttäjä jatkaa ilman Askel 8: Käyttäjä jatkaa ilman Askel 9: "Mitäköhän käytännön eroa näillä on?" Käyttäjä jatkaa ilman Askel 10: Käyttäjä jatkaa ilman Askel 11: "Oho, aika kivuton toimenpide." Osallistujien antamat arvioinnit Molempia osallistujia pyydettiin antamaan arvosana asteikolla 1-3 tärkeimmistä kategorioista, jotka vaikuttavat asennukseen. Kategoriat on esitetty alla olevassa kuvassa ja kullekin on annettu testin suorittajien määrittämät painokertoimet asteikolla 1-3. Tämä arvostelutapa eroaa merkittävästi esimerkiksi Worthington, et al. esittämästä seitsemän (1-7) asteisesta arvosteluasteikosta [1]. Painokertoimien tarkoitus on kaventaa analysoitavien kohteiden väliä, sillä hyvin todennäköistä on, että mitä vanhempi käyttöjärjestelmä on, sitä huonommat kokonaisarvosanat se saa. Tutkimuksessa on kuitenkin tarkoitus löytää käyttöjärjestelmien väliset kehityskohdat eikä arvioida mikä on parempi kuin toinen. Painokertoimen tarkoitus on toimia kertoimena osallistujan antamalle arvosanalle. Painokertoimien ansiosta arvosteluasteikko saadaan tasoitettu kullekin käyttöjärjestelmälle tasaisesti asteikolle 1-9, jossa 1 on kaikista korkein arvosana ja 9 kaikista alhaisin (huonoin) arvosana. Pääkategorioita on neljä, joiden alla on useita alikategorioita, joiden tarkoitus on toimia tarkentavina sekä ohjaavina kategorioina analyysin suorittamiseen ja lopullisen arvosanan muodostamiseen. Arvosanat esitetään kahdessa muodossa. Ensimmäinen numero on osallistujan antama arvosana ja suluissa oleva on painokertoimen vaikuttama arvosana.

8 Tietoisuus prosessin etenemisestä (painokerroin 1) Alikategoriaa onko prosessi alkanut ei otettu huomioon, sillä kaikissa käyttöjärjestelmissä osallistuja avustettiin prosessin alkuvaiheeseen saakka, jolloin itse testitapaus käynnistyi. Sen sijaan alikategoria onko prosessi päättynyt oli merkittävä, sillä Windows 7 käyttöjärjestelmän asennuksessa tietokone täytyi käynnistää uudelleen useassa vaiheessa, eivätkä osallistujat olleet täysin varmoja prosessin etenemisestä uudelleenkäynnistymisen aikana. Kulliveri 1 (1) 2 (2) 1 (1) Svittunääs 1 (1) 2 (2) 1 (1) Onko prosessi päättynyt (painokerroin 1) Kulliveri 1 (1) 2 (2) 1 (1) Svittunääs 1 (1) 2 (2) 2 (2) Näyttöjen ohjeiden ymmärrettävyys (painokerroin 1) Kulliveri 2 (1) 2 (2) 2 (2) Svittunääs 2 (1) 2 (2) 1 (1) Asennuskielet (painokerroin 3): Tämä alikategoria on täysin analysoijien arvioima ja perustuu siihen oliko asennuskieliä tarjolla ja miten helposti. Arvioijat 2 (6) 2 (6) 1 (3) Ohjeiden ymmärrettävyys (painokerroin 2) Kulliveri 2 (4) 2 (4) 2 (4) Svittunääs 2 (4) 2 (4) 1 (2) Kuinka paljon tietoa esitetään yhdellä näytöllä (painokerroin 2) Kulliveri 1 (2) 2 (4) 1 (2) Svittunääs 1 (2) 2 (4) 1 (2)

9 Käyttäjän syötteet (painokerroin 2): Kulliveri 2 (4) 2 (4) 1 (2) Svittunääs 1 (2) 2 (4) 1 (2) Ymmärtääkö käyttäjä mitä tietoa hänen tulee syöttää (painokerroin 1) Kulliveri 2 (2) 2 (2) 1 (1) Svittunääs 1 (1) 2 (2) 1 (1) Ymmärtääkö käyttäjä minkä tyyppistä tietoa hänen tulee syöttää (painokerroin 1) Kulliveri 2 (2) 1 (1) 1 (1) Svittunääs 1 (1) 1 (1) 1 (1) Miten paljon tietoa tulee keskimäärin syöttää (painokerroin 3): Tämä alikategorian arvosana perustuu siihen miten osallistuja koki syötteiden merkittävyyden ja sen miten paljon tietoa kysyttiin asennuksen aikana. Kulliveri 2 (6) 3 (9) 1 (3) Svittunääs 1 (3) 3 (9) 1 (3) Ulkopuoliset ohjeet (painokerroin 3): Tätä kategoriaa ei otettu huomioon lainkaan, sillä asennusohjeita ei otettu mukaan testitapauksiin. Yleinen suullinen arviointi Molempien osallistujien mielestä Windows 7 asennus oli kaikista mukavin, vaikka se veikin eniten aikaa, mutta siinä ei ollut niin montaa vaihetta kuin aikaisemmissa. Samoin ohjeet oli paljon ymmärrettävämpiä eikä asennuksen aikana kyselty liikaa tietoja. Huonoimmaksi kokemukseksi paljastui yllättäen Windows 95, koska asennuksen aikana kysyttiin aivan liian paljon syötteitä käyttäjiltä eikä ohjeistusta ollut mitä mikin asetus on ja miksi sitä kysytään.

10 Analysointi TODO ensi viikolla Testitapausten välillä Kulliveren kohdalla oli havaittavissa oppimisefektiä, erityisesti siirtyessä Windows 3.11 asennuksen jälkeen Windows 95 asennukseen. Yhteenveto TODO ensi viikolla Lähteet [1] Worthington, et al. (2001) Microsoft Windows XP Operating System: Usability Study.