Finna Tunnusluvut
1. TUNNUSLUVUT Nykyään Finnasta lasketaan seuraavat tunnusluvut: Osallistuvien organisaatioiden määrä Indeksin viitteiden määrä Verkossa saatavilla olevien viitteiden määrä Eri aineistotyyppien (teksti, kuva, audio) määrät, suhde Käyttö (os. organisaatioiden + meidän tuottama käyttö) Tunnusluvut ovat teknislähtöisiä eivätkä hyvin kuvaa sitä, kuinka paljon Finnaa käytetään ja etenkin, kuinka hyvin se palvelee käyttäjiään. Näihin tarpeisiin vastaamiseksi alla esitetään uusia tunnuslukuja. Jotta tunnusluku on mahdollisimman hyödyllinen ja selkeä, sen on oltava yksinkertainen (merkitys on helposti ymmärettävissä) relevantti (kuvaa merkittävää asiaa) luotettava (kuvaa aina samaa asiaa) validi (mittaa sitä, jota sen on tarkoituskin mitata) Copyright 2015 User Point Oy, www.userpoint.fi! Sivu 2 / 10
1.1. Näkyvyys Näkyvyys kuvaa sitä, kuinka hyvin Finna on verkossa näkyvissä. Pelkkä näkyvyys on kuitenkin hyödytöntä, vaan oleellista on, kuinka paljon kävijöitä näkyvyys synnyttää. Näkyvyyttä mitataan sillä, kuinka paljon käviöitä Finnaan tulee eri kanavia pitkin: hakukoneista, verkkosivuilta ja suoraan. Erityisen merkittäviä ovat verkkosivujen linkit. Ne parantavat myös näkyvyyttä hakukoneissa. Hakukonenäkyvyys onkin jossain määrin seurausta siitä, että sivustolle on linkkejä muilta sivuilta. Jos palvelussa on hyödyllistä sisältöä ja sinne voi linkata, on ihmisillä taipumus tehdä näin. Oli se sitten uutisartikkeli, blogi tai muu lähde. Näin sisääntulevien linkkien määrä kertoo palvelun hyödyllisyydestä. Sitä ei voi tietää, kuinka monella sivulla linkki on, tai kuinka moni on nähnyt sen. Mutta se on helppoa mitata, kuinka moni käyttäjä on saapunut Finnaan tällaisilta sivuilta. Tämä tunnusluku ei kuvaa käyttöä kokonaisuutena eikä käytön määrää kokonaisuutena., vaan näkyvyyttä: kuinka todennäköistä käyttäjälle on törmätä Finna-linkkiin jollain toisella sivulla. Tunnusluku Näkyvyys = Käynnit, jotka ovat lähtöisin toiselta verkkosivulta, poislukien hakukoneet. Copyright 2015 User Point Oy, www.userpoint.fi! Sivu 3 / 10
250" Käynnit'verkkosivuilta'/'pv' ' 200" 150" 100" 50" 0" 1" 2" 3" 4" 5" 6" 7" 8" 9" 10" 11" 12" 2014' Kuva 1: Muilta verkkosivuilta lähtöisin olevat käynnit Finnan kansallisessa näkymässä kuukausittain jaoteltuna. Kuvassa erottuu hyvin alkuvuoden uutisjutut. jyu" hanken" museot" kansalliskirjasto" hrm" hkm" finna.fi" seamk" samk" oamk" masto" janet" hamk" 0" 100" 200" 300" 400" 500" 600" Näkyvyys'(käynnit'toisilta'verkkosivuilta'/'päivä)' Kuva 2: Tunnusluvun Näkyvyys arvot eri Finna-näkymille. Jyväskylän yliopisto saa valtaosan käyttäjistään suorilla linkeillä (hyvin vähän hakukoneista). Finna-palvelua on ilmeisest promotoitu Jyväskylässä hyvin, koska käyttö on näinkin merkittävää. Copyright 2015 User Point Oy, www.userpoint.fi! Sivu 4 / 10
1.2. Käyttö Tunnusluku kertoo, kuinka paljon Finnaa käytetään. Käytön määrää voi mitata käyttäjien määrällä, mutta se ei riitä. Jos yksittäinen kävijä katsoo vain yhden kuvan esimerkiksi uutisartikkelissa olevan linkin takia (tällaisia käyttäjiä on aika paljon kansallisessa näkymässä), ei käyttö ole samanlaista kuin esimerkiksi tutkijan tai opiskelijan tiedonhaku. Palvelussa tehtyjen hakujen määrä on mahdollinen mittari, mutta se menee helposti väärään suuntaan. Jos tietoa on vaikea löytää, joutuu käyttäjä tekemään monta hakua. Sivun sisäistä hakua on mahdoton erotella ulkoisella hakukoneella tehdystä hausta. Jos käyttäjä löytää Finnan materiaalia Googlesta, hän näyttää saapuvan Finnaan hakukoneesta. Tällöin hänen saapumisensa ei rekisteröidy hauksi, vaikka todellisuudessa juuri sitä se oli. Lisäksi, jos hän löytää sisällön suoraan, hän ei tee Finnassa uutta hakua. Edelleen, Googlesta tulleista hauissa 90%:ssa ei ole tiedossa hakusanaa, jota käyttäjä käytti Finnan löytäessään. Käytön aktiivisuuden mittariksi ehdotetaan yksinkertaisinta, eli sivulatausten määrää. Mutta se ei vielä riitä, sillä mittaria vääristävät eripituiset kuukaudet ja karkausvuosi sekä hiukan myös pyhien ja viikonloppujen määräytyminen. Käyttöaika suhteutetaan kalenteriaikaan. Kussakin kuussa/vuodessa palvelussa tehdyt sivulataukset jaetaan kalenteriajalla. Näin lyhyt helmikuu ei sotke tilastointia millään tavalla. Tunnusluku Käyttö = Sivunlatauksia / päivä Copyright 2015 User Point Oy, www.userpoint.fi! Sivu 5 / 10
Sivulatauksua*/*päivä* * 4"500" 4"000" 3"500" 3"000" 2"500" 2"000" 1"500" 1"000" 500" 0" 1" 2" 3" 4" 5" 6" 7" 8" 9" 10" 11" 12" 2014* Kuva 3: Päivittäisiä sivunlatauksia Finnan kansallisessa näkymässä 2014. Kesällä käyttö on hiukan hiljaisempaa. jyu" hanken" museot" kansalliskirjasto" hrm" hkm" finna.fi" seamk" samk" oamk" masto" janet" hamk" 0" 500" 1"000" 1"500" 2"000" 2"500" 3"000" 3"500" 4"000" 4"500" Käy$ö&(sivunlatauksia&/&päivä)& Kuva 4: Päivittäiset käynnit eri Finna-näkymssä vuodelta 2014. Kuviosta näkyy hyvin, kuinka suuria eroja eri näkymien käytössä on. Copyright 2015 User Point Oy, www.userpoint.fi! Sivu 6 / 10
1.3. Sisällön löytyvyys Sisällön löytyvyys kuvaa sitä, kuinka hyvin Finnan käyttäjät löytävät etsimänsä sisällön. On hyvä tiedostaa, että emme voi tietää, mitä käyttäjä on hakemassa ja näinollen voi tietää, löytääkö hän sen mitä hakee. Löydettävyyden mittaamisessa kysely on hyvä menetelmä, mutta johtopäätöksiä voi tehdä myös käyttötilastoista. Jo vähän vanhentuneen tutkimuksen 1 mukaan puolet ihmisistä käyttää ensisijaisena työkalunaan hakua etsiessään tietoa; noin kolmasosa navigoi perille ja loput käyttävät molempia strategioita vaihtelevasti. Nykyään todennäköisesti hakupainotteisuus on kasvanut, sillä tiedon määrä on kasvanut ja mitä enemmän tietoa, sitä enemmän hakua käytetään. Finna on varsin hakupainotteinen. Etusivulla ei tarjota keinoa selata sisältöä (tämä oli muuten Europeanan käyttäjien eniten pyytämä ominaisuus). Kun haku tuottaa houkuttelevan tuloksen, klikkaa hakija sitä korkealla todennäköisyydellä. Hakutuloksen klikkaamisesta voi siis päätellä, että hakija todennäköisesti pitää sitä oikeana, tai ainakin kiinnostavana. Haun tuloksena todennäköisesti näytetään tietue. Hyvin suuri osa käyttäjistä tulee kansalliseen näkymään ulkopuolisilta hakukoneilta, ja 90% näistä hakusanoista ei välity Finnaan. Jos ihminen löytää Finnan tuloksen Googlen tuloslistaa klikkaamalla, ei tämä rekisteröidy Finnassa onnistuneeksi tulokseksi, vaikka tulos olisi tämälleen toivottu. Mutta tietuenäyttö on sama, tehtiin haku sitten Finnassa tai sen ulkopuolella. Koska emme voi mitenkään tietää, onko hakutulos täsmälleen oikea, pitää tyytyä toiseksi parhaaseen mittariin: koska käyttäjä klikkasi sitä, se ainakin vaikutti lupaavalta hänen näkökulmastaan. Tunnusluvuksi esitetään tietueiden näyttökertoja; kun käyttäjä löytää häntä kiinnostavan sisällön, hän todennäköisesti päätyy tietuenäyttöön, tuli hän sitten suoralla linkillä, hakukoneesta tai Finnan omalla haulla. Tietuenäyttöjen lukumäärää voi pitää merkkinä siitä, kuinka monta kertaa käyttäjä on todennäköisesti päätynyt häntä kiinnostavalle sivulle. Tätä on hyvä suhteuttaa esimerkiksi käytön määrään kokonaisuutena (käyntien määrään). Ulkopuoliset linkit suoraan aineistoon sotkevat tunnuslukua hiukan, sillä silloin tuloksena on heti yksi tietuenäyttö. Toisaalta ne myös kuvaavat tilannetta hyvin: käyttäjähän löysi haluamansa sisällön heti yhdellä linkillä. Näinollen ei ole syytä muuttaa tunnuslukua, mutta on hyvä pitää mielessä, että ulkopuoliset suorat linkit Finnan sisältöön parantavat tätä tunnuslukua. Esimerkiksi uutisissa olevat linkit voivat tehdä niin. Tunnusluku Sisällön löytyvyys = Tietuenäyttöjä / käynti 1 https://helda.helsinki.fi/handle/10138/19946 Copyright 2015 User Point Oy, www.userpoint.fi! Sivu 7 / 10
Tietuenäy)öjä,/,käyn/,, 1,6" 1,4" 1,2" 1" 0,8" 0,6" 0,4" 0,2" 0" 1" 2" 3" 4" 5" 6" 7" 8" 9" 10" 11" 12" 2014, Kuva 5: Tietuenäyttöjä / käynti Finnan kansallisessa näkymässä 2014. Kesän jälkeen tulos on mukavasti nouseva. Myös kevään uutisartikkelit erottuvat kuvasta. jyu# hanken# museot# kansalliskirjasto# hrm# hkm# finna.fi# seamk# samk# oamk# masto# janet# hamk# 0,0# 0,5# 1,0# 1,5# 2,0# 2,5# 3,0# 3,5# Sisällön(löytyvyys((-etuenäy0öjä(/(käyn-)( Kuva 6: Käyntikohtaiset tietyenäytöt eri Finna-näkymissä. Koska näyttökerrat on jaettu käynneillä, ei eri näkymien käytön vilkkaus vaikuta sisällön löytyvyyden tunnuslukuun. Copyright 2015 User Point Oy, www.userpoint.fi! Sivu 8 / 10
1.4. Hyödyllisyys tutkimustyössä Tavallisen surffaajan ja uutislinkin perusteella sivulle tulleen tiedonhakutarpeet eroavat merkittävästi opiskelijan ja tutkijan vastaavista. Pelkän sisältökatselun perusteella ei voida erotella, minkätyyppistä tietoa ihminen katsoo. Tällöin myös uutisissa mahdollisesti olevat linkit sotkevat tilastoinnin, koska ne houkuttelevat paljon ihmisiä katsomaan samoja kuvia. Toistaiseksi näin on käynyt vain vähän, koska suoria linkkejä Finnan sisältösivuille ei ole kovin paljon. Ongelman voi ratkaista laskemalla yksilöllisiä tietuekatseluita: jos toinen käyttäjä lataa saman tietueen kuin joku aiempi, tätä uutta ei enää lasketa. Jokainen tietue siis lasketaan vain kerran. Vaikka tutkijat ja opiskelijatkin voivat toki olla kiinnostuneita samasta materiaalista toistensa kanssa, niin todennäköisesti heidän kiinnostuksenkohteissaan on paljon enemmän vaihtelua kuin muilla. Finnan hyötyä tutkijoilla ja opiskelijoille voi arvioida laskemalla yksilölliset tietuekatselukerrat. Tätä lukua ei tarvitse suhteuttaa mihinkään toiseen. Jos käytön määrä kokonaisuutena kasvaa, todennäköisesti tämäkin tunnusluku kasvaa. Mutta silloinhan se mittaa juuri oikeaa asiaa: Finna on palvellut useampaa tutkijaa ja opiskelijaa. Luku on kuitenkin hyvä laskea päiväkohtaisesti, jolloin eripituiset kuukaudet ja eripituiset tarkastelujaksot eivät pääse vaikuttamaan mittariin. Tunnusluku Hyödyllisyys tutkimustyössä = Yksilöllisiä tietuenäyttöjä / päivä Copyright 2015 User Point Oy, www.userpoint.fi! Sivu 9 / 10
Yksilöllisiä()etuekatseluita(/(pv( ( 3"000" 2"500" 2"000" 1"500" 1"000" 500" 0" 1" 2" 3" 4" 5" 6" 7" 8" 9" 10" 11" 12" 2014( Kuva 7: Keskimääräiset päivittäiset yksilölliset tietuenäytöt Finnan kansallisessa näkymässä 2014. jyu" hanken" museot" kansalliskirjasto" hrm" hkm" finna.fi" seamk" samk" oamk" masto" janet" hamk" 0" 500" 1000" 1500" 2000" 2500" Hyödyllisyys(tutkimustyössä((yksilöllisiä(/etuenäy2öjä(/(päivä)( Kuva 8: Päivittäiset yksilölliset tietuenäytöt Finnan eri näkymissä 2014 (päiväkohtainen keskiarvo). Finnan kansalliseen näkymään tulee valtavasti kävijöitä hakukoneen kautta, ja näistä suurin osa menee sivuille, joita muut eivät ole nähneet. Sen vuoksi kansallisen näkymän tunnusluku Hyödyllisyys tutkimustyössä saa näin korkean arvon. Copyright 2015 User Point Oy, www.userpoint.fi! Sivu 10 / 10