Dnro 92/07/70/702/ (5) Kysymykset tarjouspyynnöstä ja tilaajan tarkennukset tarjouspyyntöön

Transkriptio

1 Dnro 92/07/70/702/ (5) Hankinta: LIIKKUMISTUTKIMUS 2014, Dnro 92/07/70/702/2014 Tässä Liikkumistutkimus 2014:n tekoa koskevaan tarjouspyyntöömme Dnro 92/07/70/702/2014 esitetyt kysymykset ja niihin perustuvat tarkennukset ryhmiteltyinä aihepiireittäin. Internet-kysely Miten ja kenen toimesta Internet-kyselyn otosta hallitaan (muistutusten lähetys, kentän seuranta)? Tutkimuslaitos etsii mahdollisimman monille otokseen valituille puhelinnumerot ja jakaa sitten otoksen puhelinhaastatteluun kutsuttaviin ja Internet-kyselyyn kutsuttaviin alustavassa työohjelmassa kuvatulla tavalla. Sen jälkeen nämä kaksi osaotosta pidetään erillisinä. Internet-kyselyn osalta tutkimuslaitos osoittaa kullekin tähän osaotokseen valitulle tutkimuspäivän, suunnittelee kutsumateriaalin postitusaikataulun, personoi ja lähettää kutsumateriaalin aikataulun mukaisesti ja toimittaa tutkimuspäivän aamuna tekstiviestimuistutuksen niille, joille puhelinnumerohaussa löydettiin matkapuhelinnumero. Lisäksi tutkimuslaitos huolehtii tarvittavasta puhelinneuvontapalvelusta. Viikoittain tutkimuslaitos laatii it-konsultin toimittamasta aineistosta eli Internet-kyselyyn siihen mennessä saaduista vastauksista laadunseurantaraportin sekä toimittaa sen tilaajalle ja tilaajan kautta (tai suoraan) it-konsultille. Muutoin tutkimuslaitos ei hallinnoi Internetkyselyn otosta. It-konsultti puolestaan huolehtii siitä, että Internet-kysely on käytettävissä ja tutkimukseen osallistuvien vastaukset tallentuvat tietokantaan asianmukaisesti koko kenttätutkimusjakson ajan. Lisäksi it-konsultti seuraa kyselyjärjestelmän toimivuutta ja toimittaa viikoittain kertyneen aineiston tilaajalle ja tilaajan kautta (tai suoraan) tutkimuslaitokselle. It-konsultti huolehtii siitä, että jokaisen kyselyyn osallistujan yksilölliset vastaukset eivät sekoitu muiden vastaajien vastausten kanssa eikä sama vastaaja pääse antamaan tietoja muista kuin hänelle osoitetun tutkimuspäivän matkoista. Muutoin itkonsultti ei hallinnoi Internet-kyselyn otosta. Kuka vastaa Internetin kautta tulevien vastausten määrän toteutumisesta? Kyseessä ei ole kiintiöpoiminta, joten tilaaja laskee sen varaan, että riittävän suurella otoksella vastauksia saadaan tarpeeksi, vaikka vastausaste onkin pienempi kuin puhelinhaastatteluissa. Vastuu on siis tilaajalla. Kuinka Internet-kyselyn tuki järjestetään koskien tapauksia, joissa ongelmat liittyvät kyselyn toimivuuteen, palvelun käyttökatkoksiin ja vastaaviin teknisiin ongelmiin? It-konsultin puhelinpalvelu auttaa tämän tyyppisissä ongelmissa. Tutkimuslaitoksen osalta tuki rajoittuu kyselyn sisältöön.

2 Dnro 92/07/70/702/ (5) Sisältääkö postitettava aineisto linkin Internet-lomakkeelle? Onko linkki personoitu tai luodaanko jokaiselle henkilökohtainen tunnus, jolla Internetlomakkeen pääsee täyttämään? Tarkoitus on, että kullekin otokseen valitulle lähetetään personoitu kirje, jossa on ainakin haastateltavan nimi ja tutkimuspäivä. Internet-kyselyyn valittujen kirjeessä on lisäksi kyselyn yleinen nettiosoite ja henkilökohtainen käyttäjätunnus, jonka tutkimuslaitos generoi it-konsultin ja tilaajan ohjeiden mukaisesti. Käyttäjätunnukseen tai sen oheen liitetään tarkistusnumero tms. varmistus, millä vaikeutetaan yksilöivien tunnusten arvaamista. Voidaanko ja onko tarvetta tietää, ketkä otoksen henkilöistä ovat täyttäneet Internet-lomakkeen? Tilaaja tarvitsee tämän tiedon ja saa sen it-konsultilta. Tilaaja välittää tutkimuslaitokselle tiedon Internet-lomakkeella vastanneista laadunseurantaa varten. Miten estetään, ettei sama henkilö täytä Internet-lomaketta useaan kertaan? Saatekirjeessä on yksilöivä käyttäjätunnus, jota tarvitaan kirjauduttaessa kyselyyn. Kyselyn voi jättää kesken ja jatkaa myöhemmin, mutta kun lopulliset vastaukset on lähetetty tietokantaan tai asetettu määräaika kuluu umpeen, samalla käyttäjätunnuksella ei voi enää kirjautua palveluun muutoin kuin omien tietojen katselua varten. Myös katseluoikeus suljetaan kenttätyövaiheen päätyttyä. Puhelinhaastattelu Onko otoksen hallinta tutkimuslaitoksen haastattelujärjestelmässä? Jos, niin onko tarvetta siirtää otoksen tietoja Internet-lomakkeelle puhelinhaastattelujärjestelmästä? Puhelinhaastattelun osalta otoksen hallinta on kokonaan tutkimuslaitoksen vastuulla, mutta Internet-kyselyn osalta vain edellä kuvatulla tavalla. Jos tutkimuslaitos tallettaa puhelinhaastattelussa saadut vastaukset Internetjärjestelmään eikä omaan haastattelujärjestelmäänsä, otoksen hallintaan liittyvät tiedot tallennetaan tutkimuslaitoksen järjestelmään ja lähetetään erikseen tilaajalle (eli niitä ei lisätä Internet-kyselyn tietokantaan). Fonecta Oyj:n mukaan nykyisin päästään harvoin yli 70 %:n numerolöytyvyyteen (robinsonit ja yritysliittymät ovat kasvussa). Onko 80 %:n löytyvyystavoite sitova? Koska kyseessä ei ole kiintiöpoiminta, sitovia tavoitteita ei voi asettaa.

3 Dnro 92/07/70/702/ (5) Kannattaa myös huomata, että otoksesta valitaan puhelinhaastatteluun vain ne yli 65-vuotiaat (vastaavasti vain niitä alle 65-vuotiaita vantaalaisia), joille löydetään puhelinnumerot. Loppuosa otoksesta sijoitetaan Internet-kyselyyn. Niinpä alle 65-vuotiaiden puhelinnumeroiden etsimiseen ei tarvitse käyttää yhtä paljon aikaa kuin tätä vanhempien väestöryhmien, joilla puhelinhaastattelu on lähes ainoa tutkimusmenetelmä. Internet- ja puhelinkyselyn koordinointi Onko mahdollista, että henkilö voi valita, vastaako hän tutkimukseen puhelimessa vai Internetissä? Vai pidetäänkö puhelin- ja Internet-otokset täysin erillään toisistaan? Jos kohdehenkilölle annettaisiin mahdollisuus valita, vastaako hän puhelimessa vai nettikyselyllä, tilanteen koordinointi olisi vaikeata. Siksi tilaaja on päätynyt siihen, että Internet-kyselyä ja puhelinhaastatteluja varten otos jaetaan selkeästi kahteen erilliseen osaan. Ts. puhelinhaastatteluun valitut yli 65-vuotiaat (sekä osa tätä nuoremmista vantaalaisista) eivät pääsääntöisesti voi valita Internet-kyselyä. Vastaavasti Internet-kyselyyn valittuja ei yritetäkään lähestyä puhelimitse. Poikkeuksena edellä mainittuun pääsääntöön on tilanne, jossa Internetkyselyyn valittu ottaa yhteyttä puhelinneuvontaan ja pyytää täyttöapua. Tällöin neuvoja voi täyttää lomakkeen haastateltavan puolesta käyttämällä Internetkyselyn lomaketta soittajan antamien tietojen mukaan, vaikka tutkimuslaitos muuten käyttäisi puhelinhaastattelussa omaa järjestelmäänsä. Puhelinneuvojan on siis tunnettava Internet-lomakkeen toiminta. Kuinka suuri määrä Internet-kyselyn osallistujista haastateltaisiin puhelimessa? Otokset ovat erilliset. Tilaajan suunnittelemat määrät on kuvattu työohjelmassa. Miten puhelinneuvonta tietää, onko henkilö jo täyttänyt lomakkeen tai onko lomake jäänyt kesken? Tutkimuslaitos pitää haluamallaan tavallaan ja omalla järjestelmällään kirjaa siitä, keille puhelinhaastatteluun valituille on jo soitettu ja onko haastattelu jäänyt kesken. Tämän pitäisi olla riippumatonta siitä, tehdäänkö itse kysely tutkimuslaitoksen omalla järjestelmällä vai käytetäänkö Internet-kyselyn lomakkeita. Ne, jotka on valittu Internet-kyselyyn, vastaavat siihen omaan tahtiinsa, jota viikoittain seurataan. Jos Internet-kyselyyn osallistuva ottaa yhteyttä puhelinneuvontaan, puhelinneuvoja voi kysyä lomakkeen täyttämisen tilannetta soittajalta ja avata lomakkeen hänen kertomiensa tunnistetietojen avulla.

4 Dnro 92/07/70/702/ (5) Aineistojen käsittely Kuka päättää eri tavoin kerättävien aineistojen rakenteesta? Tilaaja päättää neuvoteltuaan tutkimuslaitoksen ja it-konsultin kanssa. Kenen vastuulla on se, että aineistot ovat yhdenmukaiset a) jos käytetään samaa järjestelmää Internet- ja puhelinkyselyissä b) jos niissä käytetään eri järjestelmää? Kohdan a) osalta it-konsultti. Kohdan b) tapauksessa tilaaja sopii it-konsultin ja tutkimuslaitoksen kanssa toimitettavien aineistojen yhdenmukaiset määritelmät, tietuekuvaukset ja muodot. Sisällytetäänkö kaikki Internetin yli tulleet vastaukset toimitettavaan aineistoon? Kuka toimittaa lopullisen aineiston HSL:lle? It-konsultti lähettää kaikki Internet-kyselyllä saadut vastaukset tilaajalle ja tilaajan kautta (tai suoraan) tutkimuslaitokselle siten, että siitä erottuvat tutkimuslaitoksen puhelinhaastattelussa mahdollisesti tallentamat lomakkeet ja Internet-kyselyyn osallistuneiden itse tallentamat lomakkeet. Tutkimuslaitos toimittaa puhelinhaastatteluista saadun aineiston tilaajalle siltä osin kuin se on kerätty tutkimuslaitoksen omalla järjestelmällä ts. suppeimmillaan vain haastattelun suoritukseen liittyviä tietoja, laajimmillaan myös saadut vastaukset. Jos tutkimuslaitos on tallettanut puhelinhaastatteluissa saadut tiedot Internet-järjestelmään eli ollut lähinnä kirjurina, it-konsultti toimittaa myös näin saadut vastaukset tutkimuslaitokselle. Tutkimuslaitos käsittelee puhelinhaastattelu- ja Internet-kyselyaineistoja laaduntarkkailussa erillisinä. Lopuksi tilaaja yhdistää aineistot kenttätutkimusjakson päätyttyä. Millä menettelytavoilla varmistetaan Internetissä kerättävän datan laadukkuus? Mitä yksiselitteisesti tarkoitetaan Internetissä kerättävän datan laadunvalvonnalla, laatupuutteisiin reagoimisella ja palautteen antamisella? Internet-kyselyssä on huonommat mahdollisuudet laadunvalvontaan kuin puhelinhaastattelussa. Varsin pitkälle on luotettava vastaajien toimintaan. Vastausten laatuun ja määrään voidaan kuitenkin vaikuttaa kysymysten ja niihin liittyvien lisäohjeiden muotoilulla, pakollisilla kysymyksillä sekä erilaisilla loogisuustarkistuksilla, mutta vain rajallisesti. Ennen täysimittaista tutkimusta tehdään koetutkimus, joista saadaan kokemuksia kysymysten ja menettelyn toimivuudesta. Tilaajan, tutkimuslaitoksen ja it-konsultin yhteistyö on tärkeässä asemassa.

5 Dnro 92/07/70/702/ (5) Varsinaisen tutkimuksen aikana Internet-kyselyn laadunvalvonta on pitkälti laadun tarkkailua, lähinnä yksikkö- ja eräkadon (kokonaan tai osittain vastaamatta jättämisen) viikoittaista ja kumulatiivista seurantaa, muutamien keskeisten tunnuslukujen kehityksen seurantaa sekä ohjeistuksen toimivuuden tarkkailua. Itse kysymyksiin tai niiden vastausvaihtoihin ei ole syytä tehdä muutoksia enää varsinaisen tutkimuksen aikana, mutta ohjeistusta voidaan parantaa tarvittaessa. Koska kyseessä on uuden tiedonkeruumenetelmän käyttöönotto, tilaajalle on tärkeää, että sen toimivuudesta saadaan kerrytettyä kokemuksia jo tutkimuksen aikana. Myös puhelinhaastattelun laaduntarkkailuun pätevät samat ajatukset kuin Internet-kyselyyn. Erona Internet-kyselyyn on kuitenkin se, että haastateltavia pyritään tavoittelemaan useita kertoja usean päivän ajan, jolloin tutkimuspäivän ja haastattelupäivän väli voi venyä melko pitkäksikin. Lisäksi eri haastattelijoiden työn laatua on tarpeen pyrkiä yhdenmukaistamaan ja kullekin haastattelijalle on tarpeen antaa mahdollisimman nopeasti henkilökohtaista palautetta hänen suoriutumisestaan työssään. Kannattaa huomata, että laaduntarkkailussa tarkastellaan kahta osittain erilaista aineistoa: yksikkökato eli vastaamatta jättäminen lasketaan suhteessa kunkin tutkimusviikon haastateltaviin, joten lopullinen osuus saadaan vasta monen viikon kuluessa. Sen sijaan keskeisten tunnuslukujen seuranta tehdään niistä havainnoista, joita tiettyyn päivään mennessä on tietokantoihin kertynyt ja jotka it-konsultti viikoittain lähettää tilaajalle ja tutkimuslaitokselle. Kuka vastaa sen [datan] riittävästä laadusta? Internet-kyselyn osalta laadusta vastaa it-konsultti, puhelinhaastattelulla saadun aineiston laadusta tutkimuslaitos. TIEDOKSI HSL:n kirjaamo