Tiedonkeruu ja lomakesuunnittelu

Samankaltaiset tiedostot
Kysyminen ja vastaaminen kommunikaationa. Petri Godenhjelm Metodifestivaalit 2015

Kysymystyypit. Tentin kysymystyypit. Monivalinta

Dnro 92/07/70/702/ (5) Kysymykset tarjouspyynnöstä ja tilaajan tarkennukset tarjouspyyntöön

Surveymetodiikka Helsingin yliopisto, Syksy 2011 Seppo Laaksonen

European Social Survey Miten tiedot kerättiin? Marko Ylitalo Metodifestivaalit, Tampere

Suomen MarkkinointiTutkimusSeura Ilkka Rainio

Luentokalvoja tilastollisesta päättelystä. Kalvot laatinut Aki Taanila Päivitetty

PSY181 Psykologisen tutkimuksen perusteet, kirjallinen harjoitustyö ja kirjatentti

Hyvinvointikyselyjen toteuttaminen sähköisesti oppilaitoksissa

Webropol-kyselyt. Tarja Heikkilä

Yhteistyöstänne etukäteen kiittäen

OHJE 1 (5) VALMERI-KYSELYN KÄYTTÖOHJEET. Kyselyn sisältö ja tarkoitus

Turvallisuuskysely. Pääsihteeri Jukka-Pekka Takala Erikoissuunnittelija Markus Alanko rikoksentorjuntaneuvoston sihteeristö

Kansalaiskyselyn tulokset

Mielipidemittaus maailman muutoksen kuvaajana

Viitta-itsearvioinnin käyttöohje Vastaajan ohje

[1] LOMAKE 1: MITTARIN PERUSTIEDOT (4.0) / LOMAKKEEN TÄYTTÄJÄN TIEDOT. Nimi ja oppiarvo 2. MITTARIN IDENTIFIOINTI- JA KÄYTTÖTIEDOT

Tentti erilaiset kysymystyypit

Harjoitus 7: NCSS - Tilastollinen analyysi

Sähköpostitilin käyttöönotto

Kuluttajien tutkiminen 23C580 Kuluttajan käyttäytyminen Emma Mäenpää

Turvallisuuskysely. Erikoissuunnittelija Markus Alanko, rikoksentorjuntaneuvoston sihteeristö

Ulkoilututkimus Luonnon virkistyskäytön valtakunnallinen inventointi, LVVI2 -tutkimus

Tutkiva ja kehittävä osaaja (3 op) Kyselyaineisto keruumenetelmänä opinnäytetyössä Ismo Vuorinen

JÄRJESTELMÄN TEKNINEN KÄYTTÖOHJE

Tentti erilaiset kysymystyypit

Mainoksen taittaminen Wordilla

YLE Uutiset PUOLUEIDEN KANNATUSARVIOT. Huhtikuu 2017 ( )

Ensisijaisen huoltajan haastattelun päivityslomakkeen sisältö Sama kuin yhdeksän kuukauden haastattelu - katso lisätiedot osasta

VINKKEJÄ CV-NETIN KÄYTTÖÖN.

Poimi yrityksistä i) neljän, ii) kymmenen suuruinen otos. a) yksinkertaisella satunnaisotannalla palauttaen, b) systemaattisella otannalla

Paneurooppalainen työterveyttä ja -hyvinvointia koskeva mielipidekysely

YLE Uutiset PUOLUEIDEN KANNATUSARVIOT. Maaliskuu 2018 ( ) YLE Uutiset

Kuinka tasa-arvoinen ruotsinsuomalainen nainen/mies on kotona?

mtuutori Opettajan ohje v

ASPA asiakaspalautteen käsittely ja raportointi järjestelmä

Hyvä suomalaisen maatiaiskanan säilytysohjelman jäsen!

Seuraavat kysymykset koskevat erilaisia tekijöitä, jotka liittyvät digitaaliseen mediaan ja digitaalisiin laitteisiin kuten pöytätietokoneet,

VINKKEJÄ CV-NETIN KÄYTTÖÖN.

SATASERVICEN TIETOSUOJAKÄYTÄNTÖ

PUOLUEIDEN KANNATUSARVIOT

ABI-INFO. Lyseon lukion aikuislinja

Kätevästi netissä KÄYTTÖOHJE.

SELVITYS PRO GRADUJEN KÄYTÖSTÄ TAIDEKIRJASTOSSA

Lapsiuhritutkimus - arat aiheet kyselytutkimuksissa Noora Ellonen Tutkija Poliisiammattikorkeakoulu

Kiipulan ammattiopisto. Liiketalous ja tietojenkäsittely. Erja Saarinen

Sosiaali- ja terveyspalveluiden verkkoneuvonta. Verkkoneuvontapalvelun käyttöohjeet asiakkaille

Peruslomake 1 JÄRJESTÖJEN PALVELUOHJAUKSEN PERUSLOMAKE. TAUSTATIEDOT (Kysymykset 1. 5.) VOIMAVARAISTAVAT KYSYMYKSET (Kysymykset

INTERNET KYSELYN TOTEUTUS

Asentaminen Android-laitteeseen

Seuraavat kysymykset koskevat erilaisia tekijöitä, jotka liittyvät digitaaliseen mediaan ja digitaalisiin laitteisiin kuten pöytätietokoneet,

YLEISKUVA - Kysymykset

LATUA-hanke, Lempiäinen & Iivonen (TY)

Distribution Cert Verkostoasentajan osaamiskartoitus Käyttöohje Oskari.net.

YLE Uutiset. Haastattelut tehtiin Kannatusarvio kuvaa tilannetta eduskuntavaalien puoluekannatuksessa.

YLE Uutiset. Haastattelut tehtiin Kannatusarvio kuvaa tilannetta eduskuntavaalien puoluekannatuksessa.

KYSELYN JULKAISEMINEN JA VASTAUSTEN KERÄÄMINEN

Yleisten kirjastojen kansallinen käyttäjäkysely 2013

TK2 arviointi Kuntoutuja- ja henkilöstönäkökulma Tutkimuksen tiedonkeruun kulku

Sähköinen kuljetuspalveluhakemus - Käyttöohje

Doodle helppoa aikatauluttamista

YLE Uutiset. Haastattelut tehtiin Kannatusarvio kuvaa tilannetta eduskuntavaalien puoluekannatuksessa.

SolePalautetestaus: Palautteenkeruuta ja dokumentaatiota hyödyntämisestä ei edellytetä (00043/NTA1111)

ASCII-taidetta. Intro: Python

Tutkimus ajokorttiseuraamusjärjestelm. rjestelmästä. Kesäkuu TNS Gallup Oy 2007 / AKE ajokorttiseuraamusjärjestelmä (proj.

Osallistavan suunnittelun kyselytyökalu

Sähköpostin työkäyttötutkimus Sähköpostin työkäyttötutkimus

NÄIN OTAT F-SECURE SAFEN KÄYTTÖÖN

Kysely Kaikukortin haltijoille

Suomalaiset sähköyhtiöiden valitsemisesta ja sähkön säästämisestä. Sakari Nurmela

Koulutuksen arviointijärjestelmä

Ryhmätehtävä Neuvokas perhe omassa työssäni miten tästä eteenpäin

EU Login. EU Login kirjautuminen. EU Login tilin luominen

YLE Uutiset. Haastattelut tehtiin Kannatusarvio kuvaa tilannetta eduskuntavaalien puoluekannatuksessa.

YLE Uutiset. PUOLUEIDEN KANNATUSARVIOT, Maalis-huhtikuu 2017 ( ) Toteutus. Tutkimus- ja otantamenetelmä. Tutkimuksen ajankohta

VERKOSTOANALYYSI raportti

KVANTITATIIVINEN TUTKIMUS

Jäsenrekisterin käytön perusteet

Bayesin pelit. Kalle Siukola. MS-E2142 Optimointiopin seminaari: Peliteoria ja tekoäly

Opus SMS tekstiviestipalvelu

Yhtälönratkaisusta. Johanna Rämö, Helsingin yliopisto. 22. syyskuuta 2014

YHDYSKUNTATEKNISET PALVELUT 2016 Kyselytutkimuksen tulokset 27 kunnassa Kuopio Heikki Miettinen

Osallistu julkisiin kilpailutuksiin helposti ja turvallisesti

Suomalaisten näkemyksiä matkailusta

Sähköisen asiointipalvelun käyttö Vuoden 2017 toiminta-avustushakemuksen täyttäminen

Tasavallan presidentin vaali

Visma Fivaldi -käsikirja Tehtävienhallinta- ohje käyttäjälle

Tietoturva. opettaja Pasi Ranne Luksia, Länsi-Uudenmaan koulutuskuntayhtymä Pasi Ranne sivu 1

Osallistavan suunnittelun kyselytyökalu

Mielipiteet ydinvoimasta Maaliskuu Mielipiteet ydinvoimasta maaliskuu 2015

YLE Uutiset. Haastattelut tehtiin Kannatusarvio kuvaa tilannetta eduskuntavaalien puoluekannatuksessa.

Ohjeita Omapalvelun käyttöön

YLE Uutiset. Haastattelut tehtiin Kannatusarvio kuvaa tilannetta eduskuntavaalien puoluekannatuksessa.

Ympärillämme olevat tilaisuudet ovat toiselta nimeltään ratkaisemattomia ongelmia

ATTENDO OY TERVEYDENHUOLTOKYSELY SULKAVALLA LOKA-MARRASKUU/ 2016 TALOUSTUTKIMUS OY ANNE KOSONEN

MINI-LEXIA OPAS Versio 4.31

Mittariston laatiminen laatutyöhön

YLE Uutisarvostukset Erja Ruohomaa YLE Strateginen suunnittelu

Transkriptio:

Tiedonkeruu ja lomakesuunnittelu Tämä vaihe on ratkaisevan tärkeä sekä validiteetin että reliabiliteetin kannalta. Kerättävän tiedon tulisi siis mitata oikein haluttua asiaa (validiteetti) ja toisaalta mittausten epävarmuuden tulisi olla mahdollisimman vähäistä tai ainakin sen suuruus ja vaikutus estimaatteihin tulisi selvittää (reliabiliteetti). Tulos on harvoin erinomainen, koska onnistuminen vaihtelee myös vastaajaryhmästä toiseen. Tiedon keruu on surveyn onnistumisessa ratkaisevan tärkeä. Se ei ole vain yksi toimintamuoto vaan sisältää myös otannan suunnittelun ja toteutuksen. Näihin palataan myöhemmissä luvuissa. Tässä luvussa keskityn kahteen asiaan, jotka liittyvät saumattomasti toisiinsa: (i) tiedonkeruumuotoon ja (ii) tiedonkeruulomakkeeseen. 18.9.2012 SurveyMetodiikka 2012 Seppo 1

Tiedonkeruu ja lomakesuunnittelu jatkuu Tiedonkeruumuodot Aihetta ei voi esittää yksiulotteisesti vaan samanaikaisesti täytyy ottaa huomioon useita tekijöitä. Tässä jaan keruumuotoihin liittyvät tekijät neljään pääkohtaan: (i) Miten vastaajakandidaattia lähestytään? Vaihtoehtoja: - Kirjeitse - Suoralla kontaktilla vastaajan kotona tai olinpaikassa - Puhelimitse - Sähköpostitse - Yleisellä kutsulla lehdessä tai muussa mediassa ml sosiaaliset mediat ja kaveripiirit. - Sähköisessä verkossa (netissä, Internetissä) esitetyllä automaattisesti ohjatulla pyynnöllä osallistua välittömästi tai sovittuna aikana kyselyyn (käyttäen mm. evästeitä). - Vastaajakandidaattia ei varsinaisesti lähestytä vaan hänet poimitaan osallistumaan jos liikkuu sopivassa paikassa sopivaan aikaan (esim. liikenteessä, torilla). - Vastaajakandidaattia ei lähestytä tiedonkeruun kannalta vaan häneen liittyvä tieto kerätään ulkopuolisesti havainnoimalla (myös liikenteessä tai epäterveissä 18.9.2012 surveyssä jolloin vastaajan tietosuoja SurveyMetodiikka voi järkkyä). 2012 Seppo 2

Tiedonkeruu ja lomakesuunnittelu jatkuu (ii) Miten vastaajaa koskeva tieto kysellään ja merkitään tiedostoon? Vaihtoehtoja: - Haastattelija esittää kysymykset, vastaaja merkitsee vastaukset tiedostoon. - Haastattelija esittää kysymykset ja merkitsee vastaukset tiedostoon. - Vastaaja lukee, katselee ja/tai kuuntelee kysymykset ja merkitsee vastauksensa tiedostoon. - Vastaaja lukee, katselee ja/tai kuuntelee kysymykset ja pyytää haastattelijaa merkitsemään vastaukset tiedostoon. - Tietojärjestelmän ylläpitäjä lähettää tiedot tiedon kerääjälle sopimuksen mukaan. - Järjestelmä kerää asianmukaiset tiedot automaattisesti vastaajan tietokannoista. 18.9.2012 SurveyMetodiikka 2012 Seppo 3

Tiedonkeruu ja lomakesuunnittelu jatkuu (iii) Minkälaisia ovat teknisesti tiedostot joihin alkuperäiset vastaukset merkitään? Huomaa että näistä tiedostoista muodostetaan usein seuraavan vaiheen tiedostoja. Vaihtoehtoja: - Paperi joka on joko manuaalisesti tai sähköisesti täytetty ja sitten tulostettu. - Sähköinen paikallistason muoto, kuten tietokoneen muisti tai muistitikku. - Tekstiviestin, sähköpostin tai muun sähköisen välineen muistitila. - Verkossa oleva tila vastauksia varten, joko suljettu tai avoin. Avoin voi johtaa pahoihin ongelmiin koska asetelmaa ei voi silloin hyvin hallita. (iv) Minkälaisia ovat tiedon välitysmuodot? Vaihtoehtoja: - Jos edellisessä kohdassa on käytetty verkon tilaa vastauksia varten, tieto on jo valmiina jatkokäsittelyyn. - Paperinen vastaus voidaan lähettää eteenpäin postitse tai sähköisesti skannauksen jälkeen. - Sähköisiin muotoihin tallennetut tiedostot voidaan lähettää postitse, sähköpostitse tai siirtämällä asianmukaiseen paikkaan verkossa. 18.9.2012 SurveyMetodiikka 2012 Seppo 4

Tiedonkeruu ja lomakesuunnittelu Yhteenveto: Yleisimmät keruutavat Surveytä tehdään nykyään käytännössä kaikkialla mutta monissa kehitysmaissa tai ainakin konfliktimaissa niiden teko voi olla hankalaa. Alkuhistoriassa kaksi päämuotoa olivat yleisimpiä: - Postitse kontaktoitu ja vastaajan itsensä täyttämä paperinen lomake joka palautetaan postitse. Tämä on edelleen käytetty halpuutensa takia. Luonnollisesti se toimii vain jos vastaajat osaavat lukea ja ymmärtävät lukemansa ja kykenevät myös riittävästi kirjoittamaan. -Postitse tai suoraan kontaktoitu ja haastattelijan kysymä ja paperille tallentama ns käyntihaastatteluun perustuva tutkimus. Tämä toimii myös vaikkei haastateltava osaa lukea tai kirjoittaa joskin vaikeuksia voi syntyä. 18.9.2012 SurveyMetodiikka 2012 Seppo 5

Tiedonkeruu ja lomakesuunnittelu Yhteenveto: Yleisimmät keruutavat Kumpaakin kahdesta edellä mainitusta keruutavasta käytetään edelleen myös kehittyneissä maissa, mutta seuraavat muodot ovat yleistyneet: - Postitse tai puhelimitse kontaktoitu ja haastattelijan haastateltavan luona kysymä ja tietokoneavusteisesti tallentama kysely. - Edellinen versio siten että kysymykset esitetään puhelimitse ja tallennetaan tietokoneavusteisesti. - Postitse, puhelimitse, tekstiviestitse kontaktoitu ja verkossa vastaajan itse täyttämä lomake. Tällöin verkko voi tarkoittaa myös kännykän verkkoa. Tämä tekniikka on testattavana maissa joissa on kännykkäverkko muttei hyviä langattomia tietokoneverkkoja. - Sopivilla houkutuksilla kyselyyn kutsuminen ja vastaaminen verkossa, tekstiviestitse tai muulla sähköisellä tavalla. 18.9.2012 SurveyMetodiikka 2012 Seppo 6

Mixed-mode vs multi-mode Tämän kappaleen otsake on englanniksi, jotta helpommin näkyy ero kahden ratkaisun välillä, joissa on käytössä useampi kuin yksi tiedonkeruuväline. Nuo kaksi käsitettä eivät ole samoja. Multi-mode strategiassa käytetään useampia keruutapoja mutta siten että etukäteen on valittu keille mikäkin tiedustelu lähetetään. Esimerkiksi pieniä yrityksiä voidaan lähestyä postitse, isoja sähköisesti. Siis tässä kullekin keruutavalle on eri tavoiteperusjoukko tai ainakin eri otos. Uhritutkimus on esimerkki multi-mode strategiasta sillä siinä oli eri otokset kullekin keruutavalle, käynnille, puhelinhaastattelulle ja netille. Tavoiteperusjoukko oli tässä kaikissa sama mutta otos siis erilainen. Kullekin vastaajalle siis tarjottiin vain yhtä osallistumistapaa. 18.9.2012 SurveyMetodiikka 2012 Seppo 7

Mixed-mode vs multi-mode 2 Sen sijaan mixed-mode strategiassa yksi ja sama tavoiteperusjoukko ja myös brutto-otos jolta toivotaan vastauksia kahdella tai useammalla vaihtoehtoisella asianomaisen vapaasti valitsemalla tavalla. Tämän strategian käytännön järjestely voi olla hyvinkin erilainen eikä yleisesti ottaen kovin hioutuneita tapoja ole kaikkiin tilanteisiin kehitetty. Niitä on siis kussakin tilanteessa testattava erikseen. Yleisiä mixed-mode tapoja ovat muun muassa: Ensin lähetetään kirje ja pyydetään vastaamaan joko netissä tai postitse, jolloin lomake on jo kirjeessä mukana. On mahdollista, että vastaus saadaan kahteen kertaan mutta toinen sitten poistetaan jollakin järkevällä tavalla. Tämä mixed-mode strategia on varmaankin halvin. Kustannus nettiosalle on pieni ja postivastaustenkin käsittelyyn kohtuullinen mutta hintaa nostaa niiden koodaaminen ja tallentaminen. Vastauskato voi tällaisessa kyselyssä kuitenkin olla melko suuri ellei puhelimitse tai käymällä pystytä otoshenkilöitä riittävästi motivoimaan vastaamiseen. 18.9.2012 SurveyMetodiikka 2012 Seppo 8

Mixed-mode vs multi-mode 3 Toinen strategia: Lähetetään kirje ja pyydetään vastaamaan netissä mahdollisimman nopeasti, kyselyn tahdista riippuen viikossa tai muutamassa viikossa. Kirjeessä tuodaan esille, että asianomaista lähestytään uudelleen ellei vastausta kuulu. Tuona sovittuna aikana saatetaan lähettää muistutuskirje tai tekstiviesti, mutta lopulta vastaamattomia lähestytään toisella tavalla. Kahdesta tavasta minulla on kokemusta: - Puhelimitse jolloin henkilöt joiden puhelinnumeroita ei tiedetä jäävät vastauskatoon. - Käynnillä jolloin periaatteessa kaikki voidaan tavoittaa vaikka se vaikeata voi olla. Tämä strategia on yleistynyt nopeasti. Jos netissä vastaamiseen on lyhyt kenttätyöaika, vastauksia ei ehdi tulla kovin paljoa mutta kaikki on silti kotiin päin koska nettivastaukset ovat suoraan ns. raakadataa eli ne voidaan lähettää editointiin heti. Jos on pitkä kenttätyöaika, vastauksia kertyy todennäköisesti paljon enemmän ja hyöty on vastaavasti suurempi. 18.9.2012 SurveyMetodiikka 2012 Seppo 9

Mixed-mode vs multi-mode 4 Muita strategioita: Perinteinen jota muun muassa ESS:ssä käytetään on - Ensin käyntihaastattelu jonka lopussa annetaan lisälomake paperisena, jonka vastaaja täyttää siinä samalla ja antaa haastattelijalle tai lähettää annetussa kirjekuoressa postitse. - Usean keruutavan mixed-mode voisi olla esimerkiksi sellainen, että aloitetaan nettivastaamiseen houkuttelemalla; jollei vastausta kuulu, otetaan yhteyttä puhelimitse ja jos vastaaja ei halua mennä nettiin niin vastaukset kerätään siinä samalla; lopulta he joiden puolennumeroista ei ole tietoa, yritetään tavoittaa käymällä haastateltavan luona. Tähän strategiaan voisi jopa lisätä paperiselle lomakkeelle vastaamismahdollisuuden, jolloin neljä eri tapaa olisi samassa surveyssä. En ole kuullut konkreettisesta esimerkistä vaativan surveyn kyseessä ollen jolloin olisi käytetty kolmea keruutapaa samalle tavoiteperusjoukolle ihmisiä koskevissa kyselyissä. Oletko sinä? Yrityspuolella sellaisia on jossain määrin: paperi ja posti, sähköposti, lomake netissä. 18.9.2012 SurveyMetodiikka 2012 Seppo 10

Tiedonkeruulomake Lomakkeen suunnitteluun ja testaamiseen kannattaa käyttää runsaasti aikaa aina, mutta erityisesti uudessa hankkeessa tai uudella tavalla toteutetussa hankkeessa. On selvää, että aina kannattaa kerätä olemassa olevia ja jo testattuja kysymyksiä sekä omasta maasta että kauempaa. Ns. kysymyspankkeja löytyy nykyään nettihaullakin helposti (ks. http://surveynet.ac.uk/sqb/). Vanha hyvä kysymyskään ei ole ongelmaton, koska maailma muuttuu ja kysymyksen teho voi vähetä. Tässä osiossa esitetään lyhyt katsaus näkökulmiin joita lomakkeen suunnittelussa ainakin kannattaa käyttää hyväksi. Aloitan peruskysymyksistä: 1. Vastaako kysymys haluttuun tutkimusongelmaan? 2. Tuottaako kysymys hyödyllistä informaatiota kokonaisuutena, ottaen siis huomioon muut kysymykset ja analyysitarpeet? 3. Mahtavatko vastaajat ymmärtää kysymyksen siten kuin on tarkoitettu? 4. Onko vastaajilla riittävästi tietoa vastatakseen kysymykseen ja onko lomakkeessa käytetty terminologia varmasti tuttu kaikille? 5. Ovatko vastaajat halukkaita vastaamaan annettuun kysymykseen? 6. Pitäisikö kysymys olla esitetty kaikille vai vain osalle kohdejoukkoa? 18.9.2012 SurveyMetodiikka 2012 Seppo 11

Tiedonkeruulomake Lomakkeen suunnitteluun ja testaamiseen kannattaa käyttää runsaasti aikaa aina, mutta erityisesti uudessa hankkeessa tai uudella tavalla toteutetussa hankkeessa. On selvää, että aina kannattaa kerätä olemassa olevia ja jo testattuja kysymyksiä sekä omasta maasta että kauempaa. Ns. kysymyspankkeja löytyy nykyään nettihaullakin helposti. Vanha hyvä kysymyskään ei ole ongelmaton, koska maailma muuttuu ja kysymyksen teho voi vähetä. Tässä osiossa esitetään lyhyt katsaus näkökulmiin joita lomakkeen suunnittelussa ainakin kannattaa käyttää hyväksi. Aloitan peruskysymyksistä: 1. Vastaako kysymys haluttuun tutkimusongelmaan? 2. Tuottaako kysymys hyödyllistä informaatiota kokonaisuutena, ottaen siis huomioon muut kysymykset ja analyysitarpeet? 3. Mahtavatko vastaajat ymmärtää kysymyksen siten kuin on tarkoitettu? 4. Onko vastaajilla riittävästi tietoa vastatakseen kysymykseen ja onko lomakkeessa käytetty terminologia varmasti tuttu kaikille? 5. Ovatko vastaajat halukkaita vastaamaan annettuun kysymykseen? 6. Pitäisikö kysymys olla esitetty kaikille vai vain osalle kohdejoukkoa? 7. Onko olemassa muuta tietoa, joka auttaisi analysoimaan kysymykseen annettuja vastauksia (siis myös kysymyksen luotettavuutta)? 18.9.2012 SurveyMetodiikka 2012 Seppo 12

Kansainvälisiä termejä Surveyn yhteydessä käytetään englanninkielestä johdettuja lyhenteitä lähes sellaisenaan myös muunkielisissä maissa, kuten Suomessa. Ohessa on melko kattava luettelo. PAPI = Paper and Pencil Interview = Perinteinen haastattelu jossa haastattelija täyttää lomakkeen kirjoittamalla. CAPI = Computer Assisted Personal Interview = Tässä haastattelija täyttää lomakkeen suoraan tietokoneelle, tietokoneohjelma ohjaa kysymysten esittämistä fiksusti. Ohjelma sisältää myös suppean esieditoinnin, joten tiedostoon tallennetut vastaukset ovat alustavasti jo tarkistettuja. CASI = Computer Assisted Self Interview = Itse täytettävä lomake jota tietokoneohjelma ohjaa. Tämä voi olla toteutettu netissä tai omalla tietokoneella ja täyttämisen jälkeen lähetetty sähköpostina tai muuna elektronisena lähetteenä surveylaitokseen.. 18.9.2012 SurveyMetodiikka 2012 Seppo 13

Kansainvälisiä termejä Face to Face Interview (f2f)= Käyntihaastattelu joka voi olla toteutettu PAPI:lla tai CAPI:lla ja osa vastauksista voi olla merkitty ylös CASI:lla. CATI = Computer Assisted Telephone Interview = Puhelimitse toteutettu kysely jossa haastattelija esittää kysymykset ja merkitsee vastaukset saman tien tiedostoon josta tulee osin tarkistettu. Tässä kyselyssä on usein valmiina myös automatiikka vastaajan valitsemiseksi. TSI = Telephone Self Interview = Vastaaja soittaa pyydettyyn numeroon jossa automaatti esittää kysymyksen ja pyytää vastaamaan esimerkiksi numeroilla joiden ilmaisin ilmoitetaan sitä ennen. Tällaiset kyselyt eivät voi olla kovin laajoja. Tämä toteutetaan myös siten että annetaan eri numeroita eri vaihtoehdoille, jolloin riittää vain soittaa tähän numeroon. Suorissa TVohjelmissa näitä käytetään paljon ja annetaan ymmärtää että tästä saataisiin jotenkin luotettava kuva. Luotettavuus jää tosiasiassa täysin ilmaan. 18.9.2012 SurveyMetodiikka 2012 Seppo 14

Kansainvälisiä termejä Postal Survey = Postikysely jossa lomake täytetään itse tavallisesti paperille tai vaihtoehtoisesti annetaan nettiosoite josta löytyy sama lomake. Nettikyselyä varten on myös kirjoittautumistunnus jotta tiedetään kuka vastaa ja vastaa vain kerran. Postikyselyssä on mukana kirjekuori johon vastaukset sijoitetaan. Web Survey tai Internet Survey, myös lyhenne CAWI = yleensä itse täytettävä lomake. Tässä voi olla otos poimittuna etukäteen kuten muissakin kyselyissä. Koko maata koskevissa tutkimuksissa ei vielä päästä korkeaan vastaustasoon koska kansalaisia ei ole treenattu verkon käyttöön. Suljetuissa yhteisöissä, kuten oppilaitoksissa tai työpaikoissa tilanne on helpompi ja verkkokyselyt ovat arkipäivää. Epäselvimpiä edustavuudeltaan ovat surveyt joihin websurfaajat osallistuvat omasta tahdostaan yhden tai useamman kerran. Väitetään, että on jopa syntynyt porukoita jotka urakoivat tällaisiin surveyhin vastaamisessa. Vaikka kaikki tietäisivät niiden laadun huonoksi, tuloksilla vaikutetaan ihmisten mielipiteisiin. CAI = Computer Assisted Interview joka siis kattaa useita edellisistä. 18.9.2012 SurveyMetodiikka 2012 Seppo 15

Esitutkimus tarpeen uusissa ja uusia piirteitä sisältävissä surveyssä Säännöllisesti samanlaisena toistettavassa surveyssä kukin kierros on samalla testi. Hyvien onnistumisten eteen tehdään kaikki voitava seuraavalla kierroksella, mutta epäonnistumisista otetaan oppia ja laatua yritetään parantaa. Tuottavuutta paremmin menetelmin ja tietotekniikoin yritetään aina parantaa. Luonnettaan muuttavat surveyt ja erityisesti aivan uudet surveyt vaativat aidon erillisen testikierroksen, mielellään useamman. Vaikka lomake olisi asiantuntijaryhmässä kuinka hyvin testattu, ei ole takeita että se toimii kentällä. Vastaavasti hankkeen eri toiminnot vaativat koneiston rasvaamista. Tarvitaan ns. esitutkimusta tai pilottitutkimusta. Tämän toteuttamisessa on tarkkaan harkittava kuinka laaja se olisi hyvä toteuttaa. 18.9.2012 SurveyMetodiikka 2012 Seppo 16

Esitutkimus tarpeen uusissa ja uusia piirteitä sisältävissä surveyssä Esitän kaksi vaihtoehtoista strategiaa: (i) Jos kysymys on vain muutamien kysymysten testaamisesta tunnetussa survey-ympäristössä, pilotissa ei tarvitse keskittyä koko prosessiin vaan vain näiden kysymysten toimivuuteen sekä validiteetin että reliabiliteetin kannalta. (ii) Jos on kyseessä selkeästi uudenlainen survey lomakkeen näkökulmasta, on hyödyllistä testata koko prosessia samassa yhteydessä. 18.9.2012 SurveyMetodiikka 2012 Seppo 17

Esimerkki kiusallisesta lomakkeesta Lähde: Peter Ekholm, Karina Jutila ja Pertti Kiljunen 2007. Onpa Ilmoja Pidellyt. Ajatuspaja. Miksi kiusallinen? Ensimmäinen kysymys: Onko puhe ilmastonmuutoksesta ylipäätään totta? Vaihtoehdot: 1 Täysin todellinen, tieteellisesti todistettu asia, 2 Ilmeisesti todellinen asia, josta myös näyttöä, 3 Epäselvä asia, voi perustua myös virhepäätelmiin, 4 Perätön, vailla todisteita oleva asia/väärinkäsitys, 5 En osaa sanoa. Kysymys on sinänsä mahdollista vastata vaikka toki yllytetään vastaamaan alkuvaihtoehtoihin. Erityiskiusa tulee tämän jälkeen, kun kaikki kysymykset alkavat tyyliin: Onko ilmastonmuutos nähdäksenne ihmisen aiheuttama? Jos ajatellaan (entä jos ei ajatella?), että ilmasto on jollain tavalla muuttumassa, kuinka vakava asia/uhka ihmiskunnalle nähdäksenne on kyseessä? Jatkokysymyksissä on kuitenkin käytännössä vastatakseen oltava sitä mieltä että ilmastonmuutos on totta. Jollei kuitenkaan ole sitä mieltä on vaihtoehtoina: Hyväksyä se ja vastata näkemyksensä vastaisesti, Jättää kokonaan vastaamatta, Kirjoitella lomakkeeseen omia mielipiteitä jolloin vastaus heitettäneen roskikseen. Vastauskato oli 55%, erävastauskadosta en löydä tietoja. Tutkimusaineisto on rakenteellisesti edustava. Aineiston analyysissä ei käytetty painokertoimia. Tulosten luottamusväli eli ns. virhemarginaali on kokoaineiston tasolla jakauman muodosta (saadun prosenttiluvun suuruudesta) riippuen 1-3 prosenttiyksikköä kumpaankin suuntaan. Tutkimus sai paljon huomiota mediassa. 18.9.2012 SurveyMetodiikka 2012 Seppo 18

Otantamenetelmien johdannoksi hieman historiaa Otantametelmiä katsotaan paljon kirjani pohjalta mutta esimerkiksi ESS:n maiden uusimpia otantaratkaisuja tulee toki myös esille. Anders Kiaer (norjalainen) 1895, edustava otos Arthur Bowley (britti) 1906, yksinkertainen satunnaisotanta Jerzy Neyman (puolalainen alun perin) 1934, ryväsotanta Edward Hurja (suomalaisjuuria) 30-luvun alku, opinion polls:ien uranuurtaja George Gallup (usalainen), 1940: kiintiöpoiminnan suurhyödyntäjä ja businessmies jonka nimeä kantava firma Suomeen 1940-luvulla. Morris Hansen (usalainen) ym. 30-luku, ensimmäinen kattava kaksi-asteinen ryväsotantaan perustuva survey, mm. kirjan Hurwitzin kanssa 1953 Leslie Kish (unkarilaistausta), ansiokas todennäköisyysotannan sovellus presidentin vaalien voittajan ennustamiseen 1948, myöhemmin mm. DEFF, panelisurveyden kehittäminen, perusoppikirja 1965 William Cochran (skottitausta), monia kehitelmiä ja klassisen teorian kirja 1977 Carl-Erik Särndal (ruotsalais-kanadalainen), model assisted survey sampling, yellow book 1992 yhdessä Swenssonin ja Wretmanin kanssa; J.N.K. Rao (intialais-kanadalainen), mm. Jackknife ja muita varianssiestimaattoreita sekä small area estimation -kirja Jean-Claude Deville (ranskalainen), kalibrointimenetelmiä ym Sharon Lohrin kirjaa Sampling: Design And Analysis monet käyttävät (uusin 2009). 18.9.2012 SurveyMetodiikka 2012 Seppo 19