MATHM Kvalitatiiviset tutkimusmenetelmät 5 op.

Samankaltaiset tiedostot
Yleistä tutkimuksesta ja tieteen filosofiasta

MATHM Kvalitatiiviset tutkimusmenetelmät 5 op.

Teoreettisen viitekehyksen rakentaminen

Kvalitatiivinen tutkimustoiminta

KTKP040 Tieteellinen ajattelu ja tieto

TUTKIMUSOTTEITA TIEDONINTRESSIN NÄKÖKULMA

Analyysimenetelmien kuvaus

Mitä on laadullinen tutkimus? Pertti Alasuutari Tampereen yliopisto

Hypermedian jatko-opintoseminaari

ESIPUHE... 3 SISÄLLYSLUETTELO JOHDANTO... 6

Laadullinen tutkimus. KTT Riku Oksman

Tutkimuksellinen vai toiminnallinen opinnäytetyö

Johdatus tutkimustyöhön (811393A)

TIETOINEN HAVAINTO, TIETOINEN HAVAINNOINTI JA TULKINTA SEKÄ HAVAINNOLLISTAMINEN

Hypermedian jatko-opintoseminaari

HAVAINTO LÄhde: Vilkka 2006, Tutki ja havainnoi. Helsinki: Tammi.

Sisällönanalyysi. Sisältö

Psykologia tieteenä. tieteiden jaottelu: TIETEET. EMPIIRISET TIETEET tieteellisyys on havaintojen (kr. empeiria) tekemistä ja niiden koettelua

KVANTITATIIVINEN TUTKIMUS

Johdatus tutkimustyöhön (811393A)

SP 11: METODOLOGIAN TYÖPAJA Kevät Yliopistonlehtori, dosentti Inga Jasinskaja-Lahti

Taidekasvatuksen tutkimusmenetelmät

Oman oppimisen koontia. Tiina Pusa

Kuluttajien tutkiminen 23C580 Kuluttajan käyttäytyminen Emma Mäenpää

Hypermedian jatko-opintoseminaari. MATHM-6750x. 2-6 op. Sosiaalisten verkostojen tutkimusmenetelmät

TIEDONINTRESSI. Hanna Vilkka. 10. huhtikuuta 12

Kielellisten merkitysten tilastollinen ja psykologinen luonne: Kognitiivisia ja filosofisia näkökulmia. Timo Honkela.

Tilastotieteen rooli uuden tieteellisen tiedon tuottamisessa Tieteen ja tutkimuksen lähtökohtia

Laadullisen tutkimuksen luonne ja tehtävät. Pertti Alasuutari professori, Laitoksen johtaja Yhteiskuntatieteiden tutkimuslaitos

ESIPUHE... 3 SISÄLLYSLUETTELO... 4

Tanja Saarenpää Pro gradu-tutkielma Lapin yliopisto, sosiaalityön laitos Syksy 2012

EDUTOOL 2010 graduseminaari

Aiheesta tutkimussuunnitelmaan

Johdatus tutkimustyöhön (811393A)

Tieteellinen tutkimus, käytännölliset odotukset tutkijan valinnat

LAADULLISEN TUTKIMUKSEN OMINAISLAATU

Tutkiva toiminta luovan ja esittävän kulttuurin kehittämishaasteena. Pirkko Anttila 2006

PSYKOLOGIA - PERUSOPINNOT 25 OP

Kajaanin ammattikorkeakoulu Opinnäytetyösuunnitelman ohje

Tutkimussuunnitelmaseminaari. Kevät 2011 Inga Jasinskaja-Lahti

Johdatus tutkimustyöhön (811393A)

Ihmistieteet vs. luonnontieteet: Ihmistieteet vs. luonnontieteet: inhimillinen toiminta. Tieteiden erot ja ihmistieteiden suhde luonnontieteisiin

Sisällysluettelo ESIPUHE... 4 ALKUSANAT E-KIRJA VERSIOON... 5 SISÄLLYSLUETTELO JOHDANTO... 8

PSY181 Psykologisen tutkimuksen perusteet, kirjallinen harjoitustyö ja kirjatentti

Etiikan mahdollisuudesta tieteenä. Henrik Rydenfelt Helsingin yliopisto

Kvalitatiivisen aineiston analyysi

KEMIA 7.LUOKKA. Laajaalainen. liittyvät sisältöalueet. osaaminen. Merkitys, arvot ja asenteet

IHME tutkimusmetodologisen osaamisen edistäjänä Jyväskylän yliopistossa

Tohtorixi. Pasi Tyrväinen , Päivitetty Prof. Digital media

LAADULLISESTA SISÄLLÖNANALYYSISTÄ

Viestinnän mentelmät I: sisällön erittely. Sisällönanalyysi/sisällön erittely. Sisällön erittely. Juha Herkman

TUKIMATERIAALI: Arvosanan kahdeksan alle jäävä osaaminen

Kvantitatiivisen aineiston analyysi

Viestinnän mentelmät I: sisällön erittely. Sisällönanalyysi/sisällön erittely. Sisällön erittely. Juha Herkman

Tieteenfilosofia 4/4. Heikki J. Koskinen, FT, Dos. Helsingin yliopisto / Suomen Akatemia

Gradu-seminaari (2016/17)

Rahapelaajien monet. profiilit. Havaintoja Peliklinikan aineistoista, haasteita palvelujen kehittämiselle

Aineistonkeruumenetelmiä

arvioinnin kohde

Toiminnan filosofia ja lääketiede. Suomen lääketieteen filosofian seura

PSYKOLOGIA - PERUSOPINNOT 25 OP

Laadullisen tutkimuksen piirteitä

Ymmärrät miten terveyttä voidaan tutkia ja mihin tutkimustietoa käyttää. Lisäksi tärkeää ymmärtää tutkimuksen luotettavuuteen vaikuttavia tekijöitä.

Kuluttajien arvoa luovat käytänteet

Sisällys PSYKOLOGIA AUTTAA YMMÄRTÄMÄÄN IHMISIÄ. Psykologia tutkii ihmisen toimintaa. Psykologiassa on lukuisia osa-alueita ja sovelluskohteita

TUKIMATERIAALI: Arvosanan kahdeksan alle jäävä osaaminen

arvioinnin kohde

KESKUSTELUNANALYYSI. Anssi Peräkylä Kvalitatiiviset menetelmät

hyvä osaaminen. osaamisensa tunnistamista kuvaamaan omaa osaamistaan

Kompleksisuus ja kuntien kehittäminen

MIKÄ ON HAVAINTO? TIEDON SUBJEKTIIVINEN LÄHTÖKOHTA

Fenomenografia. Hypermedian jatko-opintoseminaari Päivi Mikkonen

TUTKIMUSAINEISTON ANALYYSI. LTKY012 Timo Törmäkangas

Eettisten teorioiden tasot

KIRJALLISUUTTA 1. Tieteen etiikka KIRJALLISUUTTA 3 KIRJALLISUUTTA 2 KIRJALLISUUTTA 4 KIRJALLISUUTTA 5

Tapaustutkimus (case-tutkimus, case study)

Ammattikasvatuksen aikakauskirja 8 (1), 46-52/ISSN / OKKA-säätiö 2006/ ja konstruktiivinen tutkimus

K6 Kvalitatiiviset tutkimusmenetelmät. Janne Matikainen

Kuinka laadin tutkimussuunnitelman? Ari Hirvonen I NÄKÖKULMIA II HAKUILMOITUS

Ihmis- ja oppimiskäsitykset taideopetuksessa. Kevät 2012 Eeva Anttila

YMEN 1805 Johdatus tieteelliseen tutkimukseen. FM Kaisa Heinlahti Lapin yliopisto, , kello 9-13

Kaksi näkökulmaa miksaukseen Työ, oppiminen ja hyvinvointi - hankkeessa

AJATTELE ITSE. Hanna Vilkka

Luento-osuusosuus. tilasto-ohjelmistoaohjelmistoa

Tutkimuksen logiikka ja strategiset valinnat

Työelämäläheisyys ja tutkimuksellisuus ylemmän amktutkinnon. Teemu Rantanen yliopettaja

6.9 Filosofia. Opetuksen tavoitteet

Politiikka-asiakirjojen retoriikan ja diskurssien analyysi

Yhteiskuntafilosofia. - alueet ja päämäärät. Olli Loukola / käytännöllisen filosofian laitos / HY

Teorian ja käytännön suhde

PÄIVI PORTAANKORVA-KOIVISTO

1. Tutkimustoiminnan eettiset kysymykset

ENG3043.Kand Kandidaatintyö ja seminaari aloitusluento Tutkimussuunnitelman laatiminen

Kandi/Gradu Tieteellinen (systemaattinen) kirjallisuuskatsaus. Perinteisen kirjallisuuskatsauksen sudenkuopat:

Kandiaikataulu ja -ohjeita

Opiskelijoiden lähestymistavat ja kokemukset oppimisympäristöistään Helsingin yliopistossa

Kirkko ja tieteellinen maailmankuva. Arkkipiispa Tapio Luoma

Tutkiva Oppiminen Varhaiskasvatuksessa. Professori Lasse Lipponen PED0031, VARHAISPEDAGOGIIKKA

hyvä osaaminen

HOITOTIETEEN VALINTAKOE KYSYMYKSET JA ARVIOINTIKRITEERIT

Transkriptio:

MATHM-57550 Kvalitatiiviset tutkimusmenetelmät 5 op. Kirsi Silius & Anne-Maritta Tervakari 1. luento 13.12.2005 Yleisesti tutkimuksesta tieteellisen tiedon ominaispiirteet tutkimustiedon tarkoitus tutkimuksen tarkoitus ihmistieteen tutkimuksen piirteitä tutkijan valinnat ennen aineiston keruuta 1

Tieteellisen tiedon ominaispiirteet Metsämuuronen 2003 Tiede korjaa itseään - todentaminen (verifiointi) vs. kumoaminen Uusi tieto rakentuu vanhan pohjalle Tieto hankittu objektiivisesti, puolueettomasti, vältetty subjektiivisia kannanottoja Tieteellinen tieto ei kuitenkaan ole arvovapaata Tieteellinen tieto ei ole totuus Tieteellisen tiedon ominaispiirteet Karma 1987 Tieteellisen tiedonhankintamenetelmän voidaan sanoa olevan joukko erilaisia menetelmiä, joiden avulla voidaan tuottaa sellaista tietoa, jossa erehdysten mahdollisuus on minimoitu 2

Tieteellisen tiedon ominaispiirteet Metsämuuronen 2003 Tieteellisen tuloksen tulee olla toistettavissa (replikoitavuus) Tiedettäkin voidaan väärinkäyttää (manipulointi, julkaisukielto) Tutkijan tulee arvioida kriittisesti kirjallisuutta, menetelmiä ja tutkimustuloksia (myös omia) Tutkimustiedon tarkoitus Tutkimukseen ryhdytään usein siksi, että arkitiedolla ei kyetä ratkaisemaan ongelmaa Tutkimustieto auttaa paremmin ymmärtämään ratkaistavien ongelmien luonnetta ja löytämään keinoja ongelmista selviämiseen (usein soveltavan tutkimuksen lähtökohtana) Perustutkimus ei pyri ensisijaisesti käytännöllisiin tavoitteisiin tai sovelluksiin vaan etsii uutta tieteellistä tietoa tiedon itsensä vuoksi 3

Tutkimuksen tarkoitus Tutkimuksen tarkoitus voi olla kartoittava kuvaileva selittävä ennustava Tutkimuksella voi olla myös useanlaisia tarkoituksia Tutkimustiedon tarkoitus Tieteellisen tiedon tarkoitus on: täsmentää ongelmiin liittyviä kysymyksiä, suunnata huomion olennaisiin seikkoihin, antaa syvyysulottuvuutta ja ymmärrystä siitä mistä on kysymys auttaa vapautumaan perinteisistä ajattelutottumuksista ja sidonnaisuuksista antaa aineksia ajattelulle, rikastuttaa ja monipuolistaa arkitiedon luomaa kuvaa asioista ja tilanteista, antaa uusia ideoita herättää kiinnostusta uusiin alueisiin lisää harkintaa omissa ratkaisuissa auttaa pääsemään systemaattisesti kiinni uusiin asioihin luo uusia käsitteitä, joiden avulla syntyy uusia näkökulmia maailmaan 4

Ihmistieteellisen tutkimuksen piirteitä Metsämuuronen 2003 Ihmistieteellisen tutkimuksen kohteena on ihminen laajasti Ihmistieteellistä tutkimusta ovat: toiminnan vastaanottajaa (oppijaa/asiakasta) koskeva tutkimus toiminnan suorittajaa (opettaja/palvelun tarjoaja) koskeva tutkimus toimintaa (opetus/palvelu) koskeva tutkimus laajasti käsittäen kaikkea toimintaa (oppimista, opetusta, palvelukonseptia) sääteleviä tai rajoittavia tekijöitä koskeva tutkimus Ihmistieteellisen tutkimuksen piirteitä Metsämuuronen 2003 Ihmistieteellisen tutkimuksen tekee haasteelliseksi se, että tutkimuskohteena olevien ihmisten intentiot, pyrkimykset ja motiivit, päämäärät ja tavoitteet sekä mielikuvat ja asenteet vaikuttavat tutkimustuloksiin Yhteistyö ja keskustelu muiden tieteenalojen kanssa on yleensä hedelmällistä ja johtaa parempaan lopputulokseen kuin pelkästään oman tieteenalan hallinta 5

Tutkijan valinnat ennen aineiston keruuta Ongelman asettelun taso Kuinka täsmällisesti voin nimetä ongelman? Miten jäsennän ongelman? Miten muotoilen ongelman selvästi ja ymmärrettävästi? Tieteen filosofian taso Miten ymmärrän tutkittavan kohteen? (Ontologinen kysymys) Miten ajattelen saavani tietoa? (Epistemologinen kysymys) Tutkimusstrateginen taso Mikä tutkimusstrategia tuo parhaiten vastauksia asettamaani ongelmaan? Mitkä vaihtoehdot tulevat kysymykseen? Miten perustelen valintani? Mitä aineistoa on tärkeätä kerätä? Teoreettisen ymmärtämisen taso Mitkä teoriat liittyvät tutkimukseni aiheeseen? Mikä suhde tutkimuksella on teoriaan? (testaaminen, rakentaminen, praktinen teoria) Miten määrittelen käsitteet? (teoreettisesti, operationaalisesti jne.) Miten asetan mahdolliset hypoteesit? (mikäli ne tulevat edes kyseeseen) Tutkimuksen tarkoitus Kun pohditaan tutkimusstrategiaa, kannattaa tehdä kolme kysymystä (Yin 1984): Mikä on tutkimusongelman muoto? Pyrkiikö se kartoittamaan, kuvaamaan tai selittämään ilmiötä? Vaatiiko tutkimus käyttäytymisen/toimintojen kontrollointia vai pyrkiikö se kuvaamaan luonnollisesti tapahtuvaa ilmiötä? Onko tutkimuksen kohteena oleva ilmiö luonteeltaan nykyaikaan sijoittuva vai menneisyyteen kuuluva? 6

Tieteen filosofia Tutkimuksen tekemiseen liittyvät kaikkein syvimmät ja periaatteellisimmat päätökset tehdään tieteenfilosofisella tasolla, joko tiedostaen tai tiedostamatta Tutkimus, silloinkin kun se on hyvin käytännöllinen ja työelämän sovellutuksiin tähtäävä, perustuu useisiin piileviin oletuksiin (ihmisistä, maailmasta, tiedonhankinnasta jne.) Oletuksia nimitetään taustasitoumuksiksi eli filosofisiksi perusoletuksiksi Tieteen filosofian taustalla ovat neljä filosofian aluetta: ontologia, epistemologia, logiikka ja teleologia Ontologia Ontologiset käsitykset ovat tutkimuksessa erityisen keskeisiä, mutta ongelmallisia Ontologiassa on kyse siitä, minkälaiseksi tutkimuskohde syvemmin käsitetään Esimerkiksi millaiseksi ymmärretään asiakas/käyttäjä tutkimuksen kohteena, onko hän aktiivinen vai passiivinen? Ontologia esittää kysymyksiä todellisuuden luonteesta Mikä on tutkittavan ilmiön luonne? Mikä on todellista? Mitä voidaan pitää todisteina? 7

Ontologia Kun tutkimuskohteena on ihminen, on ontologisen erittelyn tuloksena ihmiskäsitys Varto (1992) tähdentää erityisesti, että tietoinen ja ontologinen ratkaisu on kokonaan toisenlainen kuin arkipäivän ajattelutottumukset Tutkimuksen perusratkaisut on perusteltava hyvin on osoitettava, että ne kohdentaa tutkimuksen tarkasti juuri oletettuun tutkimuskohteeseen ja on oltava menetelmällisesti mahdollista toteuttaa Ontologia Tavallisesti opiskelijat ja varttuneemmatkin tutkijat toimivat tieteen filosofian alueilla siten kuin tiedeyhteisön perinne ja koulutus on ohjannut heidät ajattelemaan Valintoja ei huomata aina edes tehtävänkään Kokemus kartuttaa tietoisuutta vaihtoehdoista Kriittisyys valinnoissa on tärkeää 8

Epistemologia Epistemologisissa eli tieto-opillisissa tarkasteluissa käsitykset koskevat tiedostamisen ja tiedonsaannin ongelmia Millä metodisella otteella pystytään parhaiten lähestymään tutkimuskohdetta? (metodin pätevyys) Epistemologia käsittelee tietämisen alkuperää ja luonnetta sekä tiedon muodostumista Mikä suhde vallitsee tutkijan ja tutkittavan kohteen välillä? Mikä asema arvoilla on ilmiöiden ymmärtämisessä? Logiikka Logiikka käsittelee toteen näyttämisen ja todistamisen periaatteita Ovatko kausaaliset kytkennät mahdollisia tiedon osien välillä? 9

Teleologia Teleologia esittää kysymyksiä tarkoituksesta Mitä varten tutkimus tehdään? Miten tutkimus lisää tietoamme tutkittavalla alueella? Tutkimusstrategia Tutkimuksen tekijöillä on taipumus nojata aina samaan tutkimukselliseen lähestymistapaan Tutkimusstrategialla tarkoitetaan tutkimuksen menetelmällisten ratkaisujen kokonaisuutta Tutkimusstrategian ja yksittäisten tutkimusmetodien valinta riippuu valitusta tutkimustehtävästä tai tutkimusongelmista 10

Tutkimusstrategia Tutkimusstrategian valinta on sukua päätökselle uidaanko, kävelläänkö, lennetäänkö vai purjehditaanko joen yli Tutkimusmetodi koskee puolestaan veneen, sillan, lentokoneen jne. tyyppiä Tutkimusstrategioita tyypitellään usealla eri tavalla Tyypillisin on mm. Robsonin (1995) tutkimusstrategioiden jaottelu kokeellisiin tutkimuksiin, Survey-tutkimuksiin ja tapaustutkimuksiin Tutkimustyypittelyjä ; Järvinen & Järvinen 2004 Tutkimustyypit voidaan jakaa mm. kokeellisiin tutkimuksiin survey-tutkimuksiin sekä tapaustutkimuksiin Vastaavasti tarkemmalla jaottelulla teoreettis-käsitteellinen tutkimus teoriaa testaava tutkimus kuvaileva, tulkitseva uutta teoriaa luova tutkimus konstruktiivinen tutkimus matemaattinen tutkimus 11

Kokeellinen tutkimus Mitataan yhden käsiteltävän muuttujan vaikutusta toiseen muuttujaan Tyypillisiä piirteitä näyte analysointi koejärjestelyin olosuhteiden muuntelu mitataan muutokset numeerisesti kontrolloidaan muut muuttujat sisältää usein hypoteesin testaamista Survey-tutkimus Kerätään tietoa standardoidussa muodossa joukolta ihmisiä Tyypillisiä piirteitä otos kyselylomakkeet tai strukturoitu haastattelu pieni aineisto tavoitteena kuvailu, vertailu tai selittäminen 12

Tapaustutkimus (case study) Yksityiskohtaista, intensiivistä tietoa yksittäisestä tapauksesta tai pienestä joukosta toisiinsa suhteessa olevia tapauksia Tyypillisiä piirteitä yksittäinen tapaus/tilanne kiinnostuksen kohteena usein prosessi suhde ympäristöön aineistoa kerätään useita metodeja käyttäen (havainnointi, haastattelu, dokumenttien tutkiminen) tavoitteena ilmiön kuvailu Teoreettis-käsitteellinen tutkimus Järvinen & Järvinen 2004 Vastataan kysymykseen: Miten voidaan johtaa jokin teoria, malli tai viitekehys, joka kuvaa tietyn reaalimaailman osan (esim. millainen malli kuvaa tai selittää sen, kuinka ihminen käyttää tiettyä verkkopalvelua) Tyypillisiä lähestymistapoja tietosysteemi reaalimaailman kuvaajana rakenteinen ohjelmointi systeemin elinjakso 13

Teorioita testaava tutkimus Järvinen & Järvinen 2004 Pyritään ratkaisemaan: Vastaako tietty reaalimaailman osa määrättyä teoriaa, mallia tai viitekehystä? Tyypillisiä lähestymistapoja kontrolloidut ja luonnolliset kokeet, kenttätutkimukset (survey) tapaustutkimukset (case) ja pitkittäistutkimukset Kuvaileva, tulkitseva ja uusia teorioita luova tutkimus Järvinen & Järvinen 2004 Tyypillisiä lähestymistapoja Grounded teoria Tapaustutkimus Fenomenografia Etnografia Kontekstualismi ja muut kvalitatiiviset pitkittäistutkimukset 14

Suunnittelutieteellinen tutkimus Järvinen & Järvinen 2004 Vastaa kysymykseen: Voimmeko rakentaa tietyn innovaation, kuinka hyödyllinen joku innovaatio on, millainen tietyn innovaation pitäisi olla, kuinka se pitäisi rakentaa Tyypillisiä lähestymistapoja Innovaation toteuttamistutkimus Innovaation arviointitutkimus toimintatutkimus Matemaattinen tutkimus Järvinen & Järvinen 2004 Matemaattinen tutkimus lähtee liikkeelle tietystä alkuolettamuksesta Sillä ei ole suoraa yhteyttä reaalitodellisuuteen Eräs kriittinen kysymys on: kuinka hyvin malli vastaa todellisuutta Tyypillisiä lähestymistapoja riittävän varieteetin ja hierarkian lait kausaalisten systeemien luokittelu aposteriorinen tiedonmuodostus algoritmien analyysi 15

Kvalitatiivinen vs. kvantitatiivinen Keskustelua kvalitatiivisen (laadullisen) ja kvantitatiivisen (määrällisen) tutkimuksen eroista on käyty pitkään mm. Brymanin (1988) mukaan erot näkyvät seuraavasti Näkökulma Kvantitatiivinen Kvalitatiivinen Tutkijan ja tukittavan suhde Tutkimusstrategia Aineiston luonne etäinen strukturoitu kova, luotettava läheinen strukturoimaton rikas, syvä Teorian ja tutkimuksen luonne teoriaa varmistava teoriaa luova Kvalitatiivinen & kvantitatiivinen Ei pidä tarkastella toistensa vastakohtina, vaan toisiaan täydentävinä Kvalitatíivista käytetään kvantitatiivisen tutkimuksen esikokeena Kvalitatiivista ja kvantitatiivista menetelmää käytetään rinnakkain Kvantitatiivinen vaihe edeltää kvalitatiivista Ovat lähestymistapoja, joita on käytännössä vaikea tarkkarajaisesti erottaa Numerot ja merkitykset ovat vastavuoroisesti toisistaan riippuvaisia Mittaaminen sisältää kaikilla tasoilla sekä kvalitatiivisen että kvantitatiivisen puolen 16

1. viikkoharjoitustehtävä Tutkimuksen aiheen valinta. Mitä asiaa haluaa lähteä selvittämään? Millainen tutkimusote kiinnostaa? Minkä tyyppinen tutkimuksesi voisi olla? Millaisia tieteenfilosofisia kysymyksiä saattaa tulla eteen pohdittavaksi? Tehtävän tarkoituksena on pohtia alustavasti tutkimusaihetta ja oman tutkimuksen peruskysymyksiä. Aiheen voi valita vapaasti, mutta jollakin tapaa sen olisi hyvä liittyä hypermediaan. Esimerkkejä aiheista: Uuden palvelun suunnitteleminen Laadun kokeminen Käyttöönoton tukeminen Ansaintalogiikka: kuka haluaa maksa ja mistä ja kuinka paljon Valitse jonkin aihepiiri tai verkkopalvelu (jo olemassa oleva tai suunnitteilla oleva), jonka kautta tarkastelet asiaa. Samaa verkkopalvelua ja aihepiiriä käsitellään läpi koko kurssin. Lähteet Bryman, A. (1988). Quantity and quality in social research. London: Unwin Hyman. Hirsjärvi, S., Remes, P. & Sajavaara, P. (2000). Tutki ja kirjoita. Tampere: Tammer-Paino Oy. Karma, K. (1987). Käyttäytymistieteiden metodologian perusteet. 2.p. Keuruu: Otava. Metsämuuronen, J. (2003). Tutkimuksen tekemisen perusteet ihmistieteissä. 2.p. Jyväskylä: Gummerrus Kirjapaino Oy. Robson, C. (1995). Real world research. A resource for social scientists and practioner-researchers. 5. p. Oxford: Blackwell. Varto, J. (1992). Laadullisen tutkimuksen metodologia. Helsinki: Kirjayhtymä. Yin, R.K. (1984). Case study research: Design and methods. Beverly Hills, CA: Sage. 17