Arviointi opettajankoulutuksessa opetussuunnitelmien kertomana Päivi Atjonen Forum Criteriorum 29. 30.9.2015 Helsinki 1 If you want to change student/pupil learning then change the methods of assessment. (Brew et al. 2009, 641) Those who control the tests tend to control the entire enterprice. (Popham 2009, 11) Preservice students are more likely to succumb to their apprenticeship of observation and doing so seemed doomed to replicate more traditional, unexamined assessment practises. (Graham 2005, 619) 2 1
(A) Aluksi 3 Arviointi opettajankoulutuksessa Näkökulma 1: Oppimisen arviointi opettajankoulutuksessa arvioinnin käsitteet ja perusteet omana opintojaksonaan arviointi integroituna monialaisiin opintoihin arviointi osana opetusharjoittelua Näkökulma 2: Tila-, teema- ja ohjelma-arviointi tilivelvollisuuden, tiedontuotannon ja kehittämisen näkökulma arviointiin opettajat arvioinnin kohteina oppilaitoksissa Näkökulma 3: Practise what you preach opettajankoulutuksen aikainen, opettajaksi opiskeleviin kohdentuva akateemisen arvioinnin malli 4 2
Opettaja ja arviointi Tavoitteena arviointilukutaito (assessment literacy for teachers) taustalla mm. opettajien arviointikompetenssien standardit Opettajan tulee osata valita sopivat arviointimenetelmät opetusta koskevia päätöksiään varten. kehittää sopivia arviointimenetelmiä opetusta koskevia päätöksiään varten. hallinnoida, pisteyttää ja tulkita sekä ulkopuolisten tuottamia että itse tekemiään arviointimenetelmiä. käyttää arviointituloksia, kun hän tekee yksittäisiä oppilaita koskevia päätöksiä, suunnittelee opetusta, kehittää opetussuunnitelmaa ja kehittää koulua. kehittää päteviä arvosanan antamismenettelyjä oppilasarviointia hyödyntäessään. kertoa arvioinnin tuloksista oppilaille, huoltajille, muulle maallikkoyleisölle ja muille kasvattajille. tunnistaa epäeettiset, laittomat ja muutoin sopimattomat arvioinnin metodit ja arviointitiedon käyttötavat. (Standards for teacher competence in educational assessment of students 1990) opettajien peruskoulutuksessa saatu tietotaito koetaan riittämättömäksi maailmanlaajuisesti 5 (B) Pieni empiirinen katselmus 6 3
Opetussuunnitelma-aineiston hankinta 1/2 Maaliskuussa 2015 arviointia käsittelevien opintojaksokuvauksien etsintä omatoimisesti opettajankoulutusyksiköiden nettisivuilta ja sähköpostiyhteydenotoin eri opettajankoulutuslaitoksista saaliina ops-kuvauksia sekä netti- ja WebOodilinkkejä Tarkastellut yliopistot/tiedekunnat: HY, JY, LY, OY, TaY, TY, UEF, ÅA 7 Opetussuunnitelma-aineiston hankinta 2/2 Tarkasteltu kaikkien yliopistojen luokanopettajien ja erityisopettajien koulutuksien sekä aineenopettajan pedagogisten opintojen (ml. opetusharjoittelut) opetussuunnitelmia hakusanalla arviointi aikuisopettajan pedagogiset opinnot ja ns. tieteenalakoulutusten ops:t jätetty tarkastelun ulkopuolelle keskitytty oppimisen (oppilas- ja opiskelija-) arviointiin (assessment; ei tila-, teema- ja ohjelma-arviointia tai laadunhallintaa evaluation-merkityksessä) 8 4
Osa 1: Yleiskuvaa Arviointi-opintojaksoista 9 Esimerkkejä opintojaksoista, joiden nimessä esiintyy arviointi-sana Opetuksen ja oppimisen arviointi ja etiikka (3 op, HY) Oppimisen ohjaaminen ja arviointi (8 op, JY) Opetussuunnitelma, koulun kehittäminen ja arviointi (5 op, OY) Opetuksen, oppimisen ja koulutuksen arviointi ja laatu (5 op, TaY) Oppimisen, opetuksen ja arvioinnin perusteet (3 4 op, TY) Oppimisen arviointi ja tuki (5 op, UEF) 10 5
Esimerkkejä opintojaksoista, joiden sisältökuvauksissa esiintyy arviointi-sana Oppiminen ja ohjaus (5 op, JY) Oppimisympäristöt, opetuksen toteuttaminen ja oppimisen ohjaus (10 op, LY) Opetuksen ja oppimisen perusteet (7 op, LaY) Ainedidaktinen tutkimus (8 op, OY) Yhteisöllisen oppimisprosessin perusteet (3 op, UEF) Didaktik I för ämneslärare (5 sp, ÅA) 11 Maan ainoa opintojakso, jossa esiintyy kriteeri-sana Opetuksen ja oppimisen arviointi ja etiikka (3 op, HY): Tavoitteissa: Opiskelija ymmärtää luotettavan mittauksen ja arvioinnin kriteerit Sisällöissä: Harjoitellaan mittaamista ja pohditaan mittauksen luotettavuutta ja arvioinnin kriteereitä 12 6
Osa 2: Arviointi integroituna erilaisiin opintojaksoihin 13 Arviointi esiintyy liki marginaalisena mainintana hyvin moniaineksisten opintojaksojen sisällä: oppimisen arvioinnin menetelmät (JY:n opintojakso: Oppiminen ja ohjaus, 5 op; yksi kuudesta sisältökohdasta) ohjaus: arviointi ja palaute (LY:n opettajan pedagogisten opintojen teema opetuksen toteuttaminen ja oppimisen ohjaus ; yksi seitsemästä sisältökohdasta) Opiskelija hallitsee opetuksen, oppimisen ja arvioinnin ydinkäsitteet sekä opettajan työtä ohjaavien periaatteiden ja ilmiöiden merkityksen. (TY:n opintojakso: Oppimisen, opetuksen ja arvioinnin perusteet, 4 op) analysera bedömningens roll i undervisningen och hur uppfattningar om bedöming utvecklas (ÅA:n opintojakso: Didaktik I för ämneslarare, 5 sp) 14 7
Arviointi esiintyy satunnaisesti opetusharjoittelujaksojen kuvauksissa: osaa soveltaa oppimaansa oppimisen arviointiin (OY:n opintojakso: Maisterivaiheen koulutyöskentely, 11 op) opetustilanteen suunnittelu ja toteuttaminen sekä oppimisen arviointi ja palaute (LY:n opintojakso Ohjattu harjoittelu; työssäoppiminen, 14 op) 15 Arviointi esiintyy niukasti monialaisten opintojen (peruskoulussa opetettavat aineet) sisällöissä useimmissa ei mitään mainintaa! Opiskelija osaa valita biologiaan, fysiikkaan, kemiaan ja maantietoon tarkoituksenmukaisia työtapoja ja opetusmenetelmiä sekä arviointimenettelyjä (JY:n opintojakso: Ympäristö- ja luonnontiedon ydinosa, 5 op; yksi kolmesta tavoitteesta) käsityön oppimisprosessien arviointi (OY:n opintojakso: Teknisen työn perusteet, 3 op; yksi kuudesta sisältökohdasta) arviointi (UEF/Savonlinnan opintojakso: Kuvataiteen oppimisen ja opettamisen perusteet, 6 op; yksi kahdeksasta sisältökohdasta) 16 8
Arviointi puuttuu kokonaan opintojaksoista, joihin se ilmiselvästi kuuluisi esim. OY:n opintojakso Didaktiikka, 4 op Arvioinnin sanotaan sisältyvän opintojaksoon, vaikka se ei näy opetussuunnitelmassa: esim. TY/Rauma: Kieli ja kielentäminen, 5 op Arviointia opiskellaan itseen opettajaksi opiskelevina kohdistuvien arviointien avulla kurssi, jolla luokanopettajaopiskelijat suunnittelevat opintojakson ja sen pohjalta miettivät arviointikäytänteet, joilla heidän oppimistaan arvioidaan (opettajan kuvaus sähköpostissa; JY:n opintojakso: Syventävät ilmiöopinnot 3: Itsenäinen työskentelyjakso, 7 op) 17 Arviointi esiintyy selkeästi erityisopettajien koulutuksessa: Opiskelija perehtyy lapsen ja nuoren arviointiin Opiskelija syventää tietoaan arvioinnista tieteellisenä ja ammatillisena toimintana Opiskelija yhdistää arvioinnin ratkaisuihin ja keinoihin ja osaa kuvata arvioinnin eettisiä ulottuvuuksia (OY:n opintojakso: Kognitiivinen suoriutuminen ja arviointi, 5 op; neljä yhdeksästä sisältökohdasta) Opiskelija 1) ymmärtää oppimisen arvioinnin teoreettiset ja eettiset lähtökohdat sekä testiteorioiden perusteet ja sovellutukset, 2) tietää arviointia ja tukea ohjaavat säädökset ja arviointimenetelmien teoreettisen perustan sekä osaa dokumentoida arvioinnin tulokset, 3) --- ja 4) tietää miten arvioinnin tuloksia käytetään oppimisen tuen järjestämisessä (UEF:n opintojakso: Oppimisen arviointi ja tuki, 5 op, kolme tavoitetta neljästä) 18 9
Sekalaisia havaintoja: opiskelun muoto: usein luento, joissain tapauksissa harjoituksia, verkkokurssi, essee/oppimistehtävät; tentti koulutuspoliittinen, laadun ja/tai kansainvälinen arviointi yhdistetty oppilas- ja opiskelija-arviointiin vain kolmessa opintojaksossa: 1) Arviointi ja etiikka (3 op, TY) 2) Opetuksen, oppimisen ja koulutuksen arviointi ja laatu (5 op, TaY) ja 3) Lärarens professionella identitet (5 sp, ÅA) osaamistavoitteiden ilmaisuja: tietää arvioinnin perusteet osaa arvioida hallitsee arvioinnin ydinkäsitteet hallitsee arvioinnin malleja osaa kuvata arvioinnin eettisiä ulottuvuuksia tunnistaa ja osaa määritellä koulutuksen arvioinnin eri tasot ja tarkoitukset jäsentää arvioinnin erilaisia menetelmiä käyttää oppimisen arvioinnin eri menetelmiä ymmärtää/saa valmiuksia toteuttaa arviointia antaa valmiuksia arviointiin osaa valita arviointimenettelyjä osaa soveltaa arvioinnissa 19 Osa 3: Arviointi itsenäisenä opintojaksona 20 10
Esimerkki 1 (TY): Arviointi ja etiikka, 3 op (luokanopettajille) Sisältö: arvioinnin merkitys koulutuspolitiikassa koulutuksen arviointijärjestelmä ja toimijat sekä arviointitoiminnan tasot Suomessa kansainväliset arvioinnit ja vertaileva arviointitoiminta koulutuksen arvioinnin mallit, koulutuksen laatu ja laadun arviointi koulutuksen arviointiin liittyvät eettiset ongelmat ja arvioinnin eettiset periaatteet Arviointi: Essee + suullinen esitys Toteutus: Opiskelija kirjoittaa luentojen ja oheiskirjallisuuden pohjalta esseen ja pitää alustuksen harjoituksissa. Esseen ja alustuksen voi tehdä myös ryhmissä. Opiskelijat voivat esittää lähdeaineistoksi myös itse löytämäänsä kirjallisuutta. 21 Esimerkki 2 (HY): Opetuksen ja oppimisen arviointi ja etiikka, 3 op Tavoite: Opiskelija 1) ymmärtää opetuksen ja oppimisen arvioinnin eettisen näkökulman 2) ymmärtää arvioinnin vaikutuksen yksilöön ja arvioinnin opettajan työvälineenä, 3) ymmärtää luotettavan mittauksen ja arvioinnin kriteerit, 4) saa valmiuksia suunnitella ja toteuttaa oppimisen arviointia ja 5) saa valmiuksia arvioida ja kehittää opetusta arviointitiedon perusteella Sisältö: Perehdytään opetuksen ja oppimisen etiikkaan, arvioinnin vaikutuksesta oppilaaseen yksilönä ja arviointiin opettajan työvälineenä. Harjoitellaan mittaamista ja pohditaan mittauksen luotettavuutta ja arvioinnin kriteereitä. Luennot aiheittain: 1. luento: Oppimisen arviointi orientaatio, 2. luento: Oppimisen arvioinnin perusteet, 3. luento: Opetuksen laadun arviointi, 4. luento: Perus- ja lukio-opetuksen arvioinnin yhdenvertaisuus, 5. luento: Interventiot ja arvioinnin luotettavuus, 6. Tentti Kirjallisuus: Atjonen, P. (2007). Hyvä, paha arviointi. Tammi. 22 11
Esimerkki 3 (JY ja UEF): arviointikirjapaketin tenttiminen JY: Syventävät ilmiö-opinnot 1: Yksilö, ryhmäilmiöt ja oppiminen tentittäviä kirjavaihtoehtoja on seitsemän, joista yksi on 4. Black P., Harrison, C., Lee C., Marshall, B. & Wiliam, D. 2003. Assessment for learning. Putting it into practice. UEF (Joensuu ja Savonlinna): Soveltava pedagoginen kirjallisuus, 5 op: valittava kaksi kirjaa neljästä vaihtoehdosta, joista yksi on 4. Bell, B. & Cowie, B. 2000. Formative assessment and science education 23 Osa 4: Arviointia käsittelevät kurssikirjat opetussuunnitelmissa 24 12
Opetussuunnitelmien arviointiaiheiset teokset: Kuudessa yksikössä: Atjonen, P. 2007. Hyvä, paha arviointi [HY, TaY, TY/Turku, TY/Rauma, UEF/Joensuu, ÅA] Kahdessa yksikössä: Rinne, R., Simola, H., Mäkinen-Streng, M., Silmäri-Salo, S. & Varjo, J. 2011. Arvioinnin arvo [OY, TY/Rauma] Räisänen, A. (toim.) 2013. Oppimisen arvioinnin kontekstit ja käytännöt [LY, ÅA] Yhdessä yksikössä per teos: Bell, B. & Cowie, B. 2000. Formative assessment and science education [UEF/Savonlinna] Black P., Harrison, C., Lee C., Marshall, B. & Wiliam, D. 2003. Assessment for Learning. Putting it into practice [JY] Guba, E. & Lincoln, Y. 1989. Fourth generation evaluation [TY/Rauma] Hallinnon tutkimus -lehti 2006: Arvioinnin teemanumero [TaY] Jönsson: Lärande bedöming (ÅA/Pf) Olkinuora, E., Jakku-Sihvonen, R. & Mattila, E. (toim.) 2002. Koulutuksen arviointi. Lähtökohtia, malleja ja tilannekatsauksia [LY] Salvia, J., Ysseldyke, S. & Bolt, S. 2013/2010. Assessment in special and inclusive education [OY] Yhteensä 10 erilaista teosta 25 (C) Lopuksi 26 13
Mitä tarttis tehrä? Jokaiseen opettajankoulutusyksikköön kaikille opettajaksi opiskeleville vähintään 3 op:n laajuinen arviointiin keskittyvä kasvatustieteen aineopintojen opintojakso osaamistavoite: arviointilukutaidon perustan vahvistaminen sisällöt: 1) oppimisen arvioinnin erilaiset funktiot ja varioivat menetelmät ja 2) opettajat ja oppilaitokset sisäisen ja ulkoisen arvioinnin kohteina Kaikissa monialaisissa opinnoissa (peruskoulussa opetettavissa aineissa) tulisi käsitellä arviointia kunkin oppiaineen erityis- ja ominaisluonteesta käsin, täydentäen em. yleiskasvatustieteellistä opintojaksoa Jokaisen tulevan opettajan pitäisi vähintään yhdessä opintojen keskitai loppuvaiheen opetusharjoittelussa tehdä oppimisen arviointia erityisesti muuta kuin tavanomaista kynä-paperi -arviointia Opettajan lukutaidosta ja opettajankoulutuslaitosten arviointiopetuksesta tulossa artikkeli Forum Criteriorum -seminaarin esityksistä tehtävään kirjaan (jos läpäisee referoinnin); ilmestynee vuonna 2016 27 Joitakin lähteitä AFT. 1990. Standards for teacher competence in educational assessment of students. Published by the American Federation of Teachers. http://buros.org/standards-teacher-competence-educationalassessment-students. Atjonen, P. 2013a. Näytön paikka? Tutkimustuloksia oppilasarvioinnista. (PowerPoint-esitys ääniselostuksella) https://wiki.uef.fi/x/pave (luettu 18.9.2015) Atjonen, P. 2013b. Perusopetuksen opettajat oppilasarvioinnin tekijöinä. Teoksessa P. Atjonen (toim.) Työ arvonsa ansaitsee. Oulu: Oulun yliopisto, 104 117. Atjonen, P. 2014a. School-focused evaluation in focus: Finnish teachers experiences of internal and external evaluation of schools. Nordic Studies in Education 24 (4), 279 298 Atjonen, P. 2014b. Teachers views of their assessment practice. The Curriculum Journal 25 (2), 238 259. Atjonen, P. 2015a. Kehittävä arviointi kasvatusalalla. Joensuu: Kirjokansi. Atjonen, P. 2015b. Your career will be over Power and contradictions in the work of educational evaluators. Studies in Educational Evaluation 45, 37 45. Beziat, T. & Coleman, B. 2015. Classroom assessment literacy: Evaluating pre-service teachers. The Researcher 27 (1), 25 30.Black, P. & Wiliam, D. 1998. Assessment and classroom learning, Assessment in Education 5 (1), 7 74. Brookhart, S. & Nitko, A. 2014. Educational assessment of students. Pearson. Clark, I. 2012. Formative assessment: Assessment is for self-regulated learning. Educational Psychology Review 24 (2), 205 249. 28 14
Joitakin lähteitä Davies, D. & Neitzel, C. 2011. A self-regulated learning perspective on middle grades classroom assessment. The Journal of Educational Research 104 (3), 202 215. Ecclestone, K. & Pryor, J. 2003. Learning careers or assessment careers? The impact of assessment systems on learning. British Educational Research Journal 29 (4), 471 488. Gotch, C. & French, B. 2014. Systematic review of assessment literacy measures. Educational Measurement: Issues and Practice 33 (2), 14 18. Graham, P. 2005. Classroom-based assessment: Changing knowledge and practice through preservice teacher education. Teaching and Teacher Education 21, 607 621. Mertler, C. 2005. Secondary teachers assessment literacy: Does classroom experience make a difference? American Secondary Education 33 (2), 76 92. Ohlsen, M. 2007. Classroom assessment practices of secondary school members of NCTM. American Secondary Education 36 (1), 4 14. Stiggins, R. 2005. Evaluating classroom assessment training in teacher education programmes. Educational Measurement: Issues and Practice 18 (1), 23 27. Tatar, N. & Buldur, S. 2013. Improving preservice science teachers self-efficacy about the use of alternative assessment: Implication for theory and practice. Journal of Baltic Science Education 12 (4), 252 264. Veldhuis, M. & van den Heuvel-Panhuizen, M. 2014. Primary school teachers assessment profiles in mathematics education. PLoS ONE 9 (1), 1 11. Volante, L. & Fazio, X. 2007. Exploring teacher candidates assessment literacy: Implications for teacher education reform and professional development. Canadian Journal of Education 30 (3), 749 770. 29 15