Kehittävä arviointi Vahvuuslähtöinen näkökulma opintojen aikaiseen arviointiin

Transkriptio

1 Kehittävä arviointi Vahvuuslähtöinen näkökulma opintojen aikaiseen arviointiin Päivi Atjonen, Itä-Suomen yliopisto (UEF) 112 Apua arviointiin Helsinki , Otavan opisto 1

2 Arvioinnin perushengen jäsentelyä Arviointi voi olla luonteeltaan 1) vallankäyttöä tai tuen antamista 2) luokittelevaa tai ohjaavaa 3) feedback- tai feedforward-luonteista 4) ongelma- tai vahvuuslähtöistä 5) typistävää tai voimaannuttavaa 6) yhdenmukaisuutta tai erilaisuutta edistävää 7) kilpailu- tai tehtäväkeskeistä Arvioinnin perushengen jäsentelyä Oppimista innoittava Oppimista lannistava 2

3 assessment is to INCREASE quality The purpose of evaluation is to JUDGE quality Erilainen arviointi tunnistaa erilaista oppimista 3

4 Aluksi: Arvioinnin vaikuttavuus Arviointi ohjaa voimakkaasti oppimista, eli sitä saat, mitä tilaat : Jos arvioinnilla arvostat teknistä virheettömyyttä, rajattua suoritusta, kuuliaisuutta, ulkoa muistamista ja yksityiskohtia, seurauksena on, että oppilaat yrittävät suoriutua teknisesti moitteettomasti. eivät ajattele kokonaisuutta. eivät pyri oma-aloitteisuuteen. eivät pohdi kontekstiin soveltamista. Aluksi: Arvioinnin vaikuttavuus Arviointi ohjaa voimakkaasti oppimista, eli sitä saat, mitä tilaat : Jos arvioinnilla arvostat soveltamista, ajatuskokonaisuuksia, aloitteellisuutta ja ideoita, tietojen yhdistämistä ja päättelyä, seurauksena on, että oppilaat yrittävät miettiä sovellusesimerkkejä. eivät takerru yksityiskohtien pänttäämiseen. varautuvat esittämään niitä. oppimateriaalia aletaan katsoa kokonaisvaltaisemmin silmin. Taulukon positiivinen logiikka: Arvioinnilla voi edistää toivotunlaista oppimista. Opettajalla on paljon pedagogista power with -valtaa. 4

5 Arvioinnin perusluonteen jäsentelyä Arvioinnin päätarkoitukset: Oppimisen arviointi (assessment of learning) Arviointi oppimisen tukena (assessment for learning) Arviointi oppimisena (assessment as learning) assessment OF learning on melkein sama kuin summatiivinen arviointi assessment FOR learning on melkein synonyymi formatiiviselle arvioinnille assessment AS learning tarkoittaa arviointitapoja, jotka mahdollistavat oppimisen vielä arvioinnin aikana (esim. arviointikeskustelu, oppimateriaalien mukana olo kokeessa, portfoliokeskustelu) Erilaisia arviointitapoja, erilaista oppimista Kirjallinen koe Portfolio, narratiivit Arviointikeskustelu 1 Arviointikeskustelu 2 Itsearviointi Autenttinen arviointi Vertaisarviointi Numeerinen arviointi Sanallinen arviointi Suullinen arviointi 3K Katseleminen, keskusteleminen, kyseleminen 5

6 Kuka johtaa arviointia? käsitekarttojen tekeminen kyseleminen portfoliot opettajan havainnointi arviointikeskustelu opettajan itse tekemät tehtävät ja kokeet itsearviointi standardoidut testit Oppilas johtaa arviointia Opettaja johtaa arviointia Kun arviointi voi aikaansaada suoranaisen arviointiuran 1/2 Oppilaille muodostuu tehokkaasti (piilo-opetussuunnitelmalli-sesti) sekä oppijaura että arviointiura (Eccleston & Pryor 2003; Miller & Lavin 2007): vallitseva arviointikulttuuri vaikutus oppimisprosessiin vaikutus oppimistuloksiin Arviointikulttuuri muovaa a. oppilaan käsitystä itsestä ja tuottaa vertailevia kokemuksia oppilastovereista ja heidän oppimiskyvykkyydestään sekä b. käsityksiä toivottavista ja hyväksyttävästä arviointitavoista. käsitys itsestä oppijana vaikutus oppimisprosessiin vaikutus oppimistuloksiin Käsitys itsestä oppijana vaikuttaa siihen, miten oppilas a. voi hyödyntää arviointia oppimisessaan ja b. ennakoi (asennoituu) arviointeihin. joillekin oppilaille muodostuu kouluvuosien aikana kielteinen arviointiura (= toistuva kokemus, ettei kykene ja kelpaa) opettajan merkitys arviointikulttuurin luomisessa on suuri 6

7 Kun arviointi voi aikaansaada suoranaisen arviointiuran 2/2 Eccleston ja Pryor (2003) sanovat: Assessment career might therefore form a strand in the socialising effects of an assessment regime in shaping learners identities within a learning programme. If learners see both formative and summative assessment as emotional events, where one s very sense of self might be invested for a possible risk of failure, then an assessment career becomes a powerful strand in a learning career with its formation of learning habitus or identity. (p. 481). Vahvuuksiin perustuva arviointi (strength-based assessment) on kansainvälinen vastaus positiivisen arviointiuran rakentamiseen ei ole yksittäinen arviointimenetelmä vaan opettajan (myös oppilaisiinsa kasvattama) koko suhtautumistapa oppimisen ohjaukseen (feedforward) ja sitä koskevaan palautteeseen (feedback) virheitä ja puutteita jokainen osaa luetella, mutta vahvuuksien kautta kehittämistä pitää opetella ja erilainen oppiminen edellyttää erilaista arviointia 7

8 Kuumetta ei voi mitata vatupassilla Kognitiivisen sisällön oppiminen voidaan arvioida pätevästi yksilöllisellä kynä-paperi -kokeella Tutkiva oppiminen soveltuu autenttisen arvioinnin erilaisiin versioihin (ratkaistaan ongelmia myös arviointitilanteessa ja annetaan aikaa, kotikoe ) Yhteisöllinen oppiminen edellyttää yhteisöllisiä arviointitapoja (esim. ryhmän esitys tai arviointi) Ilmiökeskeinen (eheyttävä/ainerajat ylittävä) oppiminen on varmistettava ilmiöihin kohdentuvin ja sovelletuin arviointitavoin (esim. portfolio, ongelmanratkaisu) Tietokoneavusteisesti tapahtunut oppiminen on arvioitava tietokoneavusteisesti (esim. autenttinen tiedonhakutehtävä koneella, lokitiedostojen käyttö) jne jne jne Katsaus kansainväliseen tutkimukseen (37 kv-artikkelia ) 8

9 Seuraavan tutkimuskatsauksen kaksi rajausta Puhun erityisesti arvioinnista oppimisesta tukena, osin myös arvioinnista oppimisena. Arviointi oppimisen tukena (assessment for learning) Oppimisen arviointi (assessment of learning) Arviointi oppimisena (assessment as learning) Keskityn opetussuunnitelman perusteiden käsitteillä ilmaisten opintojen aikaiseen arviointiin. Päättöarviointi Opintojen aikainen arviointi Mitä kansainväliset tutkimusjulkaisut sanovat oppimisen arvioinnista? Atjonen 2013a Erilaiset arviointitavat erilainen näyttömahdollisuus Vuorovaikutukseen perustuva arviointi motivaatio, osallisuus, valtasuhde Formatiivinen (assessment for learning) arviointi tavoitetila, palaute Palaute oikeus ja velvollisuus Arviointipelin tunnistaminen 9

10 Mitä kansainväliset tutkimusjulkaisut sanovat oppimisen arvioinnista? Atjonen 2013a Arvioinnin equality ja equity molempia tarvitaan Opettajien suoritusorientaatio arviointien kapea-alaistuminen Suullinen arviointi ja itsearviointi lisääminen tarpeen Vertaisarviointi palautemäärä ja stressi Numero sanallisen arvioinnin mitätöijänä Mitä kansainväliset tutkimusjulkaisut sanovat oppimisen arvioinnista? Atjonen 2013b Kokonaisuutena ottaen niin sanotut vaihtoehtoiset arviointitavat ovat liian vähän käytössä. vaihtoehtoisten tapojen torjunnan tyypilliset syyt: koettu työläys, tottumuksen puute, soveltumattomuus oppiaineen tarpeisiin, subjektiivisuusepäily, paineet pedagogiikan muuttamiseen eräissä maissa toistuvat kansalliset kouluarvioinnit ( testit ) rajoittavat opettajien arviointikokeiluja KOONTIMOTTO: Hyvän arvioinnin tekeminen ei vie sen kauemmin kuin huonon. (Brookhart 2004) 10

11 Noin 10 min. porinaa vieressä istuvan kanssa: Mitäs ajattelet tähän asti kuulemastasi? Haluaisin jatkaa, jos maltat kuunnella KIITOS! 11

12 Edelle luetellut kv-tutkimuksien tulokset voit kuunnella tarkemmin selitettyinä netistä PowerPoint-dioihin tallennettuna äänitteenä sivun kohdasta H.7 Näytön paikka? Tutkimustuloksia oppilasarvioinnista [Löydät nettisivun myös näin: Kirjoita Googleen: Atjonen homepages klikkaa hakuosumalistan linkkiä Professor Päivi Atjonen s Homepages klikkaa kotisivun vasemmasta reunasta kohta 16 more child pages ja sieltä em. otsikko ja lataa ppsx-tiedosto kuunneltavaksesi.] Kohti kehittävää oppimisen arviointia 12

13 Ops tulee, oletko valmis? Oppimisen arviointi Ohjata Kannustaa Monipuolinen Edistyminen Kuvaileva Formatiivinen Laadullinen Laadullinen Vuorovaikutus Monipuoliset mahdollisuudet Parhaat tavat... Opetussuunnitelmassa sanottua Perusopetuslain mukaan oppilaan arvioinnin tehtävänä on ohjata ja kannustaa opiskelua sekä kehittää oppilaan edellytyksiä itsearviointiin. Oppilaan oppimista, työskentelyä ja käyttäytymistä tulee arvioida monipuolisesti. Oppimisen arviointi sisältää opinnoissa edistymisen ja osaamisen tason arviointia sekä palautteen antamista niistä. Edistymistä tarkastellaan suhteessa aiempaan osaamiseen ja asetettuihin tavoitteisiin. Oppimista edistävä palaute on luonteeltaan laadullista ja kuvailevaa, oppimisen solmukohtia analysoivaa ja ratkovaa vuorovaikutusta. Se ottaa huomioon oppilaiden erilaiset tavat oppia ja työskennellä. Oppilaita ohjataan palautteen avulla tiedostamaan edistymisensä ja jäsentämään oman oppimisensa eri vaiheita sekä löytämään erilaisia keinoja tavoitteisiin pääsemiseksi. 13

14 Opetussuunnitelmassa sanottua Pääosa opintojen aikaisesta arvioinnista on luonteeltaan formatiivista. Opetus ja arviointikäytännöt suunnitellaan ja toteutetaan siten, että oppilaalla on riittävästi monipuolisia mahdollisuuksia osoittaa osaamistaan... Opettajat huolehtivat, että tavoitteet ja arviointiperusteet ovat oppilaiden tiedossa. opettajat auttavat oppilaita ymmärtämään tavoitteet ja etsimään niiden saavuttamiseksi parhaita toimintatapoja. edellyttää opettajilta oppimisprosessiin liittyvää havainnointia ja vuorovaikutusta oppilaiden kanssa. Kootut ops-avainsanat arvioinnin kehittävyyden näkökulmasta Vuorovaikutus Edistyminen, aiempi osaaminen Ohjata, kannustaa Monipuolinen, erilaiset tavat Tavoitteet, arviointiperusteet Laadullinen, kuvaileva Palaute, tuki 14

15 Opetussuunnitelmassa sanottua Perusopetuksen opetussuunnitelman perusteet 2004 oppilasarviointi Perusopetuksen opetussuunnitelman perusteet 2014 oppimisen arviointi Mikä kehittävä arviointi? 15

16 Mikä kehittävä arviointi? Atjonen 2015 Michael Quinn Patton* (tutkijakollegoineen) havainnollistaa summatiivisen, formatiivisen ja kehittävän arvioinnin erot kokkausesimerkillä: Summatiivinen arviointi Formatiivinen arviointi Kehittävä arviointi * Patton Developmental evaluation. (ks. myös Dozois ym. 2010; Gamble 2008; Wilson-Grau 2012) Mikä kehittävä arviointi? Atjonen 2015 Kehittävä arviointi on miltei synonyymi formatiiviselle arvioinnille tai assessment-for-learning -ajattelulle. ei ole uusi ja yksi temppu tai menetelmä vaan on arvioinnin ajattelutapa, joka tähtää siihen, että arviointi tuottaisi käytettävää tietoa, että tietoa saataisiin ajoissa oppimis/työprosessin aikana, että ajateltaisiin painotetusti tulevaa oppimista ja että lähestymistapa olisi arvostava*. omaa yhteisiä piirteitä esim. voimaannuttavan, osallistavan ja demokraattisen arvioinnin kanssa. selkeä liittymä vahvuusperusteiseen arviointiin *Patton: appreciative inquiry 16

17 Mikä kehittävä arviointi? Atjonen 2015 on miltei synonyymi formatiiviselle arvioinnille tai assessment-for-learning -ajattelulle. ei ole uusi ja yksi temppu tai menetelmä vaan on arvioinnin ajattelutapa, joka tähtää siihen, että arviointi tuottaisi käytettävää tietoa, että tietoa saataisiin ajoissa oppimis/työprosessin aikana, että ajateltaisiin painotetusti tulevaa oppimista ja että lähestymistapa olisi arvostava. omaa yhteisiä piirteitä esim. voimaannuttavan, osallistavan ja demokraattisen arvioinnin kanssa selkeä liittymä vahvuusperusteiseen arviointiin Kehittävän arvioinnin periaatteet Atjonen 2015b 17

18 Kehittävän arvioinnin periaatteet 1/4 Atjonen 2015b AKTIVOINNIN PERIAATTEET: Arvioitavien osallistaminen: oppilaiden äänen kuuleminen (ei yksinomaan opettajan määräämiä arviointimuotoja, mahdollisuus keskusteluun) myös oppilaiden ehdottamien arviointitapojen kokeilu oppilaiden arvostamien arviointitapojen kyseenalaistus Arviointiosallisten (sidosryhmien) mukaan saaminen: mukana ne, joita arviointi eri tavoin koskee ja joihin se vaikuttaa (stakeholder = has something at stake) eri opettajien yhteistyö samojen oppilaiden arvioinnissa huoltajien kanssa keskustelu arviointikumppanuuden merkeissä Kehittävän arvioinnin periaatteet 2/4 Atjonen 2015b METODISET PERIAATTEET: Monimenetelmäisyyden hyödyntäminen: erilaiset arviointimenetelmät erilainen oppiminen esiin ns. vaihtoehtoiset formatiivisen arvioinnin menetelmät (muut kuin kynä-paperi -kokeet) käyttöön nykyistä enemmän Vuorovaikutteisuuden lisääminen: 3K tehokkaaseen käyttöön = katseleminen, keskusteleminen, kyseleminen vertaisarviointi, arviointikeskustelut, portfoliot, suulliset arviointitilanteet, esitykset 18

19 Kehittävän arvioinnin periaatteet 3/4 Atjonen 2015b MUKAUTUVUUDEN PERIAATTEET: Kontekstisensitiivisyyden parantaminen: oppimistarpeen tunnistaminen kohdalliset ja riittävästi vaihtelevat arviointimenetelmät autenttinen arviointi, arvioinnin räätälöinti (vrt. equality- ja equity-periaatteet) Prosessiperiaatteen kunnioittaminen: ohjaus- ja palautetietoa oppimisprosessin aikana niin, että sitä voi hyödyntää uuden oppimisessa arvioinnin ajoitus: milloin palaute tai todistus on viisainta antaa, että keskusteluyhteys säilyy? jatkuvan havainnoinnin systemaattinen hyödyntäminen Kehittävän arvioinnin periaatteet 4/4 Atjonen 2015b PÄÄMÄÄRÄTIETOISUUDEN PERIAATTEET: Paljastamiseen (uuden tiedon tuottamiseen) pyrkiminen: sekä kognitiivisen että muun oppimisen (esim. työskentelytaidot) huomioiminen oppilaiden eri vahvuuksien tunnistaminen myös virheistä oppiminen luottamuksen ilmapiirissä Tulevaisuuteen orientoituminen: pohdittava, millainen ja missä oppimisprosessin vaiheessa annettu ohjaus tai palaute voimaannuttaa vahvuuksien tunnistamisen ansiosta tai aidosti auttaa edessä olevissa oppimisen haasteissa pois pelkkään peruutuspeiliin tuijottamisesta (feedback) kohti tulevan ennakoimista (feedforward) 19

20 Kehittävän arvioinnin kehämalli Arvot Periaatteet Vaikuttavuus Toimijuuden rakentaminen Vuorovaikutteisuus Arvioitavien osallistaminen Aktivointi Sidosryhmien sisällyttäminen Arviointien hyödyntäminen Metodi Luotta- Erilai- Arvostamus suus vuus Mukautuvuus Monimenetelmäisyys Nykykäytännön paljastaminen Päämäärä Tulevaisuuteen suuntautuminen Prosessin huomioon ottaminen Kontekstisensitiivisyys Kriittisyyden säilyttäminen Jatkuvuuden turvaaminen Kehittävän arvioinnin kehämalli: Sovellus oppimisen arviointiin Minä kykenen Keskustelut Itse- ja vertaisarviointi Aktivointi Huoltajien mukaantulo Minä hyödyn Arvot Periaatteet Vaikuttavuus Metodi Luotta- Erilai- Arvostamus suus vuus Mukautuvuus Monimenetelmäisyys Vahvuuksien/vaikeuksien tunnistam. Päämäärä Luottamus tulevaisuuteen Jatkuva havainnointi Autenttinen arviointi Minä tunnistan Minä etenen 20

21 Kehittävä oppimisen arviointi tarkoittaa, että oppilas tarvitsee palautetta oppimisesta ja oppimiselleen ominaisista vahvuuksista. palaute kohdentuu etenkin tulevan oppimisen kannalta tärkeisiin seikkoihin ja on sen suhteen oikein ajoitettua. arviointitavat tai -menetelmät joustavat oppilaan valmiuksien ja opittavan asian mukaan. arvioinnin vuorovaikutteisuus parantaa arvioinnin osuvuutta ja vahvistaa oppilaan toimijuuden kokemusta. formatiivisen arvioinnin nimissä oppilasta ei pakoteta jatkuvaan, varsinkaan yksipuolisten näyttöjen antamiseen. ymmärretään oppimisen, kasvun ja kehittymisen olevan ensisijaisesti muuta kuin suorittamista ja sen rekisteröimistä. Tutkimusten mukaan oppilaalle muodostuu kouluaikana arviointiura. (Eccleston & Pryor 2003; Miller & Lavin 2007) Haluatko hänen olevan kyykytetty vai kannustettu? 21

22 Assidere 22

23 Assidere Assidere 23

24 Assidere Assidere 24

25 Assidere Assidere ja kysymys on jo itse asiassa myös pedagogiikasta ja ihmiskäsityksestä 25

26 Joitakin lähteitä Atjonen, P Hyvä, paha arviointi. Helsinki: Tammi. Atjonen, P. 2013a. Näytön paikka? Tutkimustuloksia oppilasarvioinnista. Atjonen, P. 2013b. Perusopetuksen opettajat oppilasarvioinnin tekijöinä. Teoksessa P. Atjonen (toim.) Työ arvonsa ansaitsee. Oulu: Oulun yliopisto, Atjonen, P. 2014a. School-focused evaluation in focus: Finnish teachers experiences of internal and external evaluation of schools. Nordic Studies in Education 24 (4), Atjonen, P. 2014b. Teachers views of their assessment practice. The Curriculum Journal 25 (2), Atjonen, P. 2015a. Kehittävä arviointi kasvatusalalla. Joensuu: Kirjokansi. Atjonen, P. 2015b. Your career will be over Power and contradictions in the work of educational evaluators. Studies in Educational Evaluation 45, Black, P. & Wiliam, D Assessment and classroom learning, Assessment in Education 5 (1), Clark, I Formative assessment: Assessment is for self-regulated learning. Educational Psychology Review 24 (2), Davies, D. & Neitzel, C A self-regulated learning perspective on middle grades classroom assessment. The Journal of Educational Research 104 (3), Donaldson, S The future of evaluation. Charlotte: IAP Information Age Publishing. Ecclestone, K. & Pryor, J Learning careers or assessment careers? The impact of assessment systems on learning. British Educational Research Journal 29 (4), Frey, B. & Schmitt, V Coming to terms with classroom assessment. Journal of Advanced Academics 18 (3), Green, S., Johnson, R., Kim, D. & Pope, N Ethics in classoom assessment practices: Issues and attitudes. Teachers and Teacher Education 23,

27 Joitakin lähteitä Harlen, W Teachers summative practices and assessment for learning tensions and synergies. The Curriculum Journal 16 (2), Kirton, A., Hallam, S., Peffers, J., Robertson, P. & Stobart, G Revolution, evolution or a Trojan horse? Piloting assessment for learning in some Scottish primary schools. British Educational Research Journal 33 (4), Miller, D. & Lavin, F But now I feel I want to give it a try : Formative assessment, self-esteem and a sense of competence. The Curriculum Journal 18 (1), Mullola, S Teachability and school achievement? Is student temperament associated with school grades? University of Helsinki. Faculty of Behavioral sciences. Research Reports 341. Patton, M Developmental evaluation. Applying complexity concepts to enhance innovation and use. New York: Guilford press. Pepper, M. & Pathak, S Classroom contribution: What do students perceive as fair assessment? Journal of Education for Business 83 (6), Santiago, P Trends in evaluation and assessment. Teoksessa OECD. Synegies for better learning. An international perspective on evaluation and assessment, Stiggins, R. & Chappuis, J Using student-involved classroom assessment to close achievement gaps. Theory Into Practice 44 (1), Restorff, D., Sharpe, M., Abery, B. Rodriguez, M & Keol Kim, J Teacher perceptions of alternate assessments based on alternate achievement standards: Results from a three-state survey. Research & Practice for Persons with Severe Disabilities 37 (3), Rieg, S Classroom assessment strategies: What do students at-risk and teachers perceive as effective and useful? Journal of Instructional Psychology 34 (4), Wiliam, D., Lee, C., Harrison, C. & Black, P Teachers developing assessment for learning: Impact on student achievement. Assessment in Education 11 (1),

28 Lisämateriaalia 1) Haastatteluvideo Arviointi antaa positiivista potkua oppimiselle osoitteessa helpoiten löytää googlettamalla sanat positiivista potkua oppimiselle 2) PowerPoint-dioihin tallennettu äänite Näytön paikka? Tutkimustuloksia oppilasarvioinnista Atjosen wiki-sivuilta kirjoita Googleen Atjonen homepages klikkaa hakuosumalistan linkkiä Professor Päivi Atjonen s Homepages Päivi Atjonen - UEF-Wiki klikkaa kotisivun vasemmasta reunasta kohta 16 more child pages ja sieltä em. otsikko ja lataa ppsx-tiedosto kuunneltavaksesi 3) Artikkeli Perusopetuksen opettajat oppilasarvioinnin tekijöinä teoksessa P. Atjonen (toim.) Työ arvonsa ansaitsee. Oulu: Oulun yliopisto, ) Artikkeli Teachers views of their assessment practises -lehdessä (2014) The Curriculum Journal 25 (2), ) Kirja Hyvä, paha arviointi (2007, Helsinki: Tammi) saa enää kirjastoista mutta on verkossa osoitteessa 6) Lyhyt juttu Arvioinnista ei tarvitse enää ahdistua osoitteessa fi/filtdk/kasvatustieteellisessa-tutkimuksessa-tapahtuu helpoiten löytää kirjoittamalla Googleen jutun otsikon 7) Kirja Kehittävä arviointi kasvatusalalla (2015, Joensuu: Kirjokansi) helpoiten löytää kirjoittamalla Googleen Atjonen homepages pääsivulla on kirjan kuva ja linkki sisällysluetteloon (ks. 28

29 Kiitos! 29