KEHITTÄVÄ ARVIOINTI OSANA YHDISTYMISPROSESSIA. Jukka Ahonen

Transkriptio

1 KEHITTÄVÄ ARVIOINTI OSANA YHDISTYMISPROSESSIA Jukka Ahonen

2 KESKEISET PERIAATTEET AKTIVOINTI * Arvioitavien osallistaminen * Sidosryhmien sisällyttäminen METODI * Monimenetelmäisyys * Vuorovaikutteisuus PÄÄMÄÄRÄ * Nykykäytäntöjen paljastaminen * Tulevaisuuteen suuntautuminen MUKAUTUVUUS * Kontekstisensitiivisyys * Prosessin huomioiminen 2

3 KEHITTÄVÄN ARVIOINNIN TUTKIMUKSISTA OPETUS- JA KASVATUSALALLA Päivi Atjosen tutkimus kehittävän arvioinnin periaatteiden ilmenemisestä arviointiraporteissa vuosina (N = 22) Kasvatus-lehti 3/2014 Osallisuus 85 Monimenetelmäisyys 77 Vuorovaikutuksen mahd. 62 Tulevaisuusorientaatio 52 Kontekstisensitiivisyys 49 Sidosryhmien muk.ott. 41 Prosessin huomioiminen 34 Nykykäyt. paljastavuus 17 Maininnat yhteensä 417 3

4 HAVAINTOJA OPPILAITOSTEN ARVIOINTIPROSESSEISTA Tähän mennessä on yleensä huomioitu: - Osallisuus - tekijät tekevät - Vuorovaikutuksen mahdollistaminen - Tulevaisuusorientaatio - Kontekstisensitiivisyys tekijät tuntevat työn - Sidosryhmien mukaan ottaminen myös vanhemmat - Prosessin huomioiminen aloitettu työ etenee 4

5 MIHIN VOISI VIELÄ KIINNITTÄÄ HUOMIOTA Monimenetelmäisyys * Osaavat opettajat voivat käyttää hyvinkin erilaisia tapoja opetustyön edelleen kehittämiseen. Tämä edellyttää kuitenkin yhteiseen sopimiseen perustuvaa työskentelyä jokaisen tekeminen vaikuttaa toisiin. Nykykäytäntöjen paljastavuus * Tavoitteena on hyvien käytäntöjen tunnistaminen ja turvaaminen muuttuvissa tilanteissa sekä uusien tarvittavien näkökulmien löytäminen 5

6 KEHITTÄVÄN ARVIOINNIN TUTKIMUKSISTA OPETUS- JA KASVATUSALALLA Päivi Atjosen tutkimus kehittävän arvioinnin periaatteiden ilmenemisestä arviointiraporteissa vuosina (N = 22) Kasvatus-lehti 3/2014 Osallisuus 85 Monimenetelmäisyys 77 Vuorovaikutuksen mahd. 62 Tulevaisuusorientaatio 52 Kontekstisensitiivisyys 49 Sidosryhmien muk.ott. 41 Prosessin huomioiminen 34 Nykykäyt. paljastavuus 17 Maininnat yhteensä 417 6

7 KETKÄ TOIMIVAT? Sekä arvioinnin kehittämisessä että ops-työssä suunnittelu- ja arviointivallan siirtäminen enemmän asiantuntijoilta toimijoille eli opettajille ja oppilaitosten arviointi- ja/tai ops-ryhmille on osoittanut, että kun vain ulkoiseen mittaamiseen perustuvaan muutokseen sitoudutaan usein heikosti, toimijakeskeisen arvioinnin havainnoista seuraa aktiivista toimintaa muutoksen aikaan saamiseksi. 7

8 MIHIN KESKITYTÄÄN? Tärkeämpää kuin saada kaikki osa-alueet arviointiin mukaan yhtäaikaisesti, on kahden tai kolmen elementin intensiteetti ja niiden keskinäinen yhdenmukaisuus ja loogisuus (koherenssi). Esim. OPS-työssä on tehtävä kahta asiaa yht aikaa: on saatava aikaan hyvä OPS ja seurattava mitä opiston ops-prosessissa tapahtuu 8

9 Keskustelutehtävä 1 1. Mitkä asiat/osa-alueet koulussanne on jo otettu hyvin huomioon? 2. Mitä kannattaa edelleen vahvistaa ja mitä ottaa seuraavaksi erityisen seurannan kohteeksi? 9

10 Keskustelutehtävä 2 Millaisen suunnitelman avulla saatte kokemuksenne mahdollisimman monipuolisesti käyttöön? 10

11 MUKAUTUVUUS 1 Prosessin huomioiminen: Yksi kehittävän arvioinnin ydinperusteluista on, että pelkästään päättötuloksien tai vaikuttavuuden arviointi ei tee oikeutta kasvatus- ja yhteiskunta-alan projektien saavutuksille. Oleellista on ymmärtää prosessimekanismien esiintymistä ja merkitystä monimuotoisten vaikutusten tunnistamiseksi. (Wilson & McCormack, 2006) 11

12 MUKAUTUVUUS 2 Jos tavoitteena on arvioivan kulttuurin juurruttaminen, prosesseilla on vähintään yhtä suuri merkitys kuin tuloksilla. (P.Atjonen, 2014) Fokus ei ole kuitenkaan ensisijaisesti prosessissa. Koko ajan on pidettävä mielessä, että tavoite on käyttökelpoisten tulosten aikaan saaminen. 12

13 PÄÄMÄÄRÄ 1/4 Nykykäytäntöjen paljastaminen. Kommunikatiivisessa arvioinnissa korostuu paljastavuuden periaate; onnistunut arviointi valottaa jotain, mitä ei ole ennen huomattu, se tuo esiin jotain uutta (mm. H.Niemi, 2012 ja 2013) Kehittävän arvioinnin monitahotyöskentelyä on ohjattava taiten. Tietoa on myös kerättävä metodisesti oikein ja tieto on dokumentoitava kunnolla. 13

14 PÄÄMÄÄRÄ 2/4 Vastuuvetäjien rooli on tärkeä; vaihtoehtoja ovat erikseen nimetty ohjausryhmä, johtoryhmä, sisäinen tai ulkoinen asiantuntija/konsultti, muu johto On löydettävä turvattavat, toimivat käytännöt ja toisaalta epätarkoituksenmukaiset käytänteet; näin avautuvat uudet tulevaisuuden vaihtoehdot 14

15 PÄÄMÄÄRÄ 3/4 Tulevaisuuteen suuntautuminen: Kehittävä arviointi pitää jo terminä sisällään eteenpäin katsomisen. Työssä tarvitaan kehittämistä edistävää tietoa ja ideoita. Työn on perustuttava havaintoihin ja ammattilaisten keskenään työstämiin kokemuksiin. Termejä: jatkuvuus, vakiinnuttaminen ja juurruttaminen 15

16 PÄÄMÄÄRÄ 4/4 Monet tutkijat, mm. Leithwood, Patton ja Stame, epäilevät arviointitulosten siirrettävyyttä -> prosessi on aina uniikki! Vaativimpiin odotuksiin kuuluu arviointikohteiden, esim. oppilaitosten juurruttaminen evaluoivaan kulttuuriin On opittava tarkastelemaan omaa toimintaa ilman ulkoista motivointia (EVALUAATIO on jonkin asian tai toiminnan arvon, merkityksen tai ansion määrittelemistä, Scriven 1991) 16

17 Jukka Ahonen Oppilaitosjohdon kouluttaja ja työnohjaaja