Äidinkielen ja kirjallisuuden opetuksen foorumi 2011 Minna-Riitta Luukka & Pirjo Sinko Vallakkaampi arvio kuin muut ns. high stakes koe. Kaksoisrooli: päättökoe & kypsyyskoe Lukion opetussuunnitelma reunaehtona Arvioinnin kaksiportaisuus: opettajan arviointi sensorin (sensorien) arviointi Hyvä arviointi? luotettavaa, uskottavaa, läpinäkyvää riippumatonta, oikeudenmukaista, rehellistä vastuullista, kunnioittavaa, suvaitsevaa 1
RELIABILITEETTI Luotettavuus ja johdonmukaisuus Noudattaa kriteerejä Samat kriteerit kaikille Eri arvioijat päätyisivät suurin piirtein samaan tulokseen Kriteerit toimivat samalla tavalla eri tehtäväkerroilla. Kriteerit ovat selvät ja myös oppijoiden tiedossa. VALIDITEETTI Arvioinnin tarkkuus Arvioidaan sitä mitä oli tarkoituskin arvioida Ei sattumanvaraista Kriteerit monipuolisia ja tarkkoja Kattaa keskeisen sisällön antaa hyvän kuvan taidosta ei mittaa jotakin muuta taitoa. Ennustaa taitoa muissakin tilanteissa Kumpikaan ei riitä yksinään! Tiedetään, mitä arvioidaan ja miksi. Tehtävät laaditaan niin, että ne mittaavat järkeviä ja keskeisiä taitoja. Käytetään sopivaa arviointimenetelmää. Kriteerit muotoillaan niin, että ne liittyvät olennaisiin asioihin arvioitavan taidon kannalta ne ovat mahdollisimman yksiselitteiset yksittäiset kriteerit skaalautuvat loogisesti käytetylle asteikolle Tunnetaan arvioinnin yleiset sudenkuopat ja omat heikkoudet arvioijana. 2
assessment literacy = taito tehdä painotuksia, nähdä olennainen, perustella omat ratkaisunsa tehdä tarkkoja, luotettavia ja oikeudenmukaisia havaintoja, tiedostaa vastuu arvioitavista, tiedostaa arvioinnin seuraukset ja vaikutukset Lopulta kuitenkin vain inhimillistä toimintaa! Ymmärrys: arviointi on vallankäyttöä Rationaalisuuden ja objektiivisuuden ihanne Itsereflektointi arvioijan itsearviointi? Arviointi aina sidoksissa arvostuksiin: Kielierot (nuorten kieli- kodin kieli- koulun kieli yhteiskunnan kieli) Kulttuurierot Oppimisvaikeudet Aikaisempi tieto oppilaasta Käsiala, siisteys Kirjoitelmien sisällöt ja mielipiteet 3
Liian ankarat arvioijat Liian lempeät arvioijat Halo-efektiin sortujat (sädekehävaikutus) Asteikon keskiväliin juuttujat Tiettyjen arvosanojen ja numeroiden suosijat Vain tiettyihin piirteisiin keskittyjät Miellyttämisansa Kontrolliansa Valikoivuusansa Ymmärtämisansa Välinpitämättömyysansa Perustuu yleisvaikutelmaan tekstistä Kuvaukset ja kriteerit vain taustatietona Verrataan tekstejä toisiinsa, asetetaan paremmuusjärjestykseen Nopea, impressionistinen vaikutelma Yleiskuva tekstistä Perustuu ensisijaisesti arvioijan kokemukseen ja intuitioon > vaikea eksplikoida 4
Arvioidaan tiettyjen ennalta määriteltyjen piirteiden suhteen, kukin piirre erikseen esimerkiksi sisältö, rakenne, kieliasu, tyyli jne. Piirteiden eri tasojen kuvaukset, skaalat käytössä Saadaan tarkempaa tietoa kuin yleisvaikutelmaarvioinnista > tasaisuus helpompi saavuttaa Helpompi perustella ja eksplikoida Käyttökelpoisuus riippuu valittujen piirteiden ja asteikon onnistuneisuudesta Arviointityön helpottaminen Validiteetin ja reliabilitieetin parantaminen Läpinäkyvyden ja avoimuuden lisääminen Arvioinnin systemaattisuuden lisääminen Kriteerien merkityksen korostaminen Pisteytyksen perustelemisen helpottaminen Lähemmäs analyyttistä arviointitapaa Nykyiset peruskriteerit ja kokeen kuvaukset voimassa edelleenkin > täsmennystyötä. 5
Arvioinnin kohteet, arvioitavat piirteet VASTAUSTEKSTIN SISÄLTÖAINEKSET tehtävänannon mukaiset - myös kontekstuaaliset - havainnot, perustelut, päätelmät KÄSITTEET tarkkuus, valinnan osuvuus, käyttö, soveltaminen KIELI oikeakielisyys, kielen rakenteet, sanataivutus, kongruenssi, aikamuodot, rektio, lause- ja virkerakenteet; ymmärrettävyys, havainnollisuus, viestivyys TEKSTIN RAKENTAMINEN tekstilajin osaaminen, tyyli, vastaustekstin rakenne, viittaukset, sidoksisuus LUKUTAITO Peruslukutaito, ymmärtävä lukutaito, erittelevä, kriittinen, kulttuurinen Arvioinnin kohteet, arvioitavat piirteet: Suhde tehtävänantoon ja tekstilajiin Sisältöainekset Jäsennys, rakenne Pohjatekstin käyttö Kieli ja tyyli Lause- ja virkerakenteet, oikeakielisyys, välimerkit, sanasto- ja tyylivalinnat + kielikuvat ja -kukkaset Yleiskuva Ajattelun kehittyneisyys, ilmaisukyky 6