Arvo(sana)n mekin ansaitsemme taitotasosta riippumatta?

Arvo(sana)n mekin ansaitsemme taitotasosta riippumatta? Raili Hildén raili.hilden@helsinki.fi Juhani Rautopuro juhani.rautopuro@karvi.fi 30.9.2015 Forum Criteriorum

Tasa-arvo ja yhdenvertaisuus koulutuksessa Mahdollisuuksien tasa-arvo yhteiskunnallisen oikeudenmukaisuuden ja demokratian edellytys Lahjakkuuden tasa-arvo: vanhempien koulutustason ja sosioekonomisen aseman merkitys (Coleman ym. 1966; Husén 1972; Bourdieu & Nice 1990). Sukupuolten tasa-arvo (Bradley 2002) Perusopetuslaki (628/1998): perusopetuksen tulee edistää sivistystä ja tasa-arvoa yhteiskunnassa sekä oppilaiden edellytyksiä osallistua koulutukseen ja muutoin kehittää itseään elämänsä aikana Yhdenvertaiset mahdollisuudet opetukseen ja koulutukseen ja keskeisten tietojen ja taitojen saavuttamiseen (Jakku-Sihvonen 2013) Yhdenvertaisuus perustuslaillinen oikeus (731/1999) Yhdenvertaisuuslaki (1325/2014)

Formatiivinen arviointi opintojen aikana pedagoginen tehtävä Summatiivinen opintojen päättyessä pedagoginen ja raportoiva tehtävä Päättöarvioinnilla lisäksi selektiivinen tehtävä ja sen myötä korkeat validiusvaatimukset Aineen osaaminen ( x%) + työskentely (y%) = arvosana (100%) x ja y mielivaltaisia (?) Hyvän osaamisen kuvaus = arvosana 8

Havaittuja ongelmia: Arvosanan 8 saaneiden oppilaiden osaaminen vaihtelee jopa yhtä paljon kuin kaikkia arvosanoja saaneiden (esim. Summanen 2014) Samalla osaamisella voi saada useita eri arvosanoja (esim. Hildén & Rautopuro 2014) Arvosanat suhteutuvat koulun yleiseen osaamistasoon, eivät kriteereihin (esim. Quakrim-Soivio 2012, Mattila & Rautopuro 2013) = yhden arvosanan eriytymätön kriteeriperusteinen kuvaus ei riitä turvaamaan oppilaiden tasa-arvoista ja yhdenvertaista kohtelua

Perusopetuksen päättöarvosanan määräytyminen Kieliaineissa käytössä eurooppalaiseen viitekehykseen perustuva tasokuvausasteikko (POPS 2004) A-oppimäärissä määritelty yksi hyvän osaamisen taso kullekin osataidolle B-oppimäärissä tavoitetasoja ollut kaksi (liukuva tasotavoite) Muissa aineissa ei tasoasteikkoa, arvosanan 8 kuvaus laadittu kunkin aineen luonteen mukaisesti

Tutkimusongelmat 1. Mikä on arvosanan ja osaamisen yhteys aineissa, joissa hyvä osaaminen määritellään taitotasoasteikkoon perustuen? 2. Mikä on arvosanan ja osaamisen yhteys aineissa, joissa tavoitekuvaus on liukuva? 3. Mikä on arvosanan ja osaamisen yhteys aineissa, joissa ei ole käytettävissä tasokuvausasteikkoa? 6

Tutkimusaineisto ja menetelmät Opetushallituksen ja Karvin toteuttamat oppimistulosten arvioinnit - Vieraat kielet ja toinen kotimainen kieli ruotsi 2013 Kieli ja oppimäärä Koulut Oppilaat suomi ruotsi suomi ruotsi A-englanti 94 15 2966 510 A-ruotsi 73-1679 - A-ranska 90-1023 - B-ranska 76 23 909 301 A-venäjä 17-150 - B-venäjä 85 4 823 31 A-saksa 76-1010 - B-saksa 89 19 1078 271 - Terveystieto 2014 (n=3 652) - Arviointitehtävät - Kyselylomake (taustatiedot, käytänteet ja käsitykset) 7

Osataitojen keskinäiset korrelaatiot A-ruotsi Luetun ymmärtäminen Puhuminen Kirjoittaminen Kuullun r = 0,80 r = 0,71 r = 0,75 ymmärtäminen r² = 64 % r² = 50 % r² = 56 % Luetun r = 0,70 r = 0,74 ymmärtäminen r² = 49 % r² = 55 % r = 0,78 Puhuminen r² = 61 % 8

Ymmärtämistaitojen ja arvosanan yhteys taitotasokuvausten kanssa: A-ruotsi Ruotsin arvosana Havaintojen lukumäärä Homogeeniset osajoukot (α =0,05) Kuullun ymmärtäminen Havaintojen lukumäärä Homogeeniset osajoukot (α =0,05) Luetun ymmärtäminen 1 2 3 4 5 1 2 3 4 5 4 10 26,4 9 24,8 5 68 31,0 31,0 70 32,4 6 221 40,1 222 43,0 7 405 52,0 404 55,1 8 393 62,9 393 66,2 9 396 72,3 72,3 397 76,9 10 146 78,8 148 85,7 p-arvo 0,80 0,07 1,00 0,05 0,42 0,14 1,00 1,00 1,00 0,05 Cohenin d d = 0,51 d = 0,59 d = 0,70 Efektin koko Kohtalaisen suuri Kohtalaisen suuri Kohtalaisen suuri 9

Tuottamistaitojen ja arvosanan yhteys taitotasokuvausten kanssa: A-ruotsi Ruotsin Havaintojen Homogeeniset osajoukot (α =0,05) Havaintoje Homogeeniset osajoukot (α =0,05) arvosana lukumäärä Puhuminen n Kirjoittaminen 1 2 3 4 5 6 lukumäärä 1 2 3 4 5 6 5 39 2,25 A1.2 66 1,37 A1.1 6 105 3,00 A1.3 217 1,78 A1.2 7 192 4,08 A2.1 392 2,83 A1.3 8 203 4,87 A2.2 380 3,77 A2.1 9 209 5,57 B1.1 392 4,82 A2.1 10 81 6,51 B2.1 146 5,69 B2.1 10

Entä liukuvin taitotasokuvauksin? Arvosana B-saksa (A1.1 A1.2) Puhuminen (n=1041) Kirjoittaminen (n=1218) B-venäjä (A1.1 A1.2) Kirjoittaminen Puhuminen (n=637) (n=687) 4 Alle tavoitetason Alle tavoitetason 5 Tavoitetaso Tavoitetaso 13,3 % 16,5 % 6 33,8 % 51,9 % 7 Tavoitetaso Tavoitetaso 8 53,4 % 41,9 % 9 Yli tavoitetason Yli tavoitetason Yli tavoitetason 10 66,2 % 48,1 % Yli tavoitetason 41,6 % 33,3 % 100 % 100 % 100 % 100 % r = 0,59 r = 0,65 r = 0,50 r = 0,59 r² = 35 % r² = 42 % r² = 25 % r² = 35 % 11

Entä ilman tasokuvauksia? Terveystieto Terveystiedon arvosana Havaintojen Lukumäärä Homogeeniset osajoukot (α =0,05) 1 2 3 4 5 4 2 13,4 5 60 40,3 6 227 44,9 44,9 7 784 50,3 50,3 8 1176 57,9 57,9 9 1096 67,2 67,2 10 255 74,1 p-arvo 1,00 0,33 0,08 0,43 0,75 12

Käsitysten ja käytänteiden yhteys arvosanaan: kotitehtävät Käsitys omasta osaamisesta Ruotsin arvosana r = 0,67 (r ² = 45 %) Oppiaineesta pitäminen r = 0,50 (r ² = 25 %) Oppiaineen hyödyllisyys r = 0,43 (r ² = 18 %) 10 1 3 9 0,3 2 10 13 21 83 67 Kotitehtävien säännöllinen tekeminen (%) 8 1 5 17 30 48 En koskaan Vain harvoin 7 2 9 25 30 34 Joskus Usein 6 3 13 35 25 24 Lähes aina 5 17 23 37 13 11 4 10 50 10 20 10 13

Käytänteiden yhteys arvosanaan sukupuolittain: kotitehtävät

Käytänteiden yhteys arvosanaan sukupuolittain: kotitehtävät

Päätelmiä Jos tasoasteikko on käytettävissä, arvosanan ja osaamisen vastaavuus paranee Jos useampi tavoitetasoaskelma, vastaavuus heikkenee Jos tasoasteikkoa ei ole, vastaavuus heikko Työskentelyn osuus epämääräinen Suosituksia: - Useampi arvosanakuvaus (hyväksytty/hylätty) - Erotetaan työskentely osaamisesta - Määritellään painokertoimet - Kaikkiin oppiaineisiin tasoasteikko Kysymys: Päättökoe???!! pitääkö valmistautua? 16

17