OPPIMISTULOSTEN ARVIOINNIN SÄHKÖISTÄMINEN PERUSOPETUKSESSA JA AMMATILLISESSA KOULUTUKSESSA Opetusneuvos Anu Räisänen Erikoistutkija Jari Metsämuuronen
OPPIMISTULOSTEN ARVIOINTIJÄRJESTELMÄ Kohteena perusopetus ammatillisena peruskoulutuksena järjestettävä koulutus Kaksi järjestelmää näyttöihin perustuva testiperustainen 2
NYKYINEN OPPIMISTULOSTEN ARVIOINTI Ammatillinen koulutus Arvioinnin kohteena on vuosittain 2-4 tutkintoa (OKM:n arviointiohjelma) Tiedot kootaan kolmen vuoden ajalta Excellomakkeella vuosittain Koulutuksen järjestäjät kokoavat tiedot opintohallintojärjestelmistään ja toimittavat ne Karviin Karvi kokoaa yhteenvedon tiedoista Koulutuksen järjestäjille lähetetään pikapalautteet postitse 3
NYKYINEN OPPIMISTULOSTEN ARVIOINTI Yleissivistävä koulutus Arvioinnin kohteena on vuosittain 2-4-(6) oppiainetta (OKM:n arviointiohjelma) Oppimistulosarviointia varten kehitetään testejä, joilla osaamista mitataan satunnaisesti valituista kouluista Oppilaitoksissa testi suoritetaan samana päivänä, ja opettaja pisteittää kokeet ja koepaperit lähetetään Karviin, jossa aineisto syötetään dataksi. Karvi analysoi aineistot ja kirjoittaa raportin Koulutuksen järjestäjille lähetetään pikapalautteet postitse 4
SÄHKÖISTÄMISEN TAVOITTEET Arviointijärjestelmä, jossa arviointitieto kootaan sähköisesti (kokeet, kyselyt, opintohallintojärjestelmään kootut tiedot) Sähköinen palaute järjestäjille ja oppilaitoksille/kouluille Mahdollisuus tulosten vertailuihin ja analysointeihin 5
SÄHKÖINEN OPPIMISTULOSTEN ARVIOINTI - Ammatillinen koulutus Tieto tuotetaan ammattiosaamisen näytöistä Arviointi perustuu tutkintojen perusteisiin ja ammattiosaamisen näyttöjen laatuvaatimuksiin ja taustamuuttujiin Tieto suoraan opiskelijahallintojärjestelmästä Mukana kaikki tutkinnot Rekistereiden hyödyntäminen (lainsäädäntö, opiskelijatunnus) Sähköinen raportointi järjestäjille + järjestäjien omat vertailut Kansallinen seurantaraportti vuosittain Tutkintokohtaiset raportit joka 5. vuosi Tutkintokohtainen laadullinen lisäaineisto
SÄHKÖINEN OPPIMISTULOSTEN ARVIOINTI - Ammatillinen koulutus SOP osana TOR:a Tilastokeskus Todennetun osaamisen rekisteri (TOR) Karvi 7
SÄHKÖINEN OPPIMISTULOSTEN ARVIOINTI - Ammatillinen koulutus Ammattiosaamisen näyttötiedot opiskelijahallintojärjestelmästä suoraan TOR:iin Muuta tietoa Muuta tietoa näyttöihin liittyen Järjestäjäpalaute Todennetun Osaamisen Rekisteri (TOR) Muuta tietoa Kansallinen raportti
SÄHKÖINEN OPPIMISTULOSTEN ARVIOINTI - Ammatillinen koulutus Koulutuksen järjestäjät Todennetun osaamisen rekisteri Opiskelijahallinto - järjestelmät Raporttien vastaanotto Oma analysointi Tilastokeskus OHJ:ien tiedot Palaute - raportit Kansalliset raportit OKM Wera Kouluta Tietojen kerääminen Tietojen muokkaus Palauteraporttien tuottaminen Opetus - ja kulttuuritoimen rahoitusjärjestelmä Muut järjestelmät* * Kaikille tarvittaville tiedoille ei ole olemassa tai tiedossa lähtöjärjestelmää Tiedot KARVI:n käyttöön Analysointi OPH AMOP - järjestelmä Ei liity suoraan AMOP:iin KARVIN - raportit AMOP rajapinta/liityntä
SÄHKÖINEN OPPIMISTULOSTEN ARVIOINTI - Yleissivistävä koulutus Oppilaat ja opettajat tuottavat sekä testi- että taustatiedot sähköisesti testijärjestelmään Koulu- ja järjestäjäpalaute suoraan järjestelmästä Testit Sähköinen testijärjestelmä (esim. VILLE) Muuta tietoa Testit Kansallinen raportti
JÄRJESTELMÄN KEHITTÄMISEN PERIAATTEITA vähän ylimääräistä työtä jos olleenkaan järjestäjille ja oppilaitoksille luottamuskulttuuri tietojen avoimuus ja käytettävyys (tieto ajantasaisesti järjestäjillä, vertailut mahdollisia) integraatio TOR:in ja e-perusteisiin ja muihin järjestelmiin opetushallinnon yhteinen tietoarkkitehtuuri palvelukeskeinen malli; yhteisten tietovarantojen hyödyntäminen osallisuus vaatimusten määrittelyyn ammatillisessa koulutuksessa esimerkiksi työpajojen muodossa yhteinen opetushallinnon käsitteistö taustaindikaattoreiden ja mittareiden kehittäminen (tyytyväisyys, hyvinvointi-indikaattorit) tavoitteena laajentaminen näyttötutkintoina järjestettäviin ammatillisiin perustutkintoihin
JHS -MUKAINEN HANKINNAN ETENEMINEN
Määrittelyesimerkki: KÄYTTÖTAPAUKSET
VAATIMUSMÄÄRITTELY 1. Toiminnalliset vaatimukset Määrittelevät palvelun sisällön käyttäjälle ja omistajalle 2. Ei-toiminnalliset vaatimukset Varmistavat, että palvelu toimii odotetulla tavalla 3. Tekniset vaatimukset Määrittelee teknisiä reunaehtoja / malleja (esim. soa) 4. Tietoturvavaatimukset Tietoturvan ja varautumisen vaatimukset 5. Optiot Ominaisuudet, jotka eivät kuulu hankinnan perushintaan
OPPIMISTULOSTEN ARVIOINTIKEHYS /AM Järjestäjien taustatiedot: koko, sijainti, opetuskieli, järjestämismuoto, koulutustehtävän monipuolisuus Opiskelijan taustatiedot: sukupuoli, äidinkieli, valintatoive, aiemman koulutuksen keskiarvo, työkokemus Erityisopiskelijoiden erityispiirteet: esimerkiksi opetussuunnitelman mukauttaminen Prosessien laatu Työssäoppimista ja ammatti- osaamisen näyttöjä koskevat muuttujat Prosessi-indikaattorit (poissalot, keskeyttäminen, läpäisy, Opiskelijoiden tyytyväisyys Oppimistulos arvosanat Edellytykset Opettajien kelpoisuus Opettajien koulutus, työelämäjaksot Lähiopetus, opetuksen/ohjauksen määrä, koulutetut työpaikkaohjaajat kustannukset (top, näytöt) Yhteys vaikuttavuuteen - keskeyttäminen - läpäisy - työllistyminen - jatko-opinnot Ennustavat mittarit (hyvinvointi-, tyytyväisyysmittarit, opetuksen/ohjauksen laatu) Seuraustulokset (oppimistulos, työllistyminen) Tulos toiminnan seurauksena