PALAUTE- JA SEURANTAJÄRJESTELMÄN KEHITTÄMINEN AMMATTIOSAAMISEN NÄYTTÖIHIN Arvioinnin ja kehittämisen yhteensovittamisen ohjausryhmän kokous 18.9.2009 Opetushallitus Erja Kotimäki Oulun seudun ammattiopisto
Oppimistulosten seuranta-arviointi ja palaute- ja seurantajärjestelmän kehittäminen ammattiosaamisen näyttöihin Opetushallitus ja Salon seudun koulutuskuntayhtymä käynnistivät vuoden 2008 lopussa kehittämishankkeen Sopimus yhteisen kehittämishankkeen toteuttamisesta allekirjoitettiin 20.2.2009. Salon seudun koulutuskuntayhtymä toimii hankkeen koordinaattorina ja vastaa hankkeen etenemisestä ja toteuttamisesta Mukana Turun ammatti-instituutti ja Oulun seudun ammattiopisto
Projektin tavoitteet kuvata ja raportoida ammattiosaamisen näyttöjen dokumentointiprosessi oppilashallintojärjestelmässä koota ja raportoida kolmen koulutuksen järjestäjän palaute ja kehittämisehdotukset Opetushallituksen oppimistulosten arvioinnin oppilaitoskohtaiseen palauteraporttiin koota ja raportoida kolmen koulutuksen järjestäjän palaute ja kehittämisehdotukset oppimistulosten arvioinnin taustakyselyihin
Projektin toteutus (26.2.-30.9.2009) Käytännön arkitiedon kokoaminen ammattiosaamisen näyttöjen dokumentoinnista ja taustakyselyistä kolmelta koulutuksen järjestäjältä haastattelut (opintoasiainsihteerit, opettajat, yhdyshenkilöt, asiantuntijat) Projektiryhmätyöskentely (työseminaarit) dokumentaatioprosessin kuvaukset palauteraportin analyysi (palauteraportin kulku organisaatiossa, raportin sisältö, rakenne ja tulosten käyttö ja hyödyntäminen) taustakyselyn analyysi (teemat, sisällöt, kysymysten määrä ja muotoilut, tuotetun tiedon merkitys) tulosten kokoaminen, arviointi ja raportointi Tuloksista tiedottaminen (infotilaisuudet Helsingissä ja Oulussa)
Ammattiosaamisen näyttöjen dokumentaatioprosessi Dokumentaatioprosessin vahvuudet Prosessin kulku on pääpiirteiltään toimiva ja kunnossa Arviointien kirjaamisessa käytetään koulutuksen järjestäjän arviointilomaketta Arviointitiedot tallennetaan oppilashallintojärjestelmään Opiskelijahallinto toimittaa tiedot oppilashallintojärjestelmästä Opetushallitukseen
Ammattiosaamisen näyttöjen dokumentaatioprosessi Dokumentaatioprosessin kehittämiskohteet Koulutuksen järjestäjän johto/johtoryhmät/toimielimet/neuvottelukunnat Ammattiosaamisen näyttötoiminnan seuraaminen Oppimistulostietojen seurannan parantaminen Parantamismenettelyjen määrittäminen Koulutuksen järjestäjän toimintayksiköt/tiimit/opettajat Prosessin työnkulun ja vastuiden selvittäminen (tasalaatuisuuden haaste)
Ammattiosaamisen näyttöjen dokumentaatioprosessi Ammattiosaamisen näytön arviointi: lomakkeen täyttäminen, arviointikriteerien huomioonottaminen, arvioinnin perustelujen kirjaaminen, osanäyttöjen kirjaaminen, kokonaisarvosanan muodostaminen Arviointiasiakirjojen käsittely: toimittaminen opintotoimistoon ja tietojen siirtäminen oppilashallintojärjestelmään Opinto/koulutussihteerien koulutus Työpaikkaohjaajien koulutus (erityisesti kriteeriperusteinen arviointi)
Palauteraportti oppilaitokselle/koulutuksen järjestäjälle Oppilaitoksissa toivotaan kansallista vertailutietoa eri koulutusaloilta tutkinto- ja tutkinnonosakohtaisesti Koulutuksen järjestäjät ovat palauteraportin keskeisiä käyttäjiä: tiedon rooli määriteltävä järjestäjän toiminta- ja taloussuunnitelmassa, oppimistulos mahdollisesti toiminnan sisäiseksi mittariksi Toimielimen käytännöllinen rooli oppimistulostietojen arvioinnissa: palauteraportin tietojen merkitys johdolle ja toimielimelle
Palauteraportti oppilaitokselle/koulutuksen järjestäjälle Palautetieto ei välity työelämän edustajille Opettajat käyttävät tietoa vähän; palauteraportin liittäminen ammattiosaamisen näyttöjen laadunvarmennukseen sekä opettajan ja opiskelijan arkityöhön Raportin sisältö ja muotoa kevennettävä: graafiset ja muut esitystavalliset haasteet: taulukoiden sisällöt ja tietomäärä
Ammattiosaamisen näyttöjen taustakyselyt Opettajakysely; kyselyn rakenne ja sisältö Kysymyksiä lomakkeessa on paljon, osa kysymyksistä on päällekkäisiä, onko tiedon tarve ajankohtainen Kysymyksissä ristiinarviointia; mm. opettaja arvioi työpaikkaohjaajaa Kysymysten sisältöä tulee ajantasaistaa Päällekkäisyys muiden kyselyjen kanssa tulee tarkistaa Opettajan kysely on opiskelijakohtainen; tämä on erittäin työlästä eikä tuota selkeää lisäarvoa tuloksiin
Ammattiosaamisen näyttöjen taustakyselyt Koulutuksen järjestäjät ja opettajat eivät aina tunnista tiedonkeruun hyötyä Tiedon käyttö ja hyödyntäminen etsii vielä muotoaan Taustakyselyjen tuottama tieto on kaikille toimijoille tärkeää, erityisesti opiskelijoiden ja työelämän edustajien palautteita pidetään tärkeinä Tuloksista ei juurikaan tiedoteta eri osapuolille Kyselyjen aikaväli ja kohderyhmät jatkossa? Haasteena kehittämistyön käynnistäminen tulosten pohjalta Kyselyjen liittäminen mihin arviointeihin Kokonaiskysely otoksen sijaan?
Ammattiosaamisen näyttöjen taustakyselyt Opiskelijakysely Kysymyksiä on paljon ja osa kysymyksistä on vaikeasti avautuvia, so. ymmärtääkö opiskelija. Selkokieliset kysymykset olisivat tarpeen erityisesti maahanmuuttajataustaisille opiskelijoille Kyselyjen määrä; kuinka usein kysely tulee vastattavaksi yhden opiskelijan kohdalla
Ammattiosaamisen näyttöjen taustakyselyt Työelämän edustajan kysely Kysymyksiä on paljon ja osa kysymyksistä on vaikeasti avautuvia, ymmärtääkö työelämän edustaja. Kysymysten ymmärrettävyys; so. työelämän kielen tärkeys Työelämän vastaukset oppilaitoskohtaisesti saattavat olla puutteellisia eivätkä ole vertailukelpoisia Työelämän edustajat eivät ymmärrä opetusalan kieltä
JOHTOPÄÄTÖKSIÄ JA SUOSITUKSIA Ammattiosaamisen näyttöjen arviointitietojen pohjalta tapahtuva kehittämistyö ei ole vielä muotoutunut Kolmiportaiseen arviointiasteikkoon siirtyminen tuo uusia haasteita oppimistulostietojen käyttämiselle Oppimistulostietojen kytkeminen palautetietoon (työssäoppiminen, ammattiosaamisen näytöt) Verkostoyhteistyö (kehittäminen, kokemusten vaihto) Koulutusta eri osapuolille (opettajat, opintosihteerit, yhdyshenkilöille)
JOHTOPÄÄTÖKSIÄ JA SUOSITUKSIA Dokumentaatioprosessi Yhteistyö oppilashallinto-ohjelmistojen tarjoajien kanssa arviointitietojen tallentaminen sujuvaksi Arviointitietojen siirto Opetushallitukseen verkkopalvelun kautta? Koulutusta opintoasiainsihteereille Taustakyselyt Kyselyjen tuottama tieto tärkeää kyselyt tulee vakiinnuttaa Kyselyjen sisältö tulee ajankohtaistaa ja tulosten levittämiseen ja hyödyntämiseen kiinnitettävä huomiota
JOHTOPÄÄTÖKSIÄ JA SUOSITUKSIA Taustakyselyt (jatkoa) Kyselyjen arviointitiedot kytkettävä työssäoppimisen valtakunnalliseen ja alueelliseen tietoon Työssäoppimisen ja ammattiosaamisen näyttöjä koskevia kyselyjä tulee arvioida kokonaisuutena (määrä, sisällöt) Kehittämiseen ja hyvien käytäntöjen käyttöönottoon tulee luoda verkostoja, rakenteita ja taloudellisia kannustimia
JOHTOPÄÄTÖKSIÄ JA SUOSITUKSIA Oppimistulostiedot ja oppilaitoskohtainen palaute Palauteraporttia ei ole laajalti hyödynnetty Raportointi selkeämmäksi ja helpommin käytettäväksi Verkkopalvelu koulutuksen järjestäjille oppimistulostiedon tallentamiseen, tiedon välittämiseen ja tulosten raportointiin Palvelun tulisi kattaa myös työssäoppimista koskevia tietoja ja esimerkkejä hyvistä käytännöistä sekä työssäoppimista ja ammattiosaamisen näyttöjä koskevat kehittämishankkeet Esiselvitys verkkopalvelun sisältötarpeista koulutuksen järjestäjän ja työelämän edustajien näkökulmista