Pilotoinnin perehdyttämispäivä - kriteeristö ja arviointiprosessi - 17.12.2013 - Pilotoinnin toteutus ja palautteen hankinta Opetusneuvos Leena.Koski@oph.fi www.oph.fi
Pilotointiin osallistuvien koulutuksen järjestäjien valinta Pilotointiin valittiin vapaaehtoisuuden pohjalta edustavasti: Suuria ja pieniä koulutuksen järjestäjiä Monialaisia ja yksialaisia koulutuksen järjestäjiä Eri puolelta Suomea olevia koulutuksen järjestäjiä Eri laatuverkostoissa toimivia ja verkostojen ulkopuolella olevia koulutuksen järjestäjiä Pitkään ja lyhyemmän ajan laatutyötä tehneitä koulutuksen järjestäjiä Edustettuna ammatillista peruskoulutusta edustavia koulutuksen järjestäjiä/opso/ammatillinen lisäkoulutus/kehittämis- ja palvelutehtävän saaneita koulutuksen järjestäjiä, erityisoppilaitokset, erikoisoppilaitokset, kansanopistot.
Pilotoinnin tavoite Tavoitteena on testata kriteeri- ja arviointiprosessiehdotusten toimivuutta ja tunnistaa niihin liittyviä kehittämistarpeita. Tavoitteena on myös edistää kriteerien ja prosessin pilotoinnin avulla toimivan laadunhallinnan ja laadun jatkuvaa kehittämistä tukevan järjestelmän käyttöönottoa ja edelleen kehittämistä. On tärkeää varmistaa tiedon leviäminen laatuverkostoissa ja koulutuksen järjestäjien muiden verkostojen avulla muille koulutuksen järjestäjille. Tavoitteena on lisäksi tukea itsearviointivalmiuksien kehittämistä. Pilotointi tapahtuu koulutuksen järjestäjien tasolla. (mukana ammatilliseen koulutukseen liittyvä toiminta)
4. Perustehtävien laadunhallinta Ammatillisena peruskoulutuksena järjestettävä koulutus Näyttötutkintoina järjestettävä ammatillinen koulutus (pt, at, eat) Muu koulutus (valmistavat ja valmentavat, muu ei tutkintotavoitteinen koulutus) Työelämän kehittämis- ja palvelutehtävä (kriteerit soveltuvin osin) Ammatillisen erityisopetuksen kehittämis-, ohjaus- ja tukitehtävät (kriteerit soveltuvin osin) Muu toiminta esim. työpajatoiminta, hanketoiminta ja maksullinen palvelutoiminta (ml. työvoimapoliittinen koulutus, täydennyskoulutus).
Periaatteita Pilotoivat koulutuksen järjestäjät pilotoivat koko kriteeristöä (siltä osin kuin on ko. toimintaa). Pilotointiin osallistuu 35 koulutuksen järjestäjää. Perehdyttämistilaisuuden lisäksi koulutuksen järjestäjille tuotetaan tukimateriaalia ja ohjeistus itsearvioinnin, raportoinnin ja mahdollisen ulkoisen validoinnin tueksi. Itsearviointi tehdään sähköisesti ja sovellutus sisältää myös taustatietoja sekä palautteen prosessista ja kriteeristöstä. käytettävissä vuoden 2014 alussa Pilotointi sisältää koulutuksen järjestäjän tekemän itsearvioinnin ja ulkoisen arvioinnin (validointi) vähintään yhdeksän koulutuksen järjestäjän kohdalla. Avoimuus: prosessi ja keskimääräiset tulokset ovat muiden koulutuksen järjestäjien nähtävissä.
Pilotoinnin prosessi Informaatiotilaisuus pilotointiin osallistuville koulutuksen järjestäjille 17.12. Sähköinen sovellutus koulutuksen järjestäjien käytössä viimeistään 8.1.2014 Perehdyttämispäivä validointiin osallistuville ulkoisille arvioijille 8.1.2014 12/2013-5/2014 : Kriteerien ja arviointiprosessin pilotointi * itsearviointi 8.1.-4.4.2014 * ulkoiset arvioinnit 22.4.-16.5. Pilotoinnin jälkeen koulutuksen järjestäjille järjestetään arviointi- ja kokemusten vaihtotilaisuus 26.5. Opetushallitus laatii pilotoinnin keskeisistä tuloksista raportin laaturyhmälle.
Pilotoinnin prosessi Kesäkuu- elokuu 2014: Laaturyhmä tekee pilotoinnin tulosten pohjalta lopullisen esityksen kriteereistä ja arviointiprosessista. Syksy 2014: Valmistautuminen arviointiprosessiin: opas arvioinnista ja kriteerien soveltamisesta koulutuksen järjestäjille, informaatiotilaisuudet ja muut tukitoimet.
Itsearviointi Itsearviointiin osallistumisesta annetaan erillinen ohjeistus. (Lomakkeessa pyydetään tiedot, ketkä ovat käytännössä osallistuneet itsearviointiin) Osallistujat: Koulutuksen järjestäjän johdon edustajat (omistaja ja toimiva johto) Opetushenkilöstön, tukipalveluhenkilöstön, opiskelijoiden ja työelämän edustus. Kukin koulutuksen järjestäjä arvioi, millä tasolla ollaan kunkin arviointikohteen ja pääkohdan osalta: Puuttuva Alkava Kehittyvä Edistynyt
Itsearviointi Kohdan 4 arviointiin osallistuu ko. arviointialueella toimivan henkilöstön ja johdon edustajat. Lisäksi kunkin koulutuksen järjestäjän on esitettävä näyttö, mihin koulutuksen järjestäjän arvio perustuu. Dokumentointi, missä on olemassa, nettilinkki Linkki tai asiakirjan nimi ei liitteitä Lyhyt kuvaus ja sitten dokumentit Kuvaus rajattu tila
Itsearviointi Taustatiedot esim.: koko alat järjestämispaikkakunnat/alue/sijainti aluevirastojen käyttämiä (16 aluetta) Itsearviointiin osallistuneet Muuta esim.: Milloin laadunhallinnan kehittäminen on aloitettu?- lyhyt kuvaus - Mitä on tapahtunut? Onko joku laatujärjestelmä? Lyhyt laatujärjestelmäkuvaus + luokitellut vastausvaihtoehdot Itsearviointi Arviointi kriteeristön ja prosessin toimivuudesta Luokitellut vastausvaihtoehdot ja avoin palaute.
Ulkoinen arviointi (validointi) Tavoitteena on itsearviointien validointi ja prosessin testaus. Ulkoiseen arviointiin valitaan satunnaisesti väh. 3 kolme koulutuksen järjestäjää itsearviointien perusteella kolmesta eri ryhmästä: (parhaimmat arviot saaneet, keskimmäiset, huonoimman arvion saaneet) Valinnassa otetaan kuitenkin huomioon edustavuus Ulkoisen arvioinnin kohdetta pyydetään tarvittaessa toimittamaan lisämateriaalia ennen arviointikäyntiä. Ulkoisen arvioinnin ryhmään osallistuu 4-6 arvioijaa. Arviointikäynti kestää 1 2 päivää. (2 pv isot) Arvioinnin päätteeksi järjestetään lyhyt palautetilaisuus koulutuksen järjestäjille. Koulutuksen järjestäjä saa noin kolmen sivun mittaisen kirjallisen palauteraportin.
Validointiin osallistuvat ulkoiset arvioijat Sauli Alaruikka Raimo Alarova (laaturyhmä) Annu Jokela-Ylipiha (laaturyhmä) Aila Korpi (laaturyhmä) Tarja Riihimäki (laaturyhmä) Anu Räisänen (laaturyhmä) Mika Saarinen (laaturyhmä) Teija Strandman Ulkoiseen arviointiin osallistuvat arvioijat omaavat kokemusta arvioijana/auditoijana toimimisesta. Arviointiryhmien kokoonpano vaihtelee, kuitenkin niin, että prosessin vastaavana on aina Opetushallituksen edustaja. Kukin arvioija osallistuu keskimäärin kolmeen arviointikäyntiin.
Palaute Pilotointiin osallistuvien edellytetään dokumentoimaan itsearviointiprosessi ja siihen liittyvät kehittämisehdotukset määrämuotoisesti sähköiseen järjestelmään sen lisäksi, että pyydetään yksityiskohtaiset kehittämisehdotukset kriteereihin ja prosessiin sekä osallistuvilta koulutuksen järjestäjiltä että arviointiryhmiltä. Palaute pyydetään sähköisesti myös ulkoiseen arviointiin (validointiin) osallistuvilta koulutuksen järjestäjiltä.