Arviointialue 6: Vaikuttavuus Indikaattorit Esimerkkejä arviointikriteereistä Arviointi: ++ erittäin hyvä + hyvä - kehitettävää -- vaatii pikaisesti toimenpiteitä Tietolähteitä Tuloksellisuuden ja vaikuttavuuden seuranta strategisessa suunnittelussa Toiminnan tuloksellisuus: Koulutuksen järjestäjä huomioi strategiassaan oppisopimuskoulutuksen tuloksellisuutta ja vaikuttavuutta koskevat tavoitteet ja seuraa tavoitteiden saavuttamista. * Mittariston kattavuus: Koulutuksen järjestäjän oppisopimustoiminnan arviointiin käyttämä mittaristo on kattava ja monipuolinen. Koulutuksen järjestäjä on kuvannut, miten oppisopimuskoulutuksen tuloksellisuutta ja vaikuttavuutta arvioidaan yksilöiden, yritysten/työnantajan ja yhteiskunnan tasolla. * Arviointi ja parantaminen: Koulutuksen järjestäjä varmistaa, että oppisopimustoimisto arvioi ja parantaa toimintaansa saatujen tulosten perusteella. ++(1) +(2) -(4) (0) ++(1) +(1) -(5) --(0) ++(2) +(2) -(3) --(0) Kuvaus: Itä-Uudenmaan koulutuskuntayhtymä seuraa oppisopimustoiminnan taloutta ja opiskelijamääriä. Oppisopimuskoulutuksen ISO9001 järjestelmä sertifioitiin 2012. Laatujärjestelmän kautta kerätään paremmin informaatiota strategiseen suunnitteluun ja seurantaan. Mittariston kiteyttämisessä ja systemaattisessa seurannassa silti kosolti kehitettävää. Tuloksellisuuden ja vaikuttavuuden seuranta oppisopimustoiminnassa Oppisopimustoimisto seuraa tuloksellisuus- ja vaikuttavuustietoja vähintään seuraavista asioista: * Tutkinnon suorittamisaste (tutkintotavoitteiset oppisopimukset): Oppisopimustoimisto seuraa ja arvioi läpäisyä vertaamalla tutkinnon suorittaneiden määriä suhteessa oppisopimuskoulutuksen aloittaneiden määriin. Ammatillinen ++(1) +(2) -(2) --(0) Seurantatiedot, esim. keskeyttäminen ja niiden syyt, tiedot sijoittumisesta koulutuksen jälkeen Koulutuksen järjestäjän omat palautejärjestelmät Tieto suoritettujen tutkintojen ja tutkinnon osien määristä Tutkinnon suorittaneet / valmistavan koulutuksen osallistujamäärä
peruskoulutuksessa vertailu tehdään kolme vuotta myöhemmin (aloitus-vuosi + 3 vuotta) ja tutkintotavoitteisessa ammatillisessa lisäkoulutuksessa kaksi vuotta myöhemmin (aloitusvuosi + 2 vuotta). Vertailutiedot lasketaan ilman oppisopimuksien purkuja ja niiden kanssa. * Purkautuneet oppisopimukset: Oppisopimustoimisto seuraa oppisopimuksien purkuja, arvioi ja analysoi purkujen syitä. * Päättäneiden sijoittumis- ja urakehitystiedot: Oppisopimus-toimisto hankkii säännöllisesti seurantatietoja oppisopimuskoulutuksen päättäneiden opiskelijoiden ja tutkinnon suorittaneiden sijoittumisesta ja menestyksestä. * Työllistyminen: Oppisopimustoimisto seuraa uusiin työsuhteisiin palkattujen oppisopimusopiskelijoiden työllistymistä oppisopimuksen päätyttyä. * Poikkeamat ja niiden käsittely: Oppisopimustoimisto seuraa tulos- ja vaikuttavuustietojen kehittymistä ja reagoi tarvittaessa muutoksiin. * Palautteiden hyödyntäminen: Oppisopimustoimisto kerää palautetta asiakkailta ja oppisopimuskoulutukseen liittyviltä muilta yhteistyökumppaneilta. Oppisopimustoimisto hyödyntää saamansa palautteen toiminnan kehittämisessä. * Oppisopimuskoulutuksen taloudellinen tehokkuus: Oppisopimustoimisto arvioi oppisopimuskoulutuksen taloudellista tehokkuutta. Oppisopimuskoulutukset toteutuvat ammatillisen koulutuksen järjestämisluvan ja myönnetyn ++(0) +(2) -(3) --(2) ++(0) +(1) -(1) --(5) ++(1) +(1) -(3) --(2) ++(1) +(3) -(2) --(1) ++(0) +(6) -(1) --(0) ++(1) +(5) -(0) --(1) Kuvaus: Läpäisyastetta on seurattu mutta ei kriteerissä kuvatun mukaisesti. Korjataan tilanne. Purkuja seurataan, syitä kirjataan mutta analysointi on puutteellista. Päättäneiden sijoittumis- ja urakehitystietoja ei seurata, vaatii pikaisia toimenpiteitä. Tieto työllistymisestä merkitään mutta analysointi puutteellista. Analysointi tulos- ja vaikuttavuustietojen suhteen huteraa, joten myös poikkeamien käsittely kohdentuu ensisijaisesti talouteen/opiskelijamääriin. Asiakaspalaute kerätään ja analysoidaan kerran vuodessa, seurantatietoja neljän vuoden ajalta. Taloudellista tehokkuutta ja lisäkoulutuskiintiötä seurataan Asiakasrekisteri Vertailutiedot (mm. lisäkoulutuksen mittaristo) Seurantatiedot, tiedot sijoittumisesta koulutuksen jälkeen esim. oppisopimusten kuukausikestojen keskiarvojen seuranta Henkilökohtaistamista koskevat asiakirjat
ammatillisen lisäkoulutuskiintiön puitteissa. Oppisopimustoimisto arvioi henkilökohtaistamisen toteutusta ja vaikutusta taloudelliseen toimintaan. aktiivisesti. Henkilökohtaistamisen vaikutuksia ei tällä hetkellä seurata mutta tieto on laskettavissa kustannustilastosta. Oppisopimuskoulutuksen järjestäjän rooli alueella ja verkostoyhteistyö Oppisopimuskoulutustarjonnan vastaavuus: Oppisopimustoimiston tarjonta vastaa alueellista elinkeinorakennetta ja sen osaamistarpeita. * Alueelliset työelämäyhteydet: Oppisopimustoimistolla on hyvät yhteistyösuhteet alueensa yritysten ja muiden työnantajien kanssa. Oppisopimustoimisto hyödyntää aktiivisesti yhteistyöverkostoaan oppisopimustoiminnan suunnittelussa, toteuttamisessa ja kehittämisessä. ++(2) +(4) -(1) --(0) ++(2) +(3) -(2) --(0) ++(1) +(6) -(0) --(0) Dokumentoidut palautekeskustelut Sovitut yhteiset käytänteet Yhteistyöfoorumit ja niiden muistiot * Yhteistyö muiden oppisopimustoimistojen kanssa: Oppi sopimustoimisto tekee suunnitelmallista, tavoitteellista ja oppisopimuskoulutusta kehittävää yhteistyötä muiden oppisopimuskoulutusta järjestävien tahojen kanssa. ++(1) +(2) -(2) --(2) * Verkostoyhteistyö: Oppisopimustoimistolla on toimintatapa, miten seurataan ja arvioidaan verkostoyhteistyön tuloksia ja vaikuttavuutta sekä päätetään kehittämistoimenpiteistä. * Osallistuminen työpaikalla tapahtuvan oppimisen kehittämiseen: Oppisopimustoimisto osallistuu aktiivisesti työpaikalla tapahtuvan oppimisen menetelmien ja toimintatapojen kehittämiseen. ++(1) +(2) -(4) --(0) Kuvaus: tarjoamme koulutusta laajalla kirjolla ja toimimme asiakasrajapinnassa, joten tarjonta vastaa tehokkaasti kysyntää. Te-keskuksen aluebarometrejä ja alueella tehtyjä tutkimuksia seurataan, mutta systemaattisuutta proaktiivisessa suunnittelussa voisi lisätä. Voittopuolisesti työelämäyhteydet hyvässä kunnossa mutta uusien kontaktien luomisessa kehitettävää. Yhteistyö muiden oppisopimustoimistojen kanssa aktiivista ja systemaattista. Verkostoyhteistyön kehittämisessä ja seurannassa on lähdetty liikkeelle mutta ollaan vielä alkutaipaleella. Työpaikalla
tapahtuvaa oppimista kehitetään (metropolialueen tpk-koulutukset, työpaikkakouluttajan wiki, sähköiset työvälineet kuten alkukartoitus ja työssäoppimissuunnitelma) mutta henkilöstöstä kaikki eivät tiedä mitä asian tiimoilla tapahtuu tässä isosti parantamisen varaa. Osaamisen kehittyminen työ- ja elinkeinoelämässä Koulutuksen tuloksellisuus: Oppisopimustoimistolla on toimintatapa, jolla seurataan ja arvioidaan oppisopimuskoulutuksen hyötyjä opiskelijalle, yrityksille, organisaatiolle, työ- ja elinkeinoelämälle ennen koulutusta ja koulutuksen jälkeen. ++(0) +(2) -(4) --(1) ++(0) +(3) -(2) --(2) Yhteistyöpalaverit yritysten kanssa * Yritysten panostus osaamisen kehittämiseen: Koulutuksen järjestäjä seuraa yhdessä oppisopimustoimiston kanssa alueen yritysten henkilöstön osaamisen kehittämishalukkuutta ja yritysten panostusta oppisopimuskoulutukseen, arvioi kehitystä ja tekee kehittämistoimenpiteitä työelämävastaavuuden varmistamiseksi. Kuvaus: oppisopimuskoulutuksen hyödyistä keskustellaan ohjausryhmissä mutta tietoa ei systemaattisesti koota. Alueen yritysten henkilöstön osaamisen kehittämishalukkuutta ei systemaattisesti seurata, hiljaista tietoa kyllä on. Yhteiskunnallinen vaikuttavuus Valtakunnalliset ja alueelliset painopistealueet: Koulutuksen järjestäjä on määritellyt strategiassaan yhdessä oppisopimustoimiston kanssa, miten sovitut painopisteet huomioidaan oppisopimuskoulutuksessa (esim. yhteiskuntatakuu, nuoret, työttömät, yrittäjyys jne ) ++(1) +(4) -(1) --(0) Muu (1) Kuvaus: oppisopimustoimisto huomioi ja tarvittaessa määrittelee painopisteet mutta keskustelu koulutuksen järjestäjän kanssa on ohutta. Viime vuoden kehittämiskohteiden tila? Työpaikkakouluttajakoulutukseen on panostettu tarjonnan lisäämisellä (metropoliyhteistyö) ja ohjauksen tukemisella (wiki). Myös opiskelijoiden ohjaukseen panostetaan, mm. erityistarpeiden tunnistamisen ja tukipalvelujen tarjoamisen kautta. Kehittämistyö jatkuu. - Työpaikkakouluttajien arviointi- ja ohjausosaamisen tuntemus ja hallinta: opso varmistaa, että työpaikkakouluttajat tuntevat oppimisen ohjauksen ja arvioinnin keskeiset periaatteet. - Ulkopuolinen asiantuntemus: opso tekee tarvittaessa yhteistyötä ohjausja tukihenkilöstöön kuuluvien ja ulkopuolisten kanssa - Opiskelijoiden ohjaus- ja tukipalvelut: opiskelijan tarpeiden tunnistaminen, työpaikalla ja tietopuolisissa opinnoissa tapahtuvan ohjauksen varmistaminen, muiden tarpeellisten tukitoimien varmistaminen. Opso-pedagogiikka? Sähköinen asiointi on kehittynyt siten että saamme viestitettyä
asiakkaille tiedonantoja ja niistä jää jäljet ohjelmaamme. En valitettavasti osaa sanoa, en ollut viime vuonna töissä täällä. x Osa toteutettu, osa vielä työn alla.?? Vapaat kommentit Itsearviointi on aina välillä hyvä tehdä ja vertaisarvioinnit ovat mielenkiintoisia. Saadaan paljon hyödyllisiä asioita esiin ja analysoitu jotta voimme kehittää ja ylläpitää hyvää oppisopimuskoulutusta.