Vaikuttavuus ja arviointi KA2 ammatilliselle koulutukselle Hanketyöpaja osa II Impact: Effect that the activities and results have on people, practices, organisations and systems Sustainability: Capacity of the project to continue and use its results beyond the end of funding period.
Vaikuttavuus hakulomakkeessa Kenen toimintaan tuloksilla/ tuotteilla on vaikutusta? Osallistujat (opettajat, opiskelijat ym.) Organisaatiot Muut kohderyhmät ja toimijat Vaikutukset eri tasoilla Paikallinen Levityssuunnitelman on tuettava Alueellinen haluttujen vaikutusten syntymistä! Kansallinen kansainvälinen Miten vaikuttavuutta mitataan? Yksilötason vaikuttavuus - opiskelijat OPPIMISTULOKSET ITSETUNTO JA VOIMAANTUMINEN OPISKELU- MOTIVAATIO YHTEISKUNNALLINEN OSALLISTUMINEN TYÖLLISTYMINEN JA TYÖURALLA ETENEMINEN ALOITTELLISUUS JA YRITTÄJYYS KIELITAITO JA KULTTUURIEN TUNTEMUS
Yksilötason vaikuttavuus - opettajat, muu henkilöstö AMMATILLINEN OSAAMINEN KANSAINVÄLISYYDEN EDISTÄMINEN MOTIVAATIO JA TYYTYVÄISYYS OMAAN TYÖHÖN KOULUTUKSEN JA TYÖELÄMÄYHTEYK SIEN KEHITTÄMINEN URAKEHITYKSEN SUUNNITTELU KIELITAITO JA VIERAIDEN KULTTUURIEN YMMÄRTÄMINEN Vaikutukset järjestelmiin ja organisaatioihin Examples: increased quality of education and training; education, training and youth systems that are better aligned to the needs of and opportunities offered by the labour market, and closer links to business and the community; improved provision and assessment of basic and transversal skills, particularly entrepreneurship, language competences and digital skills; increased synergies and links and improved transition between the different systems of education, training and youth at national level, with improved use of European reference tools for recognition, validation and transparency of competences and qualifications;
Arviointikriteerit: vaikuttavuus ja levitys (1) Miten hankkeen tuloksia/lopputuotteiden laatua arvioidaan? Mahdollinen vaikutus hankkeen aikana ja sen jälkeen Osallistuville henkilöille ja organisaatioille Muille kuin hankkeessa mukana oleville (paikallinen, alueellinen, kansallinen ja EU taso) Suunniteltujen levitystoimien tarkoituksenmukaisuus Tavoitetaanko tulevat käyttäjät (osallistuvissa organisaatioissa ja niiden ulkopuolella)? Arviointikriteerit: vaikuttavuus ja levitys (2) Jos konkreettisia tuotoksia Miten varmistetaan että tuotokset ovat vapaasti kaikkien saatavilla? Onko hankkeella positiivisia vaikutuksia myös hankerahoituksen päätyttyä Arviointialueen max. pistemäärä 30
Arviointisuunnitelma hakemuksessa Arviointiin liittyvät kysymykset hakemuksessa: F.1. Project Management How will the quality of the project s activities and results be monitored and evaluated? Mention the involved staff and frequency of quality checks. Which activities and indicators of achievement (quantitative and qualitative) will you put in place in order to assess whether and to what extent, the project reaches its objectives and results? H.1. Impact How will you measure the mentioned impacts? Arviointi kannattaa suunnitella kokonaisuutena hakemuslomakkeen eri osioiden perusteella (toimintojen arviointi, tuotteiden/tulosten ja vaikuttavuuden arviointi) Arvioinnin rooli hanketoiminnassa Arviointi ja laadunvarmistus keskeinen osa laadukasta hanketoimintaa Tukee hankkeen toimintaa, johtamista ja tavoitteiden saavuttamista Tuottaa aineistoa päätöksentekoon Parantaa tulosten ja tuotteiden laatua Mahdollistaa keskustelun hankkeesta ja toiminnoista partneriryhmässä Tuo esille vahvuudet ja kehittämiskohteet Tuottaa tietoa hankkeen vaikuttavuudesta
Arviointisuunnitelma Kuvataan yleinen lähestymistapa arviointiin Mitä: arvioinnin kohde (prosessi/työskentely/tuotteet ) Miksi: arvioinnin tavoite Miten: sisäinen/ulkoinen arviointi Milloin: aikataulu mitä arviointitoimintoja projektin eri vaiheissa? Työsuunnitelmaan arvioinnille oma työpaketti/työvaiheet Resurssit työpäivät, alihankinta (ulkoinen arvioija?) Arvioijien kommentteja vaikuttavuudesta 2014 The impact of the project is presented in broad terms, e.g. improved study plans for VET students, improved internationalisation skills etc. However, the overall impact with measurable targets (e.g. number of students benefiting from xx) is not sufficiently presented regarding the impact. The project should better describe the impact at local and national level, e.g. improved employability, growth of the sector etc. The sustainability of the project is evidenced with regard of new curriculum in the partner organisations and countries. The sustainability of the project is evidenced with regard the take-up of the new learning material by the VET institutions. In this context, however, more quantitative indicators would be beneficial. The project should have set a clearer target of updating the curricula and the pedagogies with long-term perspective in the participating organisations.
Vaikuttavuuden mittaaminen Miten todennetaan, että haluttuja vaikutuksia on saatu aikaiseksi? Laadulliset ja määrälliset mittarit? Lyhyen ja pitkän aikavälin vaikutusten mittaaminen? Miten arviointitietoa kerätään? Millainen arviointitieto parhaiten todentaa vaikutuksia?