Arvioinnin ja seurannan tiekartta Henna Harju 1
Toiminnan kehittäminen 2
RAY:n seurantajärjestelmä 3
Seurannan ja arvioinnin eroavaisuuksia SEURANTA Seurannassa on päähuomio siinä, miten tavoitteiden mukaisissa toimenpiteissä on edetty. Mitä tehtiin tietyllä aikavälillä? Kuinka paljon tehtiin (määrä)? Millä resursseilla? Seuranta on toteuman arviointia. Seurantatietoa voidaan hyödyntää arvioinnissa ja arviointitietoa seurannassa. Pelkällä seurannalla ilman arviointia voi olla haastavaa kehittää toimintaa. Seurannassa hyödynnetään usein indikaattoreita (=tulosmittari). Indikaattoreiden avulla voidaan määrittää tavoitetaso. Seurannassa indikaattoreilla on usein isompi painoarvo kuin arvioinnissa. ARVIOINTI Arvioinnissa pyritään pääsemään etenemisen lisäksi käsiksi mekanismeihin, jotka vaikuttivat toimenpiteiden toteuttamiseen ja toteutumiseen. Millä tavalla? Toimenpiteiden onnistuneisuus (laatu) Hidastaneet ja edistäneet tekijät? Tulokset ja niiden analysointi suhteessa toiminnalle asetettuihin tavoitteisiin ja kohderyhmän saamiin hyötyihin Käytettyjen resurssien ja tuotosten välinen suhde=tehokkuus Pitkäkestoiset hyödyt ja vaikutukset Vaikuttavuus Arviointi on kehittämisväline. Arvioinnissa voidaan arvottaa keskeisiä indikaattoreita ja esittää niiden pohjalta arviointihavaintoja. 4
Keskeiset arviointikäsitteet ja niiden väliset suhteet TARVE VAIKUTUKSET = ARVIOINNI N KOHTEE- SEEN LIITTYVIÄ KÄSITTEIT Ä TOIMEENPANON TARKOITUKSENMUKAISUUS TULOKSET TAVOITTEET PANOKSET TUOTOKSET TEHOKKUUS KUSTANNUSVAIKUTTAVUUS RELEVANSSI KOKONAISVAIKUTTAVUUS PYSYVYYS HYÖDYLLISYYS 5 = ARVIOINTIKRITEEREIHIN LIITTYVIÄ KÄSITTEITÄ INNOKUNTOUTUS LÄHDE: EUROPEAN COMMISSION 1999; VIRTANEN 2007 5
6
ARTSI-projekti n arviointi- ja koulutusyksikkö toteuttaa ARTSIkehittämisprojektin vuosina 2013 2016. Projektia rahoittaa Raha-automaattiyhdistys (RAY) ja kohderyhmänä toimivat RAY-rahoitteiset sosiaali- ja terveysalan järjestöt sekä yhteistyökumppanina RAY:n seurantatiimi. Projekti on suunnattu pienille, alle kymmenen hengen järjestöille, jotka kaipaavat apua oman toimintansa arviointiin ja seurantatiedon tuottamiseen. Mukaan valitaan noin 30 sosiaali- ja terveysalan järjestöä, jotka saavat toimintaansa RAY:n Ak- tai Ayavustusta. ARTSI-projektissa kehitetään kunkin järjestön kanssa tiiviissä yhteistyössä konkreettiset mallit järjestön itsearvioinnin toteuttamiseen sekä palautteen keräämiseen toimintaa toteuttavilta tahoilta, toiminnan kohderyhmiltä, yhteistyökumppaneilta sekä vapaaehtoisilta. 7
ARTSI-projektin tavoitteet 1. Kehittää mukana olevien järjestöjen tarpeista lähtevät mallit ja käytännöt järjestöjen toimintaa ja sen tuloksia koskevan tiedon tuottamiseen ja hyödyntämiseen. 2. Integroida arvioiva ajattelu ja toimintatavat kiinteäksi osaksi kohdejärjestöjen toimintaa. 3. Arviointikäytäntöjä ja arviointitiedon hyödyntämistä koskevan tietouden lisääminen yleisemmin sosiaali- ja terveysalan järjestöjen keskuudessa. 2. Nimetä kuhunkin kohdejärjestöön arvioinnin ja seurannan vastuuhenkilöt. 8
Mukaan ARTSI-projektiin? ARTSI-projektiin mukaan haluaville järjestöille järjestetään kolme hakukierrosta vuosien 2013 2015 aikana. Haut on organisoitu RAY:n käyttämän toimialaluokituksen mukaan. Hakuaikataulu on seuraava: Huhti-toukokuu 2013 (valitaan 5 järjestöä) nuorisokasvatus, lastensuojelu ja lomatoiminta Joulukuu 2013-tammikuu 2014 (valitaan 11 13 järjestöä) kansanterveyden edistäminen sekä raittius- ja päihdetyö Tammi-helmikuu 2015 (valitaan 11 13 järjestöä) vanhustyö, invalidityö, suuronnettomuuksiin varautuminen ja aistivammaistyö Lisätietoa hausta projektin kotisivuilta: www.kuntoutussaatio.fi/artsi 9
Kiitos! Lisätietoja: arviointipäällikkö Henna Harju henna.harju(at)kuntoutussaatio.fi 10