Onko käsitteillä väliä? Käsiteltävänä vaikutus ja vaikuttavuus Taloudellisen arvioinnin verkostotapaamisen 5.9.2016 AINEISTOT Kuvat: ilmainen kuvapankki https://pixabay.com/en/
Miten tämä liittyy taloudelliseen arviointiin? Systemaattista yritystä tunnistaa, arvioida/mitata ja vertailla (vaihtoehtoisten) interventioiden kustannuksia ja vaikutuksia. Vaikutukset Kustannukset Taloudellista arviointia vertailu
Kestoaihe, mutta miksi?
NÄKÖKULMIA JÄRJESTÖTOIMINNAN VAIKUTUSTEN JA VAIKUTTAVUUDEN NÄKYVÄKSI TEKEMISELLE Rahoituksen jatkuvuus ei ole kiveen hakattu muutoksia ilmassa Järjestöjtoiminnan kehittäminen Järjestötoiminnan laadun osoittaminen TARPEET Miksi? Faktaa vaikuttamistyön tueksi Toiminnan moninaisuuden näkyväksi tekeminen kanavien monipuolistaminen Järjestötyön elinvoimaisuuden näkyväksi tekeminen Järjestöjen toimintaedellytyste n ylläpitäminen Rahoitus- Yritysten kiinnostuksen herättäminen investoimaan järjestöihin SOSTE
Mitä on vaikutus, mitä vaikuttavuus sinun mielestäsi?
VAIKUTTAVUUS 10 vuotta aktiivinen rooli haastavampi mitata huononee esim. hyvinvointi intervention seuraukset järjestelmällinen mittaaminen kehitys kohenee esim. mieliala kohenee esim. sosiaalinen asema kompleksinen laaja käsite mikä vaikutti? mittarissa oleva muutos, joka saatu aikaan toiminnalla muutos tiettyyn suuntaan objektiiviset mittarit pitkä aikajänne pitkä aikaväli pitkä aikaväli VAIKUTUS ennakoitava jatai ennakoimaton haastattelut, kyselyt, musta tuntuu helpompi mitata huononee esim. asenne hyöty hyöty ihminen input-output jatkuvuus jokapäiväinen arki konkreettinen tulos lyhyt aikaväli mikä vaikutti? mitä kohderyhmässä tapahtuu/jää tapahtumatta nyt muutos negatiivinen negatiivinen neutraali Mukana olevien verkostolaisten kirjoituksista koottu
VAIKUTTAVUUS pitkäaikainen vaikutus positiivinen pysyvä vaikutus seuranta taloudelliset hyödyt tavoiteltu tavoiteltu muutos toteutuu tutkimusasetelmat tutkimusta vaikeasti todennettavissa vaikutus rahassa vaikutusten kausautuminen yhteiskunta yhteiskunta yhteisvaikutukset yhteisö VAIKUTUS onnistuminen paranee esim. tieto posiitiivinen positiivinen positiivinen Pöhinää "ei tavoitteellista" subjektiiviset/objektiiviset kokemukset/näkemykset tekoja toiminnan tulosten seuraus esim. kohderyhmässä/toimintaymp äristössä toimintaa toteuma tuo hyötyä laadullisesti vaikutuksen "määrä"? välitön hyöty: mitä jäi? välitön tapahtuminen välitön tulos yhteiskunta yksilö yksilö yksittäinen ilmiö Mukana olevien verkostolaisten kirjoituksista koottu
Johtopäätöksiä tehtävästä: erot TARKASTELTAVA ERO Aikajänne ja pysyvyys Arvioinnin kohde Oletus/käsitys muutoksesta Mittaamisen tavat VAIKUTUS lyhyt aikaväli, toiminnan tulosten seuraus, konkreettinen tulos toiminnasta välitön tulos, hyöty, muutos, seuraus jostakin interventiosta yksilölle/kohderyhmälle voi olla ennakoitava tai ennakoimaton, positiivinen, negatiivinen tai neutraali (ei muutosta) Mittaaminen helpompaa: arviointia, haastattelut, kyselyt, myös musta tuntuu -tyyppinen subjektiivinen kokemus riittää, joskus enemmän pöhinää kuin toimintaa VAIKUTTAVUUS pitkä aikaväli, esim. 10 vuotta, pitkäaikaiset ja pysyvät vaikutukset, kasautuvat vaikutukset, yhteisvaikutukset pitkäaikainen vaikutus yhteisöille ja yhteiskunnalle, myös taloudellinen vaikuttavuus lähtökohtaisesti oletus positiivisesta vaikuttavuudesta ja tavoiteltavan muutoksen toteutumisesta, jonka voi toimivan mittarin kanssa todentaa Mittaaminen haastavampaa ja kompleksisempaa: tutkimuksellista, strukturoitua ja järjestelmällistä, tutkimusasetelmiin nojaavaa, objektiiviset mittarit Verkoston koordinoijan kevyitä johtopäätelmiä
Millaisten ongelmien kanssa vaikutusten/ vaikuttavuuden arvioinnin kanssa painitaan? Keskeiset haasteet? Millaisia ratkaisuja meillä on vaikutusten/ vaikuttavuuden arvioinnin haasteisiin/ ongelmiin?
1. Pienryhmän tuotokset Ongelmat/haasteet Ratkaisut Tavoite ja keinot sekoittuvat keskenään Vertaisarviointi ja yhteiskehittäminen raportointiin Rahoittajan/ulkopuolisen näkemys/mentorointi hakemukseen Aito palvelumuotoilu Syy-seuraus-suhteet vaikea tai mahdoton jäljittää Menetelmien, prosessien ja johtamisen ykseys koherenssi ei toteudu Muun tutkimuksen ja kokemuksen hyödyntäminen Hyväksytään epävarmuustekijät ja interventioiden vaikutukset eri tilanteissa/elämässä Mahdollisten sekoittavien tekijöiden kuvaaminen Intuitio, erilaisten skenaarioiden kuvaaminen Aito palvelumuotoilu Auditointi, laadun sertifiointi, luodaan prosessit yhdessä sertifikaatti Tehdään yhdessä: toiminnallisuuden hyödyntäminen Aito palvelumuotoilu Arviointiin resursointi Omalaatuisten henkiköiden palkkaaminen Aito palvelumuotoilu Asenne: ongelmia kaikilla tasoilla Tiedotus, koulutus: henkilöstön vaihto. oikeat johtajat Oikeanlainen johtaminen: erilaisten arvioinnin tunnustaminen & hyväksyntä Aito palvelumuotoilu
2. Pienryhmän tuotokset Ongelmat/haasteet Käsitteiden ymmärrys debatti jatkuu Vaikuttavuuden arvioinnin resurssit suhteessa toimintaan ja arvioinnin vaikeuteen Erilaiset asenteet arviointia kohtaan ( päälleliimattua ) Tavoitteiden tunnistamisen vaikeus Ratkaisut Käsitteiden avaaminen kussakin tilanteessa toimintaan jo! Järjestöjen ymmärrys vaikuttavuudesta kirkkaaksi Ei tarvitse resursoida vaan vaikuttavuus perustuu teoriaan Raha+henkilöt resursseja voi ja täytyy myös hakea Mitä arvioidaan? Voi olla eri näkemyksiä yhteinen ymmärrys Tarvekartoitukset: asiakas- ei organisaatiolähtöisyys Järjestöt RAYn asiakkaita?
3. Pienryhmän tuotokset Ongelmat/haasteet Ratkaisut Validi mittari vai riittääkö toimiva mittari Kootaan valideja mittareita yhteen järjestöjen käyttöön SOSTE Kehitetään validi mittari Tieto-taidon ja resurssien pula Arviointi kuuluu kaikille, eli arvioinnin arvostus ja asenteet paikalleen Koulutusta johto huolehtii, että työntekijöillä on tarpeeksi työaikaa arviointiin johto huolehtii arvioinnista prosessina Kun käytetään valmiita mittareita/työkaluja säästetään resursseissa Seurannan ja väliintulevien tekijöiden/ympäristön huomioiminen (kenen (vast. rahoittajan) pitäisi olla kiinnostunut pitkän ajan seurannasta?) Kontrollit mutta hyväksyä, että aina ei voi kontrolloida kaikkea Taustamuuttujat! Aina ei tarvitse pyrkiä täydellisyyteen/tutkimuksellisuuteen riittää, että tekee parhaansa tarkoituksenmukaisesti
Johtopäätöksiä: kerrostunut näkymä Tiedolla johtaminen: tiedon hyödyntäminen vaikuttamis-, edunvalvonta- ja kehittämistyössä Prosessien johtaminen: resurssit, tuki ym. Kyvykkyys: tieto, taito, osaaminen kuntoon Asenteet: faktojen hyväksyminen, rohkeus, kokeilu Verkoston koordinoijan kevyitä johtopäätelmiä
Kiitos osallistumisesta! kuvat ilmaisesta kuvapankista: https://pixabay.com/