Sovari-vaikuttavuusmittarin hyödyntäminen työpajatoiminnassa Riitta Kinnunen, asiantuntija Valtakunnallinen työpajayhdistys ry Etelä-Suomen työpajojen ALU-STARTTI 27.1.2016
Sovari tuottaa laadullista vaikutustietoa Sovari sisältää sosiaalisen vahvistumisen mittarit työpajatoimintaan, etsivään nuorisotyöhön ja Nuotta-valmennukseen Tavoitteena levittää Sovarin käyttöä laajasti vuoden 2016 aikana Tuottaa valtakunnallisesti yhdenmukaista tietoa palveluiden sosiaalisesti vahvistavista vaikutuksista Tietoa voidaan hyödyntää tiedotuksessa rahoittajille, tilaajille ja asiakasyhteistyötä tekeville tahoille ja muille sidosryhmille Toiminnan kehittämiseksi asiakkaiden näkökulmasta (osallisuus) Työpajojen Sovari perustuu valmentautujille suunnattuun nettikyselyyn Valmentautujien itsearviointi työpajajakson loppuvaiheessa Kyselyä kannattaa toteuttaa kattavasti kaikille valmentautujille luotettavan ja vakuuttavan tiedon saamiseksi TPY laatii työpajakohtaiset ja valtakunnalliset yhteenvedot vuosittain Sovarin sisältämiä teemoja ja kysymyksiä sosiaalisesta vahvistumisesta voidaan käyttää myös valmennuksessa arviointikeskusteluiden pohjana 1.2.2016 2
Työpajojen Sovarin sisältö Työpajatoiminnan arviointi - Työtehtävät ja toiminta - Yhteisöllisyys ja osallisuus - Työ- ja yksilövalmennus Sosiaalisen vahvistumisen arviointi 1. Itsetunto ja itseluottamus 2. Sosiaaliset taidot 3. Arjen asioiden hallinta 4. Opiskelu- ja työelämävalmiudet 5. Elämänhallinta ja tavoitteellisuus Valmentautujan taustatietoja - Elämäntilanne - Palvelunsaanti 1.2.2016 3
Sovarin sisältö: Sosiaalisen vahvistumisen teemat 1. Itsetunto ja itseluottamus - Kyky nähdä itsessä hyviä ominaisuuksia ja mahdollisuuksia uuden oppimiseen - Epäonnistumisen hyväksyminen 2. Sosiaaliset taidot - Kyky tehdä yhteistyötä, taito solmia kaverisuhteita, taito sovitella erimielisyyksiä - Rohkeus tuoda esille omia mielipiteitä, rohkeus pyytää apua, toisten auttaminen 3. Arjen asioiden hallinta - Vuorokausirytmi, omatoimisuus arjen asioissa - Talouden hallinta, kodin askareiden ja virastoasioiden hoitaminen 4. Opiskelu- ja työelämävalmiudet - Työtehtäviin ja työnhakuun liittyvä osaaminen, halu opetella uusia tehtäviä - Sovittujen työaikojen noudattaminen, oman alan löytäminen 5. Elämänhallinta ja tavoitteellisuus - Kokee voivansa vaikuttaa elämäänsä, taito löytää ratkaisuja ongelmatilanteissa - Motivaatio luoda suunnitelmia ja asettaa tavoitteita, tyytyväisyys elämään 1.2.2016 4
Sovarin tavoitteet ja toteutus vuonna 2016 Tavoitteena Sovarin mahdollisimman laaja käyttöönotto työpajoilla Sovarin toteutus vuoden aikana Jatkuva tiedonkeruu (käynnistyy helmikuun alussa uudella Sovari-kyselyllä) Ruotsinkielinen versio kyselystä Lyhyempi versio kyselystä peruskyselyn rinnalle TPY laatii Sovarin opaskirjan (keväällä 2016) TPY kokoaa valtakunnalliset ja työpajakohtaiset tulokset (syksyllä 2016) Sovari-kyselyn sisällön kehittäminen Sovari opaskirjan sisältö Ohjeita Sovari-kyselyiden toteuttamiseen työpajoilla Ohjeita Sovarin tulosten hyödyntämiseen Sovarin käyttöohjeita valmennuksen välineenä työpajoille TPY:n yhteistyö työpajojen kanssa keväällä 2016 1. Sovarin kehittäminen valmennuksen välineenä 2. Opaskirjan esilukuraati 1.2.2016 5
Sovarin käyttö työpajoilla Sovari edellyttää työpajan sitoutumista kyselyiden toteuttamiseen Valmentaja järjestää vastaamisen työpajalla Kysely toteutetaan jokaiselle valmentautujalle (vapaaehtoinen) Kyselyyn voivat osallistua kaikki yli 17 -vuotiaat Kertakyselynä työpajajakson loppuvaiheessa Rauhallinen ajankohta ja paikka tietokoneen äärellä (nettiyhteys) Motivoidaan vastaamaan keskittyneesti (20 min.) Kuuluu osaksi työpajatoimintaa, mahdollisuus vaikuttaa työpajatoiminnan kehittämiseen Kyselyn jatkuva toteutus työpajoilla, kyselylinkki avoinna jatkuvasti Kokemuksia Sovari-kyselyiden toteutuksesta? 1.2.2016 6
Valmentautujien kokemuksia Sovari-kyselystä 1.2.2016 7
2. Mittariston hyödyntäminen organisaation laadun ja vaikuttavuuden arvioinnissa 1. Työpajatoiminnan toteutuksen arviointimittarit Arvosanat palvelun osa-alueille kokonaisarvosana työpajatoiminnan toteutukselle Palveluiden toteutuksen sanoittaminen 2. Sosiaalisen vahvistumisen arviointimittarit Kuinka suuri osa valmentautujista on kokenut sosiaalista vahvistumista palvelujakson aikana Millä osa-alueilla sosiaalista vahvistumista on tapahtunut (arjen hallinta, itsetunto, sosiaaliset taidot, opiskelu- ja työelämävalmiudet, elämänhallinta ja tavoitteellisuus) Sosiaalisen vahvistumisen sanoittaminen Kuinka hyvin työpajatoiminta vastaa asiakkaiden kokemaan sosiaalisen vahvistumisen tarpeeseen Tarkastelutasot: Valtakunnalliset tulokset Työpajakohtaiset tulokset 1.2.2016 8
Sovarin pilottikyselyn tuloksia 2015 Työpajatoiminnan arviointi valmentautujien näkökulmasta 1. Työtehtävät ja toiminta 2. Yhteisöllisyys ja osallisuus 3. Työ- ja yksilövalmennus 1.2.2016 9
Valmentautujien arviot työpajatoiminnasta (N=746) 1.2.2016 10
Sovari tuottaa arviointitietoa Esimerkkejä tulosten esittämisestä työpajatoiminnan arvioinnin osalta Valtakunnallisessa Sovari-mittarissa työpajamme sai työpajatoiminnan toteutuksesta kiitettävän kokonaisarvosanan 4,4 (asteikolla 1-5). Sovari-mittarissa kaikki työpajatoiminnan osa-alueet eli työtehtävät, yhteisöllisyys ja valmennus saivat kiitettävän arvosanan 4,4. Sovarin tulosten mukaan työpajan työtehtävät tukevat hyvin uuden oppimista ja tuottavat onnistumisen kokemuksia: 81 % valmentautujista on oppinut työssä uusia taitoja, 84 % on saanut onnistumisen kokemuksia ja 89 % on kokenut työtehtävät mielekkäiksi. Työpajan yhteisössä tuetaan hyvin ryhmään kuulumisen ja hyväksytyksi tulemisen tunnetta: Sovarin mukaan valmentautujista 93 % kokee viihtyvänsä ryhmässään, 91 % arvioi, että työpajaryhmässä on hyvä yhteishenki ja 67 % kokee tulevansa hyväksytyksi sellaisena kuin on. Työpajavalmennusta toteutetaan välittämisen, luottamuksen ja avun antamisen hengessä: Sovarin mukaan valmentautujista 91 % on saanut kannustavaa palautetta työn tuloksista, 91 % kokee, että valmentajat välittävät hänestä, 95 % luottaa työpajan valmentajiin ja 85 % on saanut halutessaan tukea elämän ongelmiin. 1.2.2016 11
Sovarin pilottikyselyiden tuloksia 2015 Valmentautujien sosiaalinen vahvistuminen työpajatoiminnan myötä 1.2.2016 12
Valmentautujien sosiaalinen vahvistuminen osa-alueittain työpajajakson aikana pilottitulosten mukaan 1.2.2016 13
Nuorten sosiaalisen vahvistumisen laajuus työpajajakson aikana (N=280) 1.2.2016 14
Sovari tuottaa arviointitietoa Esimerkkejä tulosten esittämisestä työpajatoiminnan arvioinnin osalta Sovarin tulosten mukaan työpajatoiminta on onnistunut edistämään valmentautujien sosiaalista vahvistumista: 91 % valmentautujista on kokenut sosiaalista vahvistumista työpajajakson aikana. Useimmilla valmentautujilla työpajatoiminnan vaikutukset ilmenevät monilla elämäntaitojen osa-alueilla. Erityisesti sosiaalista vahvistumista on ilmennyt arjen asioiden hoitamisessa: 70 % valmentautujista kokee päivärytminsä parantuneen työpajajakson myötä, 50 % kokee virastoasioiden hoitamisen helpottuneen, 50 % tuntee ottavansa vahvemmin vastuuta omista arjen asioistaan ja 45 % kykenee hoitamaan entistä paremmin raha-asioitaan. Valtaosalla valmentautujista on tapahtunut arvioidensa mukaan myönteistä kehitystä opiskelu- ja työelämävalmiuksissa: Sovarin mukaan valmentautujista 69 %:lla halukkuus oppia uutta on vahvistunut, 66 %:lla rohkeus tarttua työhön on vahvistunut ja 67 % kokee, että osaaminen työtehtävissä on parantunut. Sosiaalinen vahvistuminen on ilmennyt useilla valmentautujilla sosiaalisten taitojen, itsetunnon ja elämänhallinnan vahvistumisena: valmentautujista 63 % on kokenut edistymistä yhteistyössä toisten ihmisten kanssa, 58 % on kokenut itseluottamuksensa vahvistuneen ja 53 % on saanut lisää rohkeutta pyytää apua toisilta ihmisiltä. 57 % arvioi jaksamisensa parantuneen, 50 % tavoitteidensa selkeytyneen omassa elämässä ja 53 % kokee itsensä entistä tyytyväisemmäksi omaan elämäänsä. 1.2.2016 15
Sovarin tulosten esittäminen Tulosten esittämisen yhteydessä on hyvä tuoda esille: Tiedonlähde: Sovari on OKM:n rahoituksella Valtakunnallisessa työpajayhdistyksessä kehitetty valtakunnallinen vaikuttavuuden mittari työpajatoimintaan Sovari perustuu valmentautujien itsenäisesti täyttämään nettikyselyyn, jossa he arvioivat työpajatoiminnan toteutusta ja omaa sosiaalista vahvistumista eli elämäntaidoissa tapahtuneita muutoksia Mikä valmentautujaryhmä Sovari-kyselyyn on vastannut Kuinka monta valmentautujaa ja kuinka suuri osa kyseisestä valmentautujajoukosta on vastannut Prosenttilukujen sijasta kannattaa tarkastella vastaajamääriä, kun on kyse pienestä vastaajaryhmästä Kannattaa hyödyntää kaaviokuvia 1.2.2016 16
Tarinoita numeroiden takana Sovarin avovastausten antia Mitä hyvää työpajajakso on antanut sinulle? Aktiivisemman elämän jossa on hyvä päivärytmi. Saanut haettua aktiivisemmin töitä ja sitä kautta työpaikan (mies, 43). Tekemistä päivälle, ettei tarvi kämpillä makoilla ja syljeskellä kattoon (mies, 23). Rutiineja elämään, säännöllisyyttä, tasapainoa (mies, 31). Kokemusta, rutiineja, ihmiskontakteja, uusia ajatuksia ja elämyksiä (nainen, 22). Elämän perustaitoja ja rohkeutta asioiden hoitamisessa (mies, 24). Sosiaaliset taitoni ovat kehittyneet huimasti, suvaitsevaisuus on kasvanut roimasti ja olen huomannut että osaan tehdä vaikka mitä (mies, 27). Sosiaalista elämää, rauhassa työskentelyä, mieluisia työtehtäviä (nainen, 23). Olen saanut paremmat sosiaaliset taidot ja vahvemman itsetunnon. Mahdollisia uusia kavereita, itseluottamusta ja ensimmäistä kertaa elämässäni tunteen toimimisesta täysivaltaisena ja arvostettuna jäsenenä työyhteisössä (nainen, 33). Luottoa jatkoon, intoa lähteä opiskelemaan ja etsimään omaa paikkaa (nainen). Itsevarmuutta ja itsetuntemusta, rohkeutta toimia ryhmässä, onnistumisen kokemuksia, kannustusta ja ideoita elämässä eteenpäin (nainen, 24). Tulevaisuus näyttäytyy valoisampana. Olen saanut tunteen, että melkein mikä vain voi onnistua (nainen, 20). 1.2.2016 17
Ilmoittautuminen Sovarin käyttäjäksi 2016 Ilmoittautumislomake TPY:n nettisivuilla: http:///kehittaminen/laatutyo/laadullinen-mittaristo/ Ilmoittautuminen avoinna 31.3.2016 asti. Sovari-kysely avautuu helmikuun alussa. Ilmoittautuneille lähetetään sähköpostilla linkki kyselylomakkeeseen 1.2.2016 18
3. Ideoita jatkotyöskentelyyn ja mittariston kehittämiseen Yhteistyö työpajojen kanssa keväällä 2016 1. Sovarin kehittäminen valmennuksen välineenä Kysymysten kehittäminen valmennuskeskusteluiden näkökulmasta Hyödynnettävissä työpajan omassa järjestelmässä tai taulukko-ohjelmassa 2. Sovarin opaskirjan esilukuraati TPY laatii opaskirjan kevään 2016 aikana Sisältö: ohjeita Sovari-kyselyiden toteuttamiseen, tulosten hyödyntämiseen ja Sovarin käyttöön valmennuksen välineenä työpajoilla Esilukuraati tai muu yhteistyö työpajojen kanssa? 1.2.2016 19