Koulutuspäivä: VERTAISARVIOINTI JA VERTAISARVIOIJANA TOIMIMINEN Koulutuspäivä 13.2.2012, klo 09.00 16.00 Konsensus ja alustava palaute sekä johdatus vertaisarviointiraportin valmisteluun Opetusneuvos Leena Koski Leena.Koski@oph.fi www.oph.fi Osaamisen ja sivistyksen parhaaksi
Usein esiin nostettuja kysymyksiä Milloin? paljonko vie aikaa? Millaista on hyvä ja asiallinen palaute? Mitä vertaisarviointiraportti pitää sisällään? Kuinka tarkka raportoinnin tulee olla? Haastateltavien anonyymius? Palautteen antaminen ja loppuraportin laatiminen on haastavaa, jos arvioijilla kovin erilaiset mielipiteet arvioitavasta asiasta. Tiedon analysointi ja aineiston analysointi vaatii paljon osaamista. Vertaisprosessi on luottamuksellinen prosessi ja sen tulokset, kuinka salassa pidettäviä ne ovat? Varsinkin jos toimeksiantaja haluaa pitää tiedot omanaan.
VERTAISARVIOINNIN NELJÄ VAIHETTA Seuraava vertaisarviointi 1. Valmistelut (vähintään 3 kk ennen) Käynnistämistoimet Vertaisarviointiryhmän kokoonpano Itsearviointi ja -raportti Käynnin valmistelu (hanketoimijat) vertaisarvioijat) 4. Käytännön toteutus (6-12 kk) Tavoitteiden muotoilu Resurssien selvittäminen Toimintasuunnitelma ja toteutus Seuraavan arvioinnin suunnittelu (mahdollisesti) 2. Vertaisarviointikäynti (1-2 pv) Tiedonkeruu Tietojen analysointi Arviointi Suullinen palaute 3. Vertaisarviointiraportti (3-4 viikkoa) Alustava raportti Kohdeorganisaaton kommentit Lopullinen raportti
Leena Koski Vertaisarviointiraportti Hyvän raportin laatiminen alkaa vertaisarviointiprosessin alusta lähtien Kaikki vertaisarvioijat vastaavat raportista, koordinaattori vastaa kuitenkin viime kädessä raportin laadusta. Suositeltavaa on, että raporttiluonnos on lähes valmis vertaisarviointikäynnin päättyessä. Alustavan raportin kommunikatiivinen validointi. Ennen lopullista luovutusta annetaan vertaisarvioinnin kohteen kommentoitavaksi. Koordinaattori (yleensä) viimeistelee vertaisarviointiraportin.
Vertaisarviointiraportti Vertaisarviointiraportin rakenne vastaa itsearviointiraportin rakennetta. Teemat ovat tärkeitä alustavaa palautetta annettaessa ja vertaisarviointiraportin laadinnassa varsinkin yleisarvio Sisältö: Kuvailulehti Lyhyt kuvaus organisaatiosta ja hankkeesta ( max.1 sivu) Vertaisarviointimenettely Laadun arviointialuekohtaiset arvioit kunkin kriteerin osalta erikseen Yleisarvio Liitteet esim. ohjelma Leena Koski
Vertaisarviointiraportin kirjoittaminen mm. Tahdikkuus palautteen tyylin ja sisällön tulee olla rakentava ja parantamiseen kannustava. Pitää välttää arvostelua ja konsultointia ja omien ja vertaisarviointiryhmän arvostusten esille tuomista. Varmista, että yleisarvio ja vahvuudet ja parantamisalueet puhuvat samaa kieltä. Palaute auttaa tekemään hyödyllisiä johtopäätöksiä ja parantamaan toimintaa. Jokaisen palautteen jälkeen kannattaa kysyä Entä sitten? Kirjoitetaan kokonaisina lauseina. Leena Koski
Näytön kerääminen Kysy Avoimet kysymykset, jotka tarjoavat informaatiota Havannoi Seuraa, mitä on tapahtumassa Kirjaa Objektiiviset todisteet positiiviset ja negatiiviset Lähde: Qualitas Fennica Oy Tarkasta Laadittu ohjeistus ja syntyvät tallenteet sekä muut näytöt esim. esimerkit
Ennakkotehtävässä esiin nostettuja kysymyksiä Olisi hyvä nähdä valmis raportti? Onko mahdollista? Miten raportti kannattaa valmistella ja kirjoittaa, onko kokemuksia? Vertaisarviointikäynti (1pv)+ seuraava aamupäivä palautteen kokoaminen ja seuraava iltapäivä palautteen anto? Kuinka laaja palaute annetaan jo palautetilaisuudessa? Tulisiko palautteen olla kuvailevaa ja toimintaa ohjaavaa vai lyhyesti kuvattu raportti, jossa vain kuvataan nykytila? Voiko palautetta antaa pitkin matkaa ja verrata sitä koko ajan omiin toimintatapoihin vai pitäisikö keskittää palautteenanto arviointi-tapahtuman loppuun? Millaisella aikajänteellä yleensä kirjallinen palaute annetaan? Miten paljon aikaa vie raportin tekeminen? Onko palautteelle olemassa joku valmis runko? Entä raportille? Kirjoittaako myös jokainen vertaisarvioija raporttiin vai vastaako tietojen kokoamisesta koordinoija? Kuka tekee? Aikataulu? Leena Koski
Ennakkotehtävässä esiin nostettuja kysymyksiä Ketkä ottavat osaa palautteen antoon arvioitavan puolelta (koko henkilöstö)? Toimitetaanko palaute myöhemmin kirjallisesti? Kootaanko palautteet ensin yhteen vai antaako jokainen palautteen erikseen? Toimistojen sitoutuminen palautteen ja lopputuloksien käyttöönottoon? Miten varmistetaan, että toimisto hyödyntää saamansa palautteen? Miten varmistetaan/ohjataan, että arviointitulokset vaikuttavat toiminnan kehittämiseen? Millaisia kokemuksia vertaisarvioinneista on, miten asia hoidetaan niin, ettei tule teollisuusvakoilu - epäilyjä? Miten osaa antaa rakentavaa palautetta haasteellisessa tilanteessa? Palautteen anto pitäisi olla rakentavaa. Minkä muotoista on hyvä palaute vertaisarvioinnissa? Leena Koski
Ryhmät: Kokemusten jakaminen kannustavasta palautetilaisuudesta Mitkä tekijät edesauttavat hyvän tunnelman luomisessa? Mikä tekee antamastanne palautteesta kannustavan?