Yhteenveto arvioivan ajattelutuokion herättämistä asioista Kuvat: ilmainen kuvapankki www.pixabay.com
1. Jannen ja Marjan esitysten herättämiä ajatuksia koottuna ja yhdistellen Arvioinnin eettisyys ja etiikka (laatu, uskottavuus, luotettavuus, luottamus) Arvioinnin kehittyminen toimialana ja tieteenalana Vaikuttaako arvioinnin fragmentoituminen ja kompleksisuus alan kehittymiseen? Voiko se kääntyä sitä vastaan? Vai onko se lainkaan huono asia? Mahdollistaako se enemmän sen, että syvennytään eri asioissa sisäänpäin? Arvioitsijan roolista ja asemasta Arvioitsijoiden työnohjaus tarpeellinen Arvioijan ja kohteen dialogi tärkeä Missä menee arvioitsijan valta ja vastuu? Miten varmistetaan arviointien kiinnittyminen osaksi organisaation muuta toimintaa? Arviointiraporttien avoin jakaminen ja systemaattisen keskustelun mahdollistaminen Vaikuttaisiko arviointien laatuun? Mikä on arviointigurujen yhteinen rajapinta? Arvioinnin käsitehistoria, arvioinnin ja tutkimuksen erot, arvioinnin taustafilosofiat ym. herättivät mielenkiintoa1
2. Arvioinnin sanapilvi Osallistujia pyydettiin kirjaamaan yksittäisiä asioita, sanoja, tunteita tai ajatuksia, jotka heille tulee ensimmäisenä mieleen sanasta ARVIOINTI. Kirjatuista sanoista muodostettiin Wordleohjelmalla sanapilvi.
Arvioinnin sanapilvi Pilvestä esille nousevia sanoja esiintyi kaikkien kirjaajien vastauksissa kaikkein eniten. (vastanneita 25)
3. Arvioinnin aallolla - trendianalyysi Osallistujia pyydettiin kirjaamaan - Mitä arvioinnissa on vasta tulollaan aallon harjalle (future)? - Mitä arvioinnissa on juuri nyt aallon harjalla (in)? - Mitkä asiat arvioinnissa ovat saavuttanut jo aallon pohjan (past)? (vastaajia 23 kpl) Vastauksia yhdistelty teemojen mukaisesti
Mitä arvioinnissa on mennen talven lumia, pinnan alle vajonneita, mitkä teemat tai näkökulmat ovat jääneet taka-alalle (past)? Menneisyyden teemat edelleen eläviä Metodologiset kiistat Metokvalitatiivinen vs. kvantitatiivinen kilpailu paremmuudesta Evidence-based evaluation Puhtaat kokeelliset arvioinnit (RCT) Menetelmäkeskeiset arvioinnit Ylhäältä alas alhaalta ylös arvioinnit Pelkät loppu- ja/tai jälkiarvioinnit Isot, jäykät, (ulkoiset) arvioinnit ilman kehittämisotetta arvioinnin pakko
Mitä arviointiin liittyviä asioita on juuri nyt aallon harjalla (in)? Osallistava arviointi, tarinat Demokraattinen arviointi Vaikuttavuuden vaade läpileikkaavasti, evidenssin laaja-alaisuus Toisaalta: evidence-based ja sen kritiikki Kehittävä arviointi, arviointi kehittämistyön tukena Arvioinnin moninaisuus Eri arviointien yhdistäminen Eri ilmiöiden arviointi yhtä aikaa Synergia-arvioinnit Arviointitiedolla johtaminen vaikuttavuusohjaus Sähköiset menetelmät Sosiaalinen media Isot ohjelma-arvioinnit muutamien isojen toimijoiden toteuttamina vs. itsearvioinnit, Pienet projektiarvioinnit Metodinen erikoistuminen
Mitä heikkoja signaaleja arvioinnin sisällöissä ja/tai teemoissa on vasta tulollaan aallon harjalle (future)? Digimenetelmät, digitaalinen arviointi, Big data Somen käyttö arvioinnissa voimistuu Osallistava arviointi, tarinat, yhteiskehittely Vaikuttavuuden arviointi myös kvaliote tai tapaustutkimusten kautta Arvioinnin erilliset asiantuntijat, arviointi omana tieteenalana: onnistuuko? Alan harmonisoituminen (EU) Arvioijan pätevyys esille (hyvässä ja pahassa) Isot teemat, isot tutkimuslaitokset niitä toteuttamassa vs. pienet arvioinnit, ruohonjuuritason arvioinnit, itsearvioinnit Nopeat arvioinnit/ nopeat arviointimenetelmät Arvioinnin eettisyyden korostuminen Kokoavat meta-arvioinnit Metodien yhdistely, laajempi Metodinen näkökulma Arvioinnit osana kehittämistä, reaaliaikaista, arviointiosaaminen osana kehittämisosaamista Systeemimetodologian ja systeemiajattelun hyödyntäminen arvioinnissa Järjestelmätason arvioinnit (esim. MAL(PE)