Miten (sähköiset) palautejärjestelmät vastaavat palautteenkäsittelylle asetettuihin tavoitteisiin? Peda forum -päivät, 16-17.8.2017, Vaasa Jenni Koponen, Metropolia Ammattikorkeakoulu Eetu-Pekka Heikkinen, Saara Luhtaanmäki,
Sisältö Keitä me ollaan? - Miksi ja miten olemme tekemisissä palautteen kanssa? - Kokemukset palautejärjestelmistä - Metropolia Ammattikorkeakoulu - n prosessi- ja ympäristötekniikan tutkintoohjelmat Esityksen tavoite Palaute ja palautejärjestelmät sekä niiden suhde muuhun toimintaan Kysymyksiä ja pohdintaa palautejärjestelmien kehittämisestä - Ehkä jopa vastausehdotuksia? Yhteenveto
Ketä me ollaan? Jenni Koponen - Yliopettaja, Metropolia Ammattikorkeakoulu - Kokemus palautejärjestelmistä: - Kurssien vastuuopettajana - Kurssipalautejärjestelmän kehittäjänä - Vetäjänä Oppijan polun palautekokonaisuuden kehittäminen - Metropolia AMK:n strategisessa kehittämishakkeessa 2015-16 Eetu-Pekka Heikkinen Saara lisää tänne oman kuvansa. - Yliopistonlehtori, - Kokemus palautejärjestelmistä: - Yksittäisten opintojaksojen opettajana - Opintosuunnan vastuuhenkilönä - Tutkinto-ohjelman palautteenkäsittelyryhmän jäsenenä - Tutkinto-ohjelmatoimikunnan jäsenenä Saara Luhtaanmäki - Koulutussuunnittelija, - Kokemus palautejärjestelmistä: - Koulutusalan opetuksen ja ohjauksen kehittäjänä - Tutkinto-ohjelmatoimikunnan jäsenenä - Tiedekunnan koulutustoimikunnan jäsenenä - Palautejärjestelmien kehitystyössä asiantuntijana
Palautejärjestelmä: Metropolia Ammattikorkeakoulu Oppijan polun palautekokonaisuus - Palauteperiaatteet - Oppimisenaikainen dialogi - Laadukas toteutussuunnittelu - Yhteiset kyselyt (opintojakso, HowULearn ja AVOP)
Palautejärjestelmä: n prosessi- ja ympäristötekniikka Palaute kohdistuu: - Kurssit, tutkintorakenne, OPS - Ohjaus - Tutkinto-ohjelman kokonaistoimivuus Palautteen keruu: - Kurssipalautteet keskitetysti - Palautejärjestelmä: Palaute ( https://palaute.oulu.fi/ ) - Lisäksi opettajien keräämä palaute kursseista - Palautteenkäsittelyryhmä (tutkinto-ohjelmataso) - Opetuksen päivä (tutkinto-ohjelmataso) - Yliopistotasoiset ja valtakunnalliset palautteet kuten kandipalaute Palautteen käsittely ja toimenpiteet: - Opettajien oma toiminta - Palautteenkäsittelyryhmä - Tutkinto-ohjelmatoimikunta, OPS-työ - Ohjauksen kehittäminen; esim. koulutus
Tavoite Omiin kokemuksiin perustuen: Arvioida, miten palautejärjestelmät vastaavat palautteelle asetettuihin tavoitteisiin. Taustalla: - Mitä on palaute? - Mikä on palautteen tavoite? Kontrolli vai kehittäminen? Yleistäen: Nostaa esiin kysymyksiä ja näkökulmia, joita tulisi pohtia, kun palautejärjestelmiä suunnitellaan ja kehitetään.
Mikä on palautejärjestelmä? Mitä palautejärjestelmä sisältää? - Palautteen kerääminen - Mitä? Milloin? Miten? Kenen toimesta? Miksi? - Palautteen kokoaminen/käsittely - Toimenpiteet palautteen pohjalta - Takaisinkytkentä Mitä tavoitteita palautejärjestelmillä on? - Esim. palautteen kattavuus, edustavuus, vertailtavuus, yhdenmukaisuus, systemaattisuus - Palautteen tavoitteena on palautteen kohteena olevien asioiden kehittäminen. - Palautejärjestelmä (ja sen kehittäminen) ei ole itseisarvo, vaan sen tulisi tukea tämän tavoitteen toteutumista. - Palautejärjestelmä tulisi rakentaa keskeisimpien palautteelle asetettujen tavoitteiden ympärille (esim. opintojen eteneminen)
Esimerkki palautejärjestelmästä (taustalla OY/PYA) Palautteen keruu Opettajat/kurssipalaute Palautteen antamiselle oltava useita kanavia! Palautteen kohteet Kurssit Rakenteet Opiskelijat/killat Ohjaus Omaopet SISU-raportit Opintojen eteneminen Opintoneuvoja PAK TOT Opetuksen teemapäivä Ohjaajakoulutus Palautekoosteet Opintosuuntakohtaiset TOT it Palautteen käsittely OPS-työ Mutta toimenpidereittien tulisi olla selkeitä ja yksiselitteisiä! Opettajat/kurssien kehitys Toimenpiteet Ulkoiset palautteet
Palautejärjestelmän ja palautteen suhde toimintaan Toiminta Opetus, ohjaus, opintohallinto,... Tavoitteena OPPIMINEN, OSAAMINEN Palautteen keruu Toimenpiteet palautteen pohjalta Palautejärjestelmä Palautteen kokoaminen, käsittely,... (sis. ihmiset, työkalut, ohjemistot,...) Tavoitteena KATTAVUUS, SYSTEMAATTISUUS, EDUSTAVUUS, YHDENMUKAISUUS, VERTAILTAVUUS,...
Kysymyksiä Miksi palautetta kerätään? - Onko tavoitteena kehittäminen vai kontrolli? - Kerätäänkö itsensä (tai laatujärjestelmän) vuoksi? Tähdätäänkö palautejärjestelmän kehittämisellä toiminnan kehittämiseen vai parempaan laatujärjestelmään? - Riskinä menetelmien ja tavoitteiden sekoittuminen? - Johtaako parempi palautejärjestelmä parempaan toimintaan? - Liiallinen keskittyminen numeroihin ja lukuarvoihin? - Arviointiharha, että kaikki on hyvin? - Turhat rankingit? - Löytyykö takaisinkytkentä? Mikä ohjaa palautejärjestelmää? - Mitataanko oppimista ja osaamista (tavoitteiden toteutumista) vai tyytyväisyyttä vai jotain muuta?
Pohdintoja kysymyksiin - kenties vastauksia? (1/2) Kokemustemme mukaan palautejärjestelmiä kehitettäessä korostetaan mm. edustavuutta, kattavuutta, vertailtavuutta, systemaattista keräystä, yhdenmukaisuutta, jne. - Näiden osalta järjestelmiä voidaan kehittää hyödyntäen erilaisia sähköisiä ratkaisuja - esim. em. Palaute-järjestelmä ssa sekä sähköinen kurssipalaute Metropolia-amk:ssa Johtaako tällainen kehittäminen kokonaisuuden paranemiseen? - Mikä on rajoittava tekijä? - Jos kynnyksenä on esim. palautteeseen vastaaminen, niin kattavuuden tai vertailtavuuden parantaminen hyvästä erinomaiseksi ei auta lainkaan! - Riskinä joidenkin osa-alueiden unohtaminen? - Pahimmillaan toinen osa-alue voi jopa heikentyä - Esim. opettajien heikentynyt mahdollisuus vaikuttaa siihen, mistä palautetta kerätään. Ei tietoa todellisista kehittämistarpeista. - Tarvitaanko yhdenmukaisuutta? Entä systemaattisuutta?
Pohdintoja kysymyksiin - kenties vastauksia? (2/2) Korostetaanko palautejärjestelmien kehittämisessä liikaa järjestelmien teknistä puolta, kun kehitystyö pitäisi nähdä palautekulttuurin kehittämisenä? - Asenteet, uhkana kokeminen, pelot? - Tarpeen vaatiessa poisoppiminen vanhassa pitäytymisestä? - Palaute dialogina koko oppimisyhteisössä - Keskustelu? Läpinäkyvyys (keruu, käsittely, toimenpiteet)! Palautteen edustavuudesta - Vaikuttaako palautteen pakollisuus vastausten laatuun? - Korostuvatko ei-pakollisessa palautteessa vain ääripäät? Onko laadullisen ja määrällisen palautteen välillä ristiriitaa? - Mitattavuus/vertailtavuus vs. kehittämisfunktio? - Missä määrin pyrkiä palautteen vertailtavuuteen - oppiminen on kuitenkin aina kontekstisidonnaista? - Mikä on yhteistä - mikä erilaista?
Yhteenveto Tarkoitus oli pohtia, miten (sähköiset) palautejärjestelmät vastaavat palautteelle asetettuihin tavoitteisiin. - Päädyimme pohtimaan, mitä tulisi muistaa, kun palautejärjestelmiä suunnitellaan ja kehitetään. 1. Kokonaisvaltainen kehittäminen - Tekniset järjestelmät voivat auttaa, mutta eivät ole kaikki - Palautekulttuuri ja asenteet merkittävässä roolissa - Keskitytään siihen, missä kehittämistarpeita 2. Takaisinkytkentä varmistettava - Oltava läpinäkyvä kaikille osapuolille alusta asti 3. Toiminnan kehittäminen tavoitteista lähtien - Mitä tavoitteita palautejärjestelmä palvelee?
Kiitos mielenkiinnosta!