Sotefo-hankkeen päätösseminaari Lappeenranta, 10.6.2013 Kokemuksia verkkomateriaalien ristiinarvioinnista Teija Lehto, erikoissuunnittelija VirtuaaliAMK-verkoston kehittämisyksikkö amk.fi
Tätä oli tarkoitus tehdä Sotefo-hankkeen yhtenä tavoitteena oli seuraavien materiaalikokonaisuuksien tuottaminen, avoimesti kaikkien käytettäväksi: 1. Työpaikkaohjaajakoulutus (2 ov), Hyria 2. Näyttötutkinnon arvioijakoulutus (1 ov), Aktiva 3. Koulutus ja perehdytysmateriaali oppimisfoorumin välineiden käyttöön (1 ov), Hyria 4. Potilashallinnon kirjaamisen verkko-opetuspaketti (1 ov), Aktiva 2
Hankkeessa tuotetut verkkoaineistot 1. Työpaikkaohjaajakoulutus, 3 ov Hyrian toteutus OPH:n työpaikkaohjaajakoulutuksen perusteiden (2012, 3 ov) mukaisesti. 2. Näyttötutkinnon arvioijakoulutus 1 ov Hyriassa toteutettu arvioijakoulutuksen verkkosivusto. Toteutuksessa tarjottiin etäosallistumista koulutukseen, mikäli lähiopetukseen tai johonkin lähiopetuksen osioon ei päässyt mukaan. Arvioijakoulutuksen suoritettuaan voi toimia työnantaja- tai työntekijäarvioijana sosiaali- ja terveysalan tutkintotilaisuuksissa. 3. Työpaikkaohjaaja- ja arvioijakoulutus 3 ov - Aktivan toteuttama yhdistetty työpaikkaohjaaja- ja arvioijakoulutuksen sivusto 4. Verkko-opetuksen koulutuskokonaisuus, 1 ov Hyrian toteuttaman verkkomateriaalien tuottamiseen perehdyttävä kokonaisuus Voidaan käyttää ohjattuun opiskeluun tai itseopiskelumateriaaleina. Sisältää ohjeet Verkkonen.fi-oppimisfoorumin käyttöön Sisältää erillisen Sosiaalisen median osion, toteuttajana VirtuaaliAMK 5. Hoitotyön rakenteinen kirjaaminen, 1 ov Aktivan alkuperäinen ajatus kirjaamisjärjestelmien näyttökaappauksista ei tekijänoikeussyistä onnistunut. Nyt materiaali rakentuu pitkälti videoitujen haastattelujen varaan. 3
Koulutusmateriaalin tuotannon prosessi 1. Koulutusmateriaalien käsikirjoitukset 2. Käsikirjoitusten katselmointi -> uudet kässäriversiot 3. Verkkomateriaalin tuottamisen välineiden valinta Hankkeessa käytössä pääasiassa Verkkonen.fi-oppimisfoorumin välineet sekä avoimen materiaalin tuottamisessa sekä Verkkonen.fi suljettuna oppimisympäristönä. Sosiaalisen median osuus Weebly-verkkopalvelussa. Verkkoneuvotteluissa Adobe Connect verkkokokousohjelmisto Verkkoseminaarissa käytettiin Conex-neuvotteluseinää 4. Materiaalin toteutus 5. Ristiinarvioinnit Arvioinnin kohteena hankkeessa tuotettu julkinen verkkomateriaali 4
Materiaalin tuotattamisen prosessi Käsikirjoituksen laatiminen käsikirjoituspohjalle Katselmointi hankkeen projektiryhmässä Tarvittaessa käsikirjoituksen uusi versio Käsikirjoitus Verkkomateriaalin toteutus Aktivalla ja Hyrialla sisällön substanssi ja materiaalin toteutus VirtuaaliAMK:lla konsultoiva rooli Arvioijen itsenäinen arviointityö Arviointisessiot verkkokokouksina Materiaalin työstäminen arvioinnin pohjalta Verkkonen.fi > Materiaalit Valmis verkkomateriaali Ristiinarvioinnit
Taustalla VirtuaaliAMK-verkoston ristiinarviontimalli Koulutuksen / koulutusmateriaalin arviointitiimit Ristikkäisyys: arvioijat ovat eri organisaatiosta kuin materiaalin tuottajat. Arviointitiimissä tulee olla arvioitavan materiaalin sisällön asiantuntijoita. Toisaalta ryhmässä tulee olla ulkopuolisia, siis osaajia kokonaan eri alalta ja kontekstista kuin materiaalin sisältö. Vakioidut arviointikriteerit, valmiit arviointipohjat. Ensin arvioijat arvioivat materiaalin itsenäisesti ja palauttavat arviot mentorille. Yhteenveto tehdään mentorin johdolla yhteisessä (verkko)ristiinarviointisessiossa. Koulutusmateriaaliin tehdään korjaukset arvioinnin pohjalta, ja ristiinarviointi toistetaan tarvittavan monta kertaa. 6
Ristiinarviointivälineen valinta Sotefo-hankkeessa arvioinnin kohteena oli avoin verkkomateriaali, ei Verkkoseen kirjautumista edellyttävä osuus. Käytettävissä kolme Excel-taulukkoon tehtyä VirtuaaliAMK:n arviointipohjaa: Opintojaksojen arviointiväline sisältää perusteellisen pedagogisen laadun arvioinnin (käytettiin eniten) Verkkoaineistojen arviointiväline (käytettiin kerran) kaikkein kattavin arviointipohja: arvioidaan perusteellisesti erikseen materiaalin käyttö, sisältö, tuotanto ja hyödyt Oppimisaihioiden arviointiväline (suppein, ei käytetty, sisältää oppimisaihion teknisen ja pedagogisen arvioinnin) 7
Esimerkkejä arviointisessiosta Arviointikeskustelu 1 Ensimmäisen arviointisession aloitus, arvioitavana työpaikkaohjaajakoulutuksen materiaali Arviointikeskustelu 2 Arvioitavana työpaikkaohjaajakoulutuksen verkkomateriaalin pedagoginen laatu Arviointikeskustelu 3 Arvioijakoulutuksen verkkomateriaalin toinen arviointikierros
Päätelmiä Onnistuimme parantamaan materiaalien laatua ristiinarviointimenettelyllä! Ulkopuoliset arvioijat kiinnittivät huomiota seikkoihin, jotka olisivat jääneet materiaalin toteuttajalta yksin huomiotta. Ensimmäisen arviontikierroksen suositukset eivät kaikki valitettavasti tulleet toteutettua. Fokus kannattaa pitää siinä, miten ryhmä parhaiten pystyy tukemaan ja antamaan hyviä vinkkejä materiaalin toteuttajalle. Arviointipohjan valintaan ja käyttöön olisi voinut kiinnittää enemmän huomiota.
Lisätiedot Verkkonen.fi Sotefo-blogi: sotefo.wordpress.com teija.lehto@amk.fi