Luonnonvara-alan tutkintojen arviointimenetelmien kehittäminen -hanke 1.8.2014-31.12.2014 Palautteet videooinnin käytöstä tutkintotilaisuuksien arvioinnissa Niklas Lankisch niklas.lankisch@salpaus.fi
Tutkintotilaisuus, johon osallistuit 0 2 4 6 8 10 12 14 16 18 20 22 Hevostalouden perustutkinto Hevosten valmentajan ammattitutkinto Eläintenhoitajan ammattitutkinto Kalastusoppaan ammattitutkinto Tuotantoeläintenhoidon ja hyvinvoinnin ammattitutkinto
Olin tutkinnonsuorittaja arvioija 0 2 4 6 8 10 12 14 16 18 20 Arvioin tutkintotilaisuutta vain videolta paikanpäällä 0 1 2 3 4 5 6 7 8 9 10 11 12 13
Arvioi kuvauksen laatua asteikkolla 1-4 1 2 3 4 Yhteensä Keskiarvo kuvauksen laatu 0 2 15 6 23 3,17 äänen laatu 0 8 13 2 23 2,74 Yhteensä 0 10 28 8 46 2,96
Häiritsikö kameran läsnäolo tutkintotilaisuudessa tutkinnonsuorittajaa 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 kyllä ei en tiedä
Häiritsikö kameran läsnäolo tutkintotilaisuudessa arvioijaa 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 kyllä ei en tiedä 7. Oliko tutkintotilaisuus luonteva kyllä ei 0 2 4 6 8 10 12 14 16 18 20 22 24 26 28 30 32
Arvioi asteikolla 1-4, onko arviointi, jossa osa arvioi vain videon perusteella, yhtä luotettava, kuin että kaikki arvoijat olisivat paikalla 1 2 3 4 Yhteensä Keskiarvo * 1 9 17 7 34 2,88
Mitä etuja mielestäsi videokuvaamalla toteutettu tutkintotilaisuus tuo paikalla riittää 1 arvioija (useissa) Tapahtumaa voi tarkastella jälkikäteen.antaa dokumentin tapahtuneesta. Toistettavuus ja tutkittavan oikeusturva (useissa) Kustannussäästöjä + ajasäästö (useissa) Aito asiakastilanne on mahdollista kalastusoppaan ammattitutkinnossa, sillä veneeseen mahtuu vain rajoitettu määrä asiakkaita. Asiakkaat eivät kokeneet tilannetta vastenmieliseksi. Pieni (action) kamera ei herätä huomiota. Tilanne on ehkä hieman rennompi kuin delegaation läsnäollessa Yksikertaisempi toteuttaa, mahdollisuus käyttää enemmän "oikeita" asiakkaita Vähemmän arvioijia paikalla jolloin suorittaja rennompi, helpompi olla läsnä tilanteessa. Koska kolmikannan läsnäolo tarpeetonta koko tutkintotilaisuuden ajan, helpottaa kuvaaminen myös arvioijien vaikeaa saatavutta (tutkintotoimikunnan järjettömät vaatimukset arvioijille) päivämäärän sopiminen on helpompaa
Mitä etuja mielestäsi videokuvaamalla toteutettu tutkintotilaisuus tuo Pienessä tilassa ei ole liian ahdasta. Koira ei paineistu liian monesta ihmisestä Pystyy tekemään arviointia silloin kun itselle siihen on aikaa, ei tarvitse hommata omaan työhönsä sijaista sille päivälle kun arvioi näyttöä. ei tarvitse matkustaa paikan päälle klinikoilla usein ahdasta ja ylimääräiset ihmiset haittaavat työskentelyä, heikentävät jopa potilasturvallisuutta. asiakkaat eli potilaiden omistajat eivät häiriinny. Klinikoilla suostutaan ehkä helpommin näyttötilanteisiin kun ei ole tulossa montaa ihmistä. (useissa) Voi olla oikeita asiakastilanteita, kun arvioijat eivät patsastele seuraamassa.
Mitä haittoja mielestäsi videokuvaamalla toteutettu tutkintotilaisuus tuo arvioinnissa saattaa jäädä huomaamatta joitakin oleellisia osaamisen sekä ammattiosaamisen liittyvää taidon määrittävää asiaa tilaisuuteen osalistuvat asiakkaat eivät kaikki halua tulla kuvatuiksi Kaikkea ei voida kuvata, jolloin tutkintotilaisuuden kokonaisuus ei rakennu luonnollisesti. Kuva materiaalin ulkopuolelle saattaa jäädä materiaalia Kuvaajan ammattitaito korostuu. Täytyy pystyä kuvaamaan ja editoimaan oikeat asiat videolle. Täytyy myös kysyä tarvittavat kysymykset näytön antajalta ja huomioida, että oikeat asiat toteutuvat näytössä. Eli paikalla olevan arvioijan ammattitaito ja vastuu korostuu, koska muut arvioijat eivät voi vaikuttaa siihen, että asiat toteutuvat näytössä oikealla tavalla ja ettei mikään osa jää liian vähäiselle huomiolle. (useissa) Ei mielestäni mitään. Näyttötilanteen tunnelma ei ehkä välity yhtä selkeästi kuin perinteisessä näyttötilanteessa Editointi ym hidastaa asian eteenpäin vientiä. et saa arvioita heti vaan menee todella pitkä aika Jos ei ole tottunut kameroihin voi jännittää. Äänen laatuun pitää kiinnittää paremmin huomiota.
Mitä haittoja mielestäsi videokuvaamalla toteutettu tutkintotilaisuus tuo Klinikoilla asiakkaat eivät olleet niin suopeita kuvaamiseen. Henkilökunta myös hieman arkailivat kameraa. Jos klinikalla tulee jokin hätätilanne tai muu painetta henkilökunnalle tuova potilastilanne, kuvaaminen ei mielestäni ole soveliasta. joudutaan ehkä teettämään lisätehtäviä jos jotain asiaa ei nähdä riittävän hyvin. Epäselviin kohtiin ei voida heti saada vastausta kysymällä/ haastattelemalla tutkinnon suorittajaa. Videon laatu vaikuttaa arviointiin;huono suoritus saattaa tulla hyväksytyksi, kun ääni tai kuva on epäselvä, eikä kunnollista arviointia voi tehdä. Tilanteet vaikuttavat joskus simuloiduilta- videoista ei voi päätellä, onko tilanne "näytetelty". Äänen laatu (useissa) Palautteen antaminen ei ole välitöntä On paljon kuvaajan vastuulla mitä materiaalia käytetään arviointitilaisuudessa.
Vapaa palaute vaikka videointi säästää kuluissa, voidaanko kuitenkaan varmistaa arvioijan tai arvioitavan oikeudellisen turvan helpompaa arvioida videokuvatusta tutkintotilaisuudesta yksittäisen taidon osaamista Näkisin tärkeänä että ainakin yksi palaute tilaisuus olisi naamatusten arvioijien kanssa. Ihmiskontakti Kuvaajat ja editoija ovat kehittyneet paljon. Nykyään ääni ja kuva ovat selkeitä. Editoijakin tietää mitä arvioijat haluavat nähdä ja mitä heidän täytyy nähdä, yhtään enempää en kyllä enää tiivistäisi näyttöjä jottei siitä jää liian suppea kuva. Toivoisin myös oppilaitokselta selkeämpiä sopimuksia ajankäyttöön videoarviointien kanssa videointi on toimiva menetelmä Ihmiskontakti puuttuu. Muuten ok. Mielestäni parempi olisi jos arvioijat olisivat paikanpäällä Itse kuvaaminen ok. Tiedoston siirtäminen oli minulle vaikeaa.tarvitsin siihen ulkopuolista apua. Samoin koneen asetukset jne ovat niin pienillä merkeillä kamerassa, että niitä on vaikea nähdä joilloin päädyin ottamaan kameralla valokuvia Fiilistä ei voi kuvata niin kuin se on opastustilanteessa
Kehittämisehdotuksia videoimalla toteutettaviin tutkintotilaisuuksiin Koulutusta kameran muistikortin tyhjentämisesta,tikulle tallentamisesta jne voisitarvita. muutkin työelämän edustajat kuin minä Videoiduissa tutkintotilaisuuksissa olisi tärkeää, että tutkinnonsuorittajat tuovat itse keskeistä osaamistaan mahdollisimman paljon esiin, sillä osaamista esiintuovat lisäkysymykset jäävät paikalla olevan arvioijan varaan. Aktiiviset tutkinnonsuorittajat pystyvät toimimaan kuin YouTube opetusvideoilla, mutta toiset tarvitsevat selkeän lisätuen ja ohjeistuksen tuodakseen osaamisensa esiin. Tutkinnonsuorittajan olisi tärkeää ennalta tietää mitkä osuudet tutkintotilaisuudesta kuvataan muita arvioijia varten. Etäyhteyden käyttö ja sen suomat mahdollisuudet arviointikeskusteluun, turhat ajamiset jää vähemmälle. Sekä asiakas että kuvaaja pitäisi olla näytön vastaanottaja. Asiakkaalla pitäisi olla "kypäräkamera". Pääkuvaajan otosta ei saa leikata mutta väliin voisi lisätä asiakkaan näkökulmasta "henkilökohtaista" pätkää. useampi kamera.
Kehittämisehdotuksia videoimalla toteutettaviin tutkintotilaisuuksiin Resurssin pitäisi olla suurempi näytön arvioijalle videolta. Videoklippejä enemmän, jolloin pitäisi myös varata huomattavasti enemmän resursseja arvioijalle. Olisi hyvä suunnitella myös videoinnin kannalta, missä järjestyksessä työ etenee. olisi kiva itse nähdä se video Mikrofonit kaikille. Kiinteät videokamerat veneessä. Nyt oli otsalle kiinnitetty action cam. ääneen pitää kiinnittää enemmän huomiota. esim radio häiritsi melkoisesti kuuluvuutta. Ei haittaa, jos kamera liikkuu jos siten nähdään juuri se oleellinen osa. Ei tarvitse noudattaa normaaleja kuvausohjeita, jalusta, valot jne. Kuvauksen tekninen laatu ei ole tärkeä, riittää, että nähdään oleellinen osa. jos jää jotain epäselvää, voisi tehtävän jälkeen kuvat keskustelun tai selostuksen asiasta. Olisi hyvä, että videoiden kuvaajat saisivat kunnollisen perehdytyksen tekniikkaan. Osa videoista oli huonolaatuisia, eikä arviointia voinut näiden perusteella tehdä. Täytyy olla hyvät välineet ja rohkeasti kokeilla erilaisia tekniikoita luontevan, informatiivisen tutkintotilaisuuden saavuttamiseksi. Monella kameralla, kunnon mikrofoneilla, jos tälläistä ylipäänsä pitää tehdä.
Toteutettiinko arviointikeskustelu/-kokous etäyhteyden avulla kyllä ei 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 Arvioi asteikolla 1-4, miten hyvin etäyhteyden käyttö sopii arviointikeskusteluun 1 2 3 4 Yhteensä Keskiarvo * 2 5 15 5 27 2,85
Mitä etäyhteysvälinettä käytettiin (esim. Skype, Adobe connect, Microsoft Lync)? Adobe Connect 9 kpl Sähköpostia 5 kpl puhelin. en saanut toimimaan tietokoneellani etäyhteyttä, miksi tämä tehtiin puhelimitse Messenger en vielä tiedä, ei olla vielä siinä vaiheessa. videoneuvottelu, en muista ohjelman nimeä.
16. Anna vapaata palautetta etäyhteyden käytöstä arvointikeskustelussa Etäyhteyden käyttö on toimiva tapa toteuttaa arviointikeskustelu, mikäli kaikki arviointiin osallistuvat ovat videoidusta nähneet kaiken merkityksellisen keskeisen osaamisen Järkevää kun etäisyydet ovat pitkiä (useammassa) Etäyhteyden takaa on helpompi antaa kritiikkiä mutta vastavuoroisuus kärsii. Olisi mukavampi keskustella nenätysten. Toisinaan arviointikeskustelu on niin lyhyt ja ytimekäs, varsinkin jos näyttö on mennyt todella hyvin eikä arvioijilla ole oikein mitään sanottavaa, että olisi turhaa matkustaa kauas keskustelemaan. Sellainen vapaakeskustelu uupui, kun kaikki laittoivat vain sähköpoatiin mielipiteensä näytöstä. Olisin toivonut enemmän palautetta ja vapaampaa keskustelua. Olisin toivonut meidän kaikkien olevan paikala, oltaisiin pidetty arviointikokous. Näytön arviointi viivästyi aivan liian paljon. Olisi tullut vapaata keskustelua ja olisi voinut kysellä vielä arvioitavalta mielipiteitä. Olisin mielelläni jutellut arvioitavan kanssa edes kerran näytön arviointiin liittyvistä asioista naamatusten. Olisi voinut kysellä arvioitavalta. Nyt arvioitava ihminen jäi hyvin etäiseksi. Luulisi arvioitavankin haluavan tietää ihmisistä jotka häntä arvioi.
16. Anna vapaata palautetta etäyhteyden käytöstä arvointikeskustelussa Vaikeata saada kaikkia langan päähän samaan aikaan, mutta mielummin vaikka lync, skype yms kuin sähköposti täytyy testata ennakkoon, että sitten keskustelun aikana ei ole teknisiä ongelmia Hyvä idea, mutta läsnäolon edut puuttuu. Saahan tälläkin säästöjä aikaiseksi, mutta kyllä keskustelun taso olisi laadukkaampaa, jos kaikki olisivat paikanpäällä yhdessä tilassa.