Akvaariorakkautta Exam tulevaisuudessa Marjaana Kareinen, Lappeenrannan teknillinen yliopisto Hely Lahtinen, Turun yliopisto
Case LUT Exam isossa kuvassa Koulutuksen digistrategia valmistui tammikuun 2017 lopussa Tavoite laadukas oppimiskokemus, enemmän ajasta ja paikasta riippumatonta opetusta ja osaamisen osoittamista Sisältää neljä painopistealuetta, joista yksi LUT on valinnut keskitetysti koulutuksendigiloikkaa tukevat työkalut Exam yhtenä näistä
Case LUT Exam arvioinnin näkökulmasta Exam-tentti, Moodle-tentti, paperitentti, jatkuva arviointi jne. Poistettu kolmen kerran tenttisääntö (samoin kuin Moodle-tenteistä) Ymmärrys eri arviointivaihtoehtojen pedagogiikasta ja teknisistä ominaisuuksista
Exam korkeakoulun tulevaisuudessa? Pohditaan tänään muun muassa seuraavia kysymyksiä: Examin rooli oppimisen arvioinnin kokonaisuudessa ja mikä on kehityssuunta? Examin rooli opetusteknologiapalveluiden kokonaisuudessa (pedagoginen & tekninen) Mitkä ominaisuudet/toiminnallisuudet Examissa tulevat korostumaan?
Keskustelusta poimittua Toimintakulttuuri keskitetty järjestelmien suhteen? (oma kone tentit) Datan tiedonsaanti helpommaksi analysointi Vertaisarviointi mukaan Examiin Opiskelijan roolin kehittäminen Filtteritenttifunktio/välikokeet (aukkotehtävä lisää mahdollisuuksia) Kielten suulliset kokeet mukaan/musiikki (äänitiedoston voi kyllä liittää mukaan) Eri ohjelmat Examin tukena Tarvitseeko Examin taipua kaikkeen? Henkilöstön ymmärrys eri tenttien tarkoituksenmukaisuudesta Valtakunnallinen konsepti (eväät, tenttiajat yms. )
Keskustelusta poimittua Yksilöllinen eteneminen joustavaksi Essee-vastauksen automaattinen arviointi ja kohdennettu palaute Lopputentistä opintojaksopalaute Yhteiskäyttöisyys jopa kaupungin sisällä Admin-toiminnot paremmaksi: tilojen hallinta, data, varauksen vaihto yms. Voisiko olla myös lukioiden käytössä, entä valintakokeet
Akvaariorakkautta Tukipalvelut ja käyttöönotto Kaisa Savolainen, Vaasan yliopisto
Tilat ja valvonta Nykytilanne Vaasassa Tulevaisuuden suunnitelmia, esim. Frank-kortilla sisään tenttitilaan Kuinka valvonta hoidetaan? Ketkä valvoo? Eri toimijoiden yhteistyön ja tukipalveluiden järjestämisen hyvät käytännöt?
Tilat ja valvonta
Käyttöönottoprosessi Hallinnolliset asiat: kuka tukee ketä ja miten? Tenttien tarkistusprosessi erityisesti kypsyysnäyte-tenttityypissä: vaikuttaako EXAMin käyttö tarkistusaikoihin? CSC:n asennus vai oma asennus? EXAM asennuskonfiguraatioista päättäminen (mm. tenttien kestot, liitetiedoston koko, arvosana-asteikon muokattavuus jne.) Ohjeet käyttäjille Käyttäjäkoulutus Pilotointi
Keskustelusta poimittua Tiloihin kulkua hoidetaan eri tavoin eri korkeakouluissa esim. a) Opiskelijakortissa siru, jolla pääsee sähköisen tentin tilaan. b) Tilaan pääsee ilman kulkukorttia, opiskelija tunnistetaan vain koneelle kirjautumisen yhteydessä. c) Opiskelija tunnistetaan henkilökunnan toimesta ja hänelle luovutetaan kulkukortti tilaan. Kulkukortti on palautettava tentin jälkeen. d) Sähkölukolliset ovet avautuvat esim. 5 min ennen tentin alkua ja sulkeutuvat 30 min tentin alkamisen jälkeen.
Keskustelusta poimittua Yhteiskäyttöisyyden myötä täytyy miettiä, miten kulkua voidaan yhtenäistää. Ideoita: EXAMissa ilmoittautuessa opiskelija saa ovikoodin, jolla pääsee tilaan ja saa pääsyn lokerikkoon? Koodi tallennetaan EXAMissa ilmoittautumisen yhteyteen. Käytetään kulunvalvonnassa henkilö- tai ajokorttia tms. josta saa ovilukijalla luettua ja tallennettua kulkijan henkilötunnuksen? Lisävarmenne: Kuvan ottaminen tentin alussa opiskelijan kasvoista ja kuva tallennetaan järjestelmään? Todettiin, että valvonnassa useimmat ongelmatilanteet ovat johtuneet väärinymmärryksestä tai epähuomiosta eikä suoranaisesta vilppiyrityksestä.
Keskustelusta poimittua Koulutusideoita Opettajien koulutus Mennään lähelle opettajia, paikan päälle yksikön kahvi- tai kokoushuoneeseen kouluttamaan. Aloitetaan koulutus EXAM tilassa, jossa opettaja tekee testitentin, minkä jälkeen näytetään kuinka tentti oli laadittu ja näytetään kuinka tentti arvioidaan. Opiskelijoiden koulutus Videot Pikakoulutustilaisuudet massaluentojen alussa Kuinka käyttöönoton jälkeen saadaan opettajat tekemään tenttejä EXAMiin? Opettajalähettiläät hyvä asia. Tuntisuunnitelmaan aika EXAM koulutukselle. Usein vaatii esim. rehtorin päätöksen, että kaikki kesätentit/uusintatentit siirretään EXAMiin. Porkkana: Jos laittaa omat tentit sähköisiksi, ei tarvitse enää valvoa tenttejä. Opettajan digitaaliseen valmennukseen sisältyy, että täytyy tehdä vähintään yksi sähköinen tentti.
Akvaariorakkautta EXAM nyt: käyttötapoja ja käytännön esimerkkejä Päivi Rajaorko, Haaga-Helia ammattikorkeakoulu
EXAM Haaga-Heliassa Tenttis käyttöön 11/2012 Exam käyttöön 7.12.2015 aluksi 3 EXAM-konetta Pasilan toimipisteessä 08/2016 EXAM käyttöön myös Haagan, Malmin ja Porvoon toimipisteissä (Pasilassa vielä 2 Tenttis-konetta 03/2017 asti) 04/2017 alkaen käytössä vain EXAM Pasila (10 konetta), Haaga (3 konetta), Malmi (4 konetta), Porvoo (3 konetta) Opintojaksot Examiin Winhasta, arvioinnit eivät siirry Winhaan (vrt. Peppi) 2016 sähköisiä tenttisuorituksia yhteensä 2213 kpl (EXAM 1167, Tenttis 1046)
EXAM Haaga-Heliassa EXAM-tilat kirjastojen yhteydessä Kirjaston/infon henkilökunta tarkistaa henkilöllisyyden Tenttitilassa paperia, kyniä, kumeja (mikäli käyttänyt, palautus tentin jälkeen) Tallenteita katsotaan aika ajoin
EXAM Haaga-Heliassa Opintojaksojen tentit (väli- ja lopputentit) Uusintatentit Kypsyysnäytteet Henkilökohtaiset tentit Matemaattisten aineiden tentit Kielten tentit (3.3 versio aukkotehtävä)
Exam korkeakoulun tulevaisuudessa? Pohditaan tänään muun muassa seuraavia kysymyksiä: Millaisia erilaisia EXAMin käyttötapoja korkeakouluissa nyt/voisi olla tulevaisuudessa? Millaisia tenttejä eri korkeakouluissa EXAMissa on suoritettu/voisi suorittaa tulevaisuudessa?
Keskustelusta poimittua Paperitentti: opettaja laittaa kysymykset yhteen paikkaan, opiskelija käy tenttimässä joko akvaariossa tai salissa, myös lähiopetuksessa voi hyödyntää - Esseet - Välikokeet (samaan aikaan opiskelijat suorittavat) - Kurssitentit, lähtötasotentit, kypsyyskokeet, kielten sanakokeet (3.3. versio), artikkelien analysointi, monivalintatentit (automaattinen arviointi) - Kaikki perusopintojen tentit Examissa (riittääkö tilakapasiteetti?) - Kurssiaikaiset tehtävät, vertaisarviointimahdollisuus - > Opettaja tekee itse tentit kaikissa korkeakoulussa Uusia tenttitarpeita: Ryhmätentti (yhteistoiminnallinen), äänitiedoston tallentaminen ja analysointi Älykäs tekstien analysointi Yhdistelytehtävätyypin tarve
Keskustelusta poimittua - Jos on tarvetta piirtää tentissä, on paperit vielä käytössä (kun ei ole piirtonäyttöä), vastauspaperit palautetaan laatikkoon tentin jälkeen - Opettajien yhteistyö olisi tarpeen esim. matemaattiset aineet (tenttiin liittyvien arkikäytäntöjen jakaminen) - Ohjelmointitenteissä ja matikan tenteissä käytössä MatLab, MatCad (lisenssillä 4 koneella), Pytcharm, Excel, Word (kaikilla koneilla, olisi hyvä, jos voisi laittaa vain tiettyihin koneisiin tietyt ohjelmistot) - Lääketieteellisen tiedekunnan tarpeet tulevaisuudessa? pitäisi päästä lääketieteen tietokantoihin (myös oikeustiede) -> mahdollisuus netin käyttöön tai tiettyjen erityisohjelmistojen käyttö Examissa - Jos käytetään tentissä jotain ohjelmistoa, pitää käyttää myös opetuksessa - Voisiko Examissa olla harjoitusrooli, jolla voisi tehdä tenttejä opiskelun aikana - Tenttikysymykset toisesta järjestelmästä Examiin (esim. Moodle) - Vastaajien anonymiteetti - Suttupaperin käyttö (opettajat ei halua), valkotaulut ja tussit käytössä jossain
Keskustelusta poimittua Suoritustiedot Examista Peppiin (ei vielä missään mahdollista, TAMKiin tulossa jossain vaiheessa) MOOCeilla osaamisen osoittaminen (yhteinen korkeakoulujen kesken) Esim. lainsäädännön muuttuminen (Mooc) Korkeakoulujen yhteiset tentit (yhteiskäyttöisyys) Ammatillisen tason mittaaminen toiselta asteelta tulevilta (valtakunnallinen taso, ohjaa opetuksen suunnittelua siten, että ohjataan tenttituloksen perusteella suorittamaan tiettyjä tietyn tason opintoja) Näyttökokeet 2 näyttöä käytössä (Lappeenranta), toisessa esim. liitetiedosto auki ja toisessa Exam-vastaustila
Akvaariorakkautta Sähköinen tentti pedagogisena työkaluna Suvi Junes, Tampereen yliopisto
10 vuotta sähköistä tenttimistä Tampereen yliopistossa Vuonna 2016 lähes 17 000 tenttisuoritusta 4900 kypsyyskoetta suoritettu Yli 400 tenttiä tentittävissä palvelussa EXAM käyttöönotto vasta edessä
Sähköisen tenttimisen lisäarvoja Helposti nähtävät edut: Opiskelija: Joustavuus, opintojen eteneminen Opettaja: Valvonnan poistuminen, tentin organisoimisen helpottuminen, työmäärän väheneminen Organisaatio: Kustannussäästöt (kirjat, tilat, valvonta), opintojen eteneminen Entä laatu ja oppiminen? Opiskelija: Tenttivastauksen jäsentely ja editointi Stressin alentuminen, parempi valmistautuminen Opettaja: Kysymysten muotoilu: mitä tentti testaa? Palautteen antaminen: sanalliseen palautteeseen kannustaminen Arvioinnin muuttuminen: vastausten vertailu, kriteerit/mallivastaukset
Kysymyksiä Miten hyödynnämme sähköisen tenttimisen mahdollisuudet parhaalla mahdollisella tavalla? Minkälainen tentin pitäisi olla (ja missä kohtaa oppimisprosessia), jotta se paitsi testaa opittua myös asian ymmärtämistä ja ohjaa oppimaan? Minkälaisia kysymyksiä sähköisessä tentissä kannattaisi suosia? Miten arvioinnin ja palautteen annon kautta edistetään oppimista?
Keskustelusta poimittua: Kysymyksen muotoilu Pitäisi miettiä tarkemmin, että mitä kysymyksen vastaus osoittaa opiskelijan osaamisesta. Pitäisikö olla laaja-alaisempia, osaamistavoitteiden mukaisia, soveltavia ja ymmärrystä osoittavia kysymyksiä. Tällöin ei olisi väliä, vaikka kysymykset olisivatkin tiedossa tai niitä ei olisi niin paljon tehtynä. (Toki erotuksena tästä tentit, joissa vastaus on oikein/väärin. (esim. matematiikka, lääkelaskut yms.)) Esimerkkejä: -->Kysymykset annetaan opiskelijalle etukäteen, jolloin on jo tosi hyvin opittu asiat, jos opiskelija opettelee vastauksen niihin kaikkiin --> Viimeinen kysymys tentissä: "Keksi kysmys teemasta ja vastaa siihen". Näin opettaja saa hyviä kysymyksiä, mutta osoittaa myös, että onko opiskelija ymmärtänyt mikä on oleellista aiheessa. --> Sanakoe, jossa opiskelijan tulee määritellä annettu käsite käyttämättä kyseisiä sanoja tai kiertoilmaisuja Miten ohjataan opettajia hyvän tentin ja kysymyksen tekemiseen? --> Voisi olla "näin teet hyvän tentin"-työpajoja tai muita koulutuksia, joissa paitsi teknistä toteutusta myös tentin pedagogisia asioita
Keskustelusta poimittua: Arviointi Miten ohjataan opettajia palautteen antamiseen? On tärkeä puoli opiskelijalle, mutta voi lisätä opettajien työtä. --> Mallivastaukset ja kriteerit hyvälle vastaukselle, jotka opettaja voisi laittaa palautteeseen. (Lähteekö kiertämään opiskelijoiden keskuudessa) Tentti Itsearvionnin välineenä: Voi yrittää monta kertaa, automaattiarviointi Tenttimisen prosessimaisuus: Tentti ei pelkästään lopputentti, jossa testataan opitut asiat, vaan tentti voitaisiin ethdä useamman kerran kurssin aikana. esim. välitentti, josta saadun palautteen perusteella tenttiä voisi yrittää uudelleen. Oman suorituksen ja opitun reflektointi. Tentti voi olla myös tasotesti tai lähtötasotesti, joka kertoo opiskelijalle, että minkä tasoiselle kurssille osallistua. (esim. kielet, atk-ajokortti, tiedonhankinta yms.) Ahot-testit (aiemmin hankitun osaamisen todentaminen): Onko aivan sama mistä tiedon hankkii (MOOC, työelämä yms.), kun kysymys testaa osaamista. esim. näyttökokeet