EXAM-pilottikäytön kokemuksia TTY:llä Marjut Anderson

Transkriptio

1 EXAM-pilottikäytön kokemuksia TTY:llä Marjut Anderson

2 TTY:n kokemuksia: sisältö Lähtötilanne EXAM TTY:n projektina Tenttiluokkien rakentaminen Valvonta Työasemaympäristö EXAM järjestelmänä Arviointikulttuurin muutos Konsortioyhteistyö Jatkokehitys

3 Lähtötilanne 10 paikan tenttiakvaario kypsyysnäytekäytössä muutama sähköinen tentti Sordino Softtutor järjestelmä käytössä Talossa arvioinnissa vahva lähiopetukseen kuuluva lopputenttiajattelu (ei kirjatenttejä) Oppimisen tuki

4 Projekti TTY:n opetusteknologiaprojekti, jossa selkeästi yhteistyössä Tilapalvelut (tilat + kulunvalvonta), IT (verkko- ja työasemajampat), opetuksen kehittäjät. Erikseen palkattu projektipäällikkö. Syksy 2014 tenttiluokan rakennus ja oma asennus v. x x Kevät 2015 Pilotointi versionkehityksen tahdissa Kesä 2015 Sordino -järjestelmän alasajo sähköiset kypsyysnäytteet vain EXAMilla 1100 tenttiä 04-08/2015 Syksy 2015 Käytön laajentaminen (käyttömallit, työaseman hyödyntämisen pilotit, piirtopöydät, v.3.0, uusi luokka) Kevät 2016 Käytön laajentaminen, v4.0 Kesä 2016 CSC:n asennus, integraatiot Oppimisen tuki

5 Tenttiluokat (Pori), tulossa 24 paikkaa 11/2015 Avoinna 8-19, jatkossa myös lauantait Täysi henkilöresurssittomuus Mallia otettiin muista yliopistoista layoutiin Kameravalvonta osaksi talon kameroita (Mirasys) Pilotissa lokerikkolukot PIN-koodillisilla lukoilla (ei avaimia) Mietintää jatkoon Kapasiteetti massatenteissä (PC-luokat?, laitosten luokat), yksityiskopit, erilaiset työasemaympäristöt

6

7

8 Valvonta Miehittämätön tenttiluokka eli mahdollisuus 24/7 Kamerat ja mikit 6 kpl Kulkeminen henkilökohtaisilla ovikorteilla (kulunvalvonta) Kirjautuminen EXAMiin intra-tunnuksilla Kuittaus nimilistaan Pistokokeet

9 Kamerat

10 Työasemaympäristö Pohdittiin lyhyesti virtualisointi vs. työasemat Windows vs. Linux Windows työasemaratkaisu oli selvä valinta TTY:llä olemassa oleva ja toimiva Windows-työasemainfra Asennetaan kuten talon kaikki Win-koneet Suurin osa ympäristön rajauksista tehdään group policyilla Tarvittavien ohjelmistojen toimivuus Työasemille TUT-EXAM yhteiskäyttötunnus työasemakirjautumiseen käytössä yhteistunnus kirjoitusoikeudet rajattu: Oma profiili, C:/TEMP-kansioon Työpöydältä ja Start -menusta piilotettu kaikki pikakuvakkeet Uloskirjautumisessa profiili poistuu aina, uudelle käyttäjälle aina puhdas profiili yöllä ajetaan lisäksi profiilin poisto scripti Työasemat: All-in-one työasemat pilotissa Verkkoympäristö: yhteydet sisään ja ulospäin on rajoitettu aliverkkopalomuurilla pääsy sallittu ylläpidon vaatimiin palveluihin sekä rajattuihin sisäisiin palvelimeen Mietintää jatkoon Yhteydet ulos (muille palvelimille) tentin aikana? Proxy-palvelin väliin? Tentin vaatimusten perusteella ympäristön valinta? Virtuaalikone? Imagejen määrä

11 EXAM -järjestelmä Oma asennus selvä valinta kehitysvaiheessa, myöhemmin mahd. ulkoistus Edelleen tilanteita, jotka vaativat selvitystä tietokannasta/palvelimelta, joten tarvitaan reagointimahdollisuus Odotetaan palvelutasosopimusta Pilottikäyttö oli erittäin tärkeää järjestelmän kehityksen kannalta, vaikkakin meille omat haasteet Kehittyvän järjestelmän versionhallinta pilottikäyttäjänä (päällepäivitykset eivät vieläkään suoraan onnistu) Yksin pilotointi: toiveet/vaatimukset/bugit Pilotoijana talo jolla ei sähköistä tenttimistä juuri aiemmin Perustoiminnallisuudet meille ok Kuitenkin pääasiassa hyvää palautetta koko ajan

12 Jatkoajatuksia (jotka eivät kehitysjonossa vielä) Tänä vuonna saadaan vain perustoiminnallisuudet Arviointityökalujen kehittäminen (automatisointi, massatentit) Käyttäjäkohtainen tieto Tekstieditori/syöttötavat Rajapinnat (kysymyspankit, ulkoiset resurssit) Järjestelmän käyttötapaukset vs. suunnitelma ei vain paperitentit sähköisiksi -> jatkuva arviointi työasemaympäristön voimakkaampi hyödyntäminen massatentit ja kapasiteetin hallinta

13 Arviointikulttuurin muutos Talon mallia sähköisen tentin suhteen rakennettu meillä samalla (meillä vahva lähiopetuksen lopputenttiajattelu) Tenttipäivästä tenttijaksoon Opiskelijoiden deadline Opettajien työn muutos Ei vain paperitentin korvaamisesta vaan jatkuvan arvioinnin työkaluksi! Esim. keskustelu tenttikerroista Sähköisen tentin rooli arvioinnin välineenä Työasema ohjelmistoineen tuo paljon mahdollisuuksia, joita ei ehkä osattu huomioida tarpeeksi alusta alkaen!

14 Konsortioyhteistyö HAKA erilaiset käyttötavat organisaatioilla! Oodi erilaiset käyttötavat organisaatioilla! Projektimalli Resurssit epäsuhdassa ja epäselviä: kehittäjät vs. PP vs. TO Organisaatioilla vahvat mallit tenttimiseen -> muutoshalukkuus? Kansallisesti joidenkin prosessien yhtenäistämistä tarvittu vahvemmin? Jatkossa konsortion sisällä isojen kokonaisuuksien jatkokehityksen jakaminen (esim. kielten tarpeet, matikan tarpeet..) Vakiointi - Yhtenäiset ohjeistukset valvontaan, järjestelmän käyttöön kuinka saadaan toimimaan?

15 Jatkokehitys Projektimallin kehittäminen Yhden kehittäjän scrum-tiimi? Resursoitu tuoteomistaja tai PP Koodaustyön ohjaus Käyttöönottoja tarvitaan Tänä vuonna saadaan perustoiminnallisuudet Tarpeet eriytyy? Kehityksen hajauttaminen? Hyvin pienen budjetin hanke. Kunnon rahoitus että saadaan hiottu karvalakki + uusia ominaisuuksia - TTY:llä halukkuutta panostaa

16 Käyttäjäpalaute Opiskelijat tyytyväisiä kaikkeen huolimatta bugeista HAKA -kirjautuminen tärkeä Käytettävyys Sordinon verrattuna Integraatioita odotetaan Opettajille kulttuurin muutos Kypsärit, Kysymyskirjasto, Paperi vs. sähköinen Työaseman hyödyntämisen mahdollisuudet Suttupaperittomuus Kaavat ja kaaviot Mallien kehitys (välikoe, esitesti, viikkokoe, lopputentti (2vko, 4vko, 3kk)

17 Tilastoa 08/2015 Participation 960 (tenttiosallistumiset?) Enrolment 1217 (tentti-ilmoittautumiset, sis peruutukset Exams 1200 (opiskelijakohtaiset ja opettajan prototentit) Users 930 (käyttäjät järjestelmässä)