Virvatuli Virvatuli-itsearviointijärjestelmä Tietoa, työkaluja parempaan itsearviointiin Jaana Koivisto-Nieminen
TPO-seminaari 10.10.2011/JKN 2
TPO-seminaari 10.10.2011/JKN 3
Virvatuli-malli miksi? TPO-seminaari 10.10.2011/JKN 4
Hyvä keino oppilaitokselle Herättää sisäistä keskustelua laadusta Tuoda esiin vahvuuksia ja kehittämisen kohteita TPO-seminaari 10.10.2011/JKN 5
Virvatuli-mallin erityispiirteitä Lähtökohtana taideopetuksen laatua koskeva tutkimus, oppilaiden näkemykset ja ops:n perusteet. Mallin työstämisessä ja kriteerien laatimisessa mukana oppilaitosten edustajia kaikilta taiten aloilta. Joustava malli: oppilaitos voi tehdä itsearviointinsa haluamallaan tavalla, tarjolla vaihtoehtoja. Itsearviointi, vertaisarviointi TPO-seminaari 10.10.2011/JKN 6
Virvatuli-mallin erityispiirteitä, jatkuu Oppilaan näkökulma asiakaspalautteen keräämiseen on kehitetty apuvälineitä: oppilas- ja huoltajakyselymallit saatavana nettisivuilla. - yhteistyö sähköisen järjestelmäntarjoajan kanssa (artseduzef - maksullinen). Ehdotus menetelmästä kriteerien toteutumisen arviointiin. Myös sähköinen sovellus - maksuton. TPO-seminaari 10.10.2011/JKN 7
Kriteerien toteutumisen arviointi ja sähköinen sovellus TPO-seminaari 10.10.2011/JKN 8
Kriteereillä kuvaillaan hyvän laadun ominaisuuksia, joihin omaa toimintaa verrataan. TPO-seminaari 10.10.2011/JKN 9
Virvatuli-itsearviointikriteerit Kaikille taiteenaloille yhteiset itsearviointikriteerit löytyvät seminaarimateriaalista. Niissä on kyse tavoitetasosta, jota kohti pyritään pienin askelin. Yhteensä 100. Oppilaitoksen arviointiryhmä voi lisätä ja poistaa kriteerejä. Oppaassa kriteerien tueksi on laadittu kuvailutekstejä, jotka selventävät kriteerejä. TPO-seminaari 10.10.2011/JKN 10
Kriteerit löytyvät tammikuussa ilmestyvästä oppaasta TPO-seminaari 10.10.2011/JKN 11
Virvatuli-itsearviointiopas Osa 1. Virvatuli-mallin esittely 1.1 Virvatuli-itsearviointimallin tärkeimmät elementit 1.2 Miten oppilaitos hyödyntää itsearviointia? 1.3 Mitä tarkoitetaan arviointialueella ja -kriteerillä? Osa 2. Itsearviointikriteerit arviointialueittain 2.1 Oppilaat 2.2 Opettajat 2.3 Oppimisympäristö 2.4 Johtaminen 2.5 Yhteistyösuhteet Osa 3. Ohjeita oppilaitoksen itsearviointiin: miten Virvatulimallia ja kriteerejä käytetään? 3.1 Ketkä osallistuvat oppilaitoksen toiminnan arviointiin? 3.2 Arviointikierroksen ajoittaminen ja pitkän aikavälin arviointisuunnitelma 3.3 Arviointiryhmän kokoontumiset 3.4 Arviointimenetelmä kriteerien läpikäyntiin 3.5 Arviointiaineistoa kriteerien läpikäynnin tueksi TPO-seminaari 10.10.2011/JKN 12
Oppaan jakelu TPO-liittojen jäsenoppilaitoksille postitetaan yksi opas sen ilmestyttyä vuoden 2011 lopussa. Tulee myös pdf-muodossa Virvatulinettisivuille www.artsedu.fi/virvatuli. Muutamia kappaleita tulee lisäksi myyntiin. Lisätietoja TPO-liitosta. TPO-seminaari 10.10.2011/JKN 13
Arviointialueet TPO-seminaari 10.10.2011/JKN 14
Arviointikriteerien toteutumisen arviointi - oppilaitoksen arviointiryhmässä Arviointialue 1: Oppilaat 2. Opiskelutaidot a) Oppilaiden opiskelutaidot ja valmiudet oman oppimisensa ja työskentelynsä arviointiin ovat kehittyneet, samoin valmiudet kullekin taiteen lajille ominaiseen itsenäiseen harjoitteluun. b) Oppilaat ovat edenneet opinnoissaan opetussuunnitelman tai henkilökohtaisen opetussuunnitelmansa mukaisessa ja taiteenalalleen ominaisessa tahdissa. c) Oppilaat ovat oppineet asettamaan lyhyen ja pitkän aikavälin tavoitteita omalle opiskelulleen. d) Oppilaiden edellytykset elinikäiseen taiteen harrastamiseen ovat kehittyneet. TPO-seminaari 10.10.2011/JKN 15
Arviointikriteerien toteutumisen arviointi oppilaitoksen arviointiryhmässä, jatkuu Arviointialueissa 1. Oppilaat ja 2. Opettajat kriteerien toteutumista tarkasteltaessa käytetään hyväksi mm. oppilas- ja huoltajakyselyistä sekä opettajien osaamiskartoituksesta saatuja tuloksia. laadullista arviointiaineistoa TPO-seminaari 10.10.2011/JKN 16
TPO-seminaari 10.10.2011/JKN 17
Ehdotus menetelmäksi: toiminnan laatutasot: 5 = erinomaisesti 4 = hyvin 3 = tyydyttävästi 2 = välttävästi 1 = ei ollenkaan EOS=ei koske oppilaitostamme Numeroiden käyttö helpottaa vahvuuksien ja kehittämiskohteiden tunnistamista ja omien tulosten vertailua eri vuosina Lisäksi kirjataan ylös perustelut annetulle laatutasolle. TPO-seminaari 10.10.2011/JKN 18
Koska kyseessä on itsearviointi, tulokset eri oppilaitosten välillä eivät ole helposti vertailtavissa. Arviointikohtien läpikäynti tapahtuu ryhmän yhteisen arvion pohjalta. TPO-seminaari 10.10.2011/JKN 19
Arviointikriteerien läpikäynti sähköisesti Kaikkien oppilaitosten käyttöön sovellus maksutta. Virvatuli-nettisivuilla vuodenvaihteessa. Oppilaitoksen arviointiryhmä syöttää sovellukseen arviointinsa tuloksen siitä, miten kriteerit ovat toteutuneet sekä sanallisen perustelun. Arviointikohdissa käytetään myös tärkeyskerrointa (1-5), jonka arviointiryhmä määrittelee. TPO-seminaari 10.10.2011/JKN 20
TPO-seminaari 10.10.2011/JKN 21
TPO-seminaari 10.10.2011/JKN 22
Arviointikriteerien läpikäynti sähköisesti, jatkuu Oppilaitoksen arviointiryhmä tulostaa lopuksi vastauksensa, jotka näkyvät nelikenttien muodossa. Oikealla ylhäällä ovat vahvuudet ja vasemmalla ylhäällä kehittämiskohteet. TPO-seminaari 10.10.2011/JKN 23
Arviointialue 1: Oppilaat 1. Taidot ja tiedot taideaineessa 2. Opiskelutaidot 3. Yhteistyö- ja muut taidot 4. Omaehtoisuus ja luovuus 5. Ilo ja hyvä taidesuhde TPO-seminaari 10.10.2011/JKN 24
TPO-seminaari 10.10.2011/JKN 25
Arviointikriteerien läpikäynti sähköisesti, jatkuu Vuoden lopussa TPO-liitto kokoaa raportin, mihin tulevat vuoden aikana itsearvioinnin tehneiden oppilaitosten yhteistulosten keskiarvot. Yksittäisten oppilaitosten tulokset eivät näy yhteisraportissa. Vaikka omien tulosten vertailu oppilaitosten keskiarvoon ei ollut itsearviointivälineessä oleellinen ominaisuus, monet toivoivat tätä mahdollisuutta. TPO-seminaari 10.10.2011/JKN 26
Arviointialue 2. Opettajat (Kaikkien oppilaitosten keskiarvo) 1. Aineenhallinta sekä pedagoginen ja taiteellinen osaaminen 2. Oppilaan kohtaamisen taidot 3. Oppilasarvioinnin osaaminen 4. Opetuksen suunnittelu ja arviointi 5. Opettajat työyhteisön jäseninä TPO-seminaari 10.10.2011/JKN 27
2. vaihtoehto Käytetään vain kahta laatutasoa 1. ei kaipaa kehittämistä 2. kaipaa kehittämistä. TPO-seminaari 10.10.2011/JKN 28
Huom: Kriteerit voi halutessaan käydä läpi myös jollain muulla menetelmällä. Oleellisinta on arviointiryhmässä käyty keskustelu kriteereistä ja niiden toteutumisesta! TPO-seminaari 10.10.2011/JKN 29
TPO-seminaari 10.10.2011/JKN 30
Yhteenvetona arviointikeskustelusta arviointiryhmässä Itsearviointikriteerit arviointiaineisto: oppialskyselytulokset, jne. TPO-seminaari 10.10.2011/JKN 31
TPO-seminaari 10.10.2011/JKN 32
Lopuksi Hankkeen lopputuloksena ilmestyvä materiaali tulee Virvatuli-nettisivuille vuoden loppuun mennessä. Itsearviointimallia ja apuvälineitä on tarkoitus kehittää edelleen, kun ensimmäisen vuoden käyttökokemuksista on kerätty palautetta. Käännöksiin on pyydetty lisärahoitusta. TPO-seminaari 10.10.2011/JKN 33
Virvatuli www.artsedu.fi/virvatuli jaana.koivisto-nieminen@artsedu.fi TPO-seminaari 10.10.2011/JKN 34
Palautetta pilotointiin osallistuneilta TPO-seminaari 10.10.2011/JKN 35
Virvatuli-mallin testaus huhtielokuussa 2011 - palautetta 8 oppilaitosta osallistui testaukseen keväällä ja syksyllä 2011. TPO-liitto järjesti päivän kestävän koulutuksen testaajille. Testattiin sekä arviointimallia ja opasta että työkalupakkiin tulevaa aineistoa. Ei testattu vielä sähköisiä sovelluksia. TPO-seminaari 10.10.2011/JKN 36
TPO-seminaari 10.10.2011/JKN 37
Testaustuloksia Arviointikierros kannattaa aloittaa maalishuhtikuussa. Vaikea hahmottaa arviointijärjestelmää kokonaisuudessaan yhden päivän aikana. siksi ehdotamme koulutuksen jakamista moduuleihin, ja koulutus tapahtuisi vaiheittain. Ensin arviointimalli, sitten työkalupakki. TPO-seminaari 10.10.2011/JKN 38
Testaustuloksia, jatkuu Kriteerien toteutumisen arvioiminen yllättävänkin helppoa. Oppilaskyselytuloksista oli apua kriteerien toteutumisen arvioinnissa. Opasluonnoksessa annettuja ohjeita pidettiin kohtalaisen selkeinä. Vaatii kuitenkin koulutusta lisäksi. TPO-seminaari 10.10.2011/JKN 39
Pilottioppilaitokset Lapin musiikkiopisto Porvoon taidekoulu Keravan tanssiopisto Musiikki, tanssi Kuvataide ja arkkitehtuuri Tanssi Sastamalan Opisto Sorin sirkus Kuvataide ja arkkitehtuuri, Käsityö, Sanataide, Tanssi, Teatteri Sirkus Taidekoulu Estradi Musiikki, Sirkus, Teatteri Vantaan sanataidekoulu Oulun taidekoulu Sanataide Kuvataide ja arkkitehtuuri, Käsityö, Sanataide, Sirkus, Tanssi, Teatteri TPO-seminaari 10.10.2011/JKN 40
Hankkeen tuloksena vuoden 2011 Virvatuli-malli: loppuun mennessä: Itsearviointiopas taiteen perusopetuksen oppilaitoksille: kriteerit ja arviointimallin ohjeet. Sähköinen sovellus kriteerien läpikäymiseen (ilmainen oppilaitoksille). Apuvälineitä arvioinnin tausta-aineiston keräämiseen: Oppilaskyselymalleja ja muita kyselymalleja Virvatulinettisivuille ja myös Zefin tarjoamaan sähköiseen kyselyjärjestelmään (maksullinen). Lista oppilaitoksen toimintaa kuvaavista määrällisistä TPO-seminaari 10.10.2011/JKN 41 mittareista, joita voi halutessaan käyttää.
Virvatuli-mallin käyttöönottokoulutus: ehdotus Moduulin nimi ja kesto Virvatuli-arviointimalli ja oppilaitosten itsearviointi 8 x 45 min luento-opetusta Kriteerien läpikäynti sähköistä sovellusta käyttäen 4 x 45 min luento- ja ryhmäopetusta Arviointiaineistojen keruu 4 x 45 min luento- ja ryhmäopetusta Määrällisten mittareiden käyttö 4 x 45 min luento- ja ryhmäopetusta Koulutuksen sisältö ja laajuus Mitä tarkoitetaan arviointimallilla, Arviointikriteereillä, jne. Mitä hyötyä on itsearvioinnista? Virvatuli-malli ja itsearviointiprosessi Arviointimallin rakenne Arviointimenetelmästä yleisesti Arviointisuunnitelma ja itsearviointiprosessi Arviointikierroksen vaiheet Kriteerien toteutumisen arviointimenetelmä Arviointiryhmän jäsenten tekemä arviointi ja yhteinen arviointitulos Oppilas- ja huoltajakyselyt Kyselyt henkilökunnalle Sähköisen sovelluksen käyttö TPO-seminaari 10.10.2011/JKN 42