Opiskelijan tie fuksista asiantuntijaksi osaamisen itsearviointi osana koulutuksen laadun varmistusta Jussi Myllärniemi Sanna Nokelainen Eila Pajarre TTY 21.8.2013
Taustaa Yliopisto-opetuksessa arvioinnin ja erilaisten mittarien merkitys on kasvanut Arviointikeskustelu keskittyy kuitenkin useimmiten opiskeluaikojen lyhentämiseen ja opintojen läpäistävyyteen Oppimisen laatu ja inhimillisen pääoman karttuminen ovat jääneet vähemmälle huomiolle Osaamisen arviointi usein yksittäisten opettajien vastuulla Alumnikyselyt antavat aihetta tämänkaltaiselle kyselylle 27.8.2013 2
Valmiusarviokysely TTY:n tietojohtamisen ja tuotantotalouden opiskelijoille Pilottiversio, joka toteutettiin lv. 2012-13 aikana osana Koulutuksen laadun arviointi inhimillisen pääoman karttumisen näkökulmasta opiskelijoiden itsearvio osaamisensa kehittymisestä -hanketta Sähköinen kysely, joka lähetettiin kaikille läsnä olleille tuotantotalouden ja tietojohtamisen koulutusohjelmien perustutkinto-opiskelijoille Kyselyyn vastasi yhteensä 175 opiskelijaa (vastausprosentti 31 %) 27.8.2013 3
Valmiusarviokyselyn tavoitteet 1) Tuottaa opiskelijoiden kokemuksiin perustavaa tietoa osaamisperustaisesta opetuksesta ja opetuksen laadusta 2) Löytää tapa mitata koulutuksen laatua inhimillisen pääoman karttumisen näkökulmasta 3) Auttaa yliopiston henkilökuntaa ja opiskelijoita reflektoimaan opiskelijoiden osaamisen karttumista ja tätä kautta parantamaan opetuksen laatua sekä 4) Kasvattaa osaamistavoitteiden näkyvyyttä ja merkitystä opetuksen suunnittelussa tutkinnoista opintojaksolle ja oppimisen arviointiin asti 27.8.2013 4
Valmiusarviokyselyn sisältö Rakennettiin mittaamaan sekä koulutusohjelmien opintojaksojen osaamistavoitteita että TEK:n insinöörin osaamiskartan (2009) mukaisia osa-alueita ja Opiskelijoiden omia tavoitteita ja näkemyksiä 27.8.2013 5
Valmiusarviokyselyn osaalueet 1) Oman yleisen osaamisen karttuminen 2) Omien ammatillisten valmiuksien karttuminen 3) Koulutuksen osaamistavoitteiden saavuttaminen 4) Odotuksen koulutuksen merkityksestä tulevaisuuden työelämässä 5) Arvio tähänastisten opintojen merkityksestä omissa tulevissa diplomi-insinöörin tehtävissä 6) Odotukset tulevilta jäljellä olevilta opinnoilta ennen valmistumista 7) Vapaamuotoinen palaute 27.8.2013 6
Tuloksia: Arvio omasta tämänhetkisestä yleisestä osaamisesta (tietojohtaminen) Kielitaito: äidinkieli (n=88) 3,57 Ryhmätyöskentelytaidot (n=89) 3,27 1 5 9 31 Kielitaito: englanti (n=89) 3,19 1 18 Tiedonhankintataidot (n=89) 3,17 18 Organisointikyvyt (n=88) 3,16 13 Kirjallinen viestintä (n=88) 3,13 20 Yksilötyöskentelytaidot (n=89) 3,11 17 Analyyttinen ajattelu (n=88) 3,00 Ongelmanratkaisutaidot (n=89) 2,97 Tietotekninen osaaminen (n=89) 2,85 Tekn. yleistieto ja ajatt.mallit (n=89) 2,82 Luova ajattelu (n=89) 2,76 Esiint.taidot ja suull. viestintä (n=89) 2,74 Projektinhallinta (n=89) 2,73 Matemaattiset taidot (n=89) 2,51 Johtamistaidot (n=89) 2,11 Esimiestaidot (n=89) 1,92 Ohjelmointitaidot (n=89) 1,76 Kielitaito: 2. kotimainen kieli (n=89) 1,64 Kielitaito muut k., taitotaso A (n=48) 1,27 Kielitaito muut kielet, kieli B (n=39) 0,82 Kielitaito muut kielet, kieli C (n=27) 0,48 k.a. 0 % 20 % 40 % 60 % 80 % 100 % 2 6 2 3 2 4 1 7 4 8 6 7 20 17 27 31 35 35 30 39 20 24 42 44 40 46 63 64 55 42 47 59 47 55 59 63 44 48 44 49 53 46 42 39 29 31 25 15 36 36 39 35 28 33 28 20 18 24 18 18 13 12 7 27 7 27 2 18 6 15 3 10 10 8 10 26 11 0 (ei osaamista) 1 (heikko osaaminen) 2 (tyydyttävä osaaminen 3 (hyvä osaaminen) 4 (erittäin hyvä osaaminen) 27.8.2013 7
Tuloksia: Arvio oman yleisen osaamisen kehittymisestä (tietojohtaminen) -1 0 1 2 3 Analyyttinen ajattelu (n=87) Esiint.taidot ja suull.viest. (n=85) Organisointikyvyt (n=87) Tekn. yleistieto ja ajatt.mall.(n=87) Tiedonhankintataidot (n=86) Ongelmanratkaisutaidot (n=87) Tietotekninen osaaminen (n=87) Ryhmätyöskentelytaidot (n=87) Projektinhallinta (n=87) Luova ajattelu (n=87) Kirjallinen viestintä (n=87) Yksilötyöskentelytaidot (n=87) Ohjelmointitaidot (n=87) Kielitaito: englanti (n=87) Johtamistaidot (n=87) Esimiestaidot (n=87) Kielitaito: äidinkieli (n=86) Kielitaito, muut kielet (n=85) Matemaattiset taidot (n=87) Kielitaito: 2. kotim. kieli (n=87) -0,01 0,66 0,48 0,47 0,32 1,33 1,3 1,3 1,29 1,26 1,26 1,17 1,07 1,05 1,03 0,95 0,92 0,87 0,87 1,66 27.8.2013 8
Tuloksia: Arvio omista ammatillisista valmiuksista (tietojohtaminen) Ymmärrys tietojärjest. liitynnässä liiketoimint. (n=89) Tietämyksen hallinta (n=89) Kokonaisvalt. yritystoiminnan hahmottaminen (n=89) Liiketoimintatiedon hallinta (n=89) Projektien tai projektitoiminnan johtaminen (n=89) Asiakassuhteiden hallinta (n=88) Aineettoman pääoman hallinta ja johtaminen (n=89) Tietojärjestelmien kehittäminen (n=89) Eettisyys (n=88) Tiedon analysointimenetelmien käyttö (n=88) Toimitusketjun hallinta (n=88) Osaamisen johtaminen (n=88) Toimitusketjun tiedonhallinta (n=89) Myynti ja markkinointi (n=89) Liiketoiminnan johtaminen (n=88) Palveluiden tai palvelutoiminnan johtaminen (n=89) Liiketoim.suunnitelmien laadinta ja/tai arv. (n=89) Prosessien johtaminen (n=89) Kustannusten hallinta (n=88) Toiminnanohjaus (n=89) Henkilöstöhallinto ja henkilöstön kehittäminen (n=89) Kaupan logistiikka (n=89) Vastuullisuus (n=89) Kestävä kehitys (n=89) Riskienhallinta (n=89) Strategiaprosessin hallinta (n=88) Teknologisten innovaatioiden kaupallistaminen (n=88) Tulevaisuuden ennakointimenetelmät (n=89) Tuotetiedon hallinta (n=89) Tuotehallinta (n=89) Turvallisuusjohtaminen (n=89) Rahoituksen suunnittelu (n=89) 0 1 2 3 4 2,37 2,33 2,27 2,15 2,10 2,09 2,09 2,07 2,00 2,00 1,99 1,99 1,98 1,95 1,90 1,89 1,87 1,85 1,83 1,82 1,80 1,79 1,56 1,51 1,50 1,43 1,40 1,34 1,21 1,10 1,07 2,69 27.8.2013 9
Tuloksia: Arvio koulutuksen osaamistavoitteiden toteutumisesta (tietojohtaminen) 0 % 20 % 40 % 60 % 80 % 100 % Tunnen oman koulutusalani (tuta/tijo) keskeiset käsitteet 1 5 38 56 Minulla on ymmärrys organisaation toiminnasta sekä perusnäkemys yritysten toiminnasta ja niiden johtamisesta Uskon osaavani käyttää viestintätaitojani ja hankkimaani tietoa oman alani työtehtävissä alan edellyttämillä työskentelytavoilla Tunnistan vähintään yhden tekniikan alan keskeiset käsitteet (vastaa muiden kuin tijo/tuta osalta) Osaan soveltaa tieteellisiä työskentelytapoja tiedon tulkintaan, päättelyyn ja raportointiin Osaan seurata ja tulkita talouden ja tekniikan kehitystä sekä yhteiskunnallista merkitystä 2 9 6 7 7 46 41 52 56 61 52 49 43 37 32 Täysin eri mieltä Jokseenkin eri mieltä Jokseenkin samaa mieltä Täysin samaa mieltä Uskon osaavani esiintyä ja työskennellä viestintä- ja kielitaitoni puitteissa myös kansainvälisissä ja monialaisissa yrityksissä 1 16 40 43 Osaan soveltaa yrityksen toiminnan, suunnittelun, ohjauksen ja seurannan perusmenetelmiä 3 22 57 17 27.8.2013 10
Tuloksia: Arvio omien ammatillisten valmiuksien kehittymisestä (tietojohtaminen) Ymmärrys tietojärjestelm. liitynnässä liiketoim. (n=86) Liiketoimintatiedon hallinta (n=87) Kokonaisvalt. yritystoiminnan hahmottaminen (n=87) Tietojärjestelmien kehittäminen (n=87) Tietämyksen hallinta (n=87) Liiketoiminnan johtaminen (n=87) Tiedon analysointimenetelmien käyttö (n=87) Toiminnanohjaus (n=87) Aineettoman pääoman hallinta ja johtaminen (n=87) Projektien tai projektitoiminnan johtaminen (n=87) Asiakassuhteiden hallinta (n=87) Liiketoimintasuunnitelm. laadinta ja/tai arv. (n=86) Myynti ja markkinointi (n=87) Osaamisen johtaminen (n=87) Palveluiden tai palvelutoiminnan johtaminen (n=87) Toimitusketjun tiedonhallinta (n=86) Toimitusketjun hallinta (n=87) Kustannusten hallinta (n=87) Henkilöstöhallinto ja henkilöstön kehittäminen (n=87) Prosessien johtaminen (n=87) Tulevaisuuden ennakointimenetelmät (n=87) Riskienhallinta (n=87) Strategiaprosessin hallinta (n=86) Vastuullisuus (n=87) Eettisyys (n=87) Teknologisten innovaatioiden kaupallistaminen (n=87) Kaupan logistiikka (n=87) Tuotetiedon hallinta (n=87) Kestävä kehitys (n=87) Turvallisuusjohtaminen (n=87) Tuotehallinta (n=87) Rahoituksen suunnittelu (n=87) 0 1 2 3 1,09 0,95 0,89 0,89 0,89 0,82 0,8 0,79 0,76 0,74 0,72 0,69 0,64 0,6 0,57 0,55 0,55 0,55 0,54 0,47 0,46 0,45 0,45 0,4 0,37 0,36 0,29 0,26 0,25 1,38 1,3 1,28 27.8.2013 11
Vastausesimerkkejä: Miten koet tähänastisten opintojesi TTY:llä valmentaneen sinua tuleviin DI:n tehtäviin? (tuta) Opintojen alkuvaihe (1. 2. vsk): Yleiskuva yritysten toiminnasta ja keskeiset käsitteet on saatu haltuun. Kehitys on lähtenyt kuitenkin käyntiin vasta käytännössä toisen vuoden alusta, kun pakolliset fysiikat/matikat/kielet eivät enää täytä kalenteria. 3. 4. vuosikurssi: En usko että opinnoista saa valtavaa käytännön hyötyä tehtävissä toimiessa. Käytännössä ymmärrys eri teollisuuden aloista ja niihin liittyvistä määritelmistä ja menetelmistä luo pohjan, jonka päälle voi lähteä rakentamaan oikeaa osaamistaan tekemisen kautta. 5. 6. vuosikurssi: Tuotantotalouden koulutusohjelman opinnot ovat hyvinkin mielenkiintoisia ja uskon, että teoriaosaamisesta on myös hyötyä tulevaisuudessa. Kuitenkin kursseja voisi liittää paremmin toisiinsa ja varmistaa, että keskeiset asiat eivät pääsisi unohtumaan heti tentin jälkeen. 27.8.2013 12
Hyödyt Inhimillisen pääoman karttumisen arvioiminen tukee osaamistavoitteiden täyttymistä ja tätä kautta opetuksen laatua Itsearviokysely antaa tietoa vuosikurssitasolla siitä, mitä opiskelijat kokevat oppineensa ja miten he arvioivat osaamisensa ja valmiuksiensa kehittyneen Kyselyn tuloksia voidaan hyödyntää yksittäisten kurssien lisäksi erityisesti opintokokonaisuuksien suunnittelussa ja kehittämisessä Kysely täydentää muita koulutusohjelmien arviointitapoja (kurssiarviot, valmistuvien kyselyt, alumnikyselyt jne.) 27.8.2013 13
Kehitettävää/pohdittavaa Miten saadaan vastaajia? Kysely pakolliseksi kaikille koulutusohjelman opiskelijoille (miten toteutetaan?) Opiskelijoiden motivointi (opintojen merkityksen ymmärtää paremmin vasta opintojen edettyä pitemmälle) Tulosten hyödyntäminen Osana TTY:n laatumittaristoa? Opettajien tekemä arvointi? Metataitojen merkitys 27.8.2013 14
Lähde Nokelainen, S., Myllärniemi, J. & Pajarre, E. 2013. Tulevaisuuden diplomi-insinöörit - TTY:n tietojohtamisen ja tuotantotalouden opiskelijoiden itsearviokyselyn tuloksia. (julkaistaan syksyn aikana) 27.8.2013 15