Käytännön kokemuksia auditoinnista kannattaako? Minna Kaila, lastenallergologian dosentti Lääkintöneuvos, STM 31.5.2010 1.6.2010 Ylilääkäri, Lasten ja nuorten terveyspalvelut, Tampereen kaupunki Koulutusvaliokunnan puheenjohtaja & Seuran varapuheenjohtaja/ Suomalainen Lääkäriseura Duodecim minna.kaila@kolumbus.fi; gsm 050 5232021 Ei sidonnaisuuksia lääke- tai laiteteollisuuteen
Mitä auditointi on? Wikipedia 22.4.2010 The general definition of an audit is an evaluation of a person, organization, system, process, enterprise, project or product. The term most commonly refers to audits in accounting, but similar concepts also exist in project management, quality management, and for energy conservation.
(1) what is to be evaluated (definition of the intervention), (2) towards what (definition of objectives), and (3) at which time Value formation Assessing the effect of this goal operation (programme evaluation) Goal setting (objectives) Putting goal activity into operation (programme operation) Goal measuring (criteria) Identifying goal activity (programme planning)
Process evaluations 1. Descriptive 1. Audit Outcome evaluations 1. Effects on people before and after an intervention 1. Comparative before and after an intervention 1. Randomized controlled trial 1. Intentional change in organizations a. Effects on providers b. Effects on patients/population of intervention with respect to providers Øvretveit 1998
Lastentautien erikoislääkärikoulutuksen auditoinnit, käytännön kokemukset Auditointityöryhmä 1998 Jarmo Visakorpi, Kaisu Antila, Matti Korhonen, Matti Uhari Auditointityöryhmä 2010 Matti Uhari, Markku Leskinen, Marja-Riitta Ståhlberg,
Taustaa Aiemmin tehty Lääkäriliiton toimesta Korva-, nenä- ja kurkkutauteihin 3/96 Keuhkosairaudet 4/97 Neurologia 10/97 Lastenlääkäriyhdistyksen hallitus päätti 10/97 suorituttaa auditoinnin lastentaudeissa Ruotsissa SPUR -nimellä toiminnassa Euroopassa UEMS antanut suositukset Uusi auditointi lastentauteihin 2010
Mitä tehtiin? Yliopistoklinikoiden auditointi Kyselylomakkeet Klinikkalomake Erikoislääkäreille (opettajat) Erikoistuneille (1992-1998) erikoistuneille Erikoistuville Lomakkeet molemmilla kerroilla samat Klinikoiden site visitit
Kyselytutkimus Kysyttiin resursseja, toteutusta, sisältöä Mitä koulutuksessa oli tärkeätä Mitä koulutukseen tulisi lisätä Miten valita erikoistuvat Verrattiin erikoistuvia, erikoistuneita Verrattiin klinikoita
Auditoinnin tulokset 1998 Kaikki 5 klinikkaa riittävän suuria Avohoidon opetus jää vapaaehtoisuuden varaan Koulutuksen ohjaajaa ei oltu nimetty Sijoitussunnittelussa ongelmia, eroja sairaaloiden välillä Palautteen anto oppimisesta sattumanvaraista
Koulutuskysymyksissä ohjaava tutor % 100 80 60 40 20 KYS HYKS OYS TYKS TAYS 0 Erikoistuva Erikoistunut
Vaikutusmahdollisuus osastosijoituksiin % 90 80 70 60 50 40 30 20 10 0 Erikoistuva Erikoistunut KYS HYKS OYS TYKS TAYS
Oppimisesta saatu palaute % 35 30 25 20 15 10 5 0 Ennalta sovituissa palavereissa Ex-tempore palautekeskusteluissa KYS HYKS OYS TYKS TAYS
Auditoinnin tulokset Resurssit työhuoneen, tietokoneiden ja tietoliikennepakettien muodossa melko hyvin järjestetty Päivystystilat joissakin paikoissa ala-arvoiset Teoreettisen koulutuksen edellytykset hyvin saatavilla Meeting-ohjelmat hyvät
Auditoinnin tulokset Erikoistuvien oma aktiviteetti liian vähäistä meeting-ohjelmissa Osallistuminen kursseille kotimaassa keskimäärin 3-4 kurssia Eroja klinikoiden välillä OYS huonoin Muuta opetusta toivottiin lisää
Potilastapausten esittely k.a 6 5 4 3 2 1 KYS HYKS OYS TYKS TAYS 0 Erikoistuva Erikoistunut
Osallistuminen kursseille kotimaassa k.a 4 3,5 3 2,5 2 1,5 1 0,5 0 Erikoistuva Erikoistunut KYS HYKS OYS TYKS TAYS
Auditoinnin tulokset, mitä haluttiin ATK-kurssitusta Johtamistaito opetusta Etiikkakurssia Hallintokurssia Terveystalouskurssia Em. järjestyksessä Perehdytys toteutuu huonosti
Auditoinnin tulokset Lokikirja/portfolio vasta tulossa Konsultaatiot toimivat hyvin Ei kuitenkaan aina selvää opetuksellista tavoitetta Epämiellyttävien ja vakavien asioiden kertomisessa potilaille/vanhemmille epävarmuutta Tieteellinen tutkimustyö hyvin harmonisoitu
Työryhmän suositukset 1 Koulutuksen tavoitteet tulisi määritellä Mitkä ovat lastenlääkärin osaamisalueet? Mitä lastenlääkärin tulisi osata kullakin osaamisalueella? Miten nämä tavoitteet saavutetaan? Kullekin koulutettavalle oma nimetty ohjaaja Ohjaajille koulutusta
Työryhmän suositukset 2 Kaikille erikoistuville portfolio Sijoitussuunnitelmiin oppimisen näkökulmaa enemmän Systemaattinen palautusjärjestelmä Kirjallinen Molemminpuolinen Avoin
Työryhmän suositukset 3 Opiskelutilat varattava, päivystystiloihin tietokoneyhteydet Mahdollisuus koulutustilaisuuksiin osallistumiseen paremmaksi Systemaattinen perehdyttäminen työn alussa Kannustus ja odotusarvot oppimisen suuntaan entistä enemmän Konsultaatiot, omat potilaat, seminaarit
Työryhmän suositukset 4 Siirtyminen entistä enemmän näyttöön perustuvan lääketieteen harjoittamiseen opettamisessakin Koulutusta myös opettajille Jatkuvaa koulutusta, harjoitusta Valintakriteerit tiedoksi kaikille, avoimiksi
Uusi auditointi 2010 Käytettiin samoja kyselylomakkeita Nyt ei lähetetty erikoistuneille lomaketta Haluttiin seurata, oliko edellisellä auditoinnilla ollut vaikutusta Vierailut samalla tavalla kuin aiemmin Haastattelut vastaavasti Eri haastateltavat erikseen
Positiiviset muutokset 1/2 Kuopiossa lastenklinikan yksiköt samaan rakennukseen Perehdyttämistä parannettu Edelleen käytännön ongelmia Lokikirja otettu ennen kaikkea neonatologian opetukseen liikaakin? Tietoliikenneyhteydet ja työkalut tiedon hakemiseen, seuraamiseen hyvät
Positiiviset muutokset 2/2 Työpistesijoituksissa päästy useimmiten 3 kk jaksoihin Käytännön esteitä aina tietysti mukana Koulutuksen tutor (ohjaaja) pääsääntöisesti nimetty Kansallisiin koulutustilaisuuksiin osallistuminen parantunut
Huonontunut tai ennallaan 1/2 Yksi koulutuksesta vastaava ei tullut lainkaan haastateltavaksi Hänen koulutettavansa eivät tienneet kuka heidän koulutuksestaan vastaa Lastenpsykiatrian koulutusosuus huono Palautejärjestelmä parantunut vain hieman Koulutusmateriaalia paljon verkossa, josta sitä ei käytetty
Huonontunut tai ennallaan 2/2 Lastenlääkärikoulutuksen tavoitteita ei oltu yleisesti määritelty Toteutui joissakin suppeissa aloissa Koulutuksen hajautusvelvoite keskussairaaloihin koettiin ongelmaksi Erityisesti, jos oli jäänyt koulutuksen loppuvaiheeseen Keskussairaaloiden kannalta tärkeä Joissakin yksiköissä ei ole tarpeeksi keskussairaaloiden koulutuspaikkoja
Yleistä koulutuksen ongelmista Erikoislääkärikoulutuksen ongelmana kuuluminen yliopiston tehtäväksi Tulosyksikön johtaja määrää työpisteistä/palkasta Klinikoiden koulutuksesta vastaavat professorit huonosti sitoutuneita koulutukseen Palkkiot ja kiinnostus tutkimustyössä, ei koulutuksessa palautteen antaminen tästä ongelmallista auditointiryhmällekin Yleensä joku kuitenkin paikkasi puutetta Vastuukysymykset tulisi selkeyttää nykyistä paremmin Tämä ongelma tulee esille auditoinnissa
Kannattaako auditointi? Vierailut kaikista informatiivisimpia, mutta myös työläimpiä Vierailujen aikana esille asioita, joita ei muuten tulisi tietoon Muutosten aikaansaaminen vaikeata Miten laatia raportti, jossa asiat esillä sopivalla tavalla Kenellä valta edellyttää muutoksia Auditointiryhmä oppii eniten
Erikoislääkärikoulutusta koskeva asetus: korkeintaan puolet koulutuksesta voidaan suorittaa yliopistosairaalassa (OPM Asetus erikoislääkärin tutkinnosta, 678/1998). Valtakunnallinen asiantuntijaryhmä tekee auditoinnin Ja lisäksi kunkin yliopistosairaalan asiantuntijat auditoivat oman vastuualueensa koulutuspaikat? Korppi M, Kuusela A-L, Holm T, Lautala P, Tomminen A, Viitanen T, Mäki M. Lastentautien erikoislääkäri koulutus keskussairaalassa. Koulutuksen auditoinnin toinen vaihe. Suom Lääkäril 2009;64:1467-71 Ashorn P, Korpela P, Käär M-L, Lautala P, Viitanen T, Salo M, Csonka P, Eriksson K, Mäki M. Keskussairaaloiden ja yliopistosairaalan yhteistyö lastenlääkärien koulutuksessa. Suom Lääkäril 2004;59:2723 26.
Lopuksi Auditointi ja prosessi Substanssi? Valtakunnallinen: yliopistosairaalat siis 5 vierailua á 1 päivä ja 3 vierailijaa 15 päivää + kyselyn toteuttaminen & analyysi & kirjoittaminen Keskussairaalat: TAYS 4 samaa suuruusluokkaa Mitä vaikutuksia? Tietoisuus puutteet tarpeet / toiveet Miten tulokset käsitelty eri yksiköissä? Mitä muutoksia /parannuksia tehdään?