NÄKÖKULMIA VALVONNAN VAIKUTTAVUUDEN ARVIOINTIIN PELASTUSLAITOKSEN AINEISTOILLA SPPL Onnettomuuksien ehkäisyn opintopäivät 9.-10.11. 2016 Solo Sokos Hotel Torni, Tampere Pekka Itkonen Helsingin kaupungin pelastuslaitos
TAUSTA Helsingin pelastuslaitoksen sisäinen kehitystyö Ei resursoitu tutkimushanke, vaan projektiryhmä OTO Päätettiin viestiä tulokset myös muille Kohderyhmänä erityisesti valvonnan ja sen suunnittelun parissa työskentelevät Haluttiin kartoittaa tapoja arvioida valvonnan vaikuttavuutta Muita kuin onnettomuuksien lukumäärään perustuvia Pelastuslaitoksen oman, olemassa olevan aineiston hyödyntäminen Pelastuslaitoksen, asiakkaan ja kuntalaisen näkökulmat
KÄYTETTÄVISSÄ OLEVIA AINEISTOJA Auditointiaineisto 2010 2014 Palotarkastuksen asiakaskysely Omavalvonnan tulokset ja asiakaskyselyt Helsingin kaupungin turvallisuuskysely
AUDITOIVA PALOTARKASTUSMALLI 1 - Heikko taso 2 - Puutteellinen taso 3 - Lakisääteinen taso 4 - Omaehtoinen taso 5 - Edistyksellinen taso
NÄITÄ EMME SAA UNOHTAA: Taustaoletukset: I. Valvonnalla pystytään vaikuttamaan kohteiden turvallisuuden tasoon II. Auditointiluvuissa havaitut muutokset edustavat valvottujen kohteiden turvallisuudessa tapahtuneita muutoksia Tuloksia tulkittaessa: Tarkastelut eivät kerro yksittäisistä kohteista, vaan ne ovat yhteenvetoja havaintoaineistosta Tarkasteluissa ei ole huomioitu seuraavia tekijöitä: Valvonnan epäsuorat vaikutukset Missä määrin parantunut turvallisuuden taso on saatu aikaan valvonnalla ja missä määrin siihen ovat vaikuttaneet muut tekijät Kohteessa / toiminnassa auditointien välillä tapahtuneet muutokset Auditoinnin yhtenäisyys / tasalaatuisuus
AUDITOINTIAINEISTON TARKASTELUT 1. Lakisääteisellä tasolla olevien tarkastuskohteiden osuus 2. Kaikilla auditoinnin osa-alueilla (A-F) lakisääteisellä tasolla olevien tarkastuskohteiden osuus 3. Lakisääteisen tason säilyttäneiden ja lakisääteiselle tasolle nousseiden kohteiden osuus (vuosittain) 4. Kohteiden auditointilukujen kehittyminen peräkkäisissä auditoinneissa 5. Alle lakisääteisen tason jääneet kohteet ja lakisääteisellä tasolla olleet kohteet 6. Peräkkäisten auditointien auditointilukujen kehitys osa-alueittain 7. Auditointilukujen kehitys kohdetyypeittäin 8. Auditointiluvun kehitys suhteessa auditointiväliin 9. Erilaisia kohteiden kehityskulkuja
TARKASTUSVÄLI JA KOHTEIDEN KEHITYS Tarkastusvälin suhteen näyttää olevan trendi, mutta
määrittävämpi tekijä olikin kohteen lähtötaso.
YKSITTÄISTEN KOHTEIDEN KEHITYSKULUT Haasteena on saada pysymään kohteet lakisääteisellä tasolla auditoinnista toiseen.
MUITA TULOKSIA Havaittu kehitys oli samankaltaista kaikilla auditoinnin osa-alueilla (A-F) Kokonaisuutena lakisääteiselle tasolle yltävien kohteiden osuus on pysynyt suurin piirtein samalla tasolla Sen sijaan kaikilla kuudella auditoinnin osa-alueella (A-F) lakisääteiselle tasolle yltäneiden kohteiden osuus on hieman kasvanut 2010-2014 Kaikissa kohdetyypeissä ei havaittu tilastollisesti merkitsevää muutosta
PALOTARKASTUKSEN ASIAKASKYSELY Kysely toteutettiin samanaikaisesti koko HIKLU-alueella Kysytyt kokonaisuudet: asioinnin sujuvuus, palvelun laatu, vaikuttavuus, auditointi, tarkastusmaksu 34 väittämää, vastausasteikko 1-5 Kohderyhmänä määräaikaiseen palotarkastukseen 1.1-31.5.2016 osallistuneet henkilöt Helsinki: 146 vastausta (vastausprosentti 42 %)
PALOTARKASTUKSEN ASIAKASKYSELY - VAIKUTTAVUUTTA KOSKEVAT VÄITTÄMÄT Mielestäni palotarkastus Lisää tietoa lakisääteisistä velvoitteista Auttaa turvallisuusvastuiden jakamisessa Lisää kykyä tunnistaa ja arvioida riskejä Lisää kykyä ehkäistä onnettomuuksia Lisää kykyä toimia onnettomuustilanteissa Lisää kykyä varautua häiriö- ja poikkeustilanteisiin Lisää motivaatiota turvallisuustyöhön On parantanut turvallisuuttamme käytännössä Palotarkastus on kokonaisuudessaan hyödyllinen
HELSINGIN TURVALLISUUSKYSELY Kolmen vuoden välein toteutettava kuntalaiskysely Satunnaisotos 7 000 kuntalaista, 4 031 vastaajaa 2015 ensimmäistä kertaa mukana myös pelastustoimen kysymyksiä Kysyttyjä teemoja mm. Asiointi pelastuslaitoksen kanssa ja tyytyväisyys saatuun palveluun Arvio pelastuslaitoksen onnistumisesta tehtävissään Pelastuslaitoksen turvallisuusviestintä ja sen koettu vaikutus turvallisuusosaamiseen
LOPUT LÖYTYY RAPORTISTA: Saine-Kottonen, A., Itkonen, P. ja H. Rekola (2016). Valvonnan vaikuttavuuden arviointi Helsingin pelastuslaitoksen aineistoilla. Helsingin pelastuslaitoksen julkaisuja 1/2016. ISBN 978-952-331-143-5. [Linkki julkaisuun]
Työkaluja vaikutusten mittaamiseen on. Nyt täytyy määritellä tarkemmin ne tavoitteet, joiden saavuttamista näillä työkaluilla arvioidaan.