Johdatus avoimeen dataan Katri Korpela Projektipäällikkö 6Aika - Avoin data ja rajapinnat
Koulutuksen sisältö Mikä on 6Aika?
Mitä on avoin data? Mitä on julkinen tieto?
Maankäyttö Rakentaminen Väestö Kulttuuri Pysäköinti Tapahtumat Päätökset Asuminen Energia & energiansäästö Koulutus Päivähoito Sosiaali- ja terveydenhuolto Julkinen liikenne
Avoimet datan määritelmä & ehdot Julkisuus Sisällettävä julkista tietoa, jotta se voidaan avata Yksityisyydensuoja tai yleinen turvallisuus ei saa vaarantua dataa avattaessa, eikä datassa saa olla esim. henkilötietoja tai liikesalaisuuksia Tekninen saatavuus Data on avattu koneluettavassa muodossa Koneelliseen tarkasteluun ja hyödyntämiseen sopivat esimerkiksi CSV-, XLS- tai XML-muodot sekä erilaiset rajapinnat suoraan datalähteeseen Maksuttomuus: Dataa voi käyttää maksutta, maksuttomuus mahdollistaa datan hyödyntämiseen liittyvät kokeilut ilman budjettibyrokratiaa Uudelleenkäytön sallivat käyttöehdot: Datan avaaja sallii aineiston uudelleenkäytön ja kertoo sen selkeästi datan yhteydestä löytyvillä käyttöehdoilla
Avoin julkishallinnon data Kansainvälinen ilmiö, käynnistynyt Yhdysvalloista ja Isosta-Britanniasta Ajatusmalli, jossa kehitetään ja automatisoidaan julkissektorin, verkkopalveluiden kehittäjien, kansalaisten ja muiden datan käyttäjien vuorovaikutusta ja palveluja Lisätään hallinnon avoimuutta lisäämällä julkisten tietojen saatavuutta ja uudelleenkäyttöä ja saatetaan laajempaan käyttöön aineistoja, jotka ovat julkisia mutta olleet aiemmin syystä tai toisesta rajoitetussa käytössä Rajoitteina mm. lisensointikäytännöt, maksullisuus, tekniset rajoitteet Lisätietoa: Valtiovarainministeriön julkaisuja - 15a/2015: Koski, Heli: Avoimen tiedon vaikuttavuus - esitutkimus Open Knowledge Finland, visiot ja arvot: http://fi.okfn.org/about/visiojaarvot/
Julkinen data vs. avoin data Julkinen tieto eli data Kaikilla on vapaa pääsy Ihmiset, yritykset jne. pääsevät LUKEMAAN TIETOJA esimerkiksi verkkosivuilta tai kaupungin kirjaamosta Avoin data (julkinen avoin tieto) Tarkoittaa, että ihmiset, yritykset jne. voivat KÄYTTÄÄ TIETOJA OMIIN TARPEISIINSA JA TARKOITUKSIINSA tasavertaisesti julkisen hallinnon kanssa
Mikä on (avoin) rajapinta? Mikä on API?
Avoimen rajapinnan määritelmä http://avoinrajapinta.fi Avoin rajapinta on rajapinta, jonka kaikki ominaisuudet ovat julkisia ja jota voi käyttää ilman rajoittavia ehtoja. (esimerkiksi laatia rajapintaa hyödyntävän ohjelman ilman rajapinnan valmistajan erillistä hyväksyntää tai pakollisia lisenssimaksuja) Tämä edellyttää, että rajapintakuvaus ja sen dokumentaatio ovat avoimesti saatavilla ja että rajapintaa voi vapaasti käyttää esimerkiksi omien sovellusten tekemiseksi ja niiden testaamiseksi. Avoimen rajapinnan käyttö on maksutonta, käyttäjän ei tarvitse kysyä lupaa rajapinnan haltijalta tai kertoa etukäteen mihin tarkoitukseen aikoo rajapintaa käyttää.
Ohjelmointirajapinta määrittelee, miten ohjelmisto tarjoaa tietoja tai palveluita sovelluksille tai muille tietojärjestelmille API on määritelty ja dokumentoitu sopimus siitä, miten ohjelmistokomponentit kommunikoivat keskenään ja käskevät toisiaan Ohjelmointirajapinta, API (engl. Application Programming Interface) Määritelmä, jonka mukaan eri ohjelmat voivat tehdä pyyntöjä ja vaihtaa tietoja keskenään Ohjelmointirajapinnan avulla ohjelmistokehittäjät voivat rakentaa uusia palveluja kaupunkilaisille
Datan avaaminen manuaalisesti Datajoukon avaaminen manuaalisesti: Sopii pienille, harvoin muuttuville tai historiallisille tietoaineistoille Vaatii Manuaalista tietojenkäsittelyä Eri työvaiheita Eri yksiköiden yhteistyötä Muistutuksia / pyyntöjä päivitetyn aineiston tuottamiseksi Esimerkki: Ajetaan manuaalisesti tietojärjestelmän tietokannasta tiedot esim. Excel -taulukkona, joka julkaistaan www.ouka.fi/avoindata -sivulla
Datan avaaminen, rajapinta (API) Datajoukon avaaminen avoimen rajapinnan (API) kautta: Rakennetaan keskusteluyhteys tietojärjestelmien välille jolloin tieto siirtyy säännöllisesti ja ilman manuaalisia työvaiheita Suuremmille tai useammin päivittyville dataseteille merkittävä etu automatisoinnista Suurten datamassojen käsittely rajapinnan kautta helpompaa Datajoukon ajantasaisuus ja tiedon oikeellisuus Esimerkki: Rakennetaan tietojen avaamista varten rajapinta yhdessä ohjelmistotoimittajan kanssa, jolloin saadaan tiedot automaattisesti, säännöllisin väliajoin ja säännöllisesti päivitettynä ja yhtäläisessä muodossa
Mitä on metatieto?
Metatieto herättää tiedon eloon! Tietoa tiedosta, kulkee tiedoston mukana tai on tallennettuna tietokantaan Esimerkki: Rakennuksen pohjakuva, jonka tiedostoon on tallentamisen yhteydessä määritelty kuvan tyyppi, kerros, suunnitteluala, versio, vuosi, jne. Oulussa metatietoja kerätty tiedonohjaussuunnitelmiin (sähköisen säilyttämisen projekti)
Mitä hyötyä metatiedosta? Luodaan perusteet tiedon hakemiselle ja luokittelulle (hakukoneet) Asiakirjoissa versionhallinta Sähköisessä säilyttämisessä metatieto on olennainen osa järjestelmää, ylläpitoa ja tiedonhakua
Paljon vai vähän metatietoa? Metatiedon tarpeellinen määrä riippuu pääsääntöisesti siitä mitä tiedolla jatkossa tehdään (tai aiotaan tehdä) Liian yleisiä tai muuten turhia tietoja ei kannata liittää metatiedoiksi Metatiedot tulisi täydentyä automaattisesti - ilman että metatiedoista muodostuu rasitetta loppukäyttäjälle Asiayhteydestä ja -kokonaisuudesta riippuen tarpeellisten metatietojen määrä vaihtelee, ei kaikille automaattisesti samaa valikoimaa Metatietomalli - olennainen tieto on vakioidussa muodossa
Esimerkki: SÄHKE2 - Metatietomalli http://www.arkisto.fi/fi/palvelut/normit/maeaeraeykset/saehke2-maeaeraeys
Mitä hyötyä avoimesta datasta tai rajapinnasta?
Miksi avata dataa? Hallinnon sisäinen tehokkuus: Datanavaukset hyödyntävät hallinnon organisaatioiden välistä yhteistyötä Toimintatapojen yhdenmukaistaminen tuo mittakaavaetua ja helpottaa osaamisen siirtämistä Auttaa havaitsemaan toimintatapoja, joissa digitaalisuuden mahdollisuuksia voisi hyödyntää laajemmin Läpinäkyvyys ja demokratia: Lisää hallinnon läpinäkyvyyttä tukee mahdollisuuksia aktiiviseen kansalaisuuteen, yhteiskunnalliseen tutkimukseen ja journalismiin Laajentaa nettikeskusteluita (linkitykset & viittaukset) Markkinat ja innovaatiotoiminta: Julkishallinnon data-avaukset hyödyttävät yrityksiä tai yrittäjiksi aikovia Synnyttää uusia markkinoita ja innovaatioita (esim. erilaiset koulutustaustat)
Miten datamassoista lisäarvoa?
Päätös valmisteilla Oulun kaupungin tietoaineistojen julkaiseminen avoimena datana Oulun kaupunki sitoutuu avaamaan hallinnoimaansa julkista tietoa ja osallistuu aktiivisesti kansalliseen ja kansainväliseen yhteistyöhön datan avaamiseksi sekä sen hyödyntämisen edistämiseksi Oulun kaupunki näkee hyödyt huomioiden tietoaineistojen avaamisen tärkeäksi ja velvoittaa yksiköitään tuottamansa julkisen datan avaamiseen Kaupungin avaama data julkaistaan avoimena ja maksuttomana kaikkien käyttöön sekä lisensoidaan yhteisen lisenssimallin avulla Kaikki yksiköiden avaama data kootaan yhteen paikkaan eli Oulun kaupungin datakatalogiin/-portaaliin (tällä hetkellä www.ouka.fi/avoindata) 6Aika-hanke & Tietohallinto laativat ja ylläpitävät kaikille yhteiset ohjeet, joita datan avaamisessa tulee noudattaa.
6Aika kaupunkikehityksen strategia 6Aika-strategiaa toteuttavat Suomen suurimmat kaupungit (kuutoskaupungit) Kansallisesti merkittävä strategia, kuutoskaupungeissa asuu 30 % Suomen väestöstä Suurimpien kaupunkiseutujen käyttö uusien palvelumuotojen kehitysympäristönä vahvistaa Suomen kilpailukykyä 6Aika-strategian tavoitteena mm. Parantaa kaupunkien palveluja sekä niiden yhteentoimivuutta yli kuntarajojen Julkisen sektorin tuottavuuden edistäminen; Uudet toimintamallit ovat kaikkien kaupunkien ja kuntien käytettävissä Entistä käyttäjälähtöisempien kunnallisten palvelujen kehittäminen Hyödyntää entistä tehokkaammin digitaalisen teknologian mahdollisuuksia Luoda mahdollisuuksia elinkeinoelämälle ja koko kaupunkiyhteisölle uuden liiketoiminnan kehittymiseen ja uusien työpaikkojen syntymiseen 6Aika-strategia tukee yhteisöllisyyttä, avoimuutta ja saavutettavuutta Toimiva kaupunkiyhteisö on kaupunkilaisten, yritysten, tutkimus- ja kehitystoimijoiden sekä viranomaisten muodostama kokonaisuus
Asiakassegmentit, asiakastieto ja ymmärrys palvelujen kehittämisen lähtökohtana Mahdollistajat KUUTOSKAUPUNGIT T&K hankkeet Julkiset hankinnat Yritysten kilpailukyky Pk-yritysten tukeminen Infrastruktuuri Palvelujen mahdollistaminen Käyttäjät KAUPUNKILAISET Avoimet innovaatioalustat Testialusta uusien ratkaisujen kehittämiseen ja testaamiseen Hyödyntäjät YRITYKSET, YHTEISÖT Käyttäjälähtöisyyden kehittäminen, käyttäjätarpeet ja - arvostukset Kehittäjät T&K-ORGANISAATIOT T&K hankkeet Työvoiman koulutus Kaupallistaminen Kansainvälistyminen Yrittäjyys Muokattu Rönkä ym. 2007; Kehitysalustoilla neloskierteeseen. S. 60: Neloskierre eli kehittäjien, hyödyntäjien, hallinnon ja käyttäjien yhteistyöroolit innovaatioprosessissa
Liikkeelle kolmella kärjellä
AD - Avoin data innovaatioiden raaka-aineeksi Kuutoskaupungit avaavat tietovarantojaan avoimeksi dataksi hyödyntäen yhteisiä toimintamalleja, julkaisualustoja ja lisenssimalleja. Työkaluja ovat mm. harmonisoidut standardit, rajapintaratkaisut ja parhaiden käytäntöjen jakaminen Hankkeessa synnytetään ja kehitetään yhteistyössä datan tuottamista, avaamista, julkaisua ja käyttöä edistäviä rakenteita ja toimintamalleja. Tavoitteena on sulauttaa nämä osaksi kaupunkien toimintaa. Hankkeen kohderyhmä on yritykset, jotka voivat hyödyntää avattua tietoa liiketoiminnassaan.
AIA - Alusta uusien ratkaisujen kehittämisen ja testaamiseen Kuutoskaupungit rakentavat yhteistä verkostomaisesti toimivaa innovaatioalusta konseptia. Se kokoaa yhteiset käytännöt, työkalut ja ratkaisut sekä fyysiset että virtuaaliset kehitysalustat (esim. kaupunginosa tai avoin 5G-verkko) yhdeksi toimintamalliksi. Tavoitteena on, että kaupunkikehittämisen innovaatioalustat toimivat yhden luukun periaatteella. Hankkeessa hyödynsaajina ovat yritykset sekä tutkimus- ja koulutusorganisaatiot.
AOA - Palveluinnovaatioita käyttäjälähtöisesti Kuutoskaupungit rakentavat asiakaspalvelumallia, joka on käyttäjälähtöinen monikanavainen (palvelupisteet, sähköiset kanavat) ja monituottajuuteen perustuva (julkinen, yksityinen, kolmas sektori). Yhteiskehittämiseen osallistuvat yritykset, tutkimus- ja koulutusorganisaatiot, kaupunkilaiset ja kaupunkiorganisaatiot. Oikeat palvelut Oikeille asiakkaille Oikealla tavalla
Kokeillaan ja pilotoidaan
6Aika painopistealueiden yhteistyö Käytännön toteutus yhteishankkeilla kaikki toteutettavat hankkeet ovat useamman toimijan yhteishankkeita 6Aika-strategiaa toteutetaan pääosin avoimien hakujen kautta rahoitettavilla hankkeilla Toimijoita vähintään kahden kuutoskaupungin alueelta Toimijoina voivat kaupunkiorganisaatioiden lisäksi olla muut julkiset tai kolmannen sektorin toimijat
Pilottihankehaku Avoimet hankehaut n. 2x/vuosi, haut avoinna 1-2kk Hakujen teemat liittyvät 6Aika-strategian painopistealueisiin ja sisältöihin Arviointi kansallisten sekä kuutoskaupunkien kriteereiden mukaan
Tilanne 21.5.2015
Kevät 2015: EAKR pilottihankkeet (3+2 kpl) Avoimet innovaatioalustat (AIA) Ilmastoystävällisten ratkaisujen testausta fyysisessä ympäristössä Uudenlaista liiketoimintaa synnytta vien media-alan avointen innovaatioalustojen kehitta minen ja verkostoiminen toisiinsa Avoimeen yhteiskaÿttoïseen 3D-kaupunkimalliin perustuva avoin innovaatioalusta Avoin data ja rajapinnat (AD) Liikenteen reaaliaikaisten rajapintojen avaaminen Maa- ja kallioperaẗietojen kokoaminen ja avaamista mahdollistamaan avoimeen tietoon perustuvaa uutta yritystoimintaa
Kevät 2015: ESR- pilottihankkeet (3 kpl) AOA Avoin osallisuus ja asiakkuus Teemana haussa Nuorten ja muiden heikossa tyo markkinaasemassa olevien tyo llistymisen edista minen Asiakkaiden osallistuminen työllisyydenhoidon ja sosiaalipalveluiden ideointiin ja kehittämiseen Nuorten urapolut ja palveluohjauksen kehittäminen Asiakaslähtöisen monituottajamallin mukaisen palvelun lisääminen korkeakoulutetuille työttömille työnhakijoille
Seuraava pilottihaku 1.12.2015 Uutena ideointivaihe ennen varsinaista hakuaikaa Valmistautumista viralliseen EAKR hankehakuun Mahdollisuus saada kuutoskaupungeilta sparrausta ja palautetta ideaan Mahdollisuus löytää yhteistyökumppani idean toteuttamiseen Lisätietoja: Ideointi- ja sparrausvaiheesta: http://6aika.fi/hankeideat-esiin/ Hankehaku: http://6aika.fi/hankehaku/
Yhteistyö & kouluttaminen
Yhteistyökumppaneita: OAMK Oulun yliopisto Demola Oulu Business Kitchen Oulun Yritystakomo Open Knowledge Finland Haahtela Kehitys Oy Max Technologies Oy Microsoft Unesco Lähidemokratia ry Business Oulu Hallintokunnat, yksiköt ja liikelaitokset
Yhteistyötapahtumia v. 2015 Northern Service Day 29.1.15 Asiakirjahallinnon ajankohtaispäivä, puheenvuoro 24.3.15 Open Data Makes You Move! Hackathon 5.6.15 Open Arctic Challenge (lanseeraus 7.9. palkintogaala 24.11.) #DevShark Tour Gamifigation Oulu 27.10.15 Ouka sisäiset yhteistyö- ja koulutustilaisuudet (keväällä 2015 yht. 8 kpl) Ouka keskitetty sisäinen koulutus; 6Aika Johdatus avoimeen dataan (11.11.15 & 11.2.16) Yhteistyötapaamisia yritysten, yhteisöjen ja yhteistyökumppaneiden kesken
6Aika Avoin data ja rajapinnat Oulun osatoteutus
6Aika - Avoin Data ja rajapinnat kärkihanke Budjetti: 8 100 000 (omarahoitusosuus 33%) Toiminta-aika: 1.7.2014 30.6.2017 (3 vuotta) Toteuttajat (10 kpl): Tampereen kaupunki (hakija) Tampereen kaupunkiseudun elinkeino- ja kehitysyhtiö Tredea Oy (koordinaatio) Helsingin kaupunki Forum Virium Helsinki Oy Espoon kaupunki Vantaan kaupunki Turun kaupunki Turku Science Park Oy Ab Varsinais-Suomen liitto / Lounaispaikka Oulun kaupunki
Kärkihankkeen tekemisen osa-alueet
Kärkihanke: Kuutoskaupunkien avoin data (Oulun KH 8.12.2014 26) Rahoituksen hakeminen 1. Kuutoskaupunkien avoin data Oulun osaprojekti Kustannusarvio 1 140 000, josta Oulun omarahoitusosuus 376 200 (33%) 2. Kuutoskaupunkien avoin data koordinaatioprojektin rahoittaminen (Tredea) Kustannusarvio 1 010 317, josta Oulun osuus 55 568 3. Avoimet rajapinnat projektin rahoittaminen (Forum Virium) Kustannusarvio 595 680, josta Oulun osuus, 32 762 Vastuullinen johtaja: Juhani Heikka / Tietohallinto Projektit hyväksytty Digitaalinen Agenda -kehittämissalkkuun (28.10.2014) - Tukevat painopistettä 1 asiakaslähtöisesti uudistettavat toimintamallit ja painopistettä 3 avoin ja vuorovaikutteinen kaupunkiyhteisö - http://www.ouka.fi/oulu/kehittamishankkeet/digiagendasalkku
Avoin Data ja rajapinnat tavoitteet Kaupungit avoimina kehittämisympäristöinä Kuutoskaupungit avaavat tietovarantojaan mahdollisimman laajasti avoimeksi dataksi Parhaat käytännöt ja standardointi Hyödynnetään yhteisiä ja yhdessä sovittuja toimintamalleja, julkaisualustoja ja lisenssimalleja Erityinen huomio kiinnitetään yhdessä sovittuihin standardeihin, yhteiseen käytettävyyteen, parhaiden oppien ja käytäntöjen jakamiseen ja yhdessä tekemiseen Elinvoiman edistäminen yrityksiä ja muita toimijoita aktivoimalla Yritysten ja muiden kehittäjien aktivointitoimet ovat tärkeä osa tätä kokonaisuutta. KOHDERYHMÄNÄ YRITYKSET Avoimen Datan kärkihanke tukee kaupunkistrategian ja digitaalisen agendan toteuttamista, mm. Avoimet kehittämisen ekosysteemit, avoin hallinto, tiedon hyödyntäminen, digitaaliset palvelut, elinvoiman edistäminen Avoimen Datan kärkihanke tukee kaupunkistrategian ja digitaalisen agendan toteuttamista, mm. Avoimet kehittämisen ekosysteemit, avoin hallinto, tiedon hyödyntäminen, digitaaliset palvelut, elinvoiman edistäminen
Avoin Data ja rajapinnat tavoitteet Kuutoskaupungit yhteistyössä: 1. Luovat ja käynnistävät prosessit datan avaamiseksi ja julkaisemiseksi 2. Perustavat alueelliset, yhteistyötä tekevät avoimen datan "clearing house" - toiminnot 3. Muuttavat sisäisiä toimintamallejaan siten, että datan avaaminen otetaan osaksi normaalia toimintaa 4. Avaavat tietovarantojaan mahdollisimman laajasti avoimeksi dataksi ICT 2015 -ehdotuksen mukaisesti 5. Kehittävät yhdessä metatiedoiltaan yhteensopivat datakatalogit 6. Käynnistävät ja vakiinnuttavat yhteistyömallit kehittäjäyhteisöjen kanssa 7. Kehittävät ja valikoiduin osin standardisoivat avoimia ohjelmointirajapintoja kaupungin järjestelmiin hyödynnettäväksi 8. Huomioivat uusissa järjestelmähankinnoissaan datan avoimuuden ja järjestelmien yhteentoimivuuden vaatimukset 9. Harmonisoivat datan rakenteeltaan mahdollisimman yhteensopivaksi ja vertailukelpoiseksi.
Avoimen datan kytkeytyminen kansallisiin ja EU-laajuisiin datakatalogeihin
Avoimen datan ja rajapintojen hyödyntämisen esimerkkejä
http://fiksaus.metrolive.fi/ Sovelluksella voi ilmoittaa Helsingissä ympäristöä häiritsevästä epäkohdasta. Järjestelmä välittää palautteet Helsingin kaupungin rakennusvirastolle Palauteiden etenemistä voi seurata sekä lukea rakennusviraston antamat vastaukset palvelusta
http://sporat.fi/
http:/www.veropuu.fi/helsinginostot// Visualisointi havainnollistaa Helsingin kaupungin ostot vuosilta 2012-2013 organisaation, kumppaniryhmän ja kululajin tasolla. Datalähteenä on käytetty "Helsingin kaupungin ostot vuosilta 2012-2013 http://www.hri.fi/f i/dataset/helsingin -kaupungin-ostot
Pirkanmaan kirjastot