Data Warehouse kuulumisia

Transkriptio

1 1 Data Warehouse kuulumisia Ari Hovi

2 Ari Hovi Oy 2 Ari Hovi Oy:n missiona on edistää tiedonhallintaa tarjoamalla huippukoulutusta ja konsultointia kokeneet käytännön konsultit kouluttajina useisiin kursseihin kuuluu kouluttajan itse kirjoittama kirja koulutusta jo yli 15 v. ajan puolueeton, tuoteriippumaton näkemys Tietoarkkitehtuuri Tietojen laatu Dokumenttien hallinta Tietojen konversio, puhdistus ja tuunaus DW/BI tietoisku DW kannan suunittelu DW hankkeen läpivienti DW mallinnuspäivä ETL kurssi Data Vault-mallinnus Tietojen mallintaminen SQL kurssi SQL syventävät pvät Tk optim. indeksointi Oracle tehostus Tietok. tehokas käyttö Tietokantatietoa testaajille

3 3 Analyysi, raportointi? Operatiiviset järjestelmät eivät hyviä tässä mielessä tiedot hajallaan tiedot väärässä muodossa ja hankalissa rakenteissa tiedot ei-yhteismitallisia tietoja ei tunneta ei kuvauksia, ei tietomalleja, ulkopuoliset sovellukset tietoihin ei pääse kiinni umpipurkki-sovellukset Toisaalta yhdistämisen & hyödyntämisen tarve lisääntyy yritykset/julk.hallinto tietotaloja ei haluta erillisiä siiloja Tarvitaan jokin erillinen ratkaisu Excel? Datamart? EDW?

4 4 Vaihtoehtoja Parannetaan/lisätään operatiivisten järjestelmien raportteja Human DW Excel, tiha poimii Sovelluskohtaiset datamartit nopeita tehdä, mutta Replikoidaan operatiivisten järjestelmien kantoja EDW yli sovellus- ja organisaatiorajojen

5 5 Suomessa? Lähes kaikki isommat yritykset:dw useimmilla 2. sukupolvi menossa suuntaus kohti keskitetympiä EDW-ratkaisuja IT: liiketoimintaa tukeva mahdollistaja vaikuttava, osallistuva Julkissektori kunnat, valtio johto on informaatiokatveessa Kuin purjehtisi ilman merikorttia

6 6 Tietovarastoinnissa tärkeää Tuki ja myynti businesstuki ja -sponsorit, tiedon levittäminen Arkkitehtuuri ja eteneminen kokonaisuuden mallinnus, inkrementaalisesti nopeasti eteneminen Organisointi projektointi, miehitys, maastouttaminen, roolit, konsultit Menetelmät mallinnus, mahd. Data Vault -menetelmä, ETL-suunnittelu, protoilu Koulutus DW-projekti, mallinnus, SQL, arkkitehtuurit, välineet Välineet ETL, tietokanta, raportointi, mallinnus, metadata

7 7 Mallinnuksesta Tietokannan mallinnus oleellisen tärkeää Mallinnusmenetelmä riippuu arkkitehtuurista ER-mallinnus perustana, variaatioita tähtimalli mallinnus, datamarteille oma sapluuna (star schema) ei normalisoitu EDW-mallinnus 3 normaalimuoto monimutkainen ilmaisuvoimainen Data Vault mallinnus staging area mallinnus

8 8 Välineistä ETL-välineet useimmat käyttävät (harva koodaa) Tietokanta, DW-ominaisuudet esim. partitiointi, bitmap-indeksit, star join, rinnakkaisuus, kompressointi avoimuus tärkeää (SQL) rinnakkaisuus, laajennettavuus Raportointivälineet mm. vakio-, parametroidut raportit, OLAP, data minig Mallinnusväline Metadata Välineiden hinnat entistä tarkemmassa syynissä

9 9 Kehityssuuntia DW-kantojen koon kasvu Reaaliaikaisuuden asteen kasvu Muutosjoustavuuteen panostaminen Jäljitettävyys entistä tärkeämpää Ennustus, simulointi, aktiivinen raportointi Google-tyyppinen haku Karttakäyttöliittymät Aika-ulottuvuuden tuki tietokantoihin Muistipohjainen raportointi Ei-strukturoitu tieto Nahkakansiot talteen

10 10 Tietoarkkitehtuuria tarvitaan Lähtökohta kukaan ei tiedä tietojen kokonaisuutta yli sovellus rajojen vaikeuttaa integrointia, ERP-valintaa, DW-toteutuksia jne. tietoja ei ole mallinnettu eikä kuvattu (metadata) kokonaisuutena / aluekohtaisesti; puhutaan eri kieltä kokonaiskuvan puuttumisen ongelmia: tietoresurssi ei tue liiketoimintaa siiloutuminen (esim. osastokohtaisesti) tietojen toimittaminen vaikeaa (viranom., EU, kansalaiset, asiakkaat ) Tietoarkkitehtuuri kuvataan yrityksen keskeinen tietoresurssi yli järjestelmä- ja organisaatio rajojen eritasoiset kuvaukset kokonaismalli, aluetason mallit, myös käsitteiden ja termien määritykset liittyy osana yritysarkkitehtuuriin

11 11 Kysymyksiä?