Data Governance tulee lihaksi Jarno Lindqvist Senior Advisor, Information Management Nordic Region
Mitä ja miksi? DG = (tiedon) hallintamalli DG viittaa ihmisten, prosessien ja teknologioiden kokonaisuuteen, jolla organisaation (liiketoiminta)tietoa hallitaan. DG kattaa tyypillisesti tiedon hallinnan, tiedon laadun, tiedonhallintaprosessien johtamisen ja niihin liittyvän riskienhallinnan. DG luo pelisääntöjä ja yhteisymmärrystä niihin prosesseihin, joilla dataa hallinnoivat henkilöt luovat, päivittävät, käyttävät ja arkistoivat tietoa.
säännöt, käytännöt Yhteisymmärrys DG tavoitteet Yhteistyö roolit, omistajuus, vastuu tiedonlaatu, validointi, monitorointi Läpinäkyvyys
Lähtokohta valitettavan usein 80% 20% ONGELMA Oikean datan etsiminen, erilaisten datojen yhdistely, virheiden korjaus, väärinkäsitysten oikaisu, vastuullisten etsiminen, yhteisymmäryksen etsiminen Tuottava tekeminen PÄÄTÖS
DG prosessit käytössä 20% 80% ONGELMA Edellä mainittu valmisteleva toiminta Ongelmanratkaisuun riittää enemmän panoksia, koska perusasiat ovat jo valmiiksi ryhdikkäässä kunnossa PÄÄTÖS
Tavoitteita liiketoiminnan näkökulmasta? Parempi tuottavuus ja tehokkuus Lainsäädännön mukainen toiminta Alhaisemmat kustannukset Alhaisemmat riskit
Data Governance Business Case Tehokkaampi toiminta Tiedonhallintaprosessien modernisointi Kustannusten alentaminen Parempi tuottavuus Prosessien automatisointi Asiakkaalle näkyvät hyödyt Vähemmän asiakkaalle näkyviä virheitä Markkinoinnin tarkempi kohdentaminen Nopeampi reagointi poikkeamiin -> Parantunut asiakastyytyväisyys Riskinhallinta ja laillisuus Alentunut operationaalinen riski Toiminnan läpinäkyvyys, vastuuhenkilöt Tietosuojalainsäädäntö, Basel / Solvency vaatimukset Jäljitettävyys
Business Data Network: Sama resurssi, kaksi eri näkökulmaa Purkki 435g Tunnettu brändi Tietohallinto Logo punaisella Premiumtuote: enemmän katetta Liiketoiminta Sisältää 16% sattumia Valmistettu Turun tehtaalla LÄHDE: http://www.jalostaja.fi/tuotteet/hernekeitot
Business Data Network Liiketoiminta-termistön keskitetty varasto (data dictionary, business glossary) Liiketoiminnan ja tietohallinnon yhteistyöhön kannustava ratkaisu Mahdollistaa Data Governance ohjelmien nopeamman käynnistämisen Saa kaikki osapuolet puhumaan samaa kieltä Parantaa luottamusta dataan Vähentää väärinkäsityksistä johtuvia virheitä Sisältää muutoshallinta-ominaisuudet
Business Data Network: Rakentaa yhteyden eri osapuolien välille Database = TUOTTEET Schema = PURKKI_RUUAT Table = KEITOT Tietohallinto Category: Elintarvikkeet Term: Keittoruuat Description: Juhlahernekeitto Column = TUOTEKOODI Data type = STRING Valid values = BB, LB, RB Business Data Network Documents: Salainen hernekeittoresepti.docx Status: UNDER REVIEW Liiketoiminta
Business Data Network: Linkittää tekijät ja resurssit
DG tulee lihaksi toimijat Liiketoiminta = tiedon omistaja IT = toimeenpanija Data Steward = valvoja Temistö Kuvaukset Vaatimukset määrittelee termit sekä sanallisesti, että numeerisesti ja linkittää ne sidosryhmiin Säännöstö Validointisääntö yhdistää termistön korreloivan datan kanssa ja rakentaa validoinnissa käytettävät liiketoimintasäännöt Hälytykset Mittaristot seuraa sääntöjen totetutumista mittareiden kautta ja ryhtyy korjaaviin toimenpiteisiin (=remediaatio) Jäljitettävyys Hallintamalli, tiedon laatu, dokumentaatio, omistajuus
Business Data Network: kuka teki, mitä teki, million teki ja mistä löydän alkuperäisen?
Business Data Network: Omistajuus, tilatieto, ilmoitukset
Business Data Network: Lineage ja relaatiodatan import ulkoisista välineistä Tuetut import formaatit: SAS Data Management Platform Metadata SAS DI Studio Metadata Erwin CSV (Excel) CWM (Common Warehouse Metamodel format) Tukee yli 200 eri kehitysvälinettä!
Business Data Network: Resurssien liittäminen termistöön Resursseja voi liittää nimen perusteella tai resurssityypin, esim: DI jobi Taulu / sarake Transformaatio Jne.
Business Data Network: Liiketoimintaresurssien tarkastelu linkkikartalla Näyttää termien ja osapuolten keskinäiset linkit: Henkilöt Termit URLit Dokumentit
Business Data Network: Teknisten resurssien tarkastelu linkkikartalla (lineage) Saraketasolle menevä Lineage tieto Voidaan suodattaa resurssityypin tai relaatiotyypin mukaan
Business Data Network: Selainpohjainen haku tuloksista suoraan termistöön
Business Data Network: Referenssitiedon hallinta tiedon omistajille Keskitetty paikka referenssitiedolle Käyttäjäystävällinen selainkäyttöliittymä Versiointi, muutoshistoria, julkaisuprosessi Referenssilistoja voidaan hyödyntää liiketoimintasääntöjen kanssa datan validoinnissa ja mittaroinnissa Tuki usealle kielelle
Business Data Network: Referenssitiedon hyödyntäminen datan validoinnissa Referenssilistoja voidaan käyttää liiketoimintasääntöjen kanssa esim. datan validoinnissa Rakenetaan liiketoimintasääntö, joka vertaa referenssilistaa oikeaa dataa vasten
Business Data Network: Referenssitiedon hyödyntäminen datan validoinnissa Datan validointiajossa kutsutaan liiketoimintasääntöä Voidaan esim. erotella rivit jotka täsmäsivät ja rivit jotka eivät Ajon tulokset voidaan lähettää datan omistajalle
DG tulee lihaksi - prosessi 1. Määrittely Luodaan Data Governance käytäntöjen mukaiset säännöt, jotka määrittelevät datalle vaaditun laatutason Korkeintaan 5% ilmentymistä saa olla puutteellisia, muuten prosessia on tarkistettava ja ryhdyttävä korjaaviin toimenpiteisiin 2. Suunnittelu 3. Prosessointi Implementoidaan sitä vastaavat liiketoimintasäännöt, numeerisesti mitattavia, raja arvoja jne. Prosessoidaan liiketoimintasäännöt dataa vasten ja kerätään sen pohjalta lokitietoa Asiakkaan etunimen ja sukunimen tulee olla vaaditussa kentässä. Kenttä ei saa sisältää numeroita tai erikoismerkkejä, poislukien väliviiva. Kun rivi ei täsmää liiketoimintasääntöön, nostetaan triggeri ja kirjataan se lokiin 4. Seuranta Yhdistetään monitoroinnin tulokset KPI mittareiksi ja esitetään käyttäjillle laatumittaristossa Esim. Asiakasdatan KPI = 96% liiketoimintasääntöjen mukaista. 5. Korjaus 6. Prosessin kehitys Tehdään tarvittavat kehitys / korjaustoimenpiteet Muutetaan datan keräys, syöttö, käsittelyprosessia niin, että virheellisen datan määrää saadaan minimoitua. Manuaaliset korjaustoimenpiteet asiakkuusylläpidon toimesta tai automaattisten laadunkorjausprosessien käynnistäminen jne. Laatuvalidointia jo datan syöttövaiheessa tai ETLprosessin staging alueella, kehitetään prosessia, jolla uudet asiakkaat luodaan kantaan jne.
Yhteenveto Lisää yhteisymmärrystä: Osapuolet ymmärtävät termistön samalla tavalla Osapuolet pysyvät ajantasalla muutoksista Mahdollistaa yhteistyön: Monta näkökulmaa samaan asiaan Madaltaa liiketoiminnan ja IT:n raja-aitaa Lisää läpinäkyvyyttä: Asiayhteydet ja omistajuus aina näkyvissä Referenssidata on helposti ylläpidettävissä Yhteisymmärrys Yhteistyö Läpinäkyvyys
Data Governance välineitä löytyy useista SAS-ratkaisuista Data Integration Data Acquisition Data Quality Master Data Management SAS Data Integration Server SAS Event Stream Processing Engine SAS Data Quality Desktop SAS MDM Standard SAS Data Management Standard SAS Federation Server SAS Data Quality Standard SAS MDM Advanced SAS Data Management Advanced SAS Data Surveyors SAS Data Quality Advanced SAS Data Migration SAS Access Engines SAS Data Governance SAS DQ Accelerator for Teradata Company Confidential For Internal Use Only Copyright 2013, SAS Institute Inc. All rights reserved.