Keskitetty digitaalisen säilyttämisen palvelu osana KDK arkkitehtuuria 10.11.2014 Kimmo Koivunen CSC Tieteen tietotekniikan keskus
Metatieto Objektihaku Siirtopaketti Jakelupaketti Kansallinen digitaalinen kirjasto (KDK) Palvelun käyttäjät Metatieto ASIAKAS- LIITTYMÄ Metatieto PITKÄAIKAIS- SÄILYTYS ja muut ulkoiset järjestelmät Ulkoiset palvelut Ontologiapalvelut TUKI- PALVELUT Tunnistautuminen Integraatioratkaisu Tavoitettavuustieto Paikkatietopalvelu Verkkomaksaminen STANDARDI- SALKKU ARKISTOJEN, KIRJASTOJEN, JA MUSEOIDEN JÄRJESTELMÄT
Tarvitaan erilaisia arkkitehtuureja Eri tasoilla keskityttävä eri asioihin Tarkkuus ja konkreettisuus kasvaa lähestyttäessä toteutusta Lähde: Kartturi-malli
KDK:n pitkäaikaissäilytyksen rakentamisen vaiheet PAS-jaosto 20.5.2008-30.5.2010 Digitaalisen pitkäaikaissäilytyksen selvittäminen KDK:n ja kulttuuriperintöaineistojen tarpeisiin. PAS jatkohanke 1.6.2010-31.10.2011 Hankkeen tavoitteena on edistää KDK:n pitkäaikaissäilytyksen suunnittelua ja tuottaa pitkäaikaissäilytyksen yksityiskohtainen toteuttamissuunnitelma PAS-palvelun valmistelu 1.11.2011-31.12.2013 Edetään PAS-toteuttamissuunnitelman mukaan. Tavoitteena on, että bittitason säilytys aloitetaan vuoden 2013 aikana. Lisäksi rakennetaan aineistojen vastaanotto, laaditaan tarkentavat määritykset metatiedoille, aineistojen paketoinnille ja säilytyksen suunnittelulle huomioiden ymmärrettävyyden säilyttämisen tarpeet. PAS-palvelun toteuttaminen 1.1.2014-31.12.2016 Toteuttamisvaiheessa säilyttämisen tavoitteeksi nostetaan ymmärrettävyyden säilyttäminen. Tällöin keskitytään mm. säilytysmenetelmien kehitykseen, säilytystoimenpiteiden hallintaan, käytön ja seurannan palveluihin sekä kokonaisuudenhallintaan.
KDK:n pitkäaikaisäilytyksen palvelut PAS-palvelu koostuu useasta hyödyntäville organisaatiolle tarjottavasta palvelusta Aineiston valmistelun ja vastaanoton palvelut Säilytyspalvelut Aineiston käyttöpalvelut Aineiston hallintapalvelut Neuvonta- ja tukipalvelut Palvelukokonaisuus täydentyy tulevina vuosina PAS-palvelun toteutustyön edistyessä Alkuvaiheessa PAS-palvelun pystyy vastaanottamaan ja säilyttämään 500 TT verran Aineistoa säilytetään 3 kopiona yhdessä säilytyspisteessä
Pitkäaikaissäilytys Tarkoituksena säilyttää digitaaliset aineistot käyttökelpoisina useiden vuosikymmenien tai satojen vuosien ajan Mahdollistaa digitaalisten aineistojen hyödyntäminen tuleville sukupolville Toteutuksen näkökulmasta korostaa jatkuvuussuunnittelua toiminnan elinkaari ylittää kaikkien toteutuksen osakokonaisuuksien käyttöajan
Arkistot, kirjastot ja museot KDK:n PAS-palvelu Säilyttämisen tasot Sisällön tuntemus ja ymmärrys Kuvaileva metatieto Semanttinen säilyttäminen Säilytyksen suunnittelu Hallinnollinen metatieto Tiedostomuodot Säilytystoimenpiteet Looginen säilyttäminen Datan ja kopioiden hallinta Pitkäaikainen hyödyntäminen Tallennuslaitteet Säilytysmediat Bittitason säilyttäminen
KDK:n (PAS) määritykset Aineistojen valmistelu ja paketointi on hyödyntäville organisaatioille näkyvin osa pitkäaikaissäilytystä PAS-ratkaisun alkuvaiheessa Tätä ohjataan määrityksillä, jotka KDK:n arkkitehtuurin mukaisesti rinnastuvat standardisalkkuun. PAS-toiminnassa keskiöön nousee näiden ohjaavien määritysten hallinta Oltava suunnitelmallista, läpinäkyvää,vastuutettua ja ennakoivaa
METS Metadata Encoding and Transfer Standard Digitaalisiin objekteihin liittyy erilaista metatietoa Kuvailevaa, teknistä, käyttöoikeus, historia, Kokonaisuuden siirtäminen PAS-järjestelmään (ja takaisin taustajärjestelmään)
Pakolliset ja suositeltavat metatiedot KDK:n hallinnolliset ja rakenteelliset metatiedot ja aineiston paketointi 1.4 (14.4.2014)
Tiedostomuodot KDK:n säilytys- ja siirtokelpoiset tiedostomuodot määritys määrittelee Kriteeristön, jolla valitaa säilytyskeploiset tiedostomuodot Säilytyskelpoiset tiedostomuodot Siirtokelpoiset tiedostomuodot Kontrolloidun sanaston tiedostomuotojen ilmaisemiseen Vaatimukset teknisille metatiedoille Myöhemmin määritellään Soveltamisohjeet Migraatiopolut
Tiedostomuodot (14.4.2014)
Määritykset julkisia Määritykset saatavilla KDK:n www-sivuilla http://www.kdk.fi/fi/pitkaaikaissailytys/maeaerittely-jadokumentit Standardisalkku: 24.2.2014 Hallinnolliset ja rakenteelliset metatiedot ja aineiston paketointi: v1.4 (14.4.2014) Säilytys- ja siirtokelpoiset tiedostomuodot: v1.3 (14.4.2014) Määritykset päivittyvät erityisesti PASpalvelun käyttöönoton alkuvaiheessa mutta ne eivät koskaan ole valmiita
KDK:n PAS-palvelun ominaispiirteet Säilytykseen otetut aineistot säilyvät PAS-palvelussa hyödyntävien organisaatioiden aineistoina Aineistot on haettavissa PAS-palvelusta pyynnöstä takaisin vain aineistot säilytykseen siirtäneeseen hyödyntävään organisaatioon PAS-palvelu vastaa digitaalisten aineistojen pitkäkestoisesta säilymisestä ja siihen liittyvistä toiminnallisuudesta, säilytysmenetelmistä ja niiden toteuttamisesta PAS-palvelu ottaa aineistojen säilytysvastuun onnistuneen vastaanoton ja eheiden kopioiden luomisen jälkeen. PAS-palvelu tiedottaa hyödyntävälle organisaatiolle säilytysvastuun alkamisesta Hyödyntävä organisaatio voi milloin tahansa tarkastella aineistojensa tilaa palveluun sisältyvällä hallinnointiliittymällä, jonne toteutetaan erilaisia raportointinäkymiä PAS-palvelu tarjoaa hyödyntäville organisaatiolle säilyttämiseen, ja aineistojen hallintaan, liittyviä tuki- ja neuvontapalveluita sekä ylläpitää pitkäaikaissäilytykseen liittyviä määrityksiä PAS-palvelua hallinnoidaan OKM:n laatiman KDK:n hallinnointimallin mukaisesti
KDK:n PAS-palvelun kehittyminen Laadukas digitaalinen pitkäaikaissäilytys Säilytyksen hajauttaminen (2. säilytyspiste ja pimeä arkisto) Ymmärrettävyyden säilyttäminen Säilytyksen suunnittelun ja säilytysmenetelmien kehittäminen Bittien säilyttäminen
KDK:n PAS-palvelun kehittäminen Kehitystä tehdään yhteistyössä arkistojen, kirjastojen ja museoiden kanssa Hyödynnetään KDK:n työryhmiä: PAS-yhteistyöryhmä KDK:n metatietoryhmä KDK:n arkkitehtuuriryhmä Ryhmien työskentely on juuri käynnistynyt
KDK:n PAS-yhteistyöryhmä Tuomas Alaterä, Yhteiskuntatieteellinen tietoarkisto Miikka Haimila, Museovirasto Juha Hakala, Kansalliskirjasto Minna Karvonen, opetus- ja kulttuuriministeriö Esa-Pekka Keskitalo, Kansalliskirjasto Kimmo Koivunen, Tieteen tietotekniikan keskus CSC (pj) Johan Kylander, Svenska litteratursällskapet i Finland SLS Tapani Lahti, Luonnontieteellinen keskusmuseo Kuisma Lehtonen, Tieteen tietotekniikan keskus CSC (siht.) Markku Leino, Näkövammaisten kirjasto Celia Markus Merenmies, Kansallisarkisto Sami Niinimäki, opetus- ja kulttuuriministeriö Tomi Orre, Suomen museoliitto / Museovirasto (Museo 2015 hanke) Kari Peiponen, Kansallisgalleria Jussi Rusi, Kotimaisten kielten keskus Kotus Pekka Tähtinen, Kansallinen audiovisuaalinen instituutti KAVI Mikael Vakkari, valtiovarainministeriö Katri Vänttinen, YLE
TEAM KDK-PAS @ CSC Kokonaisuuden hallinta Pirjo-Leena Forsström, Kimmo Koivunen Menetelmät ja mallit Heikki Helin, Juha Lehtonen Ohjelmistotuotanto Tuomas Järekallio, Kuisma Lehtonen, Aarno Tenhunen, Juha Törnroos, Ville-Pekka Vainio, Mikko Vatanen Laitearkkitehtuuri Mikko Tiainen
Kiitos Kimmo.Koivunen@csc.fi