22
20151020 PREFORMA FAIkonferens 1 Få full kontroll på standardiserade filformat för långtidsbevarande: EU-projektet PREFORMA Börje Justrell projektkoordinator Magnus Geber delprojektledare Riksarkivet Informations- förvaltning 2015

Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

  • Upload
    others

  • View
    0

  • Download
    0

Embed Size (px)

Citation preview

Page 1: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                1                                                                                                                  

Få full kontroll på standardiserade filformat för långtidsbevarande:

EU-projektet PREFORMA

Börje Justrell projektkoordinator

Magnus Geber delprojektledare

Riksarkivet

Informations-förvaltning 2015

Page 2: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                2                                                                                                                  

Fakta om projektet q  PREFORMA (PREservation FORMAts for culture

information/e-archives) är ett sk förkommersiellt upphandlingsprojekt (Pre-Commercial Procurement projekt) som delfinansieras av EU kommissionen inom ramen för forsknings- och utvecklingsprogrammet FP7.

q  Start: 1 januari 2014 q  Omfattning: 48 månader (avslut 31 December 2017) q  Total budget: ca 4 500 000 EUR, varav ca 2 800 000 EUR för utveckling (procurement) q  Website: www.preforma-project.eu q  Kontakter:

–  Projekt koordinator: Börje Justrell, Riksarkivet, [email protected]

–  Teknisk koordinator: Antonella Fresa, Promoter Srl, [email protected]

–  Koordinator för kommunikation:Claudio Prandoni, Promoter Srl, [email protected]

Page 3: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                3                                                                                                                  

Projektpartners

q  RIKSARKIVET, Sweden Project Coordinator and memory institution q  PROMOTER SRL, Italy Technical and Communication Coordinator

q  Technical partners –  PACKED EXPERTISECENTRUM DIGITAAL ERFGOED VZW, Belgium –  FRAUNHOFER-GESELLSCHAFT ZUR FOERDERUNG DER ANGEWANDTEN FORSCHUNG

E.V, Germany –  HOGSKOLAN I SKOVDE (University of Skovde), Sweden –  UNIVERSITA DEGLI STUDI DI PADOVA, Italy

q  Memory institutions –  STICHTING NEDERLANDS INSTITUUT VOOR BEELD EN GELUID, Netherlands –  Koninklijk Instituut voor het Kunstpatrimonium, Belgium –  GREEK FILM CENTRE AE, Greece –  LOCAL GOVERNMENT MANAGEMENT AGENCY-AN GHNIOMHAIREACHT BAINISTIOCHTA

RIALTAIS AITIUIL, Ireland –  STIFTUNG PREUSSISCHER KULTURBESITZ, Germany –  AYUNTAMIENTO DE GIRONA, Spain –  Eesti Vabariigi Kultuuriministeerium, Estonia –  KUNGLIGA BIBLIOTEKET, Sweden

Page 4: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                4                                                                                                                  

Pre-Commercial Procurement (PCP) q  Pre-Commercial Procurement (PCP) är en

upphandlingsmetod som gör det möjligt för myndigheter att samarbeta med företag och andra intresserade i utvecklingsprojekt som syftar till lösningar på specifika utmaningar och behov inom offentlig sektor.

q Dessa lösningar skapas genom en stegvis upphandling av utvecklingskontrakt (för att minska riskerna).

q  Pre-Commercial Procurement (PCP) blir allt vanligare

inom den offentliga sektorn i EU.

Page 5: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                5                                                                                                                  

Projektets utgångspunkter q  Minnesinstitutionerna står inför en situation med ökat inflöde av

elektroniska dokument och andra elektroniska media som ska bevaras långsiktigt.

q  Data lagras i specifika filformat for dokument, bilder, video, ljud etc., och dessa filer är normalt skapade med mjukvara från olika leverantörer.

q  Även om de filer som levereras till minnesinstitutionerna är i standardformat kan man idag inte garantera att standarderna tillämpats på ett korrekt sätt: -  Varken de arkivbildare/myndigheter som framställt de elektroniska filerna

eller de minnesinstitutioner som tar emot dem har kontroll över den mjukvara som används vid framställningen av filerna.

-  Minnesinstitutionerna testar naturligtvis överensstämmelsen med standard, men dessa tester är idag inte helt tillförlitliga; olika mjukvara för test kan ge olika resultat.

q  Detta ger problem i långtidsbevarandet. Data som hanteras i en ofullständigt kontrollerad process kan äventyra det framtida bevarandet.

Page 6: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                6                                                                                                                  

Projektets mål

q  Övergripande målsättning: att göra det möjligt att på ett säkert sätt skapa och kvalitetstesta filer i olika standardiserade format för långtidsbevarande.

q  Huvudmål för projektet: att möjliggöra för minnesinstitution- erna att få kontroll över processen att konformitetstesta filer som ska införlivas i elektroniska arkiv.

q  Huvudmålet för PCP som PREFORMA startat: att utveckla en open source mjukvara som hanterar hela processen för att testa överensstämmelse med standard; mjukvaran ska stödja ett antal centrala standarder, och arbetet med att ta fram dem ska utgå från behoven hos minnesinstitutioner och andra organisationer med uppdrag att bevara data långsiktigt.

Page 7: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                7                                                                                                                  

Open source

q  PREFORMAs inriktning är open source, med ambitionen att etablera ett stabilt forsknings- och utvecklingsområde (community) med deltagare från olika intressentgrupper.

q  Open source i sig garanterar att den mjukvara som kommer ur PREFORMA projektet är tillgänglig även när projektet är avslutat.

Licenser –  All mjukvara utvecklad under PREFORMA projektet kommer att

tillhandahållas under två specifika open source licenser: “GPLv3 or later” and “MPLv2 or later”.

–  Alla digitala tillämpningar som utvecklas under PREFORMA projektet kommer att tillhandahållas under Creative Commons CC-BY v4.0, och i öppna filformat (SOU 2009:86).

Page 8: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                8                                                                                                                  

Målgrupper och intressenter q  Minnesinstitutioner och kulturarvsorganisationer som

deltar i eller planerar att delta i digitala kulturinitiativ. q  Utvecklare som bidrar med kod och nyttjar PREFORMAs

open source verktyg. q  Forskningsorganisationer/institutioner som är

tekniska rådgivare till intressenter inom kulturarvsområdet. q  Standardiseringsorganisationer som hanterar de

tekniska specifikationerna för de bevarandeformat som PREFORMA täcker in.

q  Anslagsgivande myndigheter som kulturministerier och nationella och regionala myndigheter som genomför digitaliseringsprogram och kan tänkas stödja användningen av PREFORMAs verktyg.

q  Andra projekt inom det digitala kulturarvsområdet.

Page 9: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                9                                                                                                                  

Övergripande FoU Mål (The PREFORMA Challenge)

q  Utveckla en open source conformance checker som: –  kontrollerar om en fil överensstämmer med

standardspecifikationen –  kontrollerar om en fil överensstämmer med

minnesinstitutionens kriterier för att bli accepterad –  rapporterar tillbaka till mänskliga ”agenter” och till

mjukvaruagenter –  gör enklare rättningar.

q  Skapa ett ekosystem kring en open source reference implementation som: –  ger användbar återkoppling (feed back) till dem som

kontrollerar mjukvara –  bidrar till utvecklingen av standardspecifikationer –  bidrar till utvecklingen av nya sätt att hantera filer som ska

bevaras.

Page 10: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                10                                                                                                                  

Projektets arbetsschema för utvecklingen av mjukvara

q  Designfasen (4 månader): nov 2014 – febr 2015

q  Prototypfasen (22 månader): mars 2015 – dec 2016 –  Första prototypen: mars 2015 – okt 2015 –  Re-design: nov 2015 – febr 2016 –  Andra prototypen: mars 2016 – dec 2016

q  Testfasen (6 månader): jan 2017 – juni 2017

Page 11: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                11                                                                                                                  

När kommer verktygen

q Prototyperna klara dec 2016 –  Utvärderas 1:a halvåret 2017

q Releaser ständigt tillgängliga (open source)

q Begränsat antal filformat. Förhoppningsvis modell för fortsatt arbete med fler format

q 3 separata prototyper. Viss integration. Kan också byggas in i verksamhetssystem.

Page 12: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                12                                                                                                                  

3 leverantörer har valts (från början 6)

q  VeraPDFa Consortium (arbete med PDF/A) q  OPF (Open Preservation Foundation; tidigare Planets, 21 st institutioner) q  PDFA (PDF Association) q  DL (Dual Labs) q  KEEPS (KEEP SOLUTIONS); q  DPC (Digital Preservation Coalition)

q  Easy Innova (arbete med BILD; TIFF) q  University of Basel q  University of Girona q  (”TIFF/A”)

q  MediaArea (arbete med VIDEO; MKV/FFV1/LPCM) q  (ligger bakom mjukvaran MediaInfo)

Dessa håller på med första prototypfasen t.o.m. nu i oktober

Page 13: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                13                                                                                                                  

Använda standarder Filtyper Standardspecifikationer

TEXT PDF 1.7 (ISO 32000-1:2008) PDF/A-1 (ISO 19005-1:2005) PDF/A-2 (ISO 19005-2:2011) PDF/A-3 (ISO 19005-3:2012)

IMAGE TIFF/EP (ISO 12234-2:2001) TIFF/IT (ISO 12369:2004) (TIFF 6.0)

AUDIOVISUAL

Container: MKV (http://www.matroska.org/technical/index.html) Video: Lossless FFV1 (http://www.ffmpeg.org/~michael/ffv1.html) Ljud: Linear PCM (IEC 60958-1 ed3.1 Consol. with am1: 2014)

Page 14: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                14                                                                                                                  

Nätverk

q Nationella arbetsgrupper –  Knyta an till existeranden grupper och nätverk

q  Tematiska arbetsgrupper

q Nätverket ska vi projektslut omvandlas till ett hållbart öppet användarforum kring verktygen med blandade intressentgrupper

Page 15: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                15                                                                                                                  

Hur kunna delta

Vara med i nätverk och arbetsgrupper – Nationella, - Tematiska

q  Erhålla information från projektet

q Ge allmän feedback och svara på frågor

q Delta i utvecklandet av användningsfall (Use cases)

q Bidra med testfiler

q  Testa prototypernas olika versioner

Page 16: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                16                                                                                                                  

Bidra med testfiler

q  Fylla i metadatabilaga (Excel-fil)

q  Ladda upp filer

Page 17: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                17                                                                                                                  

Testa prototyperna 1) veraPDF Mjukvara:http://downloads.verapdf.org/dev/veraPDF-library-GUI-dev-latest.zip

Instruktioner: ej klara, kontakta Magnus Geber

Page 18: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                18                                                                                                                  

Testa prototyperna 2) DBF Manager (EasyInnova) TIFF

Mjukvara:http://www.dpfmanager.org/#download Instruktioner: http://www.dpfmanager.org/documentation.html

Page 19: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                19                                                                                                                  

Testa prototyperna 3) MediaConch (MediaArea) AV

Mjukvara: https://mediaarea.net/MediaConch/download.html Instruktioner: https://mediaarea.net/MediaConch/demo.html

Page 20: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                20                                                                                                                  

Open Source workshop i Stockholm, 7 april 2016

q  Särskilt fokus på open source

q  Demonstration av de 3 prototypernas releaser

q  Eftermiddagen utställning med olika stationer

q  Öppet för alla intresserade

q  Äger rum på KB och dess närhet

Page 21: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                21                                                                                                                  

Följ oss!

PREFORMA Website: www.preforma-project.eu

Page 22: Få full kontroll på standardiserade filformat för ...fai.nu/wp-content/uploads/FAI_2015_Justrell_Geber.pdf · 20151020 & &&&PREFORMAFAI%konferens&&&&& & &&&&&4&&&&& Pre-Commercial

2015-­‐10-­‐20        PREFORMA  FAI-­‐konferens                                                                                                22                                                                                                                  

Delta i PREFORMA i Sverige

Vid behov, kontakta Magnus Geber [email protected] 070-2561317

TACK!