Datové centrum a Regionální SAN kraje Vysočina

Projekt digitalizace a ukládání v regionechPetr Pavlinec, KrÚ kraje Vysočina

říjen 2009

Historie digitalizace, ukládání a el. archivace v kraji

Březen 2005

Pilotní provoz distribuovaného úložného systému KrÚ-NemJi

Listopad 2005Příprava projektu důvěryhodného elektronického archivu do Broadbandového fondu MIČR

Neschváleno bez dalšího zdůvodnění

Předloženo ve spolupráci s okresními archivy a Národní knihovnou (projekt WebArchiv)

Únor 2006Zkušební archivace webů (regionální „sklizeň“) veřejné správy v kraji Vysočina – WebArchiv

Březen 2007

Projekt snímkování elektronických úředních desek samospráv v kraji Vysočina

Říjen 2007

Kvalifikovaná cert. autorita na KrÚ – eIdentity, ICA

Listopad 2007

Předložení projektu důvěryhodného archivu do národní strategie eJustice

Historie digitalizace, ukládání a el. archivace v kraji

Leden 2008

Dokončen projekt digitalizace regionálního zdravotnictví - PACS

Únor 2008

Dokončeno datové centrum kraje Vysočina – NemJi-KrÚ

Leden 2009

Schválení Zásad krajského zastupitelstva na dotace v oblasti ukládání a archivace

Červen 2009

Dokončen projekt regionální SAN

Srpen 2009

Dokončena Studie digitalizace a archivace v kraji Vysočina

Září 2009

Předání typizovaného projektu digitalizace a ukládání v IOP

Regionální SAN - důvody realizace projektu

Proč regionální SAN? Rapidně rostoucí požadavky na požadavky na ICT největších

organizací v kraji Vysočina.

Mnohdy nevyhovující insfrastruktura pro zálohování

Vyzkoušený koncept metroclusteru (NemJi - KrU)

Dostupnost kvalitní optické infrastruktury (min 4 volná vlákna +

gigabit IP spoj do měst).

Historická spolupráce na testování iSCSI infrastruktury.

Vůle organizací řešit problematiku zálohování a archivace společně

Vůle politiků uvolnit investice na téma bezpečnost dat

Důvody realizace projektu – Metro Cluster 2007

Nutnost realizace systémů s vysokou dostupností a fyzickou odolností KrÚ – databázové servery (IZS), 4 x Exchange, 3x VMWare, 3x Citrix

NemJi – nemocniční systém, laboratorní systémy, ostatní aplikační a

databázové servery, Exchange, VMWare (celkem 17 serverů)

Výrazná potřeba navýšení celkové úložné kapacityV sumě pooptávka řádově po 20TB prostoru na 2 roky

Příprava infrastruktury pro projekty typu eArchiv - Důvěryhodný archiv

kraje a CRMNutnost realizace distribuovaného úložiště s garancí dostupnosti dat v řádech

desítek let

Zadání projektu – základní funkce řešení

Vzájemně propojené plně redundantní SAN obou organizací

Zvýšení úložné kapacity o 10TB v případě KrÚ (s předpokládaným růstem

na 20TB do dvou let)

Zvýšení úložné kapacity o 10TB v případě NemJi (s předpokládaným růstem

na 30TB do dvou let)

Řešení typových zálohovacích úloh

Snapshot a BACKUP snapshotů, kontinuální řada SNAPSHOTů

Synchronní a asynchronní MIRROR

Geografický cluster (metro cluster)

Virtualizace diskové prostoru – maximální využití stávajících polí

Failover nebo clusterový koncept

TELCO infrastruktura kraje – MAN, ROWANet

Výstupy pro KrÚ

Snadná administrace Vyzkoušené krizové scénáře Vyřešená bezpečnost, autorizace a model distribuované správy

V rutinním provozu již nasazeno: Synchronní mirror + snapshoty (DiskSafe) u serverů s W2K3 z DAS do SAN - 8x

Synchronní mirror v rámci SAN (server má primární data v SAN) – 4x

Funkce agenta SQL a Exchange – 6x

Připojená VMWare ESX HA farma do SAN - 3x

Snapshoty nad mirrorovanými disky (rozsáhlé možnosti nastavení počtu a úrovní

snapshotů) – 12x

Replikace do celkem 6ti lokalit – 10x

Využití vzdálených iSCSI i FC storages – 3x

V IPStor celkově pod správou cca 50TB

Regionální SAN - dotace

Příjemci dotaceOrganizace zřízená krajem Vysočina, obec na území kraje Vysočina nebo obcí zřízená

organizace

Přijatelné nákladya) nákup diskových polí popř. jejich komponent

b) prvky výstavby SAN/NAS infrastruktury (lokální optické rozvody, SAN switche, FC

karty)

c) hw a sw prvky potřebné pro integraci s krajským systémem úložišť

d) archivační popř. zálohovací software

e) metodiky zálohování, archivace a obnovy dat

Rozpočet projektu Max 1,5 mil Kč za rok

Organizace A – 70%

Organizace B – 60%

Organizace C – 50%

Koncept regionálního úložiště

Monitoring SAN

Regionální SAN - výstupy

Technicky infrastruktura spravující řádově 100TB provozních dat na 12ti organizacích

9 instancí FalconStor IPStor (verze 5 a 6)

Propojených 10 diskových polí od 4 výrobců

Vznik infrastruktury pro disaster recovery zálohy celých datových center

IP infrastruktura pro desítky služeb a koncových strojů

FC infrastruktura fungující na rychlostech 2-4Gb na vzdálenosti až 65km

Organizačně Jednotná metodika zálohování, obnovy a dohledu nad daty a úložišti

monitoring 16ti vazeb mezi organizacemi při vzdáleném využití diskových kapacit

Organizačně zvládnuté mechanismy správy a údržby distribuované architektury

Výrazné úspory z rozsahu a TCO

Možnost sdílení a společných investic

Regionální SAN - co dál?

Další kroky a plány ….

Vytvoření dlouhodobých garantových úložišť veřejné správy

Vznik vzdálených garantovaných backupovacích služeb pro malé

organizace

Infrastruktura pro digitalizační a skenovací linky

Infrastruktura pro kamerové systémy

Pořízení vysokorychlostních SSD polí

Zapojení regionální SAN do krajské hostingového centra – eGON Centrum

Rutinní zvládnutí disaster recovery celých infrastruktur – virtuální serverovny

(TC K, TC ORP, IZS)

Vytvoření další metroclusterů (TC ORP)

Nalezení technologie pro dlouhodobé uložení

Dotace

Projekty technologických center krajů

Aktuální stav výzvy IOP

Typizované projekty Technologická centra Digitalizace a ukládání Digitální mapa veřejné správy Datové sklady a nástroje BI Vnitřní integrace úřadu a integrace s ISVS Celkově cca 2mld Kč Vyhlášení výzvy v říjnu ... 2010

Návaznost na TC ORP

Návaznost na systém vzdělávání ESF/OPLZZ

Koncept regionální digitalizace a ukládání

Architektura výstupem projektu z roku 2005, regionální studie digitalizace a archivace a Strategie AKČR

Návaznost na technologická centra využití provozních (SAN/NAS) a garantovaných úložišť (CAS) vysoká dostupnost (HA) a teritoriální redundance serverová a disková virtualizace spisové služby a provozní úložiště

Návaznost na národní projekty Národní digitální knihovna Národní digitální archiv

Mezinárodní normy a standardy Životní cyklus dokumentů - OAIS Rozhraní SPS a tok dokumentů - Moreq2 Metodika plánování a údržby důvěryhodných digitálních úložišť - PLATTER

Koncept regionální digitalizace a ukládání

Předpokládané výstupy typizovaného projektu

VýstupObjektivně ověřitelné

indikátory

Minimální hodnota naplnění

indikátoru

Povinný výstup typizovaného

projektu

Maximální délka realizace

služby

Maximální způsobilé

výdaje (mil Kč)

Celkové maximální

způsobilé výdaje (mil Kč)

Krajská digitální spisovna (KDS)

Plně elektronizovaná agendamístní veřejné správy - služba

KDSexistuje ano 2 roky 15,0

Krajský digitální repozitář (KDR)

Plně elektronizovaná agendamístní veřejné správy - služba KDR

existuje ne 2 roky 20,0

Krajské digitální úložiště (KDU)

Plně elektronizovaná agendamístní veřejné správy - služba KDU

existuje ne 2 roky 20,0

Digitalizované a uložené dokumenty

Podíl digitalizovaných dokumentů nárůst min 20% ne 3 roky 10,0

Krajská digitalizační jednotkaFunkční krajská digitalizační

jednotkaexistuje ne 2 roky 10,0

75,0

Koncept regionální digitalizace a ukládání

Garantované úložiště

Archivní úložištěprimární

Krajská digitální spisovna(KDS)

Krajský digitální repozitář(KDR)

PřístupAPI

Spisová služba

Skenovánína vstupu

Podání Vypravení

Vyřizování

NDA

API

Dokumenty z jiných IS

Hranice krajskéhoTC

Balíček AIP

Jiné dokumenty

Skartace

Přístup

Balíček SIP

Balíček SIP

OAI-PMH

API

Krajské digitálníúložiště (KDU)

Digitální úložiště

Katalog

NFS, CIFS, (FTP)

DICOM, HL7,…

Skenování Indexace

Digitalizační pracoviště

Pracovníúložiště

Úprava

Export

Archivní úložištězáložní

Krajská digitální spisovna

Předpokládané parametry KDS Garantované úložiště uzavřených spisů pro střednědobou archivaci

Služba pro organizace samosprávy na území kraje

Samostatný IS postavený nad důvěryhodným úložištěm KTC

Striktní podpora OAIS a Moreq2

Otevřené rozhraní pro SPS a agendové IS

Spolupráce s NDA na bázi SIP/AIP datových balíků (+ metodika, digital

preservation, konverze)

Úložiště CAS/NAS (úvodní kapacita min 4TB na kraj)

Předpokládaný roční přírůstek 2-4TB (po roce 2010)

Dotace IOP až 15mil Kč

Krajský digitální repozitář

Předpokládané parametry KDR Garantované úložiště pro kulturní památky, cenné písemnosti a umělecká díla,

fotografie, historické mapy, audio, video, časopisy a ostatní publikace vztahující se k

regionu

Služba pro organizace samosprávy na území kraje

Samostatný IS postavený nad důvěryhodným úložištěm KTC

Podpora OIAS

Otevřené rozhraní pro specializované IS (knihovní, muzejní)

Spolupráce s NDK (metodiky, výměna dat, digital preservation, konverze)

Úložiště CAS/NAS/SAN (úvodní kapacita min 5TB na kraj)

Předpokládaný roční přírůstek 3-5TB (po roce 2010)

Dotace IOP až 20mil Kč

Krajské digitální úložiště

Předpokládané parametry KDU bezpečné a dlouhodobé úložiště pro další IS a původce v kraji

obecné metadatové profily

využití garantovaného úložiště i TIER 3 – 2

služby pro malé organizace (vzdálený zálohovací systém)

provozní logy, kamerové systémy, PACS, ...

datová rozhraní NFS, CIFS, HTTPS/WS-SOAP

využití technik HSM a ILM

odhadovaný roční přírůstek za kraj 10-20TB

dotace IOP až 20mil Kč

Krajská digitalizační jednotka

Předpokládané parametry KDJ pořízení technologií pro digitalizaci - skenery a další SW/HW nástroje pro digitalizaci kulturního

dědictví a úředních dokumentů

digitalizace dokumentů – nákup služby nebo osobní náklady (vyhledávání a příprava fondů pro

digitalizaci, příprava dokumentů, skenování, popis metadat a vyhledávání informačních zdrojů, práce s OCR,

správa provozního úložiště a repozitáře)

Robotický skener (formát až A2, min rozlišení 600 DPI)

1-2 ruční skenery (formát až 2A0, min rozlišení 600 DPI)

3D-4D skener

Příprava vhodných prostor (eliminace negativních vlivů vnějšího světla, hlučnost,…)

Kapacity provozního úložiště (nejlépe rozšířením Technologického centra kraje)

Základní SW na zpracování naskenovaných dat

Dotace IOP až 10+10mil Kč

Informace, kontakt...

Veškeré podklady najdete na …

www.rowanet.cz/SANwww.kr-vysocina.cz/it

pavlinec.p@kr-vysocina.cz