Napojení systému

Archivematica na

úložiště CESNET

Michal Růžička ÚVT MU

Projekt LTP PILOT

Masarykova univerzita

V Praze dne 1. 12. 2015

Osnova

• Strategie bit-level ochrany dat.

• Infrastruktura úložišť CESNET.

• Architektura ukládání dat v Archivematica.

• Kontrola integrity.

Dlouhodobá bitová ochrana dat

• Data ochraňuje před ztrátou a

• nekontrolovanou změnou

• z důvodu chyby (lidské, software, hardware, …)

• nebo cílené zlovolné manipulace.

Strategie bit-level ochrany dat

• Bil-level ochrana dat replikací na

• technologicky,

• logicky a

• geograficky oddělené lokality.

• Kontrola konzistence dat

• v rámci jedné lokality a

• mezi lokalitami.

Infrastruktura úložišť CESNET

Geograficky oddělená nezávislá datová centra.

Infrastruktura úložišť CESNET

HSM – Hierarchical Storage Management.

Z hlediska uživatele je přístup k datům

transparentní.

Architektura systému Archivematica

z hlediska ukládání dat

• Systém Archivematica není monolitický

softwarový celek.

• Archivematica Dashboard.

• Archivematica MCP.

• Archivematica Storage Service.

• Gearman Job Server.

• …

Architektura systému Archivematica

z hlediska ukládání dat

• Archivematica Storage Service se stará

o ukládání dat.

• Může běžet na jiném serveru než Archivematica MCP.

• Může obsluhovat více Archivematica instancí,

• se kterými komunikuje síťovým protokolem.

• Samotná Archivematica neprovádí replikaci

dat a bitovou ochranu ponechává v režii

použitého úložiště.

Technologické řešení:

Schéma napojení na CESNET

Technologické řešení napojení

• Archivematica Storage Service ukládá data na

svazek propojený protokolem NFSv4 na CESNET

úložiště.

• Silná a škálovatelná autentizace přes Kerberos.

• Kryptografické zajištění důvěrnosti a integrity dat při přenosu.

• Dobré výkonností parametry.

• Nutné menší změny v kódu, zdroje dostupné na GitHub.

• Storage Service ukládá data na jedinou

(primární) DU CESNET lokalitu.

• Replikace na ostatní lokality v režii DU CESNET.

• Možnosti replikace rozšířeny v rámci projektu LTP Pilot.

Kontrola konzistence dat

• Archivematica API pro ověření konzistence AIP.

• Pracuje jen s ASS známou jedinou kopií dat.

• V rámci LTP Pilot implementován nástroj

FSTreeIntegrityWatch.

• Ukládání integritní informace v rozšířených atributech souborů v

souborovém systému nebo v integritní bázi vJSON formátu.

• Podpora formátu BagIt.

• Podpora mnoha různých algoritmů kontrolních

součtů s možností snadného rozšíření o další.

• K dispozici na GitHub.

Děkuji za pozornost!

Michal Růžička

ruzicka@ics.muni.cz Národní archiv

V Praze dne 1. 12. 2015

DOTAZY?

Odkazy, použité zdroje

https://www.archivematica.org/en/docs/archivematica-1.4/

https://wiki.archivematica.org/Main_Page

https://du.cesnet.cz/cs/infrastruktura_ulozist/start

https://github.com/michal-ruzicka/archivematica

https://github.com/michal-ruzicka/FSTreeIntegrityWatch