Prezentace k projektu LTP Pilot, který má v ČR otestovat systém Archivematica. Projekt pořádá knihovna MUNI, MZK, a spolupracuje na něm i DU CESNET a možná i knihovna AV CR.
Cílem prezentace bylo podat přehledovou informaci o oblasti Digital preservation
Andrea Miranda - Archivematica a standardyLTP-portal-cz
Prezentace představuje základní standardy v oblasti LTP a certifikaci důvěryhodného digitálního úložiště a následně porovnává shodu systému Archivematicy s normou OAIS.
Marek Melichar - Zkušenosti se systémem ArchivematicaLTP-portal-cz
Marek Melichar se ve své prezentaci nejprve věnuje problematice digital preservation a poté shrnuje klady a zápory systému Archivematica, které byly zjištěny během testování v rámci projektu LTP-pilot.
Chcete vědět víc? Mnoho dalších prezentací, videí z konferencí, fotografií i jiných dokumentů je k dispozici v institucionálním repozitáři NTK: http://repozitar.techlib.cz
Would you like to know more? Find presentations, reports, conference videos, photos and much more in our institutional repository at: http://repozitar.techlib.cz/?ln=en
Prezentace k projektu LTP Pilot, který má v ČR otestovat systém Archivematica. Projekt pořádá knihovna MUNI, MZK, a spolupracuje na něm i DU CESNET a možná i knihovna AV CR.
Cílem prezentace bylo podat přehledovou informaci o oblasti Digital preservation
Andrea Miranda - Archivematica a standardyLTP-portal-cz
Prezentace představuje základní standardy v oblasti LTP a certifikaci důvěryhodného digitálního úložiště a následně porovnává shodu systému Archivematicy s normou OAIS.
Marek Melichar - Zkušenosti se systémem ArchivematicaLTP-portal-cz
Marek Melichar se ve své prezentaci nejprve věnuje problematice digital preservation a poté shrnuje klady a zápory systému Archivematica, které byly zjištěny během testování v rámci projektu LTP-pilot.
Chcete vědět víc? Mnoho dalších prezentací, videí z konferencí, fotografií i jiných dokumentů je k dispozici v institucionálním repozitáři NTK: http://repozitar.techlib.cz
Would you like to know more? Find presentations, reports, conference videos, photos and much more in our institutional repository at: http://repozitar.techlib.cz/?ln=en
Michal Růžička - Napojení systému Archivematica na úložiště CESNETLTP-portal-cz
Ochraně dat na bit-level úrovni v rámci datového úložiště CESNETu a možnosti napojení systému Archivematicy s infrastrukturou CESNET se věnuje prezentace Michala Růžičky.
Webinář: Co nového přináší verze 9 jedničky v zálohování Veeam Backup & Repli...Jaroslav Prodelal
Nedávno vyšel Update 1 produktu Veeam Backup & Replication v9 a pro mnoho zdrženlivých uživatelů tak nastává čas úvah o upgrade na poslední verzi jedinečného nástroje pro zálohování virtuální infrastruktury.
Během webináře vás seznámíme s těmi nejzajímavějšími novinkami, které v9 přinesla, vysvětlíme jejich přínosy a srovnáme použití v jednotlivých edicích produktu.
Webinář je vhodný zejména pro existující uživatele produktu Veeam Backup & Replication (i pro ty, kteří nemají v9 ještě nasazenou), ale obohatí i toho, kdo o produktu přemýšlí nebo jej testuje.
Veeam Backup & Replication poskytuje rychlé, flexibilní a spolehlivé obnovení virtualizovaných aplikací a dat pro platformy VMware vSphere a Microsoft Hyper-V.
Program webináře
-Shrnutí základních vlastností Veeam B&R.
-Představení novinek.
Vylepšení na úrovni jádra produktu.
-Zrychlení zálohování.
-Možnost vynechávat ze zálohy data zevnitř virtuálních strojů.
-Aplikační zálohování a obnova.
-Disaster recovery do cloudu.
-Pro koho je vhodné upgradovat na edici ENT/ENT+.
Najde se ještě někdo, kdo neslyšel o jedničce v ochraně virtuální infrastruktury - nástroji Veeam Backup & Replication?! Nyní ve verzi 9 přináší Veeam B&R již řadu let inovace do oblasti ochrany dat ve virtuálním prostředí pro VMware vSphere i Microsoft Hyper-V.
Zúčastněte se našeho webináře a my vám představíme vlastnosti Veeam Backup & Replication, které pomáhá malým i velkým organizacím s ochranou dat v jejich infrastruktuře.
Program webináře
-Záloha nebo obnova, co je důležitější?
-RPO, RTO, DR, a další.
-Představení produktu Veeam Backup & Replication.
-Klíčové vlastnosti řešení.
-Zálohování a replikace do cloudu.
-Dostupné edice a jejich srovnání.
-Licencování a ceny.
-Nástroje Veeam dostupné zdarma.
Webinář je určen zejména pro zájemce o produkt Veeam Backup & Replication, je ale vhodný i pro stávající uživatele, kterým oživí některé zapomenuté vlastnosti.
Michal Růžička - Napojení systému Archivematica na úložiště CESNETLTP-portal-cz
Ochraně dat na bit-level úrovni v rámci datového úložiště CESNETu a možnosti napojení systému Archivematicy s infrastrukturou CESNET se věnuje prezentace Michala Růžičky.
Webinář: Co nového přináší verze 9 jedničky v zálohování Veeam Backup & Repli...Jaroslav Prodelal
Nedávno vyšel Update 1 produktu Veeam Backup & Replication v9 a pro mnoho zdrženlivých uživatelů tak nastává čas úvah o upgrade na poslední verzi jedinečného nástroje pro zálohování virtuální infrastruktury.
Během webináře vás seznámíme s těmi nejzajímavějšími novinkami, které v9 přinesla, vysvětlíme jejich přínosy a srovnáme použití v jednotlivých edicích produktu.
Webinář je vhodný zejména pro existující uživatele produktu Veeam Backup & Replication (i pro ty, kteří nemají v9 ještě nasazenou), ale obohatí i toho, kdo o produktu přemýšlí nebo jej testuje.
Veeam Backup & Replication poskytuje rychlé, flexibilní a spolehlivé obnovení virtualizovaných aplikací a dat pro platformy VMware vSphere a Microsoft Hyper-V.
Program webináře
-Shrnutí základních vlastností Veeam B&R.
-Představení novinek.
Vylepšení na úrovni jádra produktu.
-Zrychlení zálohování.
-Možnost vynechávat ze zálohy data zevnitř virtuálních strojů.
-Aplikační zálohování a obnova.
-Disaster recovery do cloudu.
-Pro koho je vhodné upgradovat na edici ENT/ENT+.
Najde se ještě někdo, kdo neslyšel o jedničce v ochraně virtuální infrastruktury - nástroji Veeam Backup & Replication?! Nyní ve verzi 9 přináší Veeam B&R již řadu let inovace do oblasti ochrany dat ve virtuálním prostředí pro VMware vSphere i Microsoft Hyper-V.
Zúčastněte se našeho webináře a my vám představíme vlastnosti Veeam Backup & Replication, které pomáhá malým i velkým organizacím s ochranou dat v jejich infrastruktuře.
Program webináře
-Záloha nebo obnova, co je důležitější?
-RPO, RTO, DR, a další.
-Představení produktu Veeam Backup & Replication.
-Klíčové vlastnosti řešení.
-Zálohování a replikace do cloudu.
-Dostupné edice a jejich srovnání.
-Licencování a ceny.
-Nástroje Veeam dostupné zdarma.
Webinář je určen zejména pro zájemce o produkt Veeam Backup & Replication, je ale vhodný i pro stávající uživatele, kterým oživí některé zapomenuté vlastnosti.
LTP-workshop byl závěrečnou prezentací a zároveň veřejnou obhajobou projektu LTP-Pilot. Členové projektového týmu prezentovali své závěry, zkušenosti a výstupy z testování LTP open-source systému Archivematica. Kromě nás tam vystoupili i zástupci Národní knihovny ČR, Národního archivu ČR, Knihovny Akademie věd ČR a Centrálného dátového archivu (SK), kteří účastníky seznámili se svými projekty a systémy na dlouhodobou archivaci. Na závěr proběhla diskuze o dalším rozvoji LTP v ČR a možnosti užší spolupráce všech zájemců o problematiku.
Moje prezentace představila použití systému Archivematica v LTP repozitářích vybraných zahraničních institucí.
Webinář: Ovládněte umění správy dokumentů ve vaší organizaciJaroslav Prodelal
Pokud chcete mít kontrolu nad oběhem dokumentů ve vaší organizaci, potom se zúčastněte webináře, který bude pojednávat o problematice správy firemních dokumentů v praxi. Webinář je určen pro ty, kteří ještě nevyužívají žádný podobný systém, ale i těm, kteří se současným nejsou spokojeni.
Na webináři budeme mluvit o nejčastějších úskalích efektivní správy dokumentů napříč různými organizacemi a odvětvími.
Představíme vám řešení M-Files DMS vhodné pro malé i velké organizace, které vám umožní vyřešit otázku správy dokumentů a vy tak budete mít kontrolu nad celým životním cyklem dokumentů. M-Files vám pomáhají i v těchto oblastech:
-Díky pracovním postupům (workflow) už se nestane, že by došlo k odeslání neschválené smlouvy, nebo že by byla zaplacena neschválená faktura.
-Budete moci přiřazovat dokumenty k vašim zákazníkům, dodavatelům a spolupracovníkům.
-Nebudete mít jeden dokumentu uložen několikrát na různých místech a snadno jej obnovíte, pokud jste ho omylem smazali.
-Ke všem dokumentům budete moc přistupovat odkudkoli.
-Řízení přístupových oprávnění zajistí přístup k dokumentům jen vyjmenovaným osobám. Tím pádem budete mít přehled o tom, kdo s jakým dokumentem pracoval a co s ním dělal.
-...a další funkce, díky kterým pro vás práce s M-Files bude příjemnou součástí každodenních povinností.
Program webináře
-Úskalí při správě dokumentů.
-Jak vybrat správné řešení pro správu doumentů.
-Představení produktu M-Files.
-Klíčové vlastnosti M-Files.
-Co řeší M-Files oproti jiným DMS systémům.
-Pro koho je M-Files vhodné řešení.
-Jak probíhá projekt zavádění DMS.
-Příklady licencování a ceny.
-Praktická ukázka.
2. Přehled
proč má smysl budovat národní datová úložiště pro
vědecká data
budovaná infrastruktura
jak úložiště použít
přístupové mechanismy
správa uživatelů na úložištích
použití pro náročnější uživatele
speciální aplikace
3. Smysl externího úložiště
uživatelé raději drží data na vlastním zařízení. . .
to ale nedává rozumné garance dlouhodobého uchovávání
používají se nevhodná média, chybí systematická péče
data je lépe uchovávat v živém systému
konsolidace zdrojů – národní úložiště vědeckých dat
umožňuje pořídit zařízení dostatečné velikosti
spravované specializovaným týmem
s možností sdílení dat mezi skupinami uživatelů
4. Cíl: dlouhodobé uchování dat
potřeba dlouhodobě uchovávat vědecká data vzrůstá
uchování primárních dat z experimentů a výpočtů
s ohledem na potenciál jejich dalšího využití
k návratu a revizi publikovaných výsledků
uchování zajišťujeme na úrovni zachování binárních dat
(bitstream)
správce úložiště nerozumí odborné povaze dat
ani nemůže rozhodovat o smysluplnosti jejich archivace
proto neděláme LTP (Long-Term Preservation)
bitstream je nicméně předpokladem pro uchování dat
další kopie, geografické repliky, redundance v systému
5. Možnosti využití datových úložišť
zálohy
uživatelé mají primární data u sebe
na úložiště odkládají zálohu pro případ havárie
archivace
uživatelé na úložiště odkládají cenná primární data
data nejsou často využívána
uživatelé nemají prostředky pro jejich uchovávání
sdílení dat
distribuovaný tým potřebuje společně pracovat nad
většími objemy dat, případně je zveřejňovat
„něco jiného“
distribuce obsahu, jiné speciální aplikace
6. Možnosti využití datových úložišť
a naopak: na co se vzdálené úložiště příliš nehodí
interaktivní práce zejména s velkým množstvím malých
souborů
ukládání dat s potřebou přístupu v reálném čase
prioritou je spolehlivost uložení
přímý provoz systémů s nutností 24/7 přístupu
„toto není úložiště pod váš SAP“
na to je obecně vzdálené úložiště nevhodné
vhodné použití pro podobné scénáře
primární 24/7 data u uživatele, na CESNET
zálohy/repliky
rozdělení životně důležitých dat vs. „nice to have“ dat
8. Infrastruktura
trojice úložišť: Plzeň, Jihlava, Brno
celková hrubá kapacita cca 16 PB + 5 PB(∗ )
Plzeň v pilotním provozu od května 2012
v areálu ZČU
cca 500 TB disků + 3300 TB pásek
SGI Data Migration Facility, CXFS
pásková knihovna Infinite Storage
doplňujeme SGI COPAN a pásky(∗ )
Jihlava a Brno
dodáno v květnu 2013
probíhá uvádění do zkušebního provozu, testovací
uživatelé
řešení IBM založené na GPFS
10. Infrastruktura – další složky
aneb úložiště „mimo ta naše“
disková pole zapojená v MetaCentru
hierarchické úložiště a disková pole CERIT-SC
pro vlastní potřebu projektů: CEITEC
obvykle jsou nebo budou spojena systémem správy
uživatelských účtů
používají obdobné protokoly
11. Úložiště jsou hierarchická
vrstvy médií různé kapacity a rychlosti
rychlé disky/pomalejší disky/MAID/pásky
drahý provoz → levnější provoz
a automatizovaný systém pro přesuny dat mezi nimi
déle nepoužívaná data do pomalejších vrstev
pro uživatele transparentní, resp. téměř transparentní
přístup k dlouho nepoužitému souboru trvá déle
uživatelům to obvykle nevadí
13. Jak na úložiště přenášet data –
motivace
většina software předpokládá použití lokálních disků
vzdálené síťové disky se chovají jako lokální
byť nemají vysoký výkon při práci s malými soubory
je nutno podporovat škálu přístupových protokolů
pro různé případy použití
držíme se nicméně spíše klasických protokolů
14. Přenos dat na úložiště
souborové
NFSv4 (známé uživatelům MetaCentra)
rsync, scp, FTPS
obvykle autentizované systémem Kerberos
existují GUI klienti i nástroje pro příkazovou řádku pro
hlavní platformy
Globus Online – vysokorychlostní přenosy
výhledově CIFS (známý „síťový disk“ z Windows)
speciální
gridové úložiště v systému dCache
FileSender
připravujeme ownCloud
bloková zařízení (není preferováno)
15. FileSender
webová služba pro jednorázový přenos (velkých) souborů
velkých: aktuálně 500 GB
přispíváme i k jeho vývoji
http://filesender.cesnet.cz
alespoň jedna strana komunikace musí být oprávněný
uživatel infrastruktury
autentizace federací eduID.cz
oprávněný uživatel může nahrát soubor a poslat mu
oznámení
lze poslat komukoli pozvánku
testovací verze na http://filesender2.cesnet.cz
16. Speciální protokoly/aplikace
GlobusOnline
„klikací FTP na steroidech“
kopírování velkého objemu dat
řízené pomocí webového rozhraní
mezi „koncovými body“ – úložišti podporujícími
GlobusOnline nebo lokálním strojem
ownCloud
cloudové úložiště, synchronizace souborů
dCache
jeden ze systémů správy dat vyvinutých pro CERN
pro ukládání PB objemů
17. Jak se stát uživatelem – snadno
pokud
chcete využívat souborově orientované protokoly
dostačuje prefabrikovaná politika migrací dat
ukládáte jen individuální data
potřebujete ukládat nejvýše jednotky TB
tak se jen zaregistrujte na http://du.cesnet.cz
vyžaduje to ověření uživatele z akademické instituce
členství se po roce prodlužuje
jako indikace, že uživatel „ ještě ví o svých datech“
kódové označení: VO Storage
jestli to nestačí, tak. . .
18. Jak se stát uživatelem – snadno
pokud
chcete využívat souborově orientované protokoly
dostačuje prefabrikovaná politika migrací dat
ukládáte jen individuální data
potřebujete ukládat nejvýše jednotky TB
tak se jen zaregistrujte na http://du.cesnet.cz
vyžaduje to ověření uživatele z akademické instituce
členství se po roce prodlužuje
jako indikace, že uživatel „ ještě ví o svých datech“
kódové označení: VO Storage
jestli to nestačí, tak. . . ale až za chvilku
19. Správa uživatelských účtů
jednotná správa uživatelských účtů v infrastruktuře
systém Perun
proč to? zodpovídáme v projektu za to, komu služby
poskytujeme (akademické komunitě), řídíme mnoho
různých služeb
identita uživatele je podchycena centrálně
ověřena proti federaci eduID.cz
alternativní mechanismus pro nečleny federace je
k dispozici
na identitu uživatele jsou navázány jednotlivé mechanismy
přístupu k datům
uživatel má jednotné webové rozhraní pro správu účtu
20. Úložiště pro náročnější
nestačí VO Storage? založíme vám virtuální organizaci!
VO je skupina uživatelů se společným zájmem, kteří
vystupují jako celek
VO má správce, který
jedná s poskytovatelem zdrojů
rozhoduje o podmínkách členství jednotlivých uživatelů
dohoda o poskytování zdrojů mezi VO a správcem zdroje
popisuje nastavení technických parametrů
velikost poskytovaného prostoru
použité přístupové protokoly
politika ukládání dat, počty kopií/replik
VO může využívat různé typy zdrojů
21. Založení VO prakticky
napište nám na du-support@cesnet.cz
domluvíme se, co potřebujete
opravdu to potřebujeme pochopit
kolik dat máte, jak s nimi pracujete, . . .
připravíme konfiguraci úložiště
založíme virtuální organizaci
pozveme vás do ní a povýšíme na administrátora
dál si uživatele spravujete sami, vytváříte skupiny, . . .
ukládáte data přes FTP/rsync/NFSv4/...
my se staráme, aby na se vytvářely jejich repliky, . . .
22. Aktuální stav
úložiště v Plzni v pilotním provozu
přichází na něj uživatelé
individuální se mohou přihlásit do VO Storage
připojeno do MetaCentra
přímo pro uživatele z MetaCentra
FileSender v provozu
postupně obsluhujeme zájemce o náročnější využívání
vždy vyžaduje komunikaci
pro velká data (desítky TB+): nezbytná technická
znalost uživatelů
úložiště v Brně a Jihlavě – testovací uživatelé