Příloha č. 2 Zadávací dokumentace Technické specifikace – část I.
Zálohovací zařízení pro repozitář jazykových dat a digitálního materiálu pro jazykový výzkum Jedná se o dodávku technického vybavení pro vybudování výpočetního clusteru a datového úložiště. Instalaci software provede zadavatel. Součástí dodávky je návrh a kompletace dodaných strojů a dalšího vybavení podle požadavků zadavatele, uvedených v zadávací dokumentaci, jejich dodání a zajištění požadovaných záručních podmínek. Součástí dodávky nejsou rackové skříně ani jiné, v zadávací dokumentaci neuvedené komponenty.
Požadované systémy: A. Výpočetní uzly clusteru B. Řídící uzly clusteru C. Datové úložiště D. Síťové prvky a propojovací kabely A: Výpočetní uzly clusteru Je požadováno dodání sady identických výpočetních serverů. Celkový počet jader výpočetních serverů: alespoň 500 fyzických jader (bez HT), tedy alespoň 1000 logických jader. 1. Provedení, určené pro montáž do skříně Rack, včetně lyžin. 2. Malé prostorové nároky (maximální hustota montáže), minimálně 2 servery/1U, tj. minimálně 2 servery v jedné 1U základní jednotce. 3. Každý server osazen 2 CPU. 4. Požadovaná architektura CPU je x86_64. 5. Minimální výkonnost 1 jádra procesoru alespoň 53.8 v CINT2006, sloupec Baseline dle spec.org. 6. Minimální výkonnost serveru (2 CPU) alespoň 503 v CINT2006 Rates, sloupec Baseline dle spec.org. 7. Server musí mít alespoň 8GB RAM na každé fyzické jádro. 8. 1x 1TB disk na server, 7200 ot., minimálně 64MB cache, pro provoz 24x7, NearLine SAS, záruka 5 let. 9. 1x SSD na server, minimalni kapacita 80GB, SATA3 6Gbps, DWPD minimálně 0,3 10.Disky (pevný 1TB disk i SSD) musí být osazeny v hot-swap rámečcích a servery musí podporovat hot-swap výměnu těchto disků za běhu (například v případě operačního systému na USB nebo bootování ze síťového image). 11.Paměť specifikace DDR4 ECC Registered, 2133MHz, min. 128 GB na server, v takovém osazení, aby bylo možné operační paměť každého serveru rozšířit identickýmí moduly na 256GB bez nutnosti již osazené moduly nahradit (zůstanou osazeny a použity). 12.Paměťové moduly mohou být maximálně dual rank. 13.V každém serveru musí zůstat volný minimálně jeden pci-e x16 a jeden další alespoň pci-e 1
x8 slot pro pozdější možnost rozšíření o dvouportovou 10Gbps síťovou kartu a GPU akcelerátor. Přijatelnou variantou je i server, který je rozšiřitelný o GPU akcelerátor pro výpočty na GPU a dva 10Gbps porty pomocí jiných interních rozhraní serveru nebo základní jednotky (integračního boxu). 14.Modul vzdálené správy přes internet (zařízení musí umožňovat KVM-over-LAN, pro tuto funkci musí mít vlastní síťový konektor) na každém serveru nebo v rámci integračního boxu. 15.Alespoň 2x rozhraní 1Gbit/s Ethernet na server. Jednotka musí být vybavena možností bootovat operační systém po 1Gbit/s Ethernetu. 16.Je požadováno redundantní napájení minimálně N+1 (výpadek jednoho zdroje nezpůsobí výpadek žádného serveru), zdroje hot-swap (vyměnitelné za běhu systému), certifikace zdrojů 80 PLUS Platinum. 17.Bootování operačního systému: konfigurovatelné pořadí zařízení, podpora bootování přes USB nebo DVD, a podpora bootování ze vzdáleného iso obrazu prostřednictvím vzdáleného managementu (Baseboard Management Controller (BMC), prostřednictvím Kernel-based Virtual Machine (KVM) po LAN). 18.Je vyžadováno vzdálené ovládání vypnutí/zapnutí/reset, vzdálená sériová konzole (serialover-lan) a konzole KVM - vše dostupné přes LAN nástroji pro operační systém Linux. Funkcionalita vypnutí/zapnutí/reset musí být dostupná nástroji na příkazové řádce použitelnými ve skriptu. 19.Všechny jednotky/servery musí být schopny plnohodnotného provozu v operačním systému (OS) Linux. OS Linux je v současné době používán na všech výpočetních kapacitách instalovaných na pracovišti zadavatele. Jedná se o rozšířený a bezplatný OS. Použití jiného OS by znamenalo velmi významné zvýšení nákladů na instalaci a správu výpočetních kapacit. Zadavatel vyvíjí vlastní software pro výzkumné účely, který je závislý na operačním systému Linux jakožto jediné kompatibilní platformě. Používané distribuce jsou Ubuntu 14.04 a Debian 7, v 64-bitové verzi. 20.Záruční doba minimálně 3 roky, next-business-day, on-site, response time 2 hodiny.
B: Řídící uzly clusteru Je požadováno dodání dvou identických serverů pro řízení clusteru. 21.Provedení, určené pro montáž do skříně Rack, včetně lyžin. 22.Malé prostorové nároky – provedení 1U nebo 2U na každý ze serverů. 23.Každý server osazen alespoň 1 CPU. 24.Požadovaná architektura CPU je x86_64. 25.Minimální výkonnost 1 jádra procesoru alespoň 53.8 v CINT2006, sloupec baseline dle spec.org. 26.Minimální výkonnost serveru (při 1 CPU) alespoň 282 v CINT2006 Rates, sloupec baseline dle spec.org. 27.2x SSD na server, minimální kapacita každého ze SSD 120GB, SATA3 6Gbps, DWPD minimálně 0,3 28.Disky (SSD) musí být osazeny v hot-swap rámečcích a servery musí podporovat hot-swap výměnu těchto disků za běhu. 29.Paměť specifikace DDR4 ECC Registered, 2133MHz, min. 32 GB na server, v takovém osazení, aby bylo možné operační paměť každého serveru rozšířit identickýmí moduly na 64GB bez nutnosti již osazené moduly nahradit (zůstanou osazeny a použity). 30.Paměťové moduly mohou být maximálně dual rank. 2
31.Modul vzdálené správy přes internet (zařízení musí umožňovat KVM-over-LAN, pro tuto funkci musí mít vlastní síťový konektor) na každém serveru nebo v rámci integračního boxu. 32.Alespoň 2x rozhraní 1Gbit/s Ethernet na server. Jednotka musí být vybavena možností bootovat operační systém po 1Gbit/s Ethernetu. 33.Je požadováno redundantní napájení minimálně N+1 (výpadek jednoho zdroje nezpůsobí výpadek žádného serveru), zdroje hot-swap (vyměnitelné za běhu systému), certifikace zdrojů 80 PLUS Platinum. 34.Bootování operačního systému: konfigurovatelné pořadí zařízení, podpora bootování přes USB nebo DVD, a podpora bootování ze vzdáleného iso obrazu prostřednictvím vzdáleného managementu (Baseboard Management Controller (BMC), prostřednictvím Kernel-based Virtual Machine (KVM) po LAN). 35.Je vyžadováno vzdálené ovládání vypnutí/zapnutí/reset, vzdálená sériová konzole (serialover-lan) a konzole KVM - vše dostupné přes LAN nástroji pro operační systém Linux. Funkcionalita vypnutí/zapnutí/reset musí být dostupná nástroji na příkazové řádce použitelnými ve skriptu. 36.Všechny jednotky/servery musí být schopny plnohodnotného provozu v operačním systému (OS) Linux. OS Linux je v současné době používán na všech výpočetních kapacitách instalovaných na pracovišti zadavatele. Jedná se o rozšířený a bezplatný OS. Použití jiného OS by znamenalo velmi významné zvýšení nákladů na instalaci a správu výpočetních kapacit. Zadavatel vyvíjí vlastní software pro výzkumné účely, který je závislý na operačním systému Linux jakožto jediné kompatibilní platformě. Používané distribuce jsou Ubuntu 14.04 a Debian 7, v 64-bitové verzi. 37.Záruční doba minimálně 3 roky, next-business-day, on-site, response time 2 hodiny.
C: Datové úložiště Je požadováno dodání sady serverů, které budou součástí Lustre úložiště. Jedná se o systém, složený ze serverů dvou typů: C.1 Metadata servery (MDS) C.2 Datové servery (OSS) Servery jedné funkční skupiny (C.1 a C.2) musí mít identickou konfiguraci. Mohou se lišit počtem osazených pevných disků.
Metadata servery Jedná se o dva identické stroje v následující konfiguraci: 38.Provedení, určené pro montáž do skříně Rack, včetně lyžin. 39.Malé prostorové nároky – provedení 1U nebo 2U na každý ze serverů. 40.Každý server osazen alespoň 1 CPU. 41.Požadovaná architektura CPU je x86_64. 42.Minimální výkonnost 1 jádra procesoru alespoň 53.8 v CINT2006, sloupec baseline dle spec.org. 43.Minimální výkonnost serveru (při 1 CPU) alespoň 282 v CINT2006 Rates, sloupec baseline 3
dle spec.org. 44.2x SSD na server, minimální kapacita každého ze SSD 400GB, SATA3 6Gbps, DWPD minimálně 10 45.2x 1TB disk na server, 7200 ot., minimálně 64MB cache, pro provoz 24x7, SATA3 6Gbps nebo NearLine SAS nebo SAS3, záruka 5 let. 46.Disky (SSD i SATA) musí být osazeny v hot-swap rámečcích a servery musí podporovat hotswap výměnu těchto disků za běhu. 47.Paměť specifikace DDR4 ECC Registered, 2133MHz, min. 64 GB na server, v takovém osazení, aby bylo možné operační paměť každého serveru rozšířit identickýmí moduly na 128GB bez nutnosti již osazené moduly nahradit (zůstanou osazeny a použity). 48.Paměťové moduly mohou být maximálně dual rank. 49.V každém serveru musí zůstat volný minimálně jeden pci-e x8 nebo pci-e x16 slot pro pozdější možnost rozšíření o například GPU akcelerator. 50.Modul vzdálené správy přes internet (zařízení musí umožňovat KVM-over-LAN, pro tuto funkci musí mít vlastní síťový konektor) na každém serveru nebo v rámci integračního boxu. 51.Alespoň 2x rozhraní 1Gbit/s Ethernet na server. Jednotka musí být vybavena možností bootovat operační systém po 1Gbit/s Ethernetu. 52.Alespon 2x rozhraní 10Gbit/s Ethernet, SFP+ na server. 53.Je požadováno redundantní napájení minimálně N+1 (výpadek jednoho zdroje nezpůsobí výpadek žádného serveru), zdroje hot-swap (vyměnitelné za běhu systému), certifikace zdrojů 80 PLUS Platinum. 54.Bootování operačního systému: konfigurovatelné pořadí zařízení, podpora bootování přes USB nebo DVD, a podpora bootování ze vzdáleného iso obrazu prostřednictvím vzdáleného managementu (Baseboard Management Controller (BMC), prostřednictvím Kernel-based Virtual Machine (KVM) po LAN). 55.Je vyžadováno vzdálené ovládání vypnutí/zapnutí/reset, vzdálená sériová konzole (serialover-lan) a konzole KVM - vše dostupné přes LAN nástroji pro operační systém Linux. Funkcionalita vypnutí/zapnutí/reset musí být dostupná nástroji na příkazové řádce použitelnými ve skriptu. 56.Všechny jednotky/servery musí být schopny plnohodnotného provozu v operačním systému (OS) Linux. OS Linux je v současné době používán na všech výpočetních kapacitách instalovaných na pracovišti zadavatele. Jedná se o rozšířený a bezplatný OS. Použití jiného OS by znamenalo velmi významné zvýšení nákladů na instalaci a správu výpočetních kapacit. Zadavatel vyvíjí vlastní software pro výzkumné účely, který je závislý na operačním systému Linux jakožto jediné kompatibilní platformě. Používané distribuce jsou Ubuntu 14.04 a Debian 7, v 64-bitové verzi. 57.Záruční doba minimálně 3 roky, next-business-day, on-site, response time 2 hodiny. Datové servery Jedná se o minimálně čtyři identické stroje v dále uvedené konfiguraci. Součet celkové hrubé kapacity pevných disků, osazených v těchto serverech pro uložení dat, musí být alespoň 576TB (SSD pro běh systému se do této kapacity nezapočítávají). Servery se mohou lišit počtem osazených pevných disků, ale disky musí být v systémech rozloženy zhruba symetricky. Povolená odchylka rozložení disků v datových serverech je do čtyř kusů od průměru (tedy od hodnoty: počet disků/počet datových serverů).
4
• • • • • • • • • • • • • • • • • • • •
•
•
Provedení, určené pro montáž do skříně Rack, včetně lyžin. Provedení maximálně 5U na každý ze serverů. Každý server osazen alespoň 1 CPU. Požadovaná architektura CPU je x86_64. Minimální výkonnost 1 jádra procesoru alespoň 53.8 v CINT2006, sloupec baseline dle spec.org. Minimální výkonnost serveru (při 1 CPU) alespoň 282 v CINT2006 Rates, sloupec baseline dle spec.org. 2x SSD na server, minimální kapacita každého ze SSD 100GB, SATA3 6Gbps, DWPD minimálně 10 Server musí mít SAS3 backplane. Pevné disky pro uložení dat musí mít kapacitu minimálně 2TB a maximálně 4TB (na jeden disk). Další požadované parametry disků: NearLine SAS, 7200 ot., minimálně 32MB cache, pro provoz 24x7, záruka 5 let. Pozor – Lustre úložiště používá filesystem ZFS a ten vyžaduje přímý přístup k pevným diskům. RAID funkce NEZAJIŠŤUJE řadič disků, ale softwarový modul jádra operačního systému! Disky je třeba připojit přes SAS2 HBA nebo SAS3 HBA a nikoli přes RAID adaptér. Disky (veškeré SSD, SAS i NearLine SAS) musí být osazeny v hot-swap rámečcích a servery musí podporovat hot-swap výměnu těchto disků za běhu. Paměť specifikace DDR4 ECC Registered, 2133MHz, min. 128 GB na server, v takovém osazení, aby bylo možné operační paměť každého serveru rozšířit identickýmí moduly na 256GB bez nutnosti již osazené moduly nahradit (zůstanou osazeny a použity). Paměťové moduly mohou být maximálně dual rank. V každém serveru musí zůstat volný minimálně jeden pci-e x8 nebo pci-e x16 slot pro pozdější možnost rozšíření o například SSD akcelerátor. Modul vzdálené správy přes internet (zařízení musí umožňovat KVM-over-LAN, pro tuto funkci musí mít vlastní síťový konektor) na každém serveru nebo v rámci integračního boxu. Alespoň 2x rozhraní 1Gbit/s Ethernet na server. Jednotka musí být vybavena možností bootovat operační systém po 1Gbit/s Ethernetu. Alespon 2x rozhraní 10Gbit/s Ethernet, SFP+ na server. Je požadováno redundantní napájení minimálně N+1 (výpadek jednoho zdroje nezpůsobí výpadek žádného serveru), zdroje hot-swap (vyměnitelné za běhu systému), certifikace zdrojů 80 PLUS Platinum. Bootování operačního systému: konfigurovatelné pořadí zařízení, podpora bootování přes USB nebo DVD, a podpora bootování ze vzdáleného iso obrazu prostřednictvím vzdáleného managementu (Baseboard Management Controller (BMC), prostřednictvím Kernel-based Virtual Machine (KVM) po LAN). Je vyžadováno vzdálené ovládání vypnutí/zapnutí/reset, vzdálená sériová konzole (serialover-lan) a konzole KVM - vše dostupné přes LAN nástroji pro operační systém Linux. Funkcionalita vypnutí/zapnutí/reset musí být dostupná nástroji na příkazové řádce použitelnými ve skriptu. Všechny jednotky/servery musí být schopny plnohodnotného provozu v operačním systému (OS) Linux. OS Linux je v současné době používán na všech výpočetních kapacitách instalovaných na pracovišti zadavatele. Jedná se o rozšířený a bezplatný OS. Použití jiného OS by znamenalo velmi významné zvýšení nákladů na instalaci a správu výpočetních 5
kapacit. Zadavatel vyvíjí vlastní software pro výzkumné účely, který je závislý na operačním systému Linux jakožto jediné kompatibilní platformě. Používané distribuce jsou Ubuntu 14.04 a Debian 7, v 64-bitové verzi. • Záruční doba minimálně 3 roky, next-business-day, on-site, response time 2 hodiny.
D: Síťové prvky a propojovací kabely Součástí dodávky musí být také síťové prvky, kabely pro propojení serverů ze sekcí A, B a C a napájecí kabely s koncovkami C14 nebo C20. Datové úložiště ze sekce C je nutné propojit 10Gbps switchi se SFP+ porty. Přesné požadavky se liší podle typu řešení: V případě switchů, integrovaných do boxů s výpočetními servery, jsou vyžadovány následující vlastnosti: • Switche musí poskytnout minimálně dva 10Gbps SFP+ porty pro každý ze serverů v sekci C. Současně musí poskytovat redundanci, aby výpadek jednoho ze switchů nezpůsobil výpadek konektivity mezi servery ze sekcí A,B a C. • Musí také poskytovat dostatek dalších 1Gbps a 10Gbps SFP+ portů k propojení boxů s výpočetními servery ze sekce A tak, aby mohly tyto servery mezi sebou komunikovat plnou rychlostí (tedy 2x1Gbps na každý výpočetní server). • Switche musí poskytovat alespoň dva 1Gbps porty pro každý z výpočetních i řídících serverů v sekcích A a B a jeden 1Gbps port pro každý ze serverů v sekci C. • Každý ze serverů ze sekcí A a B musí být schopen komunikovat plnou rychlostí. • Switche musí mít dva volné 10Gbps SFP+ porty pro redundantní připojení do síťové infrastruktury servrovny. • Veškeré vybavení ze sekcí A,B a C bude nainstalováno odběratelem do dvou rackových skříní, umístěných vedle sebe. • Součástí dodávky je veškerá kabeláž, potřebná ke splnění výše uvedených požadavků a plán zapojení. Plán zapojení může být nahrazen montáží celého systému (hardware) ze strany dodavatele. • Záruční doba minimálně 3 roky V případě externích switchů je vyžadována následujíci konfigurace: • 2x L3 switch s porty 24x10Gbps SFP+ • switchovací kapacita alespoň 480Gbps • top-of-rack provedeni s vybavením pro předo-zadní chlazení (studená/horká ulička) • podpora 802.1q vlanu • podpora QoS • podpora 802.1x na portech • podpora ipv6 • podpora LACP • podpora JumboFrame • CLI management pres ssh • podpora SNMP v2,v3 6
• redundantni zdroj, hot-swap • Záruční doba minimálně 3 roky
• 2x L3 switch s porty 48x1Gbps + 4x10Gbps SFP+ • switchovací kapacita: 1:1 neblokující • top-of-rack provedeni s vybavením pro předo-zadní chlazení (studená/horká ulička) • podpora 802.1q vlanu • podpora QoS • podpora 802.1x na portech • podpora ipv6 • podpora LACP • podpora JumboFrame • CLI management pres ssh • podpora SNMP v2,v3 • Záruční doba minimálně 3 roky
7
Kabeláž, potřebná pro propojení síťových prvků a serverů • Veškeré vybavení ze sekcí A, B a C bude nainstalováno odběratelem do dvou rackových skříní, umístěných vedle sebe. • Součástí dodávky je veškerá kabeláž, potřebná k propojení serverů a switchů ze sekcí A,B a C a plán zapojení. Plán zapojení může být nahrazen montáží celého systému (hardware) ze strany dodavatele. • SFP+ DA kabely vhodné délky pro propojení switchů k zajištění redundance/stohování • Dostatečný počet SFP+ DA kabelů vhodných délek pro připojení výpočetních serverů, pokud jsou umístěny v boxech s 10Gbps uplinky (uplink boxů musí být realizován s dostatečnou průchodností, tedy minimálně 2x1Gbps na každý v boxu osazený server). • 2x 3m SFP+ DA kabel na každý ze serverů ze sekce C • 2x 7m SFP+ DA kabel pro 10Gbps uplink (připojení do infrastruktury servrovny) • 48x oranžový patch kabel vhodných délek pro připojení managemnent portu každého dodaného serveru na 1Gbps port switche přímo v racku • 48x černý patch kabel vhodných délek pro připojení druhého 1Gbps portu každého dodaného serveru na 1Gbps port switche přímo v racku
8
Výpočetní uzel pro vysoce náročné matematicko-statistické výpočty v oblasti modelování přirozeného jazyka Jedná se o dodávku technického vybavení pro vybudování nového uzlu mezinárodního archivu audiovizuálních dat s automatickou replikací dat mezi nově budovaným uzlem a ostatními, již existujícími, uzly této sítě. Detaily o celém projektu jsou k dispozici na jeho webových stránkách: http://ufal.mff.cuni.cz/cvhm/vha-info.html Budovaná infrastruktura umožní plnou dostupnost celého archivu, tedy více než 4PB dat, v ČR.
Rámcové požadavky a podmínky: Archivační systém bude umístěn v nově upravované serverovně. Bude se skládat z několika základních subsystémů, propojených do samostatného funkčního celku. Základem, zajišťujícím uložení, zpřístupnění, replikaci a kontrolu dat, bude hierarchické úložiště (HSM). Toto úložiště se musí skládat z robotické páskové knihovny s požadovanou kapacitou přes 4PB, z diskového pole o kapacitě přes 200GB, fungujícího jako cache pro používaná online data a dvojice serverů, zajišťujících s redundancí fungování HSM, přístup k datům, replikaci vůči ostatním uzlům sítě archivu a další požadované vlastnosti. Celý systém musí být doplněn dvojicí webových serverů, které budou přistupovat k datům HSM přes filesystém a exportovat je pomocí webových služeb. Součástí dodávky budou také redundantní 16Gbps FibreChannel switche a potřebné propojovací a napájecí kabely. Podrobná specifikace požavků je uvedena v následujících kapitolách, stejně jako popis implementace již existujících uzlů sítě archivů, vůči kterým je vyžadována certifikací garantovaná plná kompatibilita z hlediska replikace, ukládání dat a dalších dále uvedených parametrů, nutných pro chod systému jako celku. Tento popis je v sekci D. Pro archivační systém budou k dispozici maximálně dvě rackové skříně v serverovně a prostor pro páskovou knihovnu ve vedlejší, klimatizované, místnosti. Obě lokace budou propojeny optickými vlákny a připraveno bude i napájení – v servrovně PDU, pod podlahou v místnosti pro páskovou knihovnu pak kabel bez zakončení.
Upozornění: Všechny komponenty systému musí být možno dopravit (zajistí dodavatel) přístupovou trasou do konečných prostor.
9
Limitující jsou následující místa: •
vstupní dveře do budovy: 90x197 cm
•
chodba o šířce 125 cm
Požadované systémy: A. Velkokapacitní datové úložiště (Hierarchical Storage Management, HSM) B. Webové servery pro přístup k datům v archivu C. Síťové prvky a propojovací kabely
A: Velkokapacitní datové úložiště (Hierarchical Storage Management, HSM) Je požadováno dodání sady systémů, které budou tvořit HSM úložiště. HSM bude složeno z následujících subsystémů: A.1 Obecné požadavky A.2 Metadata servery A.3 Datové úložiště – disková cache A.4 Modulární pásková knihovna A.1 Obecné požadavky • Instalace musí být zajištěna pracovníky s odpovídajícím technickým oprávnením pro provedení instalace. Dodavatel musí doložit odpovídající odborné certifikáty. • Implemetace musí být řízena pracovníky s odpovídajícím oprávněním pro oblast řízení projektů. Dodavatel musí doložit odpovídající odborné certifikáty. • Součástí dodávky je úplná prováděcí dokumentace v českém nebo anglickém jazyce. • Součástí dodávky je technická dokumentace k dodávanemu HW a SW. • Dodavatel bude po dobu záruky poskytovat bezplatně služby HELPDESK v českém jazyce v režimu 24/7. • Dodavatel bude po dobu záruky poskytovat bezplatně podporu na HW a SW v českém jazyce v režimu 24/7. • Záruka na celý HSM systém (A.2, A.3, A.4) musí být poskytnuta minimálně v délce trvání 3 roky, on-site, NBD, response time 2 hodiny. • Dodavatel musí garantovat dostupnost pozáručních servisních služeb po 10 let od dodání systému. • Součástí dodávky systému musí být i minimálně dvě školení technického personálu (v rozsahu až tři osoby) na úroveň “pokročilá administrace” (Backup, Recovery, Replikace, Maintenance, Failover, Import/Export dat). Školení bude provedeno v dohodnuté termíny, po zprovoznění celého systému. 10
•
Celý HSM systém včetně satelitních systémů (kapitoly A,B,C) musí být dodán jako samostatný funkční celek, kompletně nainstalovaný, oživený a připravený na import dat. Veškeré k tomu potřebné práce, propojovací a napájecí kabely a drobný montážní materiál musí být již součástí nabídkové ceny.
Podmínky realizace, dané nutností zapojení do sítě již existujících archivů: Jelikož se jedná o připojení do již existující sítě uzlů archivu, je zcela nutné dodržet plnou certifikací garantovanou kompatibilitu se systémy ostatních uzlů. Jedná se zejména o splnění následujících požadavků: •
certifikovaná kompatibilita replikačních mechanismů
•
certifikovaná kompatibilita technologie ukládání dat a oprávnění
•
import a export dat na páskách StorageTek T10000 T2, které se používají pro offline přenos dat mezi uzly sítě při masivnějších aktualizacích obsahu
Zadavatel má již k dispozici kopii celého archivu na 500ks pásek StorageTek T10000 T2, vyexportovanou z master úložiště v USA. Dodaný systém musí být schopen splnit jednu z následujících dvou sad podmínek: A.
Musí být plně komatibilní s páskami StorageTek T10000 T2 a zadavatel je po dodání a oživení celého systému dodavatelem importuje do systému.
nebo B.
Dodavatel kompletně zajistí: •
přenos dat z existujících pásek StorageTek T10000 T2 do systému
•
v rámci dodávky nahradí kapacitu 500 pásek StorageTek T10000 T2 minimálně stejnou kapacitou pásek v dodaném systému
•
nativní kapacita jedné pásky bude minimálně 8TB
•
dodá k základnímu systému vybavení, potřebné k importu dat z pásek StorageTek T10000 T2 a exportu dat na tato média
A.2 Metadata servery Je požadováno dodání dvou identických metadata serverů s nastaveným manuálním failoverem. Tyto servery budou současně sloužit také jako řídící servery archivačního systému. Servery musí být vybaveny všemi potřebnými trvalými licencemi a nástroji, umožňujícími provoz systému dále zejména: • přístup k datům na HSM • řízení HSM • replikaci dat vůči ostatním HSM v existující síti archivů (jen nástroje a trvalá lincence, pokud je potřeba) 11
• řízení a správu páskové knihovny (včetně SW pro periodickou kontrolu dat na páskách, automatického nahrazování vadných médií a opravy dat pomocí replikačních mechanizmů) • řízení a správu diskové cache • export dat HSM pomocí protokolů NFS, CIFS, FTP a FC • další funkce, vyplývající ze specifikací jednotlivých částí systému
Servery musí splňovat následující požadavky: • Provedení, určené pro montáž do skříně Rack, včetně lyžin. • Malé prostorové nároky 1U nebo 2U • Každý server osazen 1 CPU. • Požadovaná architektura CPU je x86_64. • Minimální výkonnost 1 jádra procesoru alespoň 55.9 v CINT2006, sloupec Baseline dle spec.org. • Minimální výkonnost serveru (1 CPU) alespoň 340 v CINT2006 Rates, sloupec Baseline dle spec.org. • 2x 600GB disk na server, minimálně 10000 ot., minimálně 64MB cache, pro provoz 24x7, SAS, záruka 5 let. • Disky musí být osazeny v hot-swap rámečcích a servery musí podporovat hot-swap výměnu těchto disků za běhu (například v případě operačního systému na USB nebo bootování ze síťového image). • Paměť specifikace DDR4 ECC Registered, 2133MHz, min. 32 GB na server, v takovém osazení, aby bylo možné operační paměť každého serveru rozšířit identickýmí moduly na 64GB bez nutnosti již osazené moduly nahradit (zůstanou osazeny a použity). • Paměťové moduly mohou být maximálně dual rank. • V každém serveru musí zůstat volný minimálně jeden pci-e x16 slot pro pozdější možnost rozšíření. • Modul vzdálené správy přes internet. • Alespoň 2x rozhraní 1Gbit/s Ethernet na server. Jednotka musí být vybavena možností bootovat operační systém po 1Gbit/s Ethernetu. • Alespoň 4x rozhraní 16Gbps FibreChannel • Alespoň 2x rozhraní 10Gbps, SFP+ • Redundantní zdroje hot-swap (vyměnitelné za běhu systému), certifikace zdrojů 80 PLUS Platinum. • Bootování operačního systému: konfigurovatelné pořadí zařízení, podpora bootování přes USB a podpora bootování ze vzdáleného iso obrazu. • Je vyžadováno vzdálené ovládání vypnutí/zapnutí/reset, dostupné přes LAN nástroji pro operační systém Linux. Funkcionalita vypnutí/zapnutí/reset musí být dostupná nástroji na příkazové řádce použitelnými ve skriptu. 12
• Součástí dodávky je také instalace operačního systému, ovladačů a licencí, včetně připojení dat z HSM. Oba servery musí mít zalicencovány všechny dodané hw prostředky. • Operační systém musí být 64-bitový, unixového typu (Linux nebo Unix). Preferovanou variantou je Linux. OS Linux je v současné době používán na všech výpočetních kapacitách instalovaných na pracovišti zadavatele. Jedná se o rozšířený a bezplatný OS. Použití jiného OS na těchto serverech by znamenalo velmi významné zvýšení nákladů na instalaci a správu. Zadavatel vyvíjí vlastní software pro výzkumné účely, který je závislý na operačním systému Linux jakožto jediné kompatibilní platformě. Používané distribuce jsou Ubuntu 14.04, Debian 7 a RedHat Advanced server v 64-bitové verzi. Pokud je nutná licence na operační systém, je potřeba dodat servery s trvalou licencí. Pokud není trvalá licence výrobcem OS poskytována, pak s nejdelší poskytovanou variantou. • Součástí instalace je také dokumentace instalovaných komponent a popis struktury připojení systému k HSM. • Instalace webových služeb (apache2) pro přístup k datům bude provedena zadavatelem.
A.3 Datové úložiště – disková cache Datové úložiště bude sloužit jako rychlé úložiště pro on-line data HSM. Technické požadavky: • Provedení, určené pro montáž do skříně Rack, včetně lyžin. • Plně 64-bitový systém. • Redundantní zdroje hot-swap (vyměnitelné za běhu systému), certifikace zdrojů 80 PLUS Platinum nebo ekvivalentní. • Plně redundantní diskové pole (minimálně dva conrollery) • Minimální velikost cache pro čtení: 64GB (rozšiřitelnost na 128GB) • Minimální velikost cache pro zápis: 16GB (rozšiřitelnost na 32GB) • Minimální počet storage procesorů: 4, minimální frekvence 2GHz • Minimální počet jader storage procesoru: 24 • Alespoň 24x 900GB disk, minimálně 10000 ot., minimálně 64MB cache, pro provoz 24x7, SAS, záruka 5 let. • Alespoň 48x 4TB disk, 7200 ot., minimálně 64MB cache, pro provoz 24x7, SAS-2, záruka 5 let. • Disky musí být osazeny v hot-swap rámečcích a servery musí podporovat hot-swap výměnu těchto disků za běhu. • Paměť specifikace DDR4 ECC Registered, min. 128 GB, v takovém osazení, aby bylo možné operační paměť každého serveru rozšířit identickýmí moduly na 256GB bez nutnosti již osazené moduly nahradit (zůstanou osazeny a použity). • Vzdálená správa přes počítačovou síť. • Alespoň 4x rozhraní 16Gbps FibreChannel 13
• Alespoň 2x rozhraní 10Gbps, SFP+ • Redundantní zdroje hot-swap (vyměnitelné za běhu systému), certifikace zdrojů 80 PLUS Platinum. • Je vyžadováno vzdálené ovládání vypnutí/zapnutí/reset, dostupné přes LAN nástroji pro operační systém Linux. Funkcionalita vypnutí/zapnutí/reset musí být dostupná nástroji na příkazové řádce použitelnými ve skriptu. • Součástí dodávky je také instalace operačního systému, ovladačů a potřebných licencí, včetně připojení dat z HSM. Server musí mít zalicencovány všechny dodané hw prostředky. • Pole musí mít pro celou svou kapacitu dostupné a zalicencované funkce: snapshot, klon • Pole musí podporovat a mít zalicencovánu funkcionalitu QoS (řazení IO požadavků podle důležitosti dat) • Pole musí podporovat a mít zalicencovanou funkcionalitu ochrany informace T10-PI • Pole musí mít zalicencovanou funkcionalitu autotiering pro celou svou nainstalovanou kapacitu a to přes média typu SLC SSD, eMLC SSD, výkonostní disky, kapacitní disky. Maximální velikost bloku pro autotiering: 1MB • Pole musí podporovat minimálně následující typy disků: 300GB SAS-2 10k RPM 2,5'' 900GB SAS-2 10k RPM 2,5'' 4TB SAS-2 7.2k RPM 3,5'' 400GB SLC SSD 2,5'' 1.6TB eMLC SSD 2,5'' • Pole musí být rozšiřitelné na minimálně 240 disků.
A.4 Modulární pásková knihovna Modulární pásková knihovna bude sloužit jako pomalé úložiště HSM. Data, se kterými se bude pracovat, budou automaticky přesouvána do diskové cache HSM, realizované datovým úložištěm z kapitoly A.3. Pro páskovou knihovnu bude připravena klimatizovaná místnost. Přívod napájení a optická vlákna pro datové spoje budou zavlečena dvojitou podlahou od rackové skříně, kde budou umístěny servery, diskové úložiště a FibreChannel switche. Požadavky na páskovou knihovnu: • redundantní zdroje hot-swap (vyměnitelné za běhu systému), certifikace zdrojů 80 PLUS Platinum nebo ekvivalentní • • • • • •
možnost budoucího rozdělení knihovny na více samostatně využitelných nezávislých oddílů možnost budoucího rozšíření o duálního robota a duální elektroniku pro řízení knihovny operační panel/konzole promonitorování a správu modulární páskové knihovny data management, založený na konfigurovatelných storage politikách možnost přímého sdílení souborového systému s dalšími klienty pomocí sítě SAN neomezený počet souborů a dynamická alokace i-nodů v souborovém systému (předpokládané uložení až desítek milionů souborů) 14
• • • •
WORM funkcionalita na úrovni přístupového rozhraní (souborového systému) nativní kapacita páskových médií alespoň 8TB uncorrectable bit error rate pro páskovou mechaniku nižší než 10-18 archivace dat na páskových médiích v otevřeném formátu tak, aby je bylo v případě potřeby možno přečíst bez archivačního software • minimální požadovaná kapacita archivu na páskových médiích (bez jakékoli komprese na úrovni HW či SW): 4250TB • Maximální kapacita archivu: alespoň 10PB • počet páskových mechanik v rámci knihovny: 4 • Požadovany počet fyzických slotů v páskové knihovně: 950 • Požadovaný počet zalicencovaných slotů v páskové knihovně: 500 (v případě nahrazení pásek StorageTek T10000 T2 jiným typem je třeba tuto hodnotu upravit tak, aby pokrývala odpovídající kapacitu na osazených páskách) • Požadovaný počet čistících médií: 5 • Požadovaný počet rezervních datových médií: 20 • konektivita: 4x 16Gbps FibreChannel
B: Webové servery pro přístup k datům archivu Je požadováno dodání dvou identických webových serverů. Tyto servery musí být vybaveny všemi potřebnými trvalými licencemi, umožňujícími provoz systému a přístup k datům na HSM. Dále musí splňovat následující požadavky: • Provedení, určené pro montáž do skříně Rack, včetně lyžin. • Malé prostorové nároky 1U nebo 2U • Každý server osazen 2 CPU. • Požadovaná architektura CPU je x86_64. • Minimální výkonnost 1 jádra procesoru alespoň 58 v CINT2006, sloupec Baseline dle spec.org. • Minimální výkonnost serveru (2 CPU) alespoň 870 v CINT2006 Rates, sloupec Baseline dle spec.org. • 4x 600GB disk na server, 10000 ot., minimálně 64MB cache, pro provoz 24x7, SAS, záruka 5 let. • Disky musí být osazeny v hot-swap rámečcích a servery musí podporovat hot-swap výměnu těchto disků za běhu (například v případě operačního systému na USB nebo bootování ze síťového image). • Paměť specifikace DDR4 ECC Registered, 2133MHz, min. 32 GB na server, v takovém osazení, aby bylo možné operační paměť každého serveru rozšířit identickýmí moduly na 64GB bez nutnosti již osazené moduly nahradit (zůstanou osazeny a použity). • Paměťové moduly mohou být maximálně dual rank. • V každém serveru musí zůstat volný minimálně jeden pci-e x16 slot pro pozdější možnost rozšíření. 15
• Modul vzdálené správy přes internet. • Alespoň 2x rozhraní 1Gbit/s Ethernet na server. Jednotka musí být vybavena možností bootovat operační systém po 1Gbit/s Ethernetu. • 2x rozhraní 16Gbps FibreChannel • 2x rozhraní 10Gbps, SFP+ • Redundantní zdroje hot-swap (vyměnitelné za běhu systému), certifikace zdrojů 80 PLUS Platinum. • Bootování operačního systému: konfigurovatelné pořadí zařízení, podpora bootování přes USB a podpora bootování ze vzdáleného iso obrazu. • Je vyžadováno vzdálené ovládání vypnutí/zapnutí/reset, dostupné přes LAN nástroji pro operační systém Linux. Funkcionalita vypnutí/zapnutí/reset musí být dostupná nástroji na příkazové řádce použitelnými ve skriptu. • Servery musí být schopny plnohodnotného provozu v operačním systému (OS) Linux. OS Linux je v současné době používán na všech výpočetních kapacitách instalovaných na pracovišti zadavatele. Jedná se o rozšířený a bezplatný OS. Použití jiného OS na těchto serverech by znamenalo velmi významné zvýšení nákladů na instalaci a správu. Zadavatel vyvíjí vlastní software pro výzkumné účely, který je závislý na operačním systému Linux jakožto jediné kompatibilní platformě. Používané distribuce jsou Ubuntu 14.04, Debian 7 a RedHat Advanced server v 64-bitové verzi. • Součástí dodávky je také instalace operačního systému Linux (64-bitová verze Ubuntu,Debian nebo RedHat Advanced server) a potřebných ovladačů. Dále pak dodání a instalace software a licencí pro připojení dat z HSM, včetně připojení HSM dat. • Pokud je nutná licence na operační systém, je potřeba dodat servery s trvalou licencí. Pokud není trvalá licence výrobcem OS poskytována, pak s nejdelší poskytovanou variantou. • Součástí instalace je také dokumentace instalovaných komponent a popis struktury připojení systému k HSM. • Instalace webových služeb (apache2) pro přístup k datům bude provedena zadavatelem. • Záruční doba minimálně 3 roky, next-business-day, on-site, response time 2 hodiny.
C: Síťové prvky a propojovací kabely Celý systém je třeba propojit 16Gbps FibreChannel technologií. Propojení jednotlivých komponent musí být redundantní, s odolností proti výpadku jednoho spoje a jednoho FibreChannel switche. Součástí dodávky jsou také kabely pro propojení všech prvků (optická vlákna mezi místností, kde bude umístěna pásková knihovna, a rackovou skříní, kde budou servery, budou připravena předem zadavatelem). Na síťové prvky je požadována záruka minimálně 3 roky, on-site, NBD.
16
D. Dodatky – popis systému na ostatních uzlech sítě archivů Existující uzly sítě archivů jsou v USA a nově také ve Francii (ve výstavbě). Všechny jsou budovány podle jednotné konfigurace: Základem systému je Oracle Hierarchical Storage Manager (dříve označovaný jako StorageTek Archive Manager SAM QFS), spolu s funkcionalitou sdíleného SAN (FC) filesystému StorageTek QFS a Oracle modulární knihovnou Tape Storage SL3000, za použití pásek T10kD. HSM je provozováno na dvojici x86_64 serverů, které slouží také jako metadata servery pro QFS sdílený SAN filesystém. Tyto servery jsou nastaveny v režimu manual-failover. Každý uzel se dále skládá ze dvojice webových serverů, na kterých je nainstalována licence pro QFS klienta. Tento klient umožňuje webovým serverům přístup k datům v archivačním systému a zpřístupňuje je pomocí webových služeb dál. Běžná replikace dat se provádí přes internetové spojení replikačním mechanismem HSM. V případě větších aktualizací, jako je vydání dat v novém formátu, dochází k distribuci sady pásek, které se naimportují na jednotlivých uzlech. Například na začátku roku 2014 došlo ke kompletní výměně dat v archivech. Přenos pres internetové spojení by v takovém případě trval nepřiměřeně dlouho.
17
