EU EGEE Presentace projektu

Enabling Grids for E-sciencE

EU EGEE Presentace projektu

Ludek Matyska Masarykova univerzita CESNET, z.s.p.o.

www.eu-egee.org INFSO-RI-508833

Všeobecné informace Enabling Grids for E-sciencE

• EGEE – Enabling Grids for E-sciencE (in Europe) • Dvouletý projekt 6. rámcového programu EU – Koordinátor: CERN – Příspěvek EU: 35 M€ – Duben 2004 až březen 2006

• 70 partnerů – Především Evropa, ale i partneři z USA

• Cíl: Vybudovat celoevropskou Gridovou infrastrukturu širokého použití – Podcíl: Zajistit Gridovou infrastrukturu pro čísticovou fyziku

• Přes 100 tisíc procesorů a jednotky PB úložného prostoru INFSO-RI-508833

EGEE project is funded by European Commission (contract number IST-2003-508833)

2

Cíle projektu Enabling Grids for E-sciencE

• Vybudovat a provozovat robustní bezpečný Grid (produkční kvalitu), který bude motivovat majitele zdrojů (výpočetních a datových) připojit se • Dále vyvíjet, udržovat a stabilizovat middleware nezbytné pro naplnění prvního cíle • Vytvořit prostředí, které bude atraktivní pro nové uživatelské komunity a aplikace INFSO-RI-508833


3

Organizační struktura Enabling Grids for E-sciencE

• 70 partnerů rozdělených do federací

INFSO-RI-508833


4

CE Federace a řízení projektu Enabling Grids for E-sciencE

• ČR součástí středoevropské federace (CE) – Další partneři: Polsko, Rakousko, Maďarsko, Slovensko, Slovinsko a Chorvatsko – ČR zastoupena sdružením CESNET, z.s.p.o.

• Project Management Board – Po jednom zástupci z každé federace (CE zastoupená ČR) – Ředitel projektu: Bob Jones (Fabrizio Gagliardi do října 2005) – Technický ředitel: Erwin Laure (Frederic Hemmer do října 2005)

• Project Execution Board – Vedoucí jednotlivých aktivit

• Task forces

INFSO-RI-508833


5

Obsahová struktura Enabling Grids for E-sciencE

• • •

•

Vývoj – Joint Research Activities, JRA Provoz – Service Activities, SA Řízení, externí kontakty, … – Networking Activities, NA CESNET zapojen v – JRA1: vývoj middleware – SA1: Provoz EU Gridu – NA3: Školení – NA4: Podpora aplikací/uživatelů

INFSO-RI-508833


6

Infrastruktura Enabling Grids for E-sciencE

• Postaveno na clusterech počítačů s Intelovskými (nebo AMD) procesory • Projekt neplatí hardware • Poskytován partnery (majitelé zdrojů) – Motivace: sdílení zdrojů s ostatními partnery – ČR >300 procesorů (nejvíce z CE federace)

• Regional Operation Centers – – – –

Připojování nových zdrojů Sledování stavu Podpora při řešení problémů Pro CE je ústředí ROCu v Krakově (Polsko)

• GGUS – Global Grid User Support – Propojení s lokálními systémy podpory uživatelů INFSO-RI-508833


7

Middleware Enabling Grids for E-sciencE

• gLite – vlastní middleware projektu EGEE • Komponenty – – – –

User Interface Resource Broker Data management Logging and Bookkeeping

• Orientace na Data GRID a high throughput computing – Desítky tisíc úloh od jediného uživatele

INFSO-RI-508833


8

Virtuální organizace Enabling Grids for E-sciencE

• Předpoklad: Každý skupina uživatelů vytvoří vlastní Virtuální organizaci • VO je tvořena – Zdroji (počítače, úložné prostory, data, …) – Uživateli – Službami, které je spojují dohromady § gLite komponenty

• EGEE poskytuje základní nástroje na vytvoření VO • EGEE monitoruje stav služeb, tvořících VO – Registrace VO

INFSO-RI-508833


9

VOCE Enabling Grids for E-sciencE

• Virtuální organizace střední Evropy • Vytvořena zdola, tj. vlastníky zdrojů • Určena pro „nespecifické“ uživatele ze střední Evropy – – – –

Seznámení se s EGEE Gridem Možnost spouštět produkční úlohy Uživatelé se nemusí starat o infrastrukturu V případě zvýšeného zájmu možno odštěpit vlastní VO (konkrétně tematicky zaměřenou)

• Rozsah – Přes 540 procesorů, 6 TB diskové prostoru – Zdroje zatím poskytuje ČR, Slovensko, Polsko, Maďarsko

INFSO-RI-508833


10

VOCE odkazy Enabling Grids for E-sciencE

• Registrace uživatelů Registrační stránka: http://voce-register.farm.particle.cz/ Dostupné každému, kdo má certifikát uznané certifikační autority

• Dokumentace – VOCE portal

http://egee.cesnet.cz/en/voce/

• Uživatelská podpora a hlášení chyb a problémů – E-mailový alias

[email protected]

• Vlastní portál (P-GRADE) pro workflow • Vlastní UI pro zadávání a správu úloh (CHARON)

INFSO-RI-508833


11

Možnosti připojení/použití Enabling Grids for E-sciencE

• Uživatelé – Přes konkrétní existující VO § Vyhledat vhodnou VO § Domluvit se se správcem

– Přes VOCE § Postačí certifikát (v ČR vydaný CA CESNETu)

– Založení vlastní VO

• Poskytovatelé zdrojů – – – –

Nabídnout zdroje konkrétní VO (i více VO) Linuxové prostředí Instalace gLite middleware Certifikační proces (registrace u ROCu)

INFSO-RI-508833


12

Aplikace Enabling Grids for E-sciencE

• Primární zaměření: high throughput výpočty – Primárně velké množství jednoprocesorových úloh a hodně dat – Podpora pro paralelní úlohy (MPI) na jednom clusteru

• Velké aplikace/skupiny uživatelů – Částicová fyzika § Různé experimenty (CMS, Atlas, …)

– Bioinformatika § Vysoké nároky na bezpečnost

• Ostatní uživatelé – Přes 40 registrovaných VO – V CE zájem o výpočetní chemie

INFSO-RI-508833


13

EGEE II Enabling Grids for E-sciencE

• EGEE končí v březnu 2006 • Od dubna 2006 pokračování: projekt EGEE II • Identické cíle, ale posun důrazu: – Zvýšení stability middleware (samostatná testovací aktivita) – Podpora aplikací/skupin uživatelů

• • • •

Opět dva roky Příspěvek EU přes 38M€ Přes 80 organizací Struktura zachována (Federace)

INFSO-RI-508833


14

Shrnutí Enabling Grids for E-sciencE

• Projekt EGEE buduje celoevropskou produkční Gridovou infrastrukturu • Součástí vlastní vývoj middleware (gLite) • Strategie pro přidávání zdrojů a získání nových uživatelů • ČR má velmi dobrou pozici v rámci EGEE • Možnost získat přístup k produkčnímu Gridu – Možnost spolupráce s kolegy v zahraniční v rámci jednotného gridového prostředí

• Perspektiva do dubna 2008 • Probíhají diskuse ohledně zajištění celoevropského Gridu v 7. rámcovém programu INFSO-RI-508833


15

EU EGEE Presentace projektu

Recommend Documents