Ws08 Reale Tut Pres P1

Grid Tutorial
Parte 1
Introduzione alla Grid
Mario Reale
[email protected]
GARR GRID
GARR WS08-Milano-2-Aprile-2008
GARR WS08 - Milano, 2-4 Aprile
2008
1
Contenuti
•
•
•
•
1. Cos’e’ la Grid ?
2. Service oriented architecture e Web Services
3. Grid computing ed e-Science
4. il Progetto EGEE
GARR WS08 - Milano, 2-4 Aprile
2008
2
1. Cos’e’ la Grid ?
GARR WS08 - Milano, 2-4 Aprile
2008
3
La GRID, ovvero: di che stiamo parlando?
• Una GRID e’ un insieme
geograficamente distribuito di
risorse di calcolo, storage,
dati, appartenenti a domini
amministrativi diversi che
permettono l’utilizzo coerente
delle risorse
gruppi
di utenti
Flexibleaand
secure and
coordinated
resource
sharing among a
dynamic
omogeneii
appartenenti
collections of individuals, institutions
and resources
organizzazioni
virtuali.
Ian Foster
e non solo…….
GARR WS08 - Milano, 2-4 Aprile
2008
4
The Grid (Foster et. al)
“Resource sharing & coordinated problem
solving in dynamic, multi-institutional virtual
organizations”
1. Consentono l’ integrazione di risorse distribuite ed
eterogenee
2. Usando infrastruttura e protocolli general-purpose
3. Per implementare un servizio better-than-best-effort
GARR WS08 - Milano, 2-4 Aprile
2008
5
Affinche’ una GRID sia una GRID:
• Una GRID deve avere un valore aggiunto
rispetto alla somma del valore delle
singole risorse e dei singoli servizii offerti
• Una GRID non puo’ avere un singolo
punto di criticita’ (single point of failure)
– e’ una struttura intrinsecamente distribuita
– in nessun modo l’indisponibilita’ di una
specifica risorsa puo’ danneggiare il
funzionamento del resto della GRID
GARR WS08 - Milano, 2-4 Aprile
2008
6
Cosa vorremmo che fosse in
definitiva una GRID
• Una rete informatica distribuita analoga
alla rete elettrica ( da cui il nome) :
– Dovunque sono mi posso connettere ed ho
accesso immediato a CPU, storage, dati,
programmi e documenti in maniera
coordinata, efficente, concorrente ad uno
scopo preciso legato al mio ruolo e alla mia
professione
• Fare tutte queste cose in maniera user-friendly,
sicura, coordinata, consistente, utile.
GARR WS08 - Milano, 2-4 Aprile
2008
7
Cosa vorremmo che fosse in
definitiva una GRID
• Se la rete tra risorse e dominii diversi
diventasse infinitamente veloce non
saremmo piu’ capaci di distinguere i link
interni sul nostro PC da quelli esterni, che
ci connettono a risorse distribuite nel
mondo. Avremmo cosi’ accesso ad una
struttura globale, distribuita, universale di
potenza di calcolo, dati, risorse di storage.
GARR WS08 - Milano, 2-4 Aprile
2008
8
La Grid vive sulla rete
• Le GRID hanno bisogno di reti veloci e
auspicano bandwidth garantite
– Lo stesso concetto di GRID e’ uno spin-off del
concetto attuale di Internet
– Dati, risorse di calcolo ed utenti distribuiti in
tutto il mondo
• NRENs and GRIDS : due mondi che stanno
cercando di parlarsi sempre di piu’
GARR WS08 - Milano, 2-4 Aprile
2008
9
La rete
GARR WS08 - Milano, 2-4 Aprile
2008
10
GRID : l’idea
Mobile Access
G
R
I
D
Workstation
M
I
D
D
L
E
W
A
R
E
Supercomputer, PC-Cluster
Data-storage, Sensors, Experiments
Visualising
GARR WS08 - Milano, 2-4 AprileInternet, networks
2008
11
Cosa non e’ una GRID:
Una GRID non e’ un sistema proprietario e chiuso di risorse appartenenti ed ad
esclusivo uso di una data societa’ privata ( anche se fossero distribuite)
ovvero che in definitiva poi afferiscano ad un unico proprietario ed un
unico manager amministrativo
Una GRID non si puo’ basare su standard proprietari e non pubblici, non open.
Una GRID non e’ internet e nemmeno la rete :
non si occupa di nessun livello dello stack ISO/OSI nello specifico
ma interagisce con tutti – dipende dalla rete
Una GRID non e’ una struttura in cui ci sono servizi centralizzati
non c’e’ posto nemmeno per 1 solo servizio che sia centralizzato
GARR WS08 - Milano, 2-4 Aprile
2008
12
L’idea GRID
I ricercatori svolgono le loro
attivita’ indipendentemente dalla
loro locazione geografica,
interagiscono con i colleghi,
accedono ai dati e li condividono.
La Grid: centri di processamento
dei dati interconnessi dalla rete e
componenti middleware come
collante tra risorse.
Gli strumenti scientifici e gli
esperimenti forniscono un
enorme quantita’ di dati.
GARR WS08 - Milano, 2-4 Aprile
2008
13
Cosa deve fare una GRID
Autenticare gli utenti
Attribuire un ruolo
agli utenti per determinare il livello
di autorizzazione sulle risorse
Fornire agli utenti e a se stessa
una descrizione delle sue
risorse costitutive
Fornire agli utenti e a se stessa
Informazioni sull’ utilizzo
delle sue risorse
Autorizzare gli utenti su risorse
di dominii amministrativi diversi
Gestire i job degli utenti
come gli utenti preferiscono
Gestire i dati degli utenti
come gli utenti preferiscono
Consentire un uso ottimale e sicuro
delle sue risorse
Consetire livelli differenziati
di delega sull utilizzo delle risorse
-Fa tutto l’ utente
GARR WS08 - Milano, 2-4 Aprile
-Fa tutto
2008la GRID
14
Service Oriented Architecture
• Service Oriented Architecture (SOA) e’ un
architettura per lo sviluppo di applicazioni distribuite
( loosely coupled )
• In effetti SOA e’ un insieme di diversi servizi in
rete
• Questi servizi comunicano tra loro
• La comunicaizone implica
– scambio di dati
– coordinamento tra i servizi
• La SOA si basa sul paradigma dei Web Services
GARR WS08 - Milano, 2-4 Aprile
2008
15
1. GRID computing
Il paradigma dei Web Services
• Un Web Service e’ un unita’ di codice gestito che puo’ essere
chiamato da remoto usando HTTP, puo’ essere cioe’ attivato
utilizzando richieste HTTP
• I Web Services sono publicati, trovati ed utilizzati attraverso il web.
• Sono
– service
Componenti
di applicazioni
A Web
is a software
system identified by a URI, whose public interfaces
– Che comunicano
utilizzando
aperti
and bindings
are defined and
describedprotocolli
using XML.
Its definition
be discovered
by other software systems.
– Sono can
autodescrittivi
e self-contained
These
may then
interact with
the Web service in a manner prescribed
– systems
Si localizzano
utilizzando
UDDI
by its–definition,
using
Si basano
su XML
XMLbased messages conveyed by internet protocols
• La piattaforma di base per I Web Services e’ HTML e XML.
• Elementi costitutivi sono
– SOAP (Simple Object Access Protocol)
– UDDI (Universal Description, Discovery and Integration)
– WSDL (Web Services Description Language)
GARR WS08 - Milano, 2-4 Aprile
2008
16
1. GRID computing
2. Grid Computing ed
e-Science
GARR WS08 - Milano, 2-4 Aprile
2008
17
Grid Computing
•
La visione GRID si basa sull’idea di
Virtual Computing (+ information
services per individuare risorse di
computing e storage)
– Una analogia: il web: “virtual
documents” (+ un motore di
ricerca per trovarli)
•
MOTIVAZIONE: collaborare
attraverso la condivisione delle
risorse e dell’ expertise per
allargare gli orizzonti di
– Ricerca
– Commercio, Ingegneria..
– Servizi pubblici, salute,
medicina
GARR WS08 - Milano, 2-4 Aprile
2008
18
Grid : fondamento della e-Science
•
•
•
Consente un approccio basato su un sistema complessivo, unitario di
risorse
Una sfida per il nostro ingegno.
computers
Effetto > Σi (componente)i
software
GRID
sensor nets
strumenti
scientifici
ricercatori
Shared data
archives
GARR WS08 - Milano, 2-4 Aprile
2008
19
Alcuni esempi di e-Science
GARR WS08 - Milano, 2-4 Aprile
2008
20
Fisica delle particelle elementari
• Un enorme mole di dati
• Grandi collaborazioni mondiali
• Risorse di Computing e data management distribuite worldwide possedute e gestite da istituzioni diverse
• Il Large Hadron Collider (LHC)
al CERN di Ginevra,
Svizzera:
– Il piu’ potente strumento
mai costruito per
investigare la materia
GARR WS08 - Milano, 2-4 Aprile
2008
Mont Blanc
(4810 m)
Downtown Geneva
21
Gli esperimenti di LHC
ATLAS
CMS
~10-15 PetaBytes /year
~108 events/year
~103 batch and interactive users
LHCb
GARR WS08 - Milano, 2-4 Aprile
2008
22
La sfida dell’analisi dati LHC
A partire da
questo evento
Cerchiamo
queste tracce
 Quanto selezioniamo: 1 in 1013
(come cercare un ago in venti milioni di pagliai !!)
GARR WS08 - Milano, 2-4 Aprile
2008
23
Applicazioni Biomediche
Biomedical community and the Grid, EGEE User Forum, March 1st 2006, I. Magnin
GARR WS08 - Milano, 2-4 Aprile
2008
24
Data management – immagini mediche
Biomedical community and the Grid, EGEE User Forum, March 1st 2006, I. Magnin
GARR WS08 - Milano, 2-4 Aprile
2008
25
La prima data challenge biomedica: World-wide In Silico Docking
On Malaria (WISDOM)
•
•
Parametri biologici significativi
– Due applicazioni di molecular docking
(Autodock and FlexX)
– Selezionati un milione di leganti
– Ricerca di proteine legate al
responsabile della malaria
Numeri importanti :
– Trattati 46 milioni di leganti in 6
settimane
– Prodotto 1 TB di dati.
– Piu di 1000 computers in 15 paesi
usati contemporaneamente per un
totale di 80 anni-CPU
Domain distribution of Flexx run jobs
bg; 597
com; 1072
cy; 383
de; 715
uk; 8106
es; 5122
tw; 827
ru; 218
ro; 337
pl; 1877
fr; 7580
nl; 3356
it; 3687
il; 263
gr; 2004
st
Roberto Barbera, 1st EGEE
User -Forum,
CERN,
GARR WS08
Milano, 2-4
Aprile 1 March 2006
2008
26
Applicazioni di Scienze della Terra
• Earth Observations con Satelliti
– Profili di Ozono
• Fisica Terrestre
– Previsioni dei terremoti
• Idrologia
– Management delle risorse idriche
nel Mediterraneo (SWIMED)
• Geologia
– Geocluster: R&D initiative della
Compagnie Générale de Géophysique
 Numerose applicazioni gia’ portate su EGEE
EGEE tutorial, Seoul
27
Uso della Grid in industria
• Business Analysis (Risk Management, etc.)
• Business Data Processing (Data warehouse, BI, Fraud detection)
• IT Data Center (Resource utilization, Virtualization, Load
Balancing, HA)
• Image processing
• Software Development and Testing
• Utility, (Pay per use)
• Utilization of Disaster Recovery Centers
• Engineering Simulations (EDA, Cars crash, airflow, etc.)
GARR WS08 - Milano, 2-4 Aprile
2008
28
“ Effetto > Σi (componente)i ”
•
Una orchestrazione flessibile e semplificata delle risorse disponibili per una
collaborazione
– Attraverso dominii amministrativi diversi
– Le astrazioni nascondono i dettagli sulle singole risorse
• Meglio quindi uniformarsi agli standard GRID
•
Un utilizzo piu’ efficace delle risorse
– Una collaborazione condivide le sue risorse basandosi sui servizii GRID
– Le collaborazioni condividono risorse
• Ogni membro contribuisce con un impegno ragionevole (CPU,
storage)
• Ognuno beneficia di
– Etereogenita’
– Scala
GARR WS08 - Milano, 2-4 Aprile
2008
29
Le organizzazioni Virtuali (VO)
•
Cos’e’ un’ Organizzazione Virtuale (aka VO )?
– Persone in istituiti e organizzazioni di ricerca diversi intenzionati a
collaborare e condividere risorse al di la’ delle loro barriere
organizzative e logistiche
– Per esempio una collaborazione di ricerca, un esperimento
internazionale
•
Ogni GRID e’ un infrastruttura che consente a una o piu’ Organizzazioni
Virtuali (VO) di accedere a e condividere risorse
Ogni risorsa e’ esposta alla GRID attraverso un interfaccia astratta che
nasconde i suoi dettagli interni e la sua possibile etereogenita’ costitutiva
– Esistono svariate piattaforme computazionali differenti
– Multipe sorgenti (risorse) di dati e di storage
•
• Le risorse sono di proprieta’ dei membri delle VO. Si negozia
all’interno della VO la condivisione delle varie risorse tra I membri
GARR WS08 - Milano, 2-4 Aprile
2008
30
Tipica GRID di oggi
• Le Virtual
organisations
negoziano con i siti l
accesso alle loro
risorse
• Il Grid middleware su
ogni risorsa condivisa
fornisce
– Data services
– Computation
services
– Single sign-on
INTERNET
• I servizi distribuiti (sia il
middleware che le
persone) danno vita
alla GRID
GARR WS08 - Milano, 2-4 Aprile
2008
31
Tipica GRID di oggi
•
Il middleware di GRID
e’ installato e si esegue
su ogni risorsa
condivisa
– Risorse di storage dati
– Code batch su pools
di processori (in
genere)
•
•
•
Gli utenti si registrano
nelle VO
Le VO negoziano con I
vari siti per definire
l’accesso alle risorse
I vari servizii distribuiti e
le persone creano la
GRID, consentono una
log-in unica
Presso ogni sito che fornisce
risorse di calcolo:
• Local resource
management system
• (= batch queue)
• PBS
•…
INTERNET
• In termini di EGEE e piu’
in generale di GRID una
coda batch esposta si
chiama “Computing
Element”
GARR WS08 - Milano, 2-4 Aprile
2008
32
Uso di una GRID e del suo middleware
• Quando si usa un PC o una
workstation:
– Login usando username
& password
(“Authentication”)
– Si dispone di certi diritti
(“Authorisation”)
– Si eseguono programmi o
jobs
– Si gesticono files: Si
creano, leggono o
scrivono, si listano
directories
• Le varie componenti sono
collegate da un bus
• Si sta usando il sistema
operativo
• C’e’ un solo dominio
amministrativo
• Quando si usa la GRID:
– Si effettua la log-in
utilizzando credenziali
digitali – single sign-on
(“Authentication”)
– Si dispone di certi diritti
(“Authorisation”)
– Si eseguono programmi o
jobs
– Si gestiscono files…
• Componenti e servizi sono
collegati tramite internet
• Si sta usando il GRID
Middleware
• Ci sono tanti domini
amministrativi differenti
GARR WS08 - Milano, 2-4 Aprile
2008
33
Dimensioni delle GRID
International instruments,..
Institutes’ data;
Condor pools,
clusters
Livello di collaborazione
crescente. Maggiore
condivisione delle risorse
National datacentres,
HPC, instruments
International grid (EGEE)
Regional grids (e.g.
SEEGrid)
National grids
Campus grids
Desktop
GARR WS08 - Milano, 2-4 Aprile
2008
34
Elementi di base per un
middleware GRID
• Esigenze degli utenti
– single sign-on: loggarsi un’unica volta su una macchina che poi
passera’ le credenziali utente alle altre risorse.
– Potersi fidare dei proprietari delle risorse che stanno utilizzando
• Il GRID middleware fornisce, su vari livelli:
– Autenticazione: sapere chi vuole usare una data risorsa
– Autorizzazione: sapere che cosa quell’utente e’ autorizzato a fare
– Sicurezza: ridurre la vulnerabilita’ globale del sistema
– Non-ripudiabilita’: sapere chi ha fatto cosa
GARR WS08 - Milano, 2-4 Aprile
2008
35
Il ruolo delle Virtual Organizations
Compute
Center
Service
VO
Compute
Center
slide based on presentation given by Carl Kesselman
GGF Summer
School
GARRat WS08
- Milano,
2-4 2004
Aprile
2008
36
Un Riassunto : cosa sono le GRID
•
Le GRID permettono Virtual
Computing tra dominii
amministrativi diversi
– Le risorse condividono
autorizzazione e
autenticazione
– Si accede alle risorse
attraverso le loro interfaccie
astratte
Motivazioni per le GRID:
– Collaborazioni di ricerca,
diagnostica, ingneria, servizi
publici..
– Uso delle risorse e loro
condivisione
GARR WS08 - Milano, 2-4 Aprile
2008
Collaboration
Grid
Operations, Support and
training
•
Network
infrastructure
& Resource
centres
37
I maggiori progetti GRID nel mondo
•
•
•
•
•
•
•
•
•
•
•
Enabling Grids for E-sciencE (worldwide) : EGEE
Open Science Grid ( USA) OSG
Nordic Data Grid Facility (Scandinavia) NDGF
Nordugrid (Scandinavia) NORDUGRID
NAREGI (Japan) NAREGI
TeraGrid (USA) TeraGrid
PRAGMA (Pacific Rim) PRAGMA
Distributed European Infrastructure for Supercomputing Applications
(Europe) DEISA
National Grid Service (UK) NGS
Australian Partnership for Advanced Computing (Australia) APAC
China National GRID CNG
–
–
–
–
EuChinaGRID
EELA
EuMedGRID
EuIndiaGRID
GARR WS08 - Milano, 2-4 Aprile
2008
38
Infrastrutture GRID nazionali
(NGIs)
CroGrid
GARR WS08 - Milano, 2-4 Aprile
2008
39
3.EGEE
Enabling Grids for E-SciencE
GARR WS08 - Milano, 2-4 Aprile
2008
40
Informazioni su EGEE:
• Cos’e’ ?
– Scopo
– Stato
– Attivita’
• Grid services
• Riferimenti per informazioni
ulteriori
GARR WS08 - Milano, 2-4 Aprile
2008
41
EGEE – una e-infrastructure internazionale
Un programma di 4+2 anni: il
proposal originale dice
•
•
“Build, deploy and operate a
consistent, robust a large scale
production grid service that
– Links with and build on
national, regional and
international initiatives”
“Improve and maintain the
middleware in order to deliver
a reliable service to users”
Pan-European Grid
“Attract new users from
research and industry and
ensure training and support for
them “
GARR WS08 - Milano, 2-4 Aprile
2008
Operations, Support and
training
•
Collaboration
Network
infrastructure
& Resource
centres
42
La missione di EGEE
•
Infrastructure
– Manage and operate production Grid for European Research Area
– Interoperate with e-Infrastructure projects around the globe
– Contribute to Grid standardisation efforts
•
Support applications from diverse communities
– High Energy Physics
– Biomedicine
– Earth Sciences
– Astrophysics
– Computational Chemistry
– Fusion
– Geophysics
– Finance, Multimedia
– …
•
Business
– Forge links with the full spectrum of interested business partners
+ Disseminate knowledge about the Grid through training
+ Prepare for sustainable European Grid Infrastructure
GARR WS08 - Milano, 2-4 Aprile
2008
43
EGEE: Enabling Grids for E-SciencE
• EGEE e’ il maggior progetto
Europeo di Grid
Inizia ora la fase 3 (EGEE-III: 2008-2010)
• EGEE-II :
– 91 partners
– 32 paesi
– Budget: 52 Milioni di
Euro totali (37 dall’ UE)
Parner EGEE-II in USA:
– Infrastruttura
• Univ. Chicago
• Univ. South. California
di circa 50 000 CPUs Bob Jones / CERN
• Univ. Wisconsin
Distribuzione mondiale di EGEE
• RENCI
- http://www.eu-egee.org
e dei progetti correlati
GARR WS08 - Milano, 2-4 Aprile
2008
44
Le applicazioni & gli utenti di EGEE
• Applicazioni ed utenti da numerosi settori:
– Astrofisica
– Chimica Computazionale
– Scienze della Terra
– Simulazione Finanziaria
– Fisica della Fusione Nucleare
– Geofisica
– Fisica delle Alte Energie (HEP)
– Scienze della vita/Biologia
– Multimedia
– Scienza dei Materiali
~ 120 Virtual Organizations registrate….
Libro degli abstracts: http://doc.cern.ch//archive/electronic/egee/tr/egee-tr2006-005.pdf
GARR WS08 - Milano, 2-4 Aprile
2008
45
Risorse dell’infrastruttura EGEE
GARR WS08 - Milano, 2-4 Aprile
2008
Jun-07
Aug-07
Apr-07
Feb-07
Oct-06
Dec-06
Aug-06
Jun-06
Apr-06
Feb-06
Dec-05
Oct-05
Jun-05
Aug-05
Apr-05
Feb-05
Oct-04
Dec-04
Aug-04
Jun-04
Apr-04
Aug-07
Jun-07
Apr-07
Feb-07
Dec-06
Oct-06
Aug-06
Jun-06
Apr-06
Feb-06
Dec-05
Aug-04
Jun-04
Apr-04
0
Oct-05
50
Jun-05
100
Aug-05
150
Apr-05
200
Feb-05
250
Dec-04
300
Oct-04
Region Countries Sites CPU
CERN
5
12
6400
EGEE: ~250 siti, >45000 CPU
UK/I
2
25
8384
Fr al progetto
2 EGEE12
7238
24% delle risorse provengono da gruppi esterni
De/CH
2
15
4413
~>20k jobs simultanei in esecuzione permanentemente
It
1
34
4341
No. Sites
No.
NE
9 CPU 30
3289
50000
SEE
8
38
2727
45000
40000
CE
7
24
2588
35000
30000
SWE
2
18
1938
25000
20000
A-P
8
20
1884
15000
10000
Ru
2
15
738
5000
Totals
48
243 44040
0
Da Ian Bird - EGEE'07
46
46
EGEE : riassumendo
EGEE-II review successfully passed in May’07
“…having achieved an operational infrastructure delivering production
services to a broadly distributed and diverse user community is a
remarkable achievement.”
• FP6 and FP7
infrastructure
• Large-scale, productionquality
grid for e-Science
• 240 sites, 91 partners,
45 countries
• 41,000 CPUs, 5PB
• 10,000 users, 150 VOs
• 100,000 jobs/day
• 24X7
GARR WS08 - Milano, 2-4 Aprile
2008
Archeology
Astronomy
Astrophysics
Civil Protection
Comp. Chemistry
Earth Sciences
Finance
Fusion
Geophysics
High Energy Physics
Life Sciences
Multimedia
Material Sciences
…
47
Registered Collaborating Projects
25 projects have registered as of Sept 2007: web page
Infrastructures
geographical or thematic coverage
Applications
Support Actions
improved services for academia,
industry and the public
key complementary functions
GARR WS08 - Milano, 2-4 Aprile
2008
48
Progetti associati ad EGEE: infrastructure, engineering, education
Name
Description
BalticGrid
EGEE extension to Estonia, Latvia, Lithuania
EELA
EGEE extension to Brazil, Chile, Cuba, Mexico,
Argentina
EGEE extension to China
EUChinaGRID
EUMedGRID
ISSeG
EGEE extension to Malta, Algeria, Morocco, Egypt,
Syria, Tunisia, Turkey
Site security
eIRGSP
Policies
ETICS
Repository, Testing
OMII-Europe
to provide key software components for building
e-infrastructures;
Digital Library of Grid documentation, organisation
of workshops, conferences
Biomedical
BELIEF
BIOINFOGRID
Health-e-Child
ICEAGE
Biomedical – Integration of heterogeneous
biomedical
information
for improved healthcare 49
GARR WS08
- Milano, 2-4 Aprile
2008
International Collaboration
to Extend and Advance
EGEE working with collaborating
infrastructure projects
GARR WS08 - Milano, 2-4 Aprile
2008
50
Roadmap
• EGEE-III proposal submitted 20th September, european
Commission call INFRA-2007-1.2.3
– Key objective: a strong move towards a sustainable world-wide
production quality Grid infrastructure
• EGI
– Ensure the long-term sustainability of the European e-Infrastructure
independent of short project funding cycles
– Coordinate the integration and interaction between National Grid
Infrastructures (NGIs)
– Operate the production Grid infrastructure on a European level for a
wide range of scientific disciplines
GARR WS08 - Milano, 2-4 Aprile
2008
51
Struttura(attivita’) di EGEE (EGEE-III)
Networking activities
Specific Service
Activities
NA1: Management
SA1: Grid Operations
NA2: Dissemination,
Communication &
Outreach
SA2: Networking
Support
NA3: Training &
induction
SA3: Integration,
testing & Cert.
NA4: User Community
support and expansion
NA5: Policy &
International Coop.
Joint Research
Activities
NA6: Technology
Transfer & outreach to
Business
JRA1: Middleware
engineering
GARR WS08 - Milano, 2-4 Aprile
2008
52
L’infrastruttura di EGEE
Support Structures
Test-beds & Services
Certification testbeds (SA3)
Operations Coordination Centre
Pre-production service
Regional Operations Centres
Production service
Global Grid User Support
EGEE Network Operations Centre (SA2)
Infrastructure:
• Physical test-beds & services
• Support organisations & procedures
• Policy groups
Operational Security Coordination Team
Security & Policy Groups
Joint Security Policy Group
EuGridPMA (& IGTF)
Grid Security Vulnerability Group
Operations Advisory Group (+NA4)
GARR WS08 - Milano, 2-4 Aprile
2008
53
Grid management: la struttura
•
•
•
•
GARR WS08 - Milano, 2-4 Aprile
2008
Operations Coordination
Centre (OCC)
– management, oversight
of all operational and
support activities
Regional Operations Centres
(ROC)
– providing the core of the
support infrastructure,
each supporting a
number of resource
centres within its region
– Grid Operator on Duty
Resource centres
– providing resources
(computing, storage,
network, etc.);
Grid User Support (GGUS)
– At FZK, coordination and
management of user
support, single point of
contact for users
54
EGEE Production service
GARR WS08 - Milano, 2-4 Aprile
2008
55
http://gridportal.hep.ph.ic.ac.uk/rtm
18:00 on 8 March 2006
GARR WS08 - Milano, 2-4 Aprile
2008
56
Che sta succedendo in questo
momento ?
Real Time Monitor
http://gridportal.hep.ph.ic.ac.uk/rtm
GARR WS08 - Milano, 2-4 Aprile
2008
57
Ulteriori Informazioni su EGEE
•
EGEE http://www.eu-egee.org/
•
EGEE 08 Conference: 22-26 Settembre 2008 Istanbul
http://www.eu-egee.org/egee08/home.html
•
EGEE: 3rd user Forum
http://www.eu-egee.org/uf3
•
gLite http://www.glite.org/
•
Open Grid Forum http://www.gridforum.org/
•
Globus Alliance http://www.globus.org/
•
VDT http://www.cs.wisc.edu/vdt/
GARR WS08 - Milano, 2-4 Aprile
2008
58
EGEE: Conclusioni
• EGEE gestisce la piu’ grande GRID multi-VO del mondo !
• Produce il “layer di GRID” nella e-infrastructure per la ricerca, la
pubblica amministrazione e l’industria.
• Concetti chiave in EGEE:
– Sostenibilita’ , ovvero pianificazione a lungo termine
– Qualita’ da sistema di produzione
• Inoltre….
• Le GRID hanno a che vedere con le persone…..e come le
persone in organizzazioni diverse decidono di collaborare.
• ..e come questo cooperare e’ reso possibile dalle
operations, dal training e dal support e ovviamente dal
middleware ( forse il piu’ variabile tra questi elementi?)
GARR WS08 - Milano, 2-4 Aprile
2008
59