8 noviembre, 2006 semana de la ciencia en extremadura 2006 miguel cárdenas montes, ceta-ciemat...

11
8 Noviembre, 2006 Semana de la Ciencia en Extremadura 2006 Miguel Cárdenas Montes, CETA-CIEMAT [email protected] Aplicaciones Grid Séptimo Tutorial de Usuario de EELA

Upload: lino-borge

Post on 22-Apr-2015

0 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: 8 Noviembre, 2006 Semana de la Ciencia en Extremadura 2006 Miguel Cárdenas Montes, CETA-CIEMAT miguel.cardenas@ciemat.es Aplicaciones Grid Séptimo Tutorial

8 Noviembre, 2006

Semana de la Ciencia en Extremadura 2006

Miguel Cárdenas Montes,

CETA-CIEMAT

[email protected]

Aplicaciones GridSéptimo Tutorial de Usuario de EELA

Page 2: 8 Noviembre, 2006 Semana de la Ciencia en Extremadura 2006 Miguel Cárdenas Montes, CETA-CIEMAT miguel.cardenas@ciemat.es Aplicaciones Grid Séptimo Tutorial

Familias de Aplicaciones Grid

High-Energy Physics: LHC, Tevatron, HERA, …Biology: Medical Images, Bioinformatics, Drug DiscoveryEarth Science: Hydrology, Pollution, Climate, Geophysics, …Astrophysics: Planck, MAGICFusionComputational ChemistryRelated Projects: Finance, Digital Libraries, …New areas: nanotechnology, …

Sem

ana

de la

Cie

ncia

en

Ext

rem

adur

a 20

07. S

épti

mo

Tut

oria

l de

Usu

ario

de

EE

LA

Mérida, del 7 al 10 de Noviembre de 2006. p 2

Page 3: 8 Noviembre, 2006 Semana de la Ciencia en Extremadura 2006 Miguel Cárdenas Montes, CETA-CIEMAT miguel.cardenas@ciemat.es Aplicaciones Grid Séptimo Tutorial

Simulación

Ejemplos– LHC Monte Carlo simulation

– Fusión

– WISDOM

Características

– Los jobs son intensivos en CPU

– Gran número de jobs independientes

– Ejecutados por unos pocos usuarios (pero expertos)

Sem

ana

de la

Cie

ncia

en

Ext

rem

adur

a 20

07. S

épti

mo

Tut

oria

l de

Usu

ario

de

EE

LA

Mérida, del 7 al 10 de Noviembre de 2006. p 3

Page 4: 8 Noviembre, 2006 Semana de la Ciencia en Extremadura 2006 Miguel Cárdenas Montes, CETA-CIEMAT miguel.cardenas@ciemat.es Aplicaciones Grid Séptimo Tutorial

Nuevos Medicamentos

• WISDOM focuses on in silico drug discovery for neglected and emerging diseases.

• Malaria — Summer 2005

– 46 million ligands docked

– 1 million selected

– 1TB data produced; 80 CPU-years used in 6 weeks

• Avian Flu — Spring 2006

– H5N1 neuraminidase

– Impact of selected point mutations on eff. of existing drugs

– Identification of new potential drugs acting on mutate N1

• Fall 2006

– Extension to other neglected diseasesSem

ana

de la

Cie

ncia

en

Ext

rem

adur

a 20

07. S

épti

mo

Tut

oria

l de

Usu

ario

de

EE

LA

Mérida, del 7 al 10 de Noviembre de 2006. p 4

Page 5: 8 Noviembre, 2006 Semana de la Ciencia en Extremadura 2006 Miguel Cárdenas Montes, CETA-CIEMAT miguel.cardenas@ciemat.es Aplicaciones Grid Séptimo Tutorial

Bulk Processing

• Examples

– HEP processing of raw data, analysis

– Earth observation data processing

• Characteristics

– Widely-distributed input data

– Significant amount of input and output data

• Needs

– Job management tools (workload management)

– Meta-data services

– More sophisticated data management

Sem

ana

de la

Cie

ncia

en

Ext

rem

adur

a 20

07. S

épti

mo

Tut

oria

l de

Usu

ario

de

EE

LA

Mérida, del 7 al 10 de Noviembre de 2006. p 5

Page 6: 8 Noviembre, 2006 Semana de la Ciencia en Extremadura 2006 Miguel Cárdenas Montes, CETA-CIEMAT miguel.cardenas@ciemat.es Aplicaciones Grid Séptimo Tutorial

Responsive Applications (I)

• Examples

– Prototyping new applications

– Monitoring grid operations

– Direct interactivity

• Characteristics

– Small amounts of input and output data

– Not CPU-intensive

– Short response time (few minutes)

• Needs

– Configuration which allows “immediate” execution (QoS)

– Services must treat jobs with minimum latencySem

ana

de la

Cie

ncia

en

Ext

rem

adur

a 20

07. S

épti

mo

Tut

oria

l de

Usu

ario

de

EE

LA

Mérida, del 7 al 10 de Noviembre de 2006. p 6

Page 7: 8 Noviembre, 2006 Semana de la Ciencia en Extremadura 2006 Miguel Cárdenas Montes, CETA-CIEMAT miguel.cardenas@ciemat.es Aplicaciones Grid Séptimo Tutorial

Responsive Applications (II)

• Grid as a backend infrastructure:

– gPTM3D: interactive analysis of medical images

– GPS@: bioinformatics via web portal

– GATE: radiotherapy planning

– DILIGENT: digital libraries

– Volcano sonification

• Characteristics

– Rapid response: a human waiting for the result!

– Many small but CPU-intensive tasks

– User is not aware of “grid”!

• Needs

– Interfacing (data & computing) with non-grid application or portal

– User and rights management between front-end and grid

Sem

ana

de la

Cie

ncia

en

Ext

rem

adur

a 20

07. S

épti

mo

Tut

oria

l de

Usu

ario

de

EE

LA

Mérida, del 7 al 10 de Noviembre de 2006. p 7

Page 8: 8 Noviembre, 2006 Semana de la Ciencia en Extremadura 2006 Miguel Cárdenas Montes, CETA-CIEMAT miguel.cardenas@ciemat.es Aplicaciones Grid Séptimo Tutorial

Workflow

• Examples

– “Bronze Standard”: image registration

– Flood prediction

• Characteristics

– Use of grid and non-grid services

– Complex set of algorithms for the analysis

– Complex dependencies between individual tasks

• Needs

– Tools for managing the workflow itself

– Standard interfaces for services (I.e. web-services)

Sem

ana

de la

Cie

ncia

en

Ext

rem

adur

a 20

07. S

épti

mo

Tut

oria

l de

Usu

ario

de

EE

LA

Mérida, del 7 al 10 de Noviembre de 2006. p 8

Page 9: 8 Noviembre, 2006 Semana de la Ciencia en Extremadura 2006 Miguel Cárdenas Montes, CETA-CIEMAT miguel.cardenas@ciemat.es Aplicaciones Grid Séptimo Tutorial

Parallel jobs

• Examples

– Climate modeling

– Earthquake analysis

– Computational chemistry

• Characteristics

– Many interdependent, communicating tasks

– Many CPUs needed simultaneously

– Use of MPI libraries

• Needs

– Configuration of resources for flexible use of MPI

– Pre-installation of optimized MPI libraries

Sem

ana

de la

Cie

ncia

en

Ext

rem

adur

a 20

07. S

épti

mo

Tut

oria

l de

Usu

ario

de

EE

LA

Mérida, del 7 al 10 de Noviembre de 2006. p 9

Page 10: 8 Noviembre, 2006 Semana de la Ciencia en Extremadura 2006 Miguel Cárdenas Montes, CETA-CIEMAT miguel.cardenas@ciemat.es Aplicaciones Grid Séptimo Tutorial

Legacy Applications

• Examples

– Commercial or closed source binaries

– Geocluster: geophysical analysis software

– FlexX: molecular docking software

– Matlab, Mathematics, …

• Characteristics

– Licenses: control access to software on the grid

– No recompilation no direct use of grid APIs!

• Needs

– License server and grid deployment model

– Transparent access to data on the grid

Sem

ana

de la

Cie

ncia

en

Ext

rem

adur

a 20

07. S

épti

mo

Tut

oria

l de

Usu

ario

de

EE

LA

Mérida, del 7 al 10 de Noviembre de 2006. p 10

Page 11: 8 Noviembre, 2006 Semana de la Ciencia en Extremadura 2006 Miguel Cárdenas Montes, CETA-CIEMAT miguel.cardenas@ciemat.es Aplicaciones Grid Séptimo Tutorial

Sem

ana

de la

Cie

ncia

en

Ext

rem

adur

a 20

07. S

épti

mo

Tut

oria

l de

Usu

ario

de

EE

LA

Mérida, del 7 al 10 de Noviembre de 2006. p 11

Gracias por la atención.