Experiencias de Grids Computacionales en México

José Luis Gordillo Ruiz

Departamento de Supercómputo

DGSCA - UNAM

Agenda

• Algunas definiciones• Taxonomía de grids• Experiencias

– Alice, GRAMA– PRAGMA – EELA2– Delta Metropolitana

Definiciones

• Grids computacionales– Infraestructura distribuida

• Construcción colectiva de recursos computacionales

• Compartir datos, dispositivos, etc.• Colaboración

Taxonomía

• Clasificaciones grid– Por tecnología de middleware

• gLite vs “NMI”• Servicios similares

– Acceso remoto, catálogos, transferencias de archivos, creación de procesos remotos, single sign-on

• Mismas tecnologías básicas– Certificados digitales, Globus, Web-services

– Estabilidad y rapidez de implementación vs flexibilidad

Taxonomía

• Tipo de uso– Producción vs experimentación

• Tipos de proyectos asociados• Políticas de operación, acceso, uso

• Tipo de componentes– Clusters pequeños, sistemas de almacenamiento

medianos– Grandes supercomputadoras, grandes

repositorios– Dispositivos de observación y/o medición,

visualización, etc.

Primeras experiencias

• Alice-Grid– Participantes de UNAM,CINVESTAV – ¿2003?

• GRAMA (Grid Académica Mexicana)– CICESE, CINVESTAV, UdG, UAM, UNAM– 2004– Conclusiones: más ancho de banda

EstrategiasProcess to Promote Routine Use Team Science

Colaboración orientada a aplicacionesAplicaciones Middleware

Testbe de uso continuoAplicaciones de prueba

Construcción de Grid y GOC

DifusiónMiddleware clave

Workshops y organización

Intercambio de info.

Planeación y revisión

Nuevas colaboraciones

Nuevos miembros

Nuevos usuarios

Incrementar impacto

Resultados

Mejor MiddlewareUso más extendidoMás colaboraciones

Transferenciade tecnologíaEstándares

PublicacionesNuevo conocimiento

Acceso a datosEducación

10

Proyectos EELA

EELA (FP6)

• Transferir experiencias de tecnologías grid en Europa a Latinoamérica

• Crear una red de colaboración para establecer un portafolio de aplicaciones científicas y un “test-bed”

• Entrenamiento, diseminación y vinculación

EELA-2 (FP7)

• Proveer una infraestructura de grid, con los servicios necesarios para cubrir requerimientos de diversas aplicaciones

• Asegurar que los servicios sean de calidad de producción

• Asegurar la sustentabilidad de la infraestructura en el largo plazo

• Incorporar comunidades de la industria y los negocios

11

El árbol EELA-2

SA2 (Red)

SA1 (Infraestructura)

JRA1 (Servicios)

NA3 (Soporte de aplicaciones)

NA1

Aplicaciones en producción

NA2 Clientes

12

Países participantes

• 14 Países• 16 Asociados (9 JRUs)• 53 Miembros

Francia

Irlanda

Italia

Portugal

España

ArgentinaBrasilChileColombia CLARA (Internacional)CubaEcuadorMéxicoPeruVenezuela

13

Aplicaciones

http://applications.eu-eela.eu/

Earth sciences (6)

Engineering

Environmental sciencesData miningPhysicse-Learning

Biomedicine (23)

HEP

Civil ProtectionAI / Optimization

48 aps. de 10 áreas diferentes

L.A.

EU

Application Life-cycle

Participación mexicana

• 3 centros en producción– ICN,DGSCA,FES-C

• Centros recien incorporados– IBt, CCG

• En proceso de incorporación– UAEM, IPN, ITESM, BUAP, UMichoacana

Participación Mexicana (2)

•Aplicaciones–ALICE–GrENBOSS–LEMDistFE–Pierre Auger

• GRID SCHOOL EN MEXICO–Septiembre 2009

Delta Metropolitana

• Laboratorios nacionales (CONACYT)

– …la creación de un Laboratorio Nacional de cómputo de alto rendimiento, para los problemas científicos más demandantes, mediante la conformación de un GRID de capacidad excepcional en la zona metropolitana de la Ciudad de México

Delta Metropolitana

• 3 centros de supercómputo– +4000 procesadores

• Conexiones fibra óptica entre centros

Grupo GridUNAM

• CCG, FES-C, IBt, ICN, DGSCA

• Participar en proyectos de grids computacionales– Adquisición de experiencia en middleware– Llevar aplicaciones científicas a ambientes

grid– Aprovechamiento de infraestructuras

internacionales

• ¿ preguntas ?