Sistemas de Cálculo Masivo en la Universidad de Malaga

Presentación del tema: "Sistemas de Cálculo Masivo en la Universidad de Malaga"— Transcripción de la presentación:

1 Sistemas de Cálculo Masivo en la Universidad de Malaga
Guillermo Pérez Trabado Universidad de Málaga

2 Indice Los Comienzos Sacando conclusiones Claves para el éxito
La Evolución (Estado Actual) 19/06/2007 Universidad de Málaga

3 Los Comienzos Origin 2000 (1997) 16 procesadores R10000 a 195MHz
4 Gbytes de RAM 64 Gbytes de almacenamiento en disco 6,24 GFLOPS de pico Licencias de software (Gaussian, Matlab, Mathematica) Servicios Centrales de Apoyo a la Investigación (SCAI) 19/06/2007 Universidad de Málaga

4 Sacando Conclusiones (I)
Tras 10 años, la Origin está totalmente obsoleta: 16 CPUs a 195MHz, 4Gbytes de RAM Un PC Core2 Duo puede tiene un rendimiento equivalente Algunos usuarios han comprado sus propios servidores basados en un PC convencional. Sin embargo… 19/06/2007 Universidad de Málaga

5 Sacando Conclusiones (II)
La máquina ha tenido una carga del 100% desde el principio… …y a Junio de 2007 sigue teniendo una demanda de uso del ¡180% de su capacidad! ¿Cómo? 19/06/2007 Universidad de Málaga

6 Claves para el éxito (I)
¿Qué quieren los usuarios? Despreocupación total en cuanto a la instalación y mantenimiento Desde el principio se contrató un administrador dedicado exclusivamente a mantener el sistema Estabilidad de los recursos Paradas de mantenimiento muy raras y programadas con antelación picasso_203$ uptime 12:01pm up 337 days, 2:45, 11 users, load average: 16.01, 15.25, 14.84 19/06/2007 Universidad de Málaga

7 Claves para el éxito (II)
Disponibilidad de recursos masivos Mayor número de CPUs y RAM Más espacio de disco y almacenamiento terciario Licencias de software comercial Desde el principio se adquirieron licencias de software comercial no asequible para un solo grupo de investigación Seguridad Copias de seguridad de la información Control de acceso Asistencia personalizada Compilación y adaptación de aplicaciones 19/06/2007 Universidad de Málaga

8 Evolución de la Infraestructura
Nuevo edificio en el Parque Tecnológico de Andalucía Personal: 3 nuevas plazas de Técnicos para Supercomputación y Bioinformática Competencias: Centro de Supercomputación de la Universidad de Málaga (HP SuperDome de 128 CPUs) Nodo de la Red Española de Supercomputación (IBM de 512 CPUs) Plataforma Bioinformática de Andalucía (Granja de servidores para aplicaciones bioinformáticas) 19/06/2007 Universidad de Málaga

9 Renovación de Recursos Propios
Renovación de la Infraestructura de Supercomputación con un SuperDome de HP: 64 procesadores de núcleo doble con arquitectura VLIW 64 bits (Intel Montecito): Frecuencia de 1,6 GHz y caché de 18 MB 2 GB de RAM por PE (total 128 GB de memoria compartida) Disco RAID de 5 TBytes útiles Librería de cinta con 40TBytes online Funciona como un solo sistema operativo de memoria compartida entre CPUs Compiladores C, C++ y FORTRAN Sistema de gestión de colas 19/06/2007 Universidad de Málaga

10 Red Española de Supercomputación (1)
El Ministerio de Educación y Ciencia (MEC) ha creado la Red Española de Supercomputación, que consiste en una estructura distribuida de supercomputadores para dar soporte a las necesidades de supercomputación de los diferentes grupos de investigación españoles. Los nodos iniciales de esta red están situados en el BSC-CNS, en el CeSViMa (Centro de Supercomputación y Visualización de Madrid), en el IAC (Instituto de Astrofísica de Canarias) y en las Universidades de Cantabria, Málaga, Valencia y Zaragoza. El acceso de un grupo de investigación a la Red Española de Supercomputación será determinado por un Comité de Acceso único formado por científicos españoles independientes y de prestigio reconocido. 19/06/2007 Universidad de Málaga

11 Red Española de Supercomputación (2)
MareNostrum Proceso: PowerPC GHz Memoria: 20 TBytes Disco: TBytes Redes: Myrinet, Gigabit, 10/100 Sistema: Linux CeSViMa Proceso: 2408 PowerPC GHz Memoria: 4.7 TBytes Disco: TBytes Redes: Myrinet, Gigabit, 10/100 Sistema: Linux IAC, UMA, UNICAN, UNIZAR, UV Proceso: 512 PowerPC GHz Memoria: 1 TByte Disco: TBytes RedIRIS Todos los nodos estará unidos por una red privada a 1 Gbps para movimiento de datos 19/06/2007 Universidad de Málaga

12 Procesador, Blade 2 Procesadores 2 Gbytes Memoria
Daughter card Myrinet 36 Gbytes Disco 19/06/2007 Universidad de Málaga

13 Blades, blade center and blade center racks
6 chassis in a rack (42U) • 168 processors • 168GB memory Blade Center • 14 blades per chassis (7U) • 28 processors • 28GB memory • Gigabit ethernet switch JS21 Processor Blade • 2.3 GHz Power PC 970 MP • 2GB memory (512KB L2 cache) • Local SAS drive (36 GB) • 2x1Gb Ethernet on board • Myrinet daughter card 19/06/2007 Universidad de Málaga

14 Hardware/Myrinet Bandwidth: 250 Mbytes Latency: 4 micros 19/06/2007
Universidad de Málaga

15 Storage node p615 p615 FAST-T100 EXP100 GbE GbE 2 CPUs
Fiberchannel (250MB/s) FAST-T100 Controller  300MB/s 14 512GB drives  7 TB 5 LUN RAID5 3 hot spare disks sATA drawer 14 512GB drives  7 TB EXP100 19/06/2007 Universidad de Málaga

16 Red Española de Supercomputación (3)
Distribución de uso 20% uso propio para la investigación de cada centro 80% asignado por Comité de Acceso Comité de Acceso único 44 científicos españoles 4 paneles Astronomía, Espacio y Ciencias de la Tierra Biomedicina y Ciencias de las Vida Física e Ingeniería Química y Ciencia y Tecnología de los Materiales Acceso cuatrimestral Distribución de 35 millones de horas/4 meses 1000 años de cpu al mes! 19/06/2007 Universidad de Málaga

17 Planificación Temporal
El edificio ha sido entregado a finales de Mayo El IBM se termina de instalar el 11 de Julio El comité de acceso ya ha asignado los usuarios de Málaga El SuperDome de HP se instalará tras el IBM Esperamos comenzar las operaciones hacia el público a principios se Septiembre 19/06/2007 Universidad de Málaga