Supercalculateur ROMEO (version 2013)

Les ressources de calcul, matériels et logiciels

 

Cluster de calcul Romeo

 

Mis en service en novembre 2013, c'est un cluster complètement hybride classé cinquième en novembre 2013 au classement Green500 des supercalculateurs les plus éco-efficaces. Au même moment, Romeo est la 151 ième machine la plus puissante du monde. 

• Date d'installation : novembre 2013
• Puissance : 254,9 TFlops
• Consommation : 81,41 kW
• Pile logicielle spécialisée HPC, RedHat 6.3

130 noeuds de calcul hybrides Bullx:

• Deux accélérateurs NVIDIA TESLA K20X
• Deux processeurs Intel Ivy Bridge @2,6 GHz, soit 16 coeurs de calcul par noeud
• 32 Go de DDR3
• Disque dur local

Réseau d'interconnexion

Tout le cluster est interconnecté par un réseau Infiniband QDR à 40 Gbits par seconde, utilisé pour l'accès aux espaces de stockages ainsi que pour les calculs MPI.

Données

• 57 To pour les données utilisateurs (/home) monté en NFS / ipOverib, 1Mo/s
• 88 To de scratch global /scratch_p via un système de fichier Lustre
• 100 To d'espace de sauvegarde
• Chaque noeud a un espace scratch local /scratch_l
• Espace de stockage OwnCloud de 120 To

Noeuds de service

• Noeud d'administration (qui gère l'authentification des utilisateurs ainsi que la surveillance de l'ensemble de la machine)
• 3 Noeuds de login Linux
• 2 Noeud de login Windows
• 4 Noeuds de gestion du stockage
• 1 Noeud de développement Xeon Phi
• 4 Noeuds de visualisation permettant d'exécuter des application graphiques de post et de pré-traitement à distance :
  • 1 noeud avec 2 Quadro 6000 / 140 Go DDR / VirtualGL
  • 1 noeud avec 2 K2 / 250 Go DDR / Technologie NVIDIA GRID
  • 2 noeuds avec cartes GTX 9xx / Portail Sysfera-DS
  • 1 noeud windows avec 2 K6000 / Technologie Scalable Graphics

Free-cooling

• Le cluster Romeo est installé dans la salle serveur ROMEO, sur le campus Moulin de la Housse à Reims. Il partage ses baies avec le cluster Grid5000 (1024 coeurs), pour un total de 8 armoires équipées de portes arrières réfrigérantes qui rejettent l'air à température ambiante.
• Quatre blocs de climatisation en Free-Cooling viennent refroidir un circuit d'eau froide à 14°

 

Noeuds de calcul hérités du cluster clovis (2010)

Les anciens noeuds ont été intégrés au nouveau cluster afin qu'il puissent bénéficier de l'infrastructure de données et de la pile logicielle la plus récente :

• 45 nœuds 12 cœurs Westmere / 24 Go DDR3
• 2 nœuds 32 cœurs Nehalem / 64 Go DDR3