Specificații tehnice ale clusterului IMT-HPC

Serverul  IMT-HPC, construit de firma PRO SYS (www.prosys.ro) a fost instalat în 2015 și modernizat în 2021. Specificațiile hardware inițiale au fost următoarele:
1x Head echipat cu 2 procesoare Intel Xeon E5-2630LV3 și 64 GB ECC DDR3 2133 MHz RAM.
1x șasiu de tip blade SBE-710E-R75.
9x servere Blade SBI-7128RG-F, fiecare echipat cu 2 procesoare Intel Xeon E5-2670V3 si 128 GB ECC DDR3 2133 MHz RAM.
1x nod server de stocare cu 9x240GB Enterprise SSD și 13x 1.2TB SAS Enterprise HDD.
1x GPU nod echipat cu 2 procesoare model Intel Xeon E5-2670V3 și 256 GB ECC DDR3 2133 MHz RAM, un card GPU Nvidia Quadro K5200 și un card Intel® Xeon Phi™ Coprocessor 7120A. 
1x switch infiniband FDR în șasiu Blade - model SBM-IBS-F3616M.
Interconexiuni: gigabit Ethernet pentru interconectarea rețelelor administrative/externe și Infiniband FDR 56 Gbps pentru interconectarea HPC. 

Specificații software:

Sistem de operare pentru toate nodurile: CentOS 7.0
Sisteme de fișiere utilizate:
OpenZFS /BeeGFS pentru spații de date (RAID 10- 6.52T capacitate netă) 
OpenZFS /BeeGFS pentru date scratch/rapid temp (RAID 0 -1.95T capacitate netă)
Software de management HPC: Bright Cluster Manager Advanced Edition versiunea 7.0
Scheduler: SLURM
Pachete software instalate: COMSOL/Multiphysics, suita ANSYS, Nemo, Quantum ESPRESSO, Turbomole , SIESTA, software de post-procesare a datelor.
Performanță: Testul de acceptare trecut la 29 iulie 2015 cu HPL Linpack - testat numai cu CPU-uri conform specificațiilor, iar rezultatul a fost PPeak = 6,78 TeraFLOPS. in dubla precizie.

În 2021, clusterul a fost actualizat prin instalarea unui nod suplimentar, iar capacitatea de memorie pentru nodurile de calcul a fost dublată, la 256 GB RAM per nod.
De asemenea, stocarea rapidă pentru scratch/temp a fost marită la 5TB (capacitate netă) cu unități SSD rapide tip enterprise.
Sistemul de operare a fost actualizat la cea mai recenta versiune CentOS 7.9, iar HPC Management Software la cea mai recentă versiune a Bright Cluster Manager Advanced Edition (9.1).
Ppeak-ul prezent este estimat (în așteptarea testului) la ~8 TeraFLOPS, in dubla precizie.

Nici o defecțiune/defecte hardware din 2015 până în prezent. 

Nici o blocare a sistemului de fișiere/pierdere de date până în prezent.

Ultima actualizare: 19 noiembrie 2021.

Proiect finantat de catre UEFISCDI
PNIII, P4 Program 4 – Cercetare fundamentala si de Frontera, Tipul proiectului: Proiecte de cercetare exploratorie (PCE), ID proiect:
PN-III-P4-ID-PCE2020-1985, Contract nr. 53 PCE din 04/01/2021.

 

Contact

Institutul National de Cercetare- Dezvoltare pentru Microtehnologie
IMT Bucuresti
Director de proiect: Dr. Neculai PLUGARU
E-mail: [email protected]