Am Ende 2017 wurde HILBERT um neue GPU-Server vom Hersteller SuperMicro erweitert. Die Systeme eignen sich besonders für stark parallele GPU-Anwendungen mit sehr vielen CUDA-Cores in einem System.
Die Server besitzen eine spezielle Platine mit mehreren PCI-Switches an welchen die 10 Grafikkarten direkt angeschlossen sind und somit untereinander über die volle Geschwindigkeit von PCI 3 x16 kommunizieren können. Zu den CPUs hin teilen sich alle GPUs danach die 4 PCI3x16-Lanes. Gleiches gilt für die Verbindung zur Mellanox-Infiniband-Karte.
Es empfiehlt sich daher, dass zu Beginn des Jobs so viele Daten wie möglich auf die GPUs geladen werden und danach die Kommunikation nur noch zwischen den Karten stattfindet
Jahr | 2017/18 |
---|---|
CPU | E5-2640 v4 @ 2.40GHz |
RAM | 256 GB DDR4 |
Netzwerk | 1Gbit/s Ethernet 56Gbit/s Infiniband FDR |
Beschleuniger | 10x Nvidia GTX 1080 Ti |
PBS | accelerator_model=gtx1080ti |