Am Ende 2017 wurde HILBERT um neue GPU-Server vom Hersteller SuperMicro erweitert. Die Systeme eignen sich besonders für stark parallele GPU-Anwendungen mit sehr vielen CUDA-Cores in einem System.
Die Server besitzen eine spezielle Platine mit mehreren PCI-Switches an welchen die 10 Grafikkarten direkt angeschlossen sind und somit untereinander über die volle Geschwindigkeit von PCI 3 x16 kommunizieren können. Zu den CPUs hin teilen sich alle GPUs danach die 4 PCI3x16-Lanes. Gleiches gilt für die Verbindung zur Mellanox-Infiniband-Karte.
Es empfiehlt sich daher, dass zu Beginn des Jobs so viele Daten wie möglich auf die GPUs geladen werden und danach die Kommunikation nur noch zwischen den Karten stattfindet.
Die folgenden Programme sind bekannt dafür, dass sie auf den Systemen gut funktionieren:
- AMBER
- TensorFlow
| Jahr | 2017/18 |
|---|---|
| CPU | E5-2640 v4 @ 2.40GHz |
| RAM | 256 GB DDR4 |
| Netzwerk | 1Gbit/s Ethernet 56Gbit/s Infiniband FDR |
| Beschleuniger | 10x Nvidia GTX 1080 Ti |
| PBS | accelerator_model=gtx1080ti |
