Versionen im Vergleich

Schlüssel

  • Diese Zeile wurde hinzugefügt.
  • Diese Zeile wurde entfernt.
  • Formatierung wurde geändert.

GPFS im November 2020Image Added

GPFS-System von DDNImage RemovedFür Rechnungen und temporäre Dateien steht innerhalb des Clusters ein hochparalleles Filesystem auf Basis von IBM GPFS zur Verfügung. Das System besteht aus 5 10 Platten-Chassis von DDN (SS7000) zusammen mit zwei SFA12K-20 SFA14KXE Controllern und zwei vier GRIDScaler-Servern um das Dateisystem zur Verfügung zu stellen.

Auf dem System stehen derzeit 495 TByte ~4,8 PB (dies entspricht 4800 TB) Netto-Kapazität allen Nutzern zur Verfügung. Es gibt bisher keine Limitierungen oder Quotas für Nutzer. Es findet kein tägliches Backup auf Tapes statt (!!!) Das System wird regelmäßig auf ein zweites System synchronisiert - aber durch die Aufteilung in verschiedene RAID-Gruppen ist soll  das System sehr stabil gegenüber Ausfälle von einzelnen Platten, Controllern oder anderen Komponenten sein.

Datensicherung per Snapshots

Um die Daten vor versehentlichem Löschen oder überschreiben zu sichern, werden die Daten in Snapshots gesichert. Dabei wird der aktuelle Stand der Datei eingefroren und jede danach folgende Änderung wird so zu sagen in eine neue Datei geschrieben.

...

Sie können somit auf Daten zugreifen, die bereits vor 4 Wochen überschrieben oder gelöscht wurden.

Auf die Snapshots kann nur von den Compute-Nodes und dem Storage-Server aus zugegriffen werden. Die Snapshots finden sich unter /gpfs/.snapshots und sind dort nach Interval und Datum sortiert.

...

titleBeispielhafte Ausgabe

...


Auf dem Filesystem gibt es folgende Quotas, welche aus den Betriebsregeln abgeleitet sind:

  • Für eine temporäre Nutzung bekommt jede Person auf dem ungesicherten /gpfs/scratch ein Quota von 20 TB. Dateien und Ordner, die älter als 60 Tage sind, werden automatisch gelöscht. Es gibt keine Snapshots oder Backups für diese Daten.
  • Auf dem gesicherten /gpfs/project bekommt jede Person ein Quota von 10 TB für die dauerhafte Nutzung.
  • Gesicherte Projektverzeichnisse unter /gpfs/project/projects bekommen ein Quota von 20 TB, welches nicht weiter nach Nutzenden aufgeschlüsselt wird.

...