A new partition with 14 compute nodes holding NVIDIA H200 GPUs with 141 GB HBM memory is installed to satisfy the growing needs for AI-workloads at NHR@ZIB.

Das NHR@ZIB erweitert seine Rechnerpartition CPU Genoa für das System Lise. Die neue Partition besteht dann zusammen aus 250 CPU-Knoten. Jeder Rechenknoten besitzt zwei CPUs, jede CPU ist vom Typ AMD EPYC 9654 Genoa mit 96 Rechenkernen, und 1,5 TB Hauptspeicher. Das 400 Gb/s InfiniBand-Kommunikationsnetzwerk ist so konfiguriert, dass über geteilte IO Interfaces effektiv 200 Gb/s pro Knoten erreicht werden können.

Das NHR@ZIB hat ein neues paralleles Speichersystem für die Dateisysteme Home und Work auf System Lise in Betrieb genommen. Damit haben alle Projekte zusammen genommen Zugriff auf 20 PByte Festplattenspeicher über das parallele Dateisystem IBM Storage Scale. Die Dateisysteme verfügen über Volumen- und Inode-Quotas für groups und users. Die Quotas mit Soft- und Hard-Limits sowie grace periods können für Verzeichnisse konfiguriert werden.

Das NHR@ZIB nimmt eine neue Rechnerpartition für das System Lise in Betrieb. Es besteht aus 168 CPU-Knoten. Jeder Rechenknoten besitzt zwei CPUs, jede CPU ist vom Typ AMD EPYC 9654 Genoa mit 96 Rechenkernen, und 1,5 TB Hauptspeicher. Das 400 Gb/s InfiniBand-Kommunikationsnetzwerk ist so konfiguriert, dass über geteilte IO Interfaces effektiv 200 Gb/s pro Knoten erreicht werden können. Für eine Testphase ist die AMD CPU-Partition kostenfrei für die Nutzerinnen und Nutzer des NHR@ZIB verfügbar.

Das HPC-System Lise konnte sich mit seiner Installation des Speichersystems DAOS auf Platz 3 in der „10 node production“-Liste platzieren. Für mehr Informationen lesen Sie bitte den Artikel auf der ZIB-Webseite.

ZIB, ParTec and Next Silicon are excited to invite you to the upcoming technical Accelerator Hackathon. Join us in this 1.5 day hackathon to learn about the exciting new HPC approach from NextSilicon. This deep dive covers the programming environment, profiling analysis and optimization approach with dedicated hands-on sessions to allow participants to experience this novel hardware directly. The hackathon will take place

• at Zuse Institute Berlin
• from March 21st to March 22nd 2024.

For more information, please visit the workshop page.

Introduction to parallel programming with MPI and OpenMP
March 11-15 2024

lecturer: Matthias Läuter
location: Technische Universität Berlin and NHR at Zuse Institute Berlin
language: German
details and registration: TU-Berlin

NHR@ZIB is happy to announce the availability of the first publicly available Intel GPU partition in Germany.

Eight nodes, each equipped with four Intel Data Center GPU Max 1550 (also known as  Ponte Vecchio/PVC), two 56-core Intel „Sapphire Rapids“ Xeon CPUs, 1 TB of RAM, and 3.6 TB of local NVMe storage are now available for all users.

The new partition allows users to run GPU workloads programmed in a cross-platform approach using OpenMP offloading (C/C++/Fortran) or SYCL  (C++ only). Both approaches are supported by Intel’s oneAPI which is available on the partition. Codes programmed in OpenMP or SYCL allow execution on both Nvidia and Intel (as well AMD) GPUs. The migration of  existing CUDA codes to SYCL can be assisted by tools. For AI workloads, PyTorch, TensorFlow, and (experimental) JAX are supported by oneAPI as well.

With Lise’s existing A100 partition, NHR@ZIB provides the great opportunity to explore and compare both architectures within the same HPC system. For more information please visit the

User Manual for Lise partitions

we have refreshed the online presence for the system Lise in Berlin. You can find

• general information on nhr.zib.de,
• the User Manual on user.nhr.zib.de, and
• the Portal NHR@ZIB (for project and account management) on portal.nhr.zib.de.

Best regards
NHR@ZIB

Parallel programming day
January 2024

lecturer: Dr. Christian Köhler (NHR@GWDG), Dr. Matthias Läuter (NHR@ZIB), Dr. Lewin Stein (NHR@ZIB)
details and registration: workshop page