GPU-Cluster

Kurze Beschreibung

Beschafft werden soll ein Rechencluster mit leistungsfähigen GPUs mit Schwerpunkt auf der FP64-Leistungsfähigkeit. Dazu sind Compute Ressourcen sowohl mit CPUs als auch mit GPUs notwendig. Alle CPUs und GPUs müssen per DLC gekühlt werden.
Die Universität Münster behält sich vor Rechenknoten und Garantieverlängerungen nachzukaufen (s. Optionen in der Leistungsbeschreibung).

Beschreibung der Beschaffung

Beschafft werden soll ein Rechencluster mit leistungsfähigen GPUs mit Schwerpunkt auf der FP64-Leistungsfähigkeit. Dazu sind Compute Ressourcen sowohl mit CPUs als auch mit GPUs notwendig. Alle CPUs und GPUs müssen per DLC gekühlt werden.
Entweder erfolgt der Einbau:
a) in die vorhandenen Racks vom Typ Schroff nVent Varistar LHX+ (Breite 800mm, Höhe 2000mm, Tiefe 1300mm). Es steht als Primärkühlung Kaltwasser mit einer Vorlauftemperatur von 12°C zur Verfügung. Entsprechende Wärmetauscher zur Trennung des Kühlkreislaufs im Rack für die DLC-Systeme und dem Primärkühlkreislauf des Raums sind in die Racks zu integrieren und auch Be-standteil dieser Ausschreibung. Die Restwärmemenge, die nicht durch das DLC-System abgeführt wird, soll in dem Raum abgegeben werden und 30% des Gesamtwärmeaufkommens nicht über-schreiten. Für die Stromversorgung stehen bis zu 4 Anschlüsse vom Typ CEE Steckverbindung 3-Phasig 32A zur Verfügung. Für die Stromverteilung innerhalb der Racks sind entsprechende PDUs anzubieten, die über eine Ethernet-Schnittstelle abfragbar und schaltbar sind. Es stehen maximal 38 HE zur Verfügung.
Alternativ:
b) in ein bereits vorbereitetes Rack vom Typ a) mit einer Kühleinheit und Manifolds der Fa. ZutaCore, welches verwendet werden darf. Eine PDU ist vorhanden. Es stehen maximal 32 HE zur Verfügung
Alternativ:
c) in bereits vorhandene Racks vom Typ 2CRSI OCTORACK 42 DLC. PDU und Kühlung sind vorhan-den. Es stehen maximal 24 OU zur Verfügung
Alternativ:
d) in einem selbst gelieferten Rack einschließlich der gesamten notwendigen Kühltechnik. Die Kos-ten dafür müssen im Angebotspreis enthalten sein. Bitte beachten Sie, dass der Aufzug nur über eine Höhe von 2 Metern verfügt. Bei größeren Racks muss der Transport über eine Treppe erfolgen.

Es wird für die Systeme eine Flüssigkeitskühlung (DLC) gefordert, die alle verbauten CPUs und GPUs kühlt. Die Kühlung muss so ausgelegt sein, dass die Systeme ohne Leerräume zwischen den einzelnen Servern betrieben werden können. Die Server sollen so kompakt gestaltet sein, dass maximal ein Rack benötigt wird (dies bezieht sich auf den Grundauftrag ohne Nachkaufoptionen). Die Kühlung muss entsprechend leistungsfähig dimensioniert werden, so dass das System unter Vollast (Linpack) stabil läuft.
Die Kabelführung soll so gestaltet werden, dass der Luftstrom möglichst wenig beeinträchtigt wird.
Es wird nur Hardware beschafft.

Leistungsbeschreibung
GPU-Cluster (Umfang 850.000,00 EUR brutto).
Das System besteht aus einem einzelnen Typ von Rechenknoten.
Das System wird im HPC-Serverraum aufgestellt.
Lieferung und Installation erfolgt durch den Anbieter.
Im Betrieb muss es der Uni Münster gestattet sein, im Rahmen der Spezifikationen der Hardware ohne Verlust von Garantie Änderungen am Setup vorzunehmen.
Die Installation der Betriebs-Software und die Herstellung und Feststellung der Betriebsbereitschaft wird durch das Personal der Universität Münster erfolgen. Zur Abnahme der Hardware wird das beige-fügte Abnahmeprotokoll verwendet.

Leistungsverzeichnis (LV)
> System
Die Ausstattung des Systems soll einheitlich bestehen aus:

Nr. Beschreibung
01 Die Systeme besitzen x86-64 Architektur
02 Es sind alle Speicherkanäle zu verwenden, der Speicher muss ECC verwenden und mit der maximalen für die CPU möglichen Frequenz betrieben werden können (außer dies ist durch eine mögliche Mehrfachbelegung der Speicherkanäle limitiert).
03 Datacenter NVMe, mindestens 0,96 TB Kapazität und 1 DWPD Lebensdauer; mindestens 5 GB/s lesend, 1,4 GB/s schreibend, 5 Jahre Herstellergarantie
04 Mindestens ein Anschluss Ethernet 10 GbE, RJ45
05 BMC mit gesondertem 1Gb Interface, HTML5 KVM ohne zeitliche Begrenzung, keine zusätzli-chen Lizenzgebühren. Redfish Support mit Unterstützung für next-boot pxe und Auswahl des Boot-Devices. Firmware-Updates herstellerseitig verfügbar auch nach Ende des vereinbarten Supportzeitraums.
06 Netzwerkkarte: Mindestens 1 Anschluss 400GbE NDR Infiniband, Hardware vDPA Support, Geneve offloading, Firmware-Updates herstellerseitig verfügbar auch nach Ende des verein-barten Supportzeitraums
07 (Im Fall der Einbauoptionen a) und b) Redundante Power-Supplies, mindestens Titanium, Stromkabel
08 BIOS-Updates herstellerseitig verfügbar auch nach Ende des vereinbarten Supportzeitraums
09 Infinibandkabel zum Anschluss an Inifinibandswitch in demselben Rack
10 PXE Boot unterstützt Nachladen von iPXE (EFI Chainload)
11 Unterstützung für SecureBoot mit eigenen Schlüsseln
12 2x CPU mit mindestens 56 Kernen, maximale Turbo-Taktrate innerhalb der Klasse (selbe An-zahl von Kernen)
13 Hauptspeicher mit einer Mindestensgröße von 1,5 TB bzw. Identisch mit HBM-RAM (bei MI300A)
14 Mindestens 4 GPUs mit SXM/NVLINK oder Infinity Fabric oder CXL Verbindung (z.B. H100, H200, MI300X oder MI300A). Gekühlt per DLC.

> Garantieverlängerung (optional)
Garantieverlängerung für:
- Jahr 3
- Jahr 4
- Jahr 5

Weitere Informationen entnehmen Sie bitte der Leistungsbeschreibung.

Liste und kurze Beschreibung der Auswahlkriterien

Wirtschaftliche und finanzielle Leistungsfähigkeit: -Eigenerklärung Ausschlussgründe (521 bzw. 521 EU) (mit dem Angebot mittels Eigenerklärung vorzulegen)
-523 EU Eigenerklärung Sanktionspaket 5 (mit dem Angebot mittels Eigenerklärung vorzulegen)
-Betriebshaftpflichtversicherung / Vermögensschadenhaftpflichtversicherung, Mindest-Versicherungssumme 3.000.000 EUR jeweils für Sach-, Personen- und Vermögensschäden pro Jahr kumuliert auf alle SchadensfälleIm. Im Falle einer bestehenden Versicherung mit geringerer Versicherungssumme ist zusätzlich eine Bestätigung der Versicherungsgesellschaft beizufügen, dass die Summen im Auftragsfall mindestens bis zu den geforderten Summen erhöht werden können.
Der Nachweis ist während der Vertragslaufzeit unaufgefordert jährlich durch die Versicherungsgesellschaft zu aktualisieren und vorzulegen.
- Mind. 1 Mio. EUR Jahres-umsatz im Mittel je Ge-schäftsjahr in den letzten 2 Jahren im einschlägigen Geschäftsfeld

Bedingungen für die Vertragserfüllung

Bewerber-/Bietergemeinschaftserklärung (531 bzw. 531 EU) (mit dem Angebot mittels Eigenerklärung vorzulegen)
Erklärung Bieter Unteraufträge / Eignungsleihe (532 bzw. 532 EU) (mit dem Angebot mittels Eigenerklärung vorzulegen)
Verpflichtungserklärung Dritter Unteraufträge / Eignungsleihe (533 bzw. 533 EU) (mit dem Angebot mittels Eigenerklärung vorzulegen)

Zusätzliche Informationen

Bekanntmachungs-ID: CXS0YRDY1Q2V0BGZ


Für die Nutzung der Vergabeplattform https://www.evergabe.nrw.de gelten die Nutzungsbedingungen VMP NRW (https://www.vergabe.nrw.de/wirtschaft/nutzungsbedingungen-vmp-nrw).

Bieter, welche ohne eine vorherige Registrierung auf www.evergabe.nrw.de auf die Vergabeunterlagen zugegriffen haben, müssen sich selbstständig informieren, ob Vergabeunterlagen zwischenzeitlich geändert wurden oder ob die öffentlichen Auftraggeber Fragen zum Vergabeverfahren beantwortet haben (Holschuld). Sie tragen das Risiko, einen Teilnahmeantrag, eine Interessensbestätigung oder ein Angebot auf der Grundlage veralteter Vergabeunterlagen erstellt zu haben und daher im weiteren Verlauf vom Verfahren ausgeschlossen zu werden.

Bieterfragen sind in Textform über das Vergabeportal evergabe.nrw.de zu stellen. Die Fragen und Antworten werden über das Portal allen Bietern durch die ausschreibende Stelle zur Verfügung gestellt.

Im Falle von gleichwertigen Angeboten (gemäß den Wertungskriterien der Ausschreibung) entscheidet in der Wertungsstufe das Los.

Für Vergaben von Liefer- und Dienstleistungen unter Einbeziehung der VOL/B als Vertragsbedingungen gelten die Vertragsstrafen nach §11 Nr.2 VOL/B für in den Auschreibungsunterlagen enthaltenen Ausführungsfristen als vereinbart.

Geschäftsbedingungen des Bieters in den Angebotsunterlagen werden nicht zum Vertragsbestandteil. Stellt ein Bieter mit seinem Angebot abweichende Bedingungen entfalten diese im Falle der Auftragserteilung keine rechtliche Wirkung.

Genaue Informationen über Fristen für Überprüfungsverfahren

§ 135 Absatz 2 GWB
Die Unwirksamkeit eines öffentlichen Auftrags kann nur festgestellt werden, wenn sie im Nachprüfungsverfahren innerhalb von 30 Kalendertagen nach der Information der betroffenen Bieter und Bewerber durch den öffentlichen Auftraggeber über den Abschluss des Vertrags, jedoch nicht später als sechs Monate nach Vertragsschluss geltend gemacht worden ist.
Hat der Auftraggeber die Auftragsvergabe im Amtsblatt der Europäischen Union bekannt gemacht, endet die Frist zur Geltendmachung der Unwirksamkeit 30 Kalendertage nach Veröffentlichung der Bekanntmachung der Auftragsvergabe im Amtsblatt der Europäischen Union.
§ 160 Absatz 3 Nummern 1 bis 4 GWB
Der Antrag zur Einleitung eines Nachprüfungsverfahrens ist unzulässig, soweit
- der Antragsteller den geltend gemachten Verstoß gegen Vergabevorschriften vor Einreichen des Nachprüfungsantrags erkannt und gegenüber dem Auftraggeber nicht innerhalb einer Frist von zehn Kalendertagen gerügt hat; der Ablauf der Frist nach § 134 Absatz 2 bleibt unberührt,
- Verstöße gegen Vergabevorschriften, die aufgrund der Bekanntmachung erkennbar sind, nicht spätestens bis zum Ablauf der in der Bekanntmachung benannten Frist zur Bewerbung oder zur Angebotsabgabe gegenüber dem Auftraggeber gerügt werden,
- Verstöße gegen Vergabevorschriften, die erst in den Vergabeunterlagen erkennbar sind, nicht spätestens bis zum Ablauf der Frist zur Bewerbung oder zur Angebotsabgabe gegenüber dem Auftraggeber gerügt werden,
- mehr als 15 Kalendertage nach Eingang der Mitteilung des Auftraggebers, einer Rüge nicht abhelfen zu wollen, vergangen sind.