Entwicklung von Prüfmethoden und -Kriterien für KI-Systeme

Bundesrepublik Deutschland, vertreten durch das Bundesministerium des Innern und für Heimat, vertreten durch das Beschaffungsam

RV Entwicklung von Prüfkriterien und Prüfmethoden für (cloudbasierte) KI-Systeme

Deadline

Die Frist für den Eingang der Angebote war 2024-08-06. Die Ausschreibung wurde veröffentlicht am 2024-07-05.

Anbieter

Die folgenden Lieferanten werden in Vergabeentscheidungen oder anderen Beschaffungsunterlagen erwähnt:

Wer? Wie? Wo?
Geschichte der Beschaffung
Datum Dokument
2024-07-05 Auftragsbekanntmachung
2024-07-24 Auftragsbekanntmachung
2024-07-26 Auftragsbekanntmachung
2026-08-10 Bekanntmachung über vergebene Aufträge
Auftragsbekanntmachung (2024-07-05)
Objekt
Umfang der Beschaffung
Titel: Entwicklung von Prüfmethoden und -Kriterien für KI-Systeme
Referenznummer: ZIB 21.12 - 1891/23/VV : 1
Kurze Beschreibung:
RV Entwicklung von Prüfkriterien und Prüfmethoden für (cloudbasierte) KI-Systeme
Art des Vertrags: Dienstleistungen
Produkte/Dienstleistungen: IT-Dienste: Beratung, Software-Entwicklung, Internet und Hilfestellung 📦
Beschreibung
Interne Kennung: LOT-0000
Beschreibung der Beschaffung:
Mit der vorliegenden Ausschreibung sollen Prüfkriterien und Prüfmethoden für cloudbasierte KI-Systeme entwickelt werden. Das vom Bundesamt für Sicherheit in der Informationstechnik (BSI) durchzuführende Projekt verfolgt dabei die folgenden 3 Ziele: - Die Entwicklung einer ersten, standardisierbaren Fassung eines anwendungsübergreifenden Kriterienkataloges TAISEC ("Trustworthy AI Systems Evaluation Criteria", Arbeittitel) für jede Form von Konformitätsprüfungen, insbesondere für die KI-Zertifizierung - Die Entwicklung einer ersten, standardisierbaren Fassung einer Prüfmethodologie TAISEM ("Trustworthy AI Systems Evaluation Methodology", Arbeitstitel) mit Prüfmethoden und Prüfverfahren im gesamten Lebenszyklus eines KI-Systems und - Die Entwicklung von speziellen Werkzeugkriterien für die Zertifizierung der bei der Entwicklung und im laufenden Betrieb eines KI-Systems verwendeten Werkzeuge, Toolboxen und IDEs. Jedes dieser drei Ergebnisdokumente leistet dabei einen Beitrag für die unterschiedlichen Konformitätsprüfungen, die das BSI seinen Partnern und Bedarfsträgern aus Staat und Wirtschaft anbietet - vom Grundschutz bis hin zur Zertifizierung von KI-Diensten und KI-Systemen. Die detaillierte Leistungsbeschreibung ist dem Dokument "Leistungsbeschreibung" zu entnehmen. Die Gesamtleistung bildet ein Los.
Mehr anzeigen
Ziel der strategischen Auftragsvergabe: Innovative Beschaffung
Entwicklung von Prüfkriterien und -Methoden für KI-Systeme zur Konformitätsprüfung/Zertifizierung.
Innovationsfördernde Auftragsvergabe: Die erbrachten Bauleistungen, Dienstleistungen oder gelieferten Güter sind im Vergleich zu anderen bereits auf dem Markt verfügbaren Bauleistungen, Dienstleistungen oder Gütern neuartig.
Land: Deutschland 🇩🇪
Ort der Leistung: Bonn, Kreisfreie Stadt 🏙️
Dauer: 24 Monate
Vergabekriterien
Qualitätskriterium (Bezeichnung): Leistungskriterien
Qualitätskriterium (Gewichtung): 50.00
Preis
Preis (Gewichtung): 50.00
Titel
Los-Identifikationsnummer: LOT-0000

Verfahren
Art des Verfahrens
Offenes Verfahren
Rechtsgrundlage: Richtlinie 2014/24/EU
Administrative Informationen
Frist für den Eingang von Angeboten oder Teilnahmeanträgen: 2024-08-06 11:30:00 📅
Bedingungen für die Öffnung der Angebote: 2024-08-06 11:31:00 📅
Sprachen, in denen Angebote oder Teilnahmeanträge eingereicht werden können: Deutsch 🗣️
Informationen über eine Rahmenvereinbarung oder ein dynamisches Beschaffungssystem
Rahmenvereinbarung mit mehreren Betreibern
Beschreibung
Im Falle von Rahmenvereinbarungen ist eine Begründung für eine Laufzeit von mehr als 4 Jahren vorzulegen: Die Projektlaufzeit ist auf 2 Jahre ausgelegt.
Bedingungen für die Einreichung eines Angebots
Die Bieter können mehrere Angebote einreichen
Die Namen und beruflichen Qualifikationen des zur Auftragsausführung eingesetzten Personals sind anzugeben
Eröffnungstermin: 2024-08-06 11:31:00 📅
Elektronische Rechnungsstellung: Erforderlich
Zusätzliche Informationen: Siehe Vergabeunterlagen
Vergabekriterien
Gewichtungsart: Gewichtung (Prozentanteil, genau)

Rechtliche, wirtschaftliche, finanzielle und technische Informationen
Bedingungen für die Teilnahme
Liste und kurze Beschreibung der Bedingungen:
Als Nachweis zur Befähigung und Erlaubnis zur Berufsausübung reichen Sie bitte einen aktuellen Handelsregisterauszug mit Ihrem Angebot ein.
Wirtschaftliche und finanzielle Leistungsfähigkeit
Liste und kurze Beschreibung der Auswahlkriterien:
Zum Nachweis der wirtschaftlichen und finanziellen Leistungsfähigkeit ist der Gesamtumsatz für die letzten drei Geschäftsjahre anzugeben. Der Umsatz muss mindestens 3,94 MIO EUR pro Jahr betragen. Übersenden Sie hierzu bitte eine Eigenerklärung in Form einer selbsterstellten Liste. Sofern Sie aus berechtigten Gründen die Unterlagen nicht beibringen können, teilen Sie diese Gründe dem Beschaffungsamt des BMI mit und legen Sie einen anderen geeigneten Nachweis der wirtschaftlichen und finanziellen Leistungsfähigkeit vor. Das Beschaffungsamt des BMI entscheidet sodann nach pflichtgemäßem Ermessen über die Anerkennung des Alternativnachweises. Sofern Sie diesbezüglich unsicher sind, kontaktieren Sie das Beschaffungsamt des BMI unbedingt rechtzeitig vor Ablauf der Teilnahme- oder Angebotsfrist in Form einer Bewerber-/Bieterfrage. Ein Nachfordern und Beibringen eines anderen (geeigneteren) Nachweises ist nach dem Angebotsschluss aus vergaberechtlichen Gründen nicht mehr möglich.
Mehr anzeigen
Technische und berufliche Fähigkeiten
E3.1: Referenzen: Expertise im Bereich Entwicklung und Verwendung von KI-Systemen Belegen Sie anhand von Referenzprojekten, dass mindestens ein beteiligtes Unternehmen, Organisation, Forschungseinrichtung o.ä. Expertenwissen im Bereich Entwicklung und Verwendung von KI-Systemen besitzt.Gehen Sie dabei auf folgende Punkte ein: -Auftraggeber inkl. Fachbereich -Zeitraum und Auftragsvolumen -detaillierte und aussagekräftige Darstellung des Auftragsgegenstands Aus den Ausführungen müssen sich Rückschlüsse auf die Leistungsfähigkeit des Bieters / der Bietergemeinschaft (ggf. unter Einbeziehung eines Unterauftragnehmers (Eignungsleihe) hinsichtlich der Durchführung der geplanten Studien in der angestrebten Qualität und im genannten Umfang ziehen lassen. Es werden keine Referenzschreiben früherer Auftraggeber benötigt. Die Darstellung sollte zwei DIN A4-Seiten als digitales Dokument und in üblicher Formatierung (Calibri 11 pt für Fließtext oder vergleichbar) pro Referenz nicht überschreiten. Mindestanforderung: In den letzten drei Jahren wurde mindestens ein Projekt durchgeführt, bei dem Expertise im Bereich Entwicklung und Verwendung von KI-Systemen benötigt und angewandt wurde. E3.2: Referenzen: Expertise im Bereich Sicherheit von KI-Systemen Belegen Sie anhand von Referenzprojekten, dass mindestens ein beteiligtes Unternehmen, Organisation, Forschungseinrichtung o.ä. Expertenwissen zur Sicherheit von KI-Systemen (insb. zu KI-spezifischen Angriffen und Verteidigungen) besitzt. Gehen Sie dabei auf folgende Punkte ein: -Auftraggeber inkl. Fachbereich -Zeitraum und Auftragsvolumen -detaillierte und aussagekräftige Darstellung des Auftragsgegenstands Aus den Ausführungen müssen sich Rückschlüsse auf die Leistungsfähigkeit des Bieters / der Bietergemeinschaft (ggf. unter Einbeziehung eines Unterauftragnehmers (Eignungsleihe) hinsichtlich der Durchführung der geplanten Studien in der angestrebten Qualität und im genannten Umfang ziehen lassen. Es werden keine Referenzschreiben früherer Auftraggeber benötigt. Die Darstellung sollte zwei DIN A4-Seiten als digitales Dokument und in üblicher Formatierung (Calibri 11 pt für Fließtext oder vergleichbar) pro Referenz nicht überschreiten. Mindestanforderung: In den letzten drei Jahren wurde mindestens ein Projekt durchgeführt, bei dem Expertise zur Sicherheit von KI-Systemen benötigt und angewandt wurde. E3.3: Referenzen: Expertise im Bereich Prüfung von KI-Systemen Belegen Sie anhand von Referenzprojekten, dass mindestens ein beteiligtes Unternehmen, Organisation, Forschungseinrichtung o.ä. Expertenwissen zu Prüfung von KI-Systemen besitzt. Gehen Sie dabei auf folgende Punkte ein: -Auftraggeber inkl. Fachbereich -Zeitraum und Auftragsvolumen -detaillierte und aussagekräftige Darstellung des Auftragsgegenstands Aus den Ausführungen müssen sich Rückschlüsse auf die Leistungsfähigkeit des Bieters / der Bietergemeinschaft (ggf. unter Einbeziehung eines Unterauftragnehmers (Eignungsleihe) hinsichtlich der Durchführung der geplanten Studien in der angestrebten Qualität und im genannten Umfang ziehen lassen. Es werden keine Referenzschreiben früherer Auftraggeber benötigt. Die Darstellung sollte zwei DIN A4-Seiten als digitales Dokument und in üblicher Formatierung (Calibri 11 pt für Fließtext oder vergleichbar) pro Referenz nicht überschreiten. Mindestanforderung: In den letzten drei Jahren wurde mindestens ein Projekt durchgeführt, bei dem Expertise im Bereich Prüfung von KI-Systemen benötigt und angewandt wurde.
Mehr anzeigen
Bedingungen für die Teilnahme
Ausschlussgrund: Rein innerstaatliche Ausschlussgründe
Beschreibung der Ausschlussgründe: Nachweis gemäß Vergabeunterlagen

Öffentlicher Auftraggeber
Name und Adressen
Name: Bundesrepublik Deutschland, vertreten durch das Bundesministerium des Innern und für Heimat, vertreten durch das Beschaffungsamt des BMI
Nationale Registrierungsnummer: t:0049228996100
Postanschrift: Brühler Straße 3
Postleitzahl: 53119
Postort: Bonn
Region: Bonn, Kreisfreie Stadt 🏙️
Land: Deutschland 🇩🇪
E-Mail: zib21.12@bescha.bund.de 📧
Telefon: +49 22899610-2912 📞
Fax: +49 22899610-1610 📠
URL: http://www.bescha.bund.de 🌏
Federführendes Mitglied
Art des öffentlichen Auftraggebers
Ministerium oder sonstige zentral- oder bundesstaatliche Behörde
Haupttätigkeit
Allgemeine öffentliche Verwaltung
Kommunikation
Dokumente URL: https://www.evergabe-online.de/tenderdocuments.html?id=699571 🌏
Teilnahme-URL: http://www.evergabe-online.de 🌏
Sprache des Beschaffungsdokuments: Deutsch 🗣️
Elektronische Einreichung: Zulässig

Ergänzende Informationen
Körper überprüfen
Name: Vergabekammer des Bundes
Nationale Registrierungsnummer: t:022894990
Postanschrift: Kaiser-Friedrich-Straße 16
Postleitzahl: 53113
Postort: Bonn
Region: Bonn, Kreisfreie Stadt 🏙️
Land: Deutschland 🇩🇪
E-Mail: vk@bundeskartellamt.bund.de 📧
Telefon: +49 2289499-0 📞
Fax: +49 2289499-163 📠
URL: http://www.bundeskartellamt.de 🌏
Verfahren zur Überprüfung
Genaue Informationen über Fristen für Überprüfungsverfahren:
Unternehmen haben einen Anspruch auf Einhaltung der bieter- und bewerberschützenden Bestimmungen über das Vergabeverfahren gegenüber dem öffentlichen Auftraggeber, Bundesrepublik Deutschland, vertreten durch das Beschaffungsamt des BMI (BeschA). Sieht sich ein am Auftrag interessiertes Unternehmen durch Nichtbeachtung von Vergabevorschriften in seinen Rechten verletzt, ist der Verstoß innerhalb einer Frist von zehn Kalendertagen gegenüber dem BeschA zu rügen (§ 160 Abs. 3 S. 1 Nr. 1 Gesetz gegen Wettbewerbsbeschränkungen (GWB)). Verstöße, die aufgrund der Bekanntmachung oder der Vergabeunterlagen erkennbar sind, müssen spätestens bis zu der in der Bekanntmachung benannten Frist zur Bewerbung oder Angebotsabgabe gegenüber dem BeschA gerügt werden (§ 160 Abs. 3 S. 1 Nr. 2 und 3 GWB). Teilt das BeschA dem Unternehmen mit, seiner Rüge nicht abhelfen zu wollen, so besteht die Möglichkeit, innerhalb von 15 Tagen nach Eingang der Mitteilung einen Antrag auf Nachprüfung bei der Vergabekammer zu stellen (§ 160 Abs. 3 S. 1 Nr. 4 GWB). Bieter, deren Angebote für den Zuschlag nicht berücksichtigt werden sollen, werden vor dem Zuschlag gemäß § 134 Abs. 1 GWB darüber informiert. Ein Vertrag darf erst 15 Kalendertage nach Absendung dieser Information durch das BeschA geschlossen werden; bei Übermittlung per Fax oder auf elektronischem Wege beträgt diese Frist zehn Kalendertage. Sie beginnt am Tag nach Absendung der Information durch das BeschA. Ein Antrag auf Nachprüfung ist schriftlich an die Vergabekammern des Bundes beim Bundeskartellamt, Villemombler Straße 76, 53123 Bonn zu richten. Hinweis: Das BeschA ist im Falle eines Nachprüfungsantrags verpflichtet, die Vergabeakten, die auch die abgegebenen Angebote enthalten, an die Vergabekammer weiterzuleiten. Die Beteiligten haben ein Recht auf Akteneinsicht. Um Betriebs- und Geschäftsgeheimnisse zu wahren, teilen Sie uns konkret mit Bezug auf die entsprechenden Dokumente des Angebotes mit, welche Informationen als Betriebs- und Geschäftsgeheimnisse zu behandeln sind.
Mehr anzeigen
Informationen über elektronische Arbeitsabläufe
Die elektronische Rechnungsstellung wird akzeptiert
Bekanntmachungsangaben
Bevorzugtes Datum der Veröffentlichung: 2024-07-05+02:00 📅
Quelle: OJS 2024/S 131-404774 (2024-07-05)
Auftragsbekanntmachung (2024-07-24)
Verfahren
Administrative Informationen
Frist für den Eingang von Angeboten oder Teilnahmeanträgen: 2024-08-23 11:30:00 📅
Bedingungen für die Öffnung der Angebote: 2024-08-23 11:31:00 📅
Bedingungen für die Einreichung eines Angebots
Eröffnungstermin: 2024-08-23 11:31:00 📅

Ergänzende Informationen
Bekanntmachungsangaben
Bevorzugtes Datum der Veröffentlichung: 2024-07-24+02:00 📅

Änderungen
Zu berichtigender Text in der ursprünglichen Bekanntmachung
Los-Identifikationsnummer: LOT-0000
Andere zusätzliche Informationen
Änderung Angebotsfrist
Hauptgrund für die Änderung: Aktualisierte Informationen
Angaben zu Änderungen
Fassung der zu ändernden vorigen Bekanntmachung: c1ccb7aa-4bb0-4c9e-bb37-409d88541fcc-01
Quelle: OJS 2024/S 144-446333 (2024-07-24)
Auftragsbekanntmachung (2024-07-26)

Ergänzende Informationen
Bekanntmachungsangaben
Bevorzugtes Datum der Veröffentlichung: 2024-07-26+02:00 📅

Änderungen
Andere zusätzliche Informationen
Änderung Angebotsfrist
Hauptgrund für die Änderung: Aktualisierte Informationen
Angaben zu Änderungen
Fassung der zu ändernden vorigen Bekanntmachung: ae82806f-ed9d-493a-88af-96c308a88234-01
Quelle: OJS 2024/S 146-453249 (2024-07-26)
Bekanntmachung über vergebene Aufträge (2026-08-10)
Objekt
Umfang der Beschaffung
Titel: ZIB 21.12 - 1891/23/VV : 1 - Entwicklung von Prüfmethoden und -Kriterien für KI-Systeme
Kurze Beschreibung: RV Entwicklung von Prüfkriterien und Prüfmethoden für (cloudbasierte) KI-Systeme
Beschreibung
Interne Kennung: ZIB 21.12 – 1981/23/VV : 1

Verfahren
Bedingungen für die Einreichung eines Angebots
Der Vertrag enthält Bedingungen zur Vertragsausführung

Auftragsvergabe
Los-Identifikationsnummer: LOT-0000
Vertragsnummer: ZIB 21.12 – 1981/23/ : 1
Datum des Vertragsabschlusses: 2024-12-23 📅
Angaben zum Wert des Auftrags/der Partie (ohne MwSt.)
Gesamtwert des Auftrags/Loses: 411 450 EUR 💰
Kennung des Angebots: ZIB 21.12 – 1981/23/VV : 1
Kennung des Loses oder der Gruppe von Losen: LOT-0000
Informationen über Ausschreibungen
Name der anbietenden Partei: PricewaterhouseCoopers GmbH WPG
Name und Anschrift des Auftragnehmers
Name: PricewaterhouseCoopers GmbH WPG
Nationale Registrierungsnummer: DE194821795
Postleitzahl: 60327
Postort: Frankfurt am Main
Region: Frankfurt am Main, Kreisfreie Stadt 🏙️
Land: Deutschland 🇩🇪
Kontaktperson: DE_Kontakt@pwc.com

Öffentlicher Auftraggeber
Name und Adressen
Name: Beschaffungsamt des BMI
Postanschrift: Brühler Str. 3
Kontaktperson: Koordinierungsstelle Abteilung B
E-Mail: ba@bescha.bund.de 📧
Telefon: 0228 996100 📞
Kommunikation
ID des Steuergesetzgebungsdokuments: unused-id
ID des Umweltgesetzgebungsdokuments: unused-id
ID des Arbeitsgesetzgebungsdokuments: unused-id

Ergänzende Informationen
Körper überprüfen
Name: Vergabekammern des Bundes beim Bundeskartellamt
Telefon: 0228 9499-0 📞
Fax: 0228 9499-163 📠
Verfahren zur Überprüfung
Genaue Informationen über Fristen für Überprüfungsverfahren:
Ein Antrag auf Nachprüfung kann schriftlich an die Vergabekammern des Bundes beim Bundeskartellamt, Kaiser-Friedrich-Str. 16, 53113 Bonn, gerichtet werden. Die Unwirksamkeit des Vertrages gemäß § 135 GWB kann innerhalb von 30 Kalendertagen nach Veröffentlichung dieser Bekanntmachung im Amtsblatt der Europäischen Union geltend gemacht werden.
Mehr anzeigen
Bekanntmachungsangaben
Bevorzugtes Datum der Veröffentlichung: 2026-08-10+02:00 📅

Änderungen
Andere zusätzliche Informationen
Mehrbedarf
Hauptgrund für die Änderung: Änderungen aufgrund von Umständen, die bei aller Umsicht vom Beschaffer nicht vorhergesehen werden konnten, erforderlich.
Neuer Wert
Text: Vertragsänderung vom 26.06.2026
Quelle: OJS 2026/S 153-554793 (2026-08-10)