Sichere generative KI: Gezielte Anreize für Entwicklung

Forschung

ZEW-Vorschlag zur Förderung verlässlicher generativer KI in der EU

ZEW-Wissenschaftler veröffentlichen einen Vorschlag für ein „Safe Generative AI Innovation Program“.

Ende November feierte ChatGPT seinen zweiten Geburtstag. Längst nutzen Unternehmen generative künstliche Intelligenz (KI), etwa in Form von Chatbots als digitale Assistenten. Von stetig leistungsfähigerer generativer KI können aber auch Gefahren ausgehen, etwa durch gefälschte Bilder oder andere Falschinformationen, die in Desinformationskampagnen – zum Beispiel vor Wahlen – gezielt gestreut werden. ZEW-Wissenschaftler veröffentlichen deshalb nun einen Vorschlag für ein „Safe Generative AI Innovation Program“. Damit könnte die EU gezielt wirtschaftliche Anreize dafür setzen, dass sicherere generative KI-Modelle verfügbar werden.

„Bei generativer KI beobachten wir ein Marktversagen. Entwickler können aktuell erhebliche Erträge durch leistungsfähigere Modelle generieren. Die Kosten für die gesellschaftlichen Risiken durch generative KI tragen sie jedoch nicht“, sagt Dr. Dominik Rehse, Leiter der ZEW-Nachwuchsforschungsgruppe „Design digitaler Märkte“ und Koautor des Konzepts. „Um das auszugleichen, schlagen wir ein neues EU-Förderprogramm vor. Es soll explizit Anreize zur Entwicklung sicherer generativer KI schaffen. Denn die Sicherheit dieser Systeme stellt eine sozial erwünschte Innovation dar, die einzelne Entwicklerunternehmen bislang nicht ausreichend bereitstellen. Ein ähnliches Problem existiert zum Beispiel bei der Entwicklung mancher Impfstoffe, bei denen solche Förderprogramme bereits erfolgreich angewendet wurden.“

Anreize durch vergütete Meilensteine

Interessierte Entwickler nehmen dafür an einem von der EU ausgeschriebenen und finanzierten Wettbewerb teil. In Etappen sollen Systeme entwickelt werden, die bestimmte Sicherheits- und weitere Leistungskriterien erfüllen. Wird ein Meilenstein erreicht, dann erhalten die entsprechenden Entwickler vorher festgelegte Geldbeträge.

Dieses Anreizsystem bietet gleich mehrere Vorteile. So werden die Nachfrageunsicherheiten auf Unternehmensseite reduziert: Entwicklerunternehmen wissen von Anfang an, dass sich der Aufwand für die Innovation auch lohnt. Gleichzeitig gibt die EU keine konkreten Technologien vor, sondern bleibt offen und macht wenige technische Vorgaben. Es geht also darum, möglichst effizient die in der Ausschreibung definierten Ziele zu erreichen. Dadurch bleibt auch das Erbringen der Innovationsleistung den Entwicklerteams überlassen.

„Das System bringt private Anreize und öffentlichen Nutzen in Einklang. Durch die Einführung solcher Anreizmechanismen hat die EU die Möglichkeit, gezielter als bisher Innovationen zu entwickeln. Sie könnte damit auch eine Nische im Markt für generative KI besetzen, in dem sie bislang nur eine geringfügige Rolle spielt“, schätzt Mitautor Sebastian Valet.

Vorschlag weiter diskutieren

Damit ein solches System funktioniert, braucht es zunächst sorgsam definierte Sicherheits- und andere Leistungskennzahlen. Diese müssen möglichst robust und nicht manipulierbar sein. Robustheit dürfte sich vor allem durch den Einsatz von nachvollziehbaren Tests ergeben, bei denen die Öffentlichkeit generative KI-Algorithmen entweder zu Fehlverhalten oder zu besonders guter Leistung führen soll. Dafür gibt es bereits einige etablierte und jüngst vorgeschlagene Herangehensweisen. Das Ergebnis ist meist eine recht robuste Rangfolge der sichersten bzw. leistungsfähigsten Algorithmen.

Ebenfalls muss festgelegt werden, wie hoch die jeweilige Belohnung für einen erreichten Meilenstein ist. Das Ziel dabei muss sein, den Betrag zu finden, ab dem sich die Anstrengungen für die Entwicklerunternehmen lohnen. Um den Betrag  zu bestimmen, können die Erwartungen der Teilnehmenden an die notwenige Belohnung abgefragt werden. Es gibt innovative Methoden aus der ökonomischen Forschung, die Anreize für eine wahrheitsgemäße Angabe von Belohnungserwartungen setzen, sodass die Antworten valide sind.

„Durch sorgfältige Planung lassen sich absehbare Probleme entschärfen. Aufgrund der großen gesellschaftlichen Bedeutung sicherer generativer KI sollte Pragmatismus allerdings vor Perfektion stehen“, so Koautor Johannes Walter.

Weitere Informationen

Safe AI Made in the EU: Proposal for an EU Safe Generative AI Innovation Program

ZEW policy brief Mehr zur Publikation