06.07.2023

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

Systeme, die auf künstlicher Intellligenz (KI) basieren, werden immer intelligenter. Ein neues Forschungsteam von OpenAI soll nun herausfinden, wie sich KI in Zukunft kontrollieren lässt.
/artikel/super-ki-openai-will-ausloeschung-der-menschheit-verhindern
OpenAI
Bild: (c) Mariia Shalabaieva/Unsplash

Immer wieder warnten Tech-Leaders in den letzten Jahren vor einer Super-KI, welche die Menschheit auslöschen könnte. Eine Befragung unter Top-CEOs in den USA zeigte im Juni, dass 40 Prozent die Auslöschung der Menschheit durch KI fürchten. Derzeit sind wir noch weit von einer solchen Situation entfernt. Dennoch machen sich kluge Köpfe bereits jetzt Gedanken, wie man eine Super-KI kontrollieren könnte.

Die Super-KI soll menschlichen Absichten folgen

Am Mittwoch verkündete OpenAI in einem Blogartikel die Gründung eines neuen Teams, das Mittel und Wege entwickeln soll, eine solche Super-KI zu kontrollieren. Geleitet wird das neue Team von Ilya Sutskever, dem Chief Scientist von OpenAI und von Jan Leike. Die Forschungsfrage, die das neu geschaffene Team bearbeiten soll, lautet: „Wie stellen wir sicher, dass KI-Systeme, die viel intelligenter sind als Menschen, menschlichen Absichten folgen?“

OpenAI geht davon aus, dass die derzeitigen Kontrollmittel nicht dauerhaft genügen, um eine immer leistungsfähigere KI zu „beaufsichtigen“. Es brauche deshalb mehr Forschung und Technik in diesem Bereich, so OpenAI. Konkret will OpenAI 20 Prozent seiner der Rechenleistung diesem Zweck widmen. Innerhalb von vier Jahren will OpenAI dann das Projekt „Superintelligence Alignment“ abschließen.

Eigene Aufpasser-KI soll trainiert werden

Konkret will das Team eine eigene KI schaffen, die es „Human-level Automated Alignment Researcher“ nennt – also eine Art Aufpasser-KI. Sie soll Justierungen an KI-Systemen vornehmen können, damit diese auch in Zukunft im Sinne der Menschheit handelt.

„Wenn wir diesbezüglich Fortschritte machen, können unsere KI-Systeme immer mehr unserer Justierungsarbeit übernehmen und letztendlich bessere Justierungstechniken ausarbeiten, implementieren, studieren und entwickeln, als wir es jetzt haben“, schrieben Leike und weitere OpenAI-Forscher im August 2022 in einem Blogartikel.

Enge Zusammenarbeit mit menschlichen Wissenschaftlern

Die neuen KI-Forschungssysteme würden dann „mit Menschen zusammenarbeiten, um sicherzustellen, dass ihre eigenen Nachfolger stärker auf Menschen ausgerichtet sind“, so Lemke und seine Kollegen. Menschliche Wissenschaftler:innen würden ihre Bemühungen in Zukunft stattdessen stärker auf die Überprüfung der von KI-Systemen durchgeführten Forschung konzentrieren, anstatt diese Forschung selbst zu generieren.

Deine ungelesenen Artikel:
04.09.2026

„Wir haben ein Fähigkeitsproblem, kein Diversitätsproblem“: Warum Europas Sicherheit mehr Frauen braucht

Im Rahmen des European Forum Alpbach luden Natascha Fürst, Geschäftsführerin von Female Founders, und Lisa-Marie Fassl, General Partner bei Fund F ein, um über kritische Infrastruktur und Sicherheitsfragen zu diskutieren. Die Kernaussage: Weibliche Expertise sei kein sanftes „Nice-to-have“, sondern eine geopolitische Notwendigkeit.
/artikel/wir-haben-ein-faehigkeitsproblem-kein-diversitaetsproblem-warum-europas-sicherheit-mehr-frauen-braucht
04.09.2026

„Wir haben ein Fähigkeitsproblem, kein Diversitätsproblem“: Warum Europas Sicherheit mehr Frauen braucht

Im Rahmen des European Forum Alpbach luden Natascha Fürst, Geschäftsführerin von Female Founders, und Lisa-Marie Fassl, General Partner bei Fund F ein, um über kritische Infrastruktur und Sicherheitsfragen zu diskutieren. Die Kernaussage: Weibliche Expertise sei kein sanftes „Nice-to-have“, sondern eine geopolitische Notwendigkeit.
/artikel/wir-haben-ein-faehigkeitsproblem-kein-diversitaetsproblem-warum-europas-sicherheit-mehr-frauen-braucht
Natascha Fürst und Lisa-Marie Fassl © Female Founders

Defence, Security & Resilience waren 2025 laut Dealroom und NATO Innovation Fund der am schnellsten wachsende VC-Sektor Europas, nach KI. 2025 flossen laut PitchBook weltweit rund 49,9 Milliarden US-Dollar in den Sektor, fast doppelt so viel wie im Jahr davor. Europäische Startups aus den Bereichen Defence, Security & Resilience sammelten laut Dealroom und NATO Innovation Fund 2025 insgesamt 8,7 Milliarden US-Dollar ein, ein Allzeithoch. Damit macht Verteidigung mittlerweile 13 Prozent des gesamten europäischen VC-Fundings aus. Vor 2020 waren es noch unter einem Prozent.

Vor diesem Hintergrund stellt sich die Frage, wer in diesem schnell wachsenden Markt eigentlich mitbaut und wer dabei außen vor bleibt. Im Böglerhof luden Natascha Fürst, Geschäftsführerin von Female Founders, und Lisa-Marie Fassl, General Partner bei Fund F, zu einer Session ein, die genau diese Frage stellte. Die Kernthese: Echte europäische Souveränität und der Schutz kritischer Infrastrukturen seien ohne die aktive Führung von Frauen nicht zu erreichen.

Zwei Perspektiven prägten den Abend vor allem für die Startup-Szene: die geopolitische Analyse von Women-in-Defense-Tech-Founderin Eveline Beer und das finanzielle Plädoyer von Fund-F-Investorin Lisa-Marie Fassl. Außerdem diskutierten auf dem hochkarätigen Panel Katharina Rogenhofer (Geschäftsführerin Kontext Institut), Antonella Mei-Pochtler (EFA-Vizepräsidentin), Monika Unterholzner (stellvertretende Generaldirektorin der Wiener Stadtwerke) und Sabine Gromer (Gründerin Magnolia Tree Consulting).

Die Female Founders Veranstaltung im Böglerhof am European Forum Alpbach © Female Founders

Ein strategisches Kapazitätsproblem für Europa

Für Eveline Beer, CEO und Mitgründerin von Women in Defense Tech, ist die mangelnde Einbindung von Frauen in Sicherheits- und Verteidigungsfragen kein moralisches Wohlfühlthema mehr. „Wir neigen dazu, dies als Diversitätsproblem zu bezeichnen. Ich denke, wir müssen anfangen, es als ein Fähigkeitsproblem zu benennen“, stellte Beer klar. Wenn Europa angesichts massiver Fachkräfte- und Innovationslücken die Hälfte seines Talentpools ignoriere, schwäche dies direkt die europäische Handlungsfähigkeit, fügt sie hinzu.

„Es gibt keine Infrastruktur ohne Verteidigung, und es gibt keine Verteidigung ohne Infrastruktur“, sagt Beer. Sicherheit werde heute maßgeblich davon bestimmt, ob Energienetze resilient sind, ob Europa die Kontrolle über seine Daten behält, kritische Komponenten selbst produzieren kann und Zugriff auf Rohstoffe hat. Frauen dürften in diesem Transformationsprozess nicht mehr nur als passive Schutzbedürftige in Krisen verstanden werden. „Frauen müssen diese Systeme bauen, sie finanzieren, sie verwalten und sie leiten“, forderte Beer. Es gehe am Entscheidungstisch letztlich um Macht und demokratische Mitbestimmung.

Startups und Kapitalströme als geopolitischer Hebel

Hier kommt die Schnittstelle zum Risikokapital ins Spiel. Lisa-Marie Fassl machte deutlich, dass Technologieentwicklung die Handschrift ihrer Schöpfer:innen trägt. Werden Frauen vom Aufbau kritischer Technologien ausgeschlossen, profitieren sie auch nicht von deren gesellschaftlichem Nutzen. Hierbei ginge es nicht nur um Gründerinnen, sondern auch um Investorinnen. „Frauen investieren in andere Dinge“, sagt sie. Es ginge Frauen neben finanziellen Faktoren auch um soziale oder ökologische Wertschöpfung. Fassl fordert, Kapitalströme gezielt als strategisches Steuerungselement einzusetzen: „Die Zukunftsszenarien wachsen dort, wo das Geld fließt.“

Als Beispiel aus ihrem eigenen Portfolio, das ausschließlich Startups mit mindestens einer Gründerin umfasst, nennt Fassl das luxemburgisch-britische Startup Uplift360. Das Unternehmen entwickelt ein chemisches Verfahren zum Recycling von Carbonfasern und Kevlar, zwei Materialien, die etwa aus alten Windkraft-Rotorblättern beziehungsweise aus militärischer Schutzausrüstung stammen und in der Rüstungs- und Luftfahrtindustrie stark nachgefragt sind, wie Fassl erläutert. Fund F beteiligte sich Ende 2025 an einer Seed-Runde über 7,4 Millionen Euro für Uplift360, angeführt vom VC-Fonds Extantia und mit weiterer Beteiligung unter anderem des NATO Innovation Fund und von Promus Ventures. Die Investorin beschreibt einen Business Case, der nicht nur ökologisch sinnvoll ist, sondern sich auch als ökonomisch lukrativ erweist.

Natascha Fürst verwies darüber hinaus auf eine Studie der Boston Consulting Group aus dem Jahr 2018. Laut dieser erzielten die untersuchten 350 Startups mit mindestens einer Gründerin über fünf Jahre 78 Cent Umsatz je investiertem Dollar, gegenüber 31 Cent bei Unternehmen ohne weibliche Gründerin. Gleichzeitig erhielten sie im Durchschnitt deutlich weniger Kapital. Fürst argumentiert daraus, dass die aktuell ungleiche Kapitalverteilung auf Gründerteams in Bezug auf Genderdiversität somit ökonomisch schlichtweg unlogisch sei.

Den Tisch verschieben, erweitern und neu bauen

Am Ende der intensiven Debatte im Böglerhof stand Einigkeit in einer Sache: Für einen echten Wandel reiche es nicht mehr aus, auf eine Einladung an die bestehenden Machtzirkel zu hoffen.

Es geht darum, neue Tische zu bauen, bestehende Tische aktiv zu verschieben und international auszuweiten, um strategische Allianzen auf Augenhöhe zu schmieden. Europa könne sich im globalen Ringen um digitale, energetische und militärische Souveränität keine geschlossenen Türen mehr leisten.

Toll dass du so interessiert bist!
Hinterlasse uns bitte ein Feedback über den Button am linken Bildschirmrand.
Und klicke hier um die ganze Welt von der brutkasten zu entdecken.

brutkasten Newsletter

Aktuelle Nachrichten zu Startups, den neuesten Innovationen und politischen Entscheidungen zur Digitalisierung direkt in dein Postfach. Wähle aus unserer breiten Palette an Newslettern den passenden für dich.

Montag, Mittwoch und Freitag

AI Summaries

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Welche gesellschaftspolitischen Auswirkungen hat der Inhalt dieses Artikels?

Der Inhalt des Artikels diskutiert die potenzielle Gefahr einer Superintelligenten KI und die Bemühungen von OpenAI, Wege zu finden, um diese zu kontrollieren und sicherzustellen, dass sie den Absichten der Menschheit folgt. Das hat verschiedene gesellschaftspolitische Auswirkungen: 1. Bewusstsein für mögliche Risiken: Die Diskussion über Superintelligente KI und ihre potenzielle Bedrohung für die Menschheit sensibilisiert die Öffentlichkeit und Entscheidungsträger für die möglichen negativen Auswirkungen dieser Technologie. 2. Regulierung und Kontrolle: Die Bemühungen von OpenAI, eine eigene KI zu entwickeln, um die Kontrolle über eine Superintelligente KI sicherzustellen, könnten zu einer verstärkten Regulierung und Kontrolle von KI-Systemen führen. Dies könnte Auswirkungen auf die Entwicklung und Implementierung von KI in verschiedenen Bereichen der Gesellschaft haben. 3. Ethik und Verantwortung: Die Diskussion über die Kontrolle von Superintelligenter KI wirft auch Fragen der Ethik und Verantwortung auf. Es stellt sich die Frage, wer für die Handlungen und Entscheidungen von KI-Systemen verantwortlich ist und wie ethische Prinzipien in die Entwicklung und Nutzung dieser Technologie integriert werden können. 4. Zusammenarbeit zwischen Mensch und Maschine: OpenAI betont die enge Zusammenarbeit zwischen KI-Systemen und menschlichen Wissenschaftlern, um sicherzustellen, dass die KI-Systeme auf menschliche Werte und Absichten ausgerichtet sind. Dies deutet auf eine Veränderung der Zusammenarbeit zwischen Mensch und Maschine hin und könnte Auswirkungen auf Arbeitsstrukturen und Rollen in der Zukunft haben. Insgesamt hat der Inhalt des Artikels das Potenzial, das Bewusstsein für die Problematik von Superintelligenter KI zu schärfen und den Diskurs über Regulierung, Ethik und Zusammenarbeit zwischen Mensch und Maschine zu fördern.

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Welche wirtschaftlichen Auswirkungen hat der Inhalt dieses Artikels?

Der Inhalt des Artikels hat potenziell weitreichende wirtschaftliche Auswirkungen. Die Schaffung einer Superintelligenz und die Entwicklung von Kontrollmechanismen für KI-Systeme erfordern erhebliche Investitionen in Forschung und Technologie. OpenAI plant, einen beträchtlichen Teil seiner Rechenleistung für diese Zwecke einzusetzen. Dies könnte zu einer verstärkten Nachfrage nach hochqualifizierten KI-Experten führen und die KI-Forschungs- und Entwicklungsbranche weiter antreiben. Darüber hinaus könnten Unternehmen, die erfolgreich leistungsfähige KI-Systeme entwickeln und kontrollieren können, einen Vorsprung bei der Nutzung und Vermarktung dieser Technologien haben. Insgesamt wird der Artikel eine Diskussion über die Auswirkungen und Herausforderungen von Super-KI auf die Wirtschaft auslösen.

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Innovationsmanager:in?

Als Innovationsmanager:in spielt der Artikel eine relevante Rolle, da er auf die mögliche Bedrohung einer Super-KI hinweist und die Bemühungen von OpenAI, diese zu kontrollieren. Dies zeigt, dass die Entwicklung und Erforschung von KI-Systemen weiterhin von großer Bedeutung ist, aber auch potenzielle Risiken birgt. Als Innovationsmanager:in sollten Sie sich mit diesen Fortschritten sowie den Möglichkeiten und Risiken auseinandersetzen, um sicherzustellen, dass Ihre Organisation von den Vorteilen der KI profitieren kann und gleichzeitig mögliche Bedrohungen im Blick behält.

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Investor:in?

Für Investoren ist der Inhalt dieses Artikels relevant, da er auf die potenziellen Risiken und Herausforderungen hinweist, die mit der Entwicklung von Superintelligenten KI-Systemen verbunden sind. Das Engagement von OpenAI zur Kontrolle und Ausrichtung solcher Systeme unterstreicht die Bedeutung von ethischen und sicherheitsrelevanten Aspekten bei der Weiterentwicklung von KI-Technologien. Investoren sollten sich daher über die Fortschritte und Maßnahmen in diesem Bereich informieren und mögliche Auswirkungen auf Unternehmen und Branchen berücksichtigen, die in der KI-Forschung und -Entwicklung tätig sind.

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Politiker:in?

Als Politiker:in ist es wichtig, auf dem aktuellen Stand der Technologieentwicklung zu sein, um politische Entscheidungen treffen zu können, die den gesellschaftlichen Fortschritt fördern und potenzielle Risiken reduzieren. Das Thema der Superintelligenz und der Kontrolle von KI-Systemen, wie in diesem Artikel erwähnt, betrifft die zukünftige Entwicklung der KI und deren potenzielle Auswirkungen auf die Menschheit. Durch die Kenntnis und das Verständnis dieser Entwicklungen können Politiker:innen politische Rahmenbedingungen schaffen, die die Sicherheit und den Nutzen von KI gewährleisten und gleichzeitig ethische Bedenken berücksichtigen.

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Was könnte das Bigger Picture von den Inhalten dieses Artikels sein?

Der Artikel beleuchtet das Thema der potenziellen Auslöschung der Menschheit durch eine Superintelligente KI und wie das Unternehmen OpenAI dieses Risiko angeht. OpenAI hat ein neues Team gegründet, um Wege zu finden, eine solche KI zu kontrollieren und sicherzustellen, dass sie den Absichten der Menschen folgt. Sie planen, eine eigene Aufpasser-KI zu entwickeln, die anpassungen an KI-Systemen vornehmen kann. Dieser Artikel verdeutlicht die wachsenden Bedenken der Tech-Industrie bezüglich der Kontrolle und Auswirkungen hochentwickelter KI-Systeme auf die Menschheit und zeigt den Einsatz von OpenAI zur Lösung dieser Herausforderungen.

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Wer sind die relevantesten Personen in diesem Artikel?

  • Ilya Sutskever
  • Jan Leike

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Wer sind die relevantesten Organisationen in diesem Artikel?

Die relevantesten Organisationen und Unternehmen in diesem Artikel sind:
  • OpenAI

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern