06.07.2023

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

Systeme, die auf künstlicher Intellligenz (KI) basieren, werden immer intelligenter. Ein neues Forschungsteam von OpenAI soll nun herausfinden, wie sich KI in Zukunft kontrollieren lässt.
/artikel/super-ki-openai-will-ausloeschung-der-menschheit-verhindern
OpenAI
Bild: (c) Mariia Shalabaieva/Unsplash

Immer wieder warnten Tech-Leaders in den letzten Jahren vor einer Super-KI, welche die Menschheit auslöschen könnte. Eine Befragung unter Top-CEOs in den USA zeigte im Juni, dass 40 Prozent die Auslöschung der Menschheit durch KI fürchten. Derzeit sind wir noch weit von einer solchen Situation entfernt. Dennoch machen sich kluge Köpfe bereits jetzt Gedanken, wie man eine Super-KI kontrollieren könnte.

Die Super-KI soll menschlichen Absichten folgen

Am Mittwoch verkündete OpenAI in einem Blogartikel die Gründung eines neuen Teams, das Mittel und Wege entwickeln soll, eine solche Super-KI zu kontrollieren. Geleitet wird das neue Team von Ilya Sutskever, dem Chief Scientist von OpenAI und von Jan Leike. Die Forschungsfrage, die das neu geschaffene Team bearbeiten soll, lautet: „Wie stellen wir sicher, dass KI-Systeme, die viel intelligenter sind als Menschen, menschlichen Absichten folgen?“

OpenAI geht davon aus, dass die derzeitigen Kontrollmittel nicht dauerhaft genügen, um eine immer leistungsfähigere KI zu „beaufsichtigen“. Es brauche deshalb mehr Forschung und Technik in diesem Bereich, so OpenAI. Konkret will OpenAI 20 Prozent seiner der Rechenleistung diesem Zweck widmen. Innerhalb von vier Jahren will OpenAI dann das Projekt „Superintelligence Alignment“ abschließen.

Eigene Aufpasser-KI soll trainiert werden

Konkret will das Team eine eigene KI schaffen, die es „Human-level Automated Alignment Researcher“ nennt – also eine Art Aufpasser-KI. Sie soll Justierungen an KI-Systemen vornehmen können, damit diese auch in Zukunft im Sinne der Menschheit handelt.

„Wenn wir diesbezüglich Fortschritte machen, können unsere KI-Systeme immer mehr unserer Justierungsarbeit übernehmen und letztendlich bessere Justierungstechniken ausarbeiten, implementieren, studieren und entwickeln, als wir es jetzt haben“, schrieben Leike und weitere OpenAI-Forscher im August 2022 in einem Blogartikel.

Enge Zusammenarbeit mit menschlichen Wissenschaftlern

Die neuen KI-Forschungssysteme würden dann „mit Menschen zusammenarbeiten, um sicherzustellen, dass ihre eigenen Nachfolger stärker auf Menschen ausgerichtet sind“, so Lemke und seine Kollegen. Menschliche Wissenschaftler:innen würden ihre Bemühungen in Zukunft stattdessen stärker auf die Überprüfung der von KI-Systemen durchgeführten Forschung konzentrieren, anstatt diese Forschung selbst zu generieren.

Deine ungelesenen Artikel:
27.07.2026

Vom Web3-Pionier zum KI-Unternehmer: Wie Ed Prinz KI-Agenten in die KMU bringt

Ed Prinz kennt man in der Wiener Web3-Szene seit Jahren. Jetzt hat der Gründer mit der Plattform bitpull.ai einen neuen Fokus: KI-Agenten, die für Klein- und Mittelbetriebe ans Telefon gehen. Als Mentor an seiner Seite: Inode-Mitgründer Peter Augustin. brutkasten hat die beiden am Business Angel Summit in Kitzbühel getroffen.
/artikel/vom-web3-pionier-zum-ki-unternehmer-wie-ed-prinz-ki-agenten-in-die-kmu-bringt
27.07.2026

Vom Web3-Pionier zum KI-Unternehmer: Wie Ed Prinz KI-Agenten in die KMU bringt

Ed Prinz kennt man in der Wiener Web3-Szene seit Jahren. Jetzt hat der Gründer mit der Plattform bitpull.ai einen neuen Fokus: KI-Agenten, die für Klein- und Mittelbetriebe ans Telefon gehen. Als Mentor an seiner Seite: Inode-Mitgründer Peter Augustin. brutkasten hat die beiden am Business Angel Summit in Kitzbühel getroffen.
/artikel/vom-web3-pionier-zum-ki-unternehmer-wie-ed-prinz-ki-agenten-in-die-kmu-bringt
Ed Prinz | Foto: Ed Prinz / Hintergrund Canva

Wer in den vergangenen Jahren auf Wiener Blockchain-Events unterwegs war, ist an Ed Prinz kaum vorbeigekommen. Seit fast acht Jahren gestaltet er die Blockchain- und Web3-Landschaft als Berater, Projektleiter und Organisator. Neben der Umsetzung zahlreicher Education-Events, Workshops und Meetups verantwortete er unter anderem die Vienna Blockchain Week und unterstützte Unternehmen bei der Entwicklung von Blockchain-Projekten. „Nur wenn man darüber spricht, nimmt man den Menschen die Ängste“, sagt Prinz über seine Motivation, Wissen zu vermitteln und die Community zusammenzubringen. Mit seinem Unternehmen neob hat der Wiener Gründer nun allerdings ein Thema in den Mittelpunkt gerückt, das mit Token und Settlement Layern nur noch die technologische DNA teilt: Agentic AI.

Der Umweg über das Weinviertel

Der Einstieg in das Thema erfolgte über den Kryptomarkt. Gemeinsam mit seinem Team entwickelte Prinz zunächst moonlytics.ai, ein KI-basiertes Portfolio-Management-System für Crypto Asset Manager. Daraus entstand später moonboard.ai, eine Analyseplattform für Krypto-Investoren, die mithilfe mehrerer KI-Agenten Social Media, Markt- und Liquiditätsdaten sowie Nachrichten auswertet und daraus verschiedene Scoring-Modelle für die Identifikation aussichtsreicher Krypto-Assets berechnet.

Die eigentliche Wendung brachte dann eine Anfrage aus dem Freundeskreis: Ein befreundeter Winzer aus dem Weinviertel wollte einen Webshop. Das neob-Team baute den Shop und setzte obendrauf, was es ohnehin schon konnte: einen KI-Agenten. So entstand der „AI Sommelier“ von stich.wine, ein Assistent, der Kund:innen im Webshop berät, Weine empfiehlt und bis zum Kaufabschluss begleitet. Mit dem Projekt wollte man auch international sichtbar werden, etwa auf der Weinmesse ProWein in Düsseldorf und beim Meininger Award.

Der Zeitpunkt war günstig, wie Prinz einräumt: Die Weinbranche steckt angesichts sinkenden Konsums in den USA und Europa in einer Krise. Eine innovative Lösung, die neue Kaufanreize schafft, sei entsprechend gut angekommen.

In wenigen Minuten zum eigenen KI-Agenten

Aus dem Proof of Concept ist eine Plattform geworden: bitpull.ai. Unternehmen erstellen dort laut Prinz in wenigen Minuten einen eigenen KI-Agenten und passen ihn auf ihren Use Case an, ganz ohne Programmierkenntnisse. Danach ist der Agent überall dort im Einsatz, wo Kunden anklopfen: auf der Website, am Telefon mit eigener Rufnummer, auf WhatsApp und Telegram bis hin zur E-Mail. Er beantwortet wiederkehrende Anfragen, bucht Termine oder leitet an die richtige Stelle weiter: rund um die Uhr, in über 90 Sprachen und, wie Prinz betont, „immer freundlich und geduldig“.

Die Zielgruppe sind vor allem KMU: der Friseursalon, die Kfz-Werkstatt, die Tierarztpraxis, das Hotel. Beim Vertrieb setzt Prinz auf den denkbar direktesten Weg: Er spricht Unternehmer:innen an, denen er ohnehin begegnet, und zeigt ihnen eine Live-Demo. „Die meisten verstehen sofort, worum es geht, und haben selbst gleich wieder hundert neue Ideen“, erzählt der Gründer. Ergänzt wird der persönliche Verkauf durch Vertriebspartner, die mit Provisionen zwischen 15 und 30 Prozent beteiligt sind, sowie Affiliate-Programme. In einem nächsten Schritt sollen Kaltakquise und Meta Ads dazukommen.

Am Markt ist neob damit freilich nicht allein: Voice- und Agenten-Lösungen für KMU sind derzeit eines der am dichtesten besetzten Felder im AI-Bereich. Prinz reklamiert für bitpull.ai dennoch ein Alleinstellungsmerkmal: Man sei aktuell einer der wenigen Anbieter, der Agenten-Erstellung samt Knowledge Base über mehrere Kanäle in wenigen Minuten ermögliche, bei einer Marge von 90 Prozent, so seine Darstellung.

Bootstrapped, mit Mentor an der Seite

Finanziert ist das alles bislang aus eigener Tasche. „Ich war schon lange in der Berufswelt tätig und hab mir ein kleines Pölsterchen zur Seite gelegt“, sagt Prinz. Externe Investoren gibt es keine, und aktuell auch keinen akuten Bedarf: Das nächste Etappenziel für 2026 sind 100 zahlende Kunden, danach soll die Marke von 1.000 Kunden fallen.

Begleitet wird Prinz dabei von einem prominenten Mentor: Peter Augustin, einer der Internet-Pioniere des Landes. Augustin gründete 1996 gemeinsam mit Michael Gredenberg den Internetprovider Inode, der aus kleinsten Anfängen zum größten privaten Provider Österreichs heranwuchs und Ende 2005 für einen kolportierten dreistelligen Millionenbetrag an UPC verkauft wurde. Zuletzt war Augustin vor allem als Web3-Investor aktiv, unter anderem gemeinsam mit dem von David Teufel aufgesetzten Fonds Tigris Web3.

Die ersten vier Jahre führten Gredenberg und Augustin Inode komplett zu zweit, ohne Mitarbeiter. „Da kriegst du einfach die besten Learnings“, erinnert sich Augustin: „Du hast deine Technik, du hast dein Produkt und du verkaufst.“ Das Projekt von Prinz erinnere ihn stark an die eigene Anfangszeit im Internet-Boom: „Du hast kein Branchenlimit. Du kannst es einem Anwalt verkaufen, einem Arzt, einer Autowerkstatt, einem Architekten.“ Der Bedarf sei damals wie heute praktisch zu hundert Prozent vorhanden gewesen, man habe nur den Markt einfangen müssen: „Genau in der Phase sind wir jetzt.“

Investiert ist Augustin bei neob übrigens nicht, wie beide betonen. Die Beziehung sei freundschaftlich, Augustin coacht. Perspektivisch sieht er sich aber durchaus auf der Investorenseite, „wenn es eines Tages dazu kommen sollte“. Momentan sei das schlicht nicht notwendig: „Das Produkt verkauft sich von selber.“

Die wichtigste Lektion aus dem Mentoring? Für Prinz ist es der Fokus auf den Vertrieb: Wer Product-Market-Fit finden wolle, müsse in erster Linie lernen, das eigene Produkt selbst zu verkaufen, und über das direkte Kundenfeedback prüfen, ob es überhaupt ein konkretes Problem löst.

AI Act als Pflichtprogramm, Krypto als Geduldsspiel

Beim Thema Regulierung gibt sich Prinz gelassen: Dieses sei von Anfang an mitgedacht worden. Die Transparenzpflichten des EU AI Acts (Art. 50) setze die Plattform standardmäßig um: Anrufer wie Website-Besucher werden zu Beginn jeder Interaktion darauf hingewiesen, dass sie mit einem KI-System sprechen, im Gespräch selbst ebenso wie in schriftlicher Form. Auch beim Datenschutz orientiert sich bitpull.ai an europäischen Standards: Die Verarbeitung erfolgt DSGVO-konform auf Servern in der EU, Auftragsverarbeitungsverträge stellt das Unternehmen seinen Kunden standardmäßig bereit. Eine Übergabe an einen menschlichen Mitarbeiter bleibt (je nach Konfiguration) jederzeit möglich.

Und die alte Heimat Krypto? Dort sieht Prinz ein gespaltenes Bild: Auf institutioneller Seite gebe es dank Regulierung immer mehr Adoption, auf der Retail-Seite komme davon derzeit wenig an. Es fehle schlicht an sinnvollen Produkten mit guter Usability, und „es hat ziemlich oft verbrannte Erde gegeben, weil viele sehr viel Geld verloren haben“.

Vorerst gehört die Aufmerksamkeit des Gründers also den Agenten. Aktuell ist neob bewusst breit aufgestellt, um herauszufinden, welche Branche und welche Nische am besten funktioniert. Danach, so der Plan, geht es spitz hinein.

Toll dass du so interessiert bist!
Hinterlasse uns bitte ein Feedback über den Button am linken Bildschirmrand.
Und klicke hier um die ganze Welt von der brutkasten zu entdecken.

brutkasten Newsletter

Aktuelle Nachrichten zu Startups, den neuesten Innovationen und politischen Entscheidungen zur Digitalisierung direkt in dein Postfach. Wähle aus unserer breiten Palette an Newslettern den passenden für dich.

Montag, Mittwoch und Freitag

AI Summaries

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Welche gesellschaftspolitischen Auswirkungen hat der Inhalt dieses Artikels?

Der Inhalt des Artikels diskutiert die potenzielle Gefahr einer Superintelligenten KI und die Bemühungen von OpenAI, Wege zu finden, um diese zu kontrollieren und sicherzustellen, dass sie den Absichten der Menschheit folgt. Das hat verschiedene gesellschaftspolitische Auswirkungen: 1. Bewusstsein für mögliche Risiken: Die Diskussion über Superintelligente KI und ihre potenzielle Bedrohung für die Menschheit sensibilisiert die Öffentlichkeit und Entscheidungsträger für die möglichen negativen Auswirkungen dieser Technologie. 2. Regulierung und Kontrolle: Die Bemühungen von OpenAI, eine eigene KI zu entwickeln, um die Kontrolle über eine Superintelligente KI sicherzustellen, könnten zu einer verstärkten Regulierung und Kontrolle von KI-Systemen führen. Dies könnte Auswirkungen auf die Entwicklung und Implementierung von KI in verschiedenen Bereichen der Gesellschaft haben. 3. Ethik und Verantwortung: Die Diskussion über die Kontrolle von Superintelligenter KI wirft auch Fragen der Ethik und Verantwortung auf. Es stellt sich die Frage, wer für die Handlungen und Entscheidungen von KI-Systemen verantwortlich ist und wie ethische Prinzipien in die Entwicklung und Nutzung dieser Technologie integriert werden können. 4. Zusammenarbeit zwischen Mensch und Maschine: OpenAI betont die enge Zusammenarbeit zwischen KI-Systemen und menschlichen Wissenschaftlern, um sicherzustellen, dass die KI-Systeme auf menschliche Werte und Absichten ausgerichtet sind. Dies deutet auf eine Veränderung der Zusammenarbeit zwischen Mensch und Maschine hin und könnte Auswirkungen auf Arbeitsstrukturen und Rollen in der Zukunft haben. Insgesamt hat der Inhalt des Artikels das Potenzial, das Bewusstsein für die Problematik von Superintelligenter KI zu schärfen und den Diskurs über Regulierung, Ethik und Zusammenarbeit zwischen Mensch und Maschine zu fördern.

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Welche wirtschaftlichen Auswirkungen hat der Inhalt dieses Artikels?

Der Inhalt des Artikels hat potenziell weitreichende wirtschaftliche Auswirkungen. Die Schaffung einer Superintelligenz und die Entwicklung von Kontrollmechanismen für KI-Systeme erfordern erhebliche Investitionen in Forschung und Technologie. OpenAI plant, einen beträchtlichen Teil seiner Rechenleistung für diese Zwecke einzusetzen. Dies könnte zu einer verstärkten Nachfrage nach hochqualifizierten KI-Experten führen und die KI-Forschungs- und Entwicklungsbranche weiter antreiben. Darüber hinaus könnten Unternehmen, die erfolgreich leistungsfähige KI-Systeme entwickeln und kontrollieren können, einen Vorsprung bei der Nutzung und Vermarktung dieser Technologien haben. Insgesamt wird der Artikel eine Diskussion über die Auswirkungen und Herausforderungen von Super-KI auf die Wirtschaft auslösen.

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Innovationsmanager:in?

Als Innovationsmanager:in spielt der Artikel eine relevante Rolle, da er auf die mögliche Bedrohung einer Super-KI hinweist und die Bemühungen von OpenAI, diese zu kontrollieren. Dies zeigt, dass die Entwicklung und Erforschung von KI-Systemen weiterhin von großer Bedeutung ist, aber auch potenzielle Risiken birgt. Als Innovationsmanager:in sollten Sie sich mit diesen Fortschritten sowie den Möglichkeiten und Risiken auseinandersetzen, um sicherzustellen, dass Ihre Organisation von den Vorteilen der KI profitieren kann und gleichzeitig mögliche Bedrohungen im Blick behält.

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Investor:in?

Für Investoren ist der Inhalt dieses Artikels relevant, da er auf die potenziellen Risiken und Herausforderungen hinweist, die mit der Entwicklung von Superintelligenten KI-Systemen verbunden sind. Das Engagement von OpenAI zur Kontrolle und Ausrichtung solcher Systeme unterstreicht die Bedeutung von ethischen und sicherheitsrelevanten Aspekten bei der Weiterentwicklung von KI-Technologien. Investoren sollten sich daher über die Fortschritte und Maßnahmen in diesem Bereich informieren und mögliche Auswirkungen auf Unternehmen und Branchen berücksichtigen, die in der KI-Forschung und -Entwicklung tätig sind.

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Politiker:in?

Als Politiker:in ist es wichtig, auf dem aktuellen Stand der Technologieentwicklung zu sein, um politische Entscheidungen treffen zu können, die den gesellschaftlichen Fortschritt fördern und potenzielle Risiken reduzieren. Das Thema der Superintelligenz und der Kontrolle von KI-Systemen, wie in diesem Artikel erwähnt, betrifft die zukünftige Entwicklung der KI und deren potenzielle Auswirkungen auf die Menschheit. Durch die Kenntnis und das Verständnis dieser Entwicklungen können Politiker:innen politische Rahmenbedingungen schaffen, die die Sicherheit und den Nutzen von KI gewährleisten und gleichzeitig ethische Bedenken berücksichtigen.

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Was könnte das Bigger Picture von den Inhalten dieses Artikels sein?

Der Artikel beleuchtet das Thema der potenziellen Auslöschung der Menschheit durch eine Superintelligente KI und wie das Unternehmen OpenAI dieses Risiko angeht. OpenAI hat ein neues Team gegründet, um Wege zu finden, eine solche KI zu kontrollieren und sicherzustellen, dass sie den Absichten der Menschen folgt. Sie planen, eine eigene Aufpasser-KI zu entwickeln, die anpassungen an KI-Systemen vornehmen kann. Dieser Artikel verdeutlicht die wachsenden Bedenken der Tech-Industrie bezüglich der Kontrolle und Auswirkungen hochentwickelter KI-Systeme auf die Menschheit und zeigt den Einsatz von OpenAI zur Lösung dieser Herausforderungen.

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Wer sind die relevantesten Personen in diesem Artikel?

  • Ilya Sutskever
  • Jan Leike

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern

AI Kontextualisierung

Wer sind die relevantesten Organisationen in diesem Artikel?

Die relevantesten Organisationen und Unternehmen in diesem Artikel sind:
  • OpenAI

Superintelligente KI: Team von OpenAI soll Auslöschung der Menschheit verhindern