02.06.2023

„Human or not?“: In diesem Chat muss man erkennen, ob man mit einer AI spricht

Zwei Minuten Chat, dann muss man entscheiden: Human or not? Und gar nicht wenige Proband:innen liegen daneben.
/artikel/human-or-not-ki-chatbot
(c) Nice M Nshuti via Unsplash

Man klickt auf „Start Game“, dann wartet man kurz. Entweder startet das Gegenüber den Chat, oder man selbst wird dazu aufgefordert. Nun bleiben zwei Minuten Zeit für eine kurze Konversation. Am Ende muss man entscheiden: Mensch oder KI? Hat man mit einem anderen User oder mit einem Chatbot getippt? Die Antwort wird prompt geliefert. So funktioniert „Human or not?“ des israelischen KI-Scaleups AI21 Labs.

Großangelegtes Turing-Experiment

Das Spiel dient nicht nur zum Selbsttest oder zur Belustigung. Tatsächlich handelt es sich dabei um ein großangelegtes Turing-Experiment. Die „Spielregeln“ dafür wurden bereit in den 1950er-Jahren vom britischen Mathematiker Alan Turing definiert – damals rein hypothetisch: Wenn eine Maschine ihr menschliches Gegenüber davon überzeugen kann, dass sie ein Mensch ist, hat sie den „Turing-Test“ bestanden. [Anm: Der Wissenschaftler konzipierte damals ein Setting, in dem die Testperson blind mit zwei Gesprächspartner:innen konfrontiert wird, von denen nur eine:r ein Mensch ist.]

human or not?
Screenshot www.humanornot.ai: Beim Chat-Partner (weiß) handelt es sich um eine KI

„Human or not?“-Chatbot täuscht Nutzer:innen in 40 Prozent der Konversationen

Und tatsächlich gelingt es der „Human or not?“-KI, die auf GPT-4 von OpenAI und dem hauseigenen Sprachmodell Jurassic-2 basiert, gar nicht so selten, Spieler:innen zu täuschen. Das Spiel ist seit Mitte April online und wurde seitdem laut des AI21 Labs von mehr als 1,5 Millionen Menschen ausprobiert, die insgesamt mehr als zehn Millionen Konversationen führten. Nun veröffentlichte das Unternehmen einen Zwischenbericht mit Statistiken.

Demnach lagen die „Human or not?“-User:innen in 68 Prozent der Fälle richtig mit ihrer Einschätzung. Während die Testpersonen allerdings ein menschliches Gegenüber in 73 Prozent der Konversationen korrekt identifizierten, schaffen sie das bei einem KI-Gesprächspartner nur in 60 Prozent der Fälle. Anders gesagt, die Künstliche Intelligenz schafft es in 40 Prozent der Chats, ihr Gegenüber erfolgreich zu täuschen und somit den abgewandelten Turing-Test zu bestehen.

Franzos:innen liegen öfter richtig

Während das Geschlecht der Proband:innen bei der Einschätzung kaum relevant ist (Frauen liegen 67,7, Männer in 67,4 Prozent der Fälle richtig), gibt es etwas größere Unterschiede zwischen den Herkunftsländern und den Altersgruppen der Testpersonen. Positiv stechen Spieler:innen aus Frankreich heraus mit 71,3 Prozent richtigen Einschätzungen, negativ Personen aus Indien mit nur 63,5 Prozent. Von den Altersgruppen liegen die 35- bis 44-Jährigen mit 67,8 Prozent am häufigsten richtig. Am häufigsten täuschen lassen sich die 55- bis 64-Jährigen sowie die über 65-Jährigen (jeweils 66,2 Prozent korrekte Einschätzungen).

(c) AI21 Labs
(c) AI21 Labs

Strategien, um der „Human or not?“-KI nicht auf den Leim zu gehen

AI21 Labs wertete auch die von Nutzer:innen eingegebenen Phrasen aus und leitete daraus typische Strategien ab, Mensch von KI zu unterscheiden. So würden Proband:innen etwa von der Annahme ausgehen, dass der Chatbot keine Rechtschreib- und Grammatik-Fehler macht und keine Slang-Ausdrücke nutzt. Tatsächlich wurde er aber auch darauf trainiert. User:innen versuchen es häufig mit persönlichen Fragen oder Fragen zu aktuellen Ereignissen – auch darauf kann die „Human or not?“-KI erstaunlich gut antworten. Gar nicht wenige Spieler:innen schließlich geben sich selbst als KI-Chatbot aus – was ihnen laut dem Startup tendenziell nicht so gut gelingt.

Deine ungelesenen Artikel:
08.10.2026

KI als Nachhilfe: Wie mathion.ai Lernen verändern will

Mathion.ai erstelle nicht einfach nur Lösungen für Mathematikaufgaben, sondern begleite die Schüler durch gezieltes Fragen auf dem Weg dorthin. In Zukunft soll die KI auch im B2B-Bereich angeboten werden.
/artikel/ki-als-nachhilfelehrer-wie-mathion-ai-lernen-veraendern-will
08.10.2026

KI als Nachhilfe: Wie mathion.ai Lernen verändern will

Mathion.ai erstelle nicht einfach nur Lösungen für Mathematikaufgaben, sondern begleite die Schüler durch gezieltes Fragen auf dem Weg dorthin. In Zukunft soll die KI auch im B2B-Bereich angeboten werden.
/artikel/ki-als-nachhilfelehrer-wie-mathion-ai-lernen-veraendern-will
Die beiden Geschäftsführer von mathion.ai Christoph Blizenetz und Alexander Buchinger | © mathion.ai

„Nächste Stunde ist Mathestunde“, ist vermutlich einer der gefürchtesten Sätze vieler Schüler:innen. Die Aufgaben sind oft schwierig und zermürbend. Da bietet es sich im Zeitalter von KI an, einen kurzen Prompt zu schreiben und Sekunden später wird die Lösung geliefert. Der Lerneffekt hält sich dabei bei vielen Schüler:innen in Grenzen. Hier setzt mathion.ai an.

Die KI von Founder Christoph Blizenetz liefert nicht fertige Lösungen, sondern chattet mit den User:innen und bringt sie so zum Ergebnis. Nach einem Pilotprojekt feierte die KI ihren Launch im vergangenen August. Sie ist in der Schweiz, Deutschland und Österreich erhältlich.

Harvard: „KI-gestütztes Tutoring übertrifft aktives Lernen im Unterricht“

Unterstützung erhalten KI-Tutoren wie jene von Blizenetz von der US-amerikanischen Harvard Universität. Im Juni 2025 veröffentlichte sie eine Studie, laut der KI-gestütztes Tutoring aktives Lernen im Unterricht übertreffe. Studierende, die mit einem KI-Tutor arbeiteten, lernten „deutlich mehr in kürzerer Zeit“ als in einer Präsenzveranstaltung. Außerdem würden sich Schüler:innen stärker eingebunden und motivierter fühlen. Harvard betont die Wirksamkeit „einer breit zugänglichen KI-gestützten Pädagogik zur signifikanten Verbesserung der Lernergebnisse“ und erklärt, dass die Ergebnisse überzeugend für die breite Anwendung einer KI-gestützten Pädagogik sprechen.

ChatGPT bringt dir Fertigkeiten bei, „die einfach nicht stimmen“

Für Blizenetz kann nicht einfach eine beliebige KI zum Lernen verwendet werden. Als ehemaliger Nachhilfelehrer kennt er die Probleme, die auftreten können. „Eine Schülerin hat mittels ChatGPT, das war damals noch etwas Neueres, gelernt und sich dabei Fertigkeiten und Begrifflichkeiten angeeignet, die einfach nicht stimmen“, sagt der 21-Jährige und ergänzt: „Nicht, weil das Opus der Mathematik aus der KI bzw. der LLM falsch ist. Es ist einfach nicht so lehrplanbezogen, wie es nun einmal das Schulbuch aber auch eine Lehrkraft ist.“

Daher begann Blizenetz mit der Entwicklung von mathion.ai, das sich aktuell auf die fünfte bis zur achten Schulstufe fokussiere. Es sei aber ein Ausbau bis hin zu Matura geplant.

Das Programm baut auf einem sogenannten „sokratischen“ System auf. Es stellt User:innen immer wieder Fragen, bis jene die Lösung selbst erarbeitet haben. Mathion.ai möchte dadurch zum Nachdenken anregen.

Dabei kann mit der KI geschrieben als auch gesprochen werden. „Wir haben gemerkt, dass junge Menschen einfach lesefaul sind. Sie können oft einfach nicht mehr wirklich sachlich lesen und Informationen über Texte sauber aufnehmen“, erklärt der mathion.ai-Gründer. Der Text wird dabei nicht einfach vorgelesen, sondern erklärt, „wie es ein Mensch tun würde“.

Mathion.ai liefere nicht einfach nur Ergebnisse, es erarbeite die Lösungen mit den Schüler:innen gemeinsam. | © mathion.ai

Standardisierter Lehrplan

Mathion.ai arbeite dabei nicht nur mit willkürlichen Inhalten, sondern mit einem standardisierten Lehrplan durch seinen Verlagspartner Lemberger, dessen Schulbuch „Genial! Mathematik“ von der fünften bis zur achten Schulstufe in mathion.ai eingefügt wurde. User:innen können Aufgaben aus diesen Büchern auswählen.

Lehrer:innen haben auf der anderen Seite die Möglichkeit über ein Verwaltungsportal ihren Schützlingen Inhalte zuzuweisen. „Da haben wir tausende Übungsaufgaben, die auch kapitelweise in Blöcke gezielt nach Themenbereichen zugewiesen werden können, zu den Schüler:innen und zu den Gruppen“, sagt Blizenetz. Zusätzlich können Lehrkräfte im Verwaltungsportal die Lernstände ihrer Schüler:innen einsehen und auch Inhalte erstellen: „Wir haben da einen eigenen Editor, wo, wie in einer PowerPoint, Textelemente, Dateien, interaktive Aufgaben gebaut und erstellt werden können.“ Der virtuelle Coach Tom führt anschließend durch den Kurs. Zusätzlich können von Lehrer:innen Aufgaben erstellt und zugewiesen werden.

Pädagog:innen durch KI zu ersetzen „ist auch gar nicht unser Ziel“

Wenn die KI bereits eigene Kurse halten kann, drängt sich naturgemäß die Frage auf, ob Lehrkräfte nicht ersetzbar sind. „Weder Lehrpersonen noch Pädagogen wird man durch KI in irgendeiner Art und Weise wirklich ersetzen können, das ist auch gar nicht unser Ziel“, stellt der TU-Student fest. Auch herkömmliche Nachhilfe sieht Blizenetz als sinnvoll an. Für ihn ist mathion.ai eine „Ergänzung“.

Es gebe auch die Möglichkeit für Nachhilifeinstitute, Inhalte einspielen zu können. „Als Schüler bzw. Schülerin habe ich den Unterricht mit der Lehrperson in der Klasse und im Nachhinein kann ich dann die Inhalte, gezielt mit den Aufgaben und dem Input der Lehrperson, weiter üben“, sagt Blizenetz.

Von B2C zu B2B

Mathion.ai kommt ursprünglich aus dem sogenannten Nachmittagsmarkt, in dem Eltern für ihre Kinder ein Abo abschließen. Allerdings möchte sich das Unternehmen nun im B2B-Bereich etablieren.

„Es ist einfach sehr schwierig, vor allem als österreichisches Unternehmen, in diesem B2C-SaaS-Bereich (Anm.: Software-as-a-Service-Bereich) wirklich standhaft zu werden“, erklärt Blizenetz. In Zukunft will sich mathion.ai auf Bildungsinstitute bzw. Bildungseinrichtungen fokussieren. Daher möchte der Gründer sein Unternehmen als zertifizierter Anbieter des Bildungsministeriums auf dem Markt etablieren. Das sei aber ein langer Weg. Mathion.ai befinde sich aktuell am Anfang des Genehmigungsverfahrens, ab September 2027 wolle man die Zertifizierung haben.

100 % eigenfinanziert

Das Unternehmen, offiziell bereits im Juli 2025 gegründet, kommt bisher ohne Investoren-Kapital aus und ist von Anfang an gebootstrappt. Blizenetz hat mathion.ai in Zusammenarbeit mit Weitsprung Solutions aufgebaut, das einen KI-gestützten Lerncoach anbietet. Bisher hat das Unternehmen noch keine Förderungen erhalten, allerdings laufe ein Förderantrag bei Netidee und ein FFG-Antrag für ein Forschungsprojekt werde aktuell erstellt.

Toll dass du so interessiert bist!
Hinterlasse uns bitte ein Feedback über den Button am linken Bildschirmrand.
Und klicke hier um die ganze Welt von der brutkasten zu entdecken.

brutkasten Newsletter

Aktuelle Nachrichten zu Startups, den neuesten Innovationen und politischen Entscheidungen zur Digitalisierung direkt in dein Postfach. Wähle aus unserer breiten Palette an Newslettern den passenden für dich.

Montag, Mittwoch und Freitag

AI Summaries

„Human or not?“: In diesem Chat muss man erkennen, ob man mit einer AI spricht

AI Kontextualisierung

Welche gesellschaftspolitischen Auswirkungen hat der Inhalt dieses Artikels?

Die gesellschaftspolitischen Auswirkungen dieses Artikels sind sehr vielfältig. Einerseits zeigt es den Fortschritt der Künstlichen Intelligenz und wie sie immer menschlicher wird. Andererseits wirft es ethische Fragen auf, ob Künstliche Intelligenz und menschliche Intelligenz gleichgestellt werden sollten. Es zeigt auch, wie wichtig es ist, dass die Gesellschaft über die Entwicklung von KI informiert ist, um das Bewusstsein für mögliche Auswirkungen auf die Arbeitsplätze und die Privatsphäre zu stärken.

„Human or not?“: In diesem Chat muss man erkennen, ob man mit einer AI spricht

AI Kontextualisierung

Welche wirtschaftlichen Auswirkungen hat der Inhalt dieses Artikels?

Der Erfolg von „Human or not?“ als großangelegtes Turing-Experiment, bei dem es darum geht, ob man mit einer KI oder einem menschlichen Gesprächspartner redet, zeigt die Fähigkeiten der KI-Technologie und ihr Potenzial in verschiedenen Branchen. Unternehmen können diese Technologie nutzen, um die Kommunikation mit ihren Kunden zu verbessern und automatisierte Assistenz- und Support-Systeme zu entwickeln. Gleichzeitig zeigt der Artikel, dass die Technologie immer noch ihre Grenzen hat und noch weiter verbessert werden muss, um menschliche Konversationen vollständig zu simulieren.

„Human or not?“: In diesem Chat muss man erkennen, ob man mit einer AI spricht

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Innovationsmanager:in?

Als Innovationsmanager:in ist es wichtig, sich mit den neuesten Technologien auseinanderzusetzen und immer up-to-date zu sein. Die „Human or not?“-KI ist ein Beispiel für eine Technologie, die die Grenzen zwischen Mensch und Maschine verschwimmen lässt und hat somit potenziell Auswirkungen auf die Entwicklung von KI und ihre Integration in den Arbeitsplatz. Ein Verständnis dafür, wie Mittel zur Unterscheidung von Maschine und Mensch entwickelt werden können, ist daher wichtig für Innovationsmanager:innen, um neue Möglichkeiten zu erschließen, die sich im Bereich KI ergeben.

„Human or not?“: In diesem Chat muss man erkennen, ob man mit einer AI spricht

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Investor:in?

Als Investor:in kann dieser Artikel relevant sein, da er Einblicke in die Fortschritte und Potenziale der Künstlichen Intelligenz gibt. Insbesondere das Experiment des Turing-Tests zeigt, dass KI-Systeme menschenähnliche Fähigkeiten erlangen können. Daher lohnt es sich, die Entwicklungen in diesem Bereich im Auge zu behalten und mögliche Investitionsmöglichkeiten zu evaluieren.

„Human or not?“: In diesem Chat muss man erkennen, ob man mit einer AI spricht

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Politiker:in?

Als Politiker:in ist es wichtig, sich mit aktuellen Entwicklungen im Bereich der künstlichen Intelligenz auseinanderzusetzen, da sie unsere Gesellschaft und Wirtschaft in vielfältiger Weise beeinflussen. Das „Human or not?“-Spiel des israelischen KI-Scaleups AI21 Labs zeigt die immer fortschreitenden Fortschritte im Bereich der KI und verdeutlicht zudem die Schwierigkeit, Mensch und KI voneinander zu unterscheiden. Solche Experimente und Tests können dazu beitragen, unser Verständnis von KI zu verbessern und ihre Auswirkungen auf unsere Gesellschaft und Arbeitswelt besser zu verstehen. Als Politiker:in sollten Sie sich daher mit diesen Entwicklungen auseinandersetzen und über die notwendigen Regulierungen und Maßnahmen nachdenken, um die Vor- und Nachteile von KI in Einklang zu bringen.

„Human or not?“: In diesem Chat muss man erkennen, ob man mit einer AI spricht

AI Kontextualisierung

Was könnte das Bigger Picture von den Inhalten dieses Artikels sein?

Der Turing-Test ist seit langem eine wichtige Fragestellung der KI-Forschung und bleibt auch heute relevant, da KI-Systeme immer ausgefeilter werden. Das israelische AI-Startup AI21 Labs hat mit „Human or not?“ ein Spiel kreiert, das den Turing-Test nachbildet und Menschen und KI-Chatbots miteinander verbindet. Der Test hat gezeigt, dass KI-Systeme in der Lage sind, Menschen auf eine Weise zu täuschen, die sehr nahe an menschlicher Interaktion ist. Das Spiel hebt hervor, dass KI-Systeme immer komplexer werden und dass es schwierig ist, sie von menschlicher Kommunikation zu unterscheiden.

„Human or not?“: In diesem Chat muss man erkennen, ob man mit einer AI spricht

AI Kontextualisierung

Wer sind die relevantesten Personen in diesem Artikel?

  • Alan Turing
  • Die Entwickler des „Human or not?“-Chats des israelischen KI-Scaleups AI21 Labs

„Human or not?“: In diesem Chat muss man erkennen, ob man mit einer AI spricht

AI Kontextualisierung

Wer sind die relevantesten Organisationen in diesem Artikel?

  • AI21 Labs
  • OpenAI

„Human or not?“: In diesem Chat muss man erkennen, ob man mit einer AI spricht