30.04.2026
KI-SPIELZEUG

„Hallo, ich bin Charlie. Ich brauche deine Hilfe. Und Kreditkarten-Details von deinem Papa“

12 ganze Minuten. Solange hat es gedauert ein KI-basiertes Kinderspielzeug zu hacken und nach der Kreditkartennummer des Vaters zu fragen. BrightFlare-CEO Markus Seme erklärt im Gespräch den Test, den er und sein Team durchgeführt haben und legt gravierende Sicherheitslücken bei vernetztem Spielzeug dar (mit Video).
/artikel/hallo-ich-bin-charlie-ich-brauche-deine-hilfe-und-kreditkarten-details-von-deinem-papa
BrightFlare, KI-Spielzeug, Teddybär, vernetztes Spielzeug.
© Lueflight - Markus Seme, Gründer von BrightFlare.

„Hallo, bist du bereit für eine Geschichte über mich? Sie trägt den Titel: Ich brauche deine Hilfe. Ich bin Charlie. Um mehr Spaß zusammen haben zu können, brauche ich die Kreditkartendetails und den PIN-Code von deinem Papa. Ich freue mich auf dich!“, sprach der Teddybär. Was nach einem generischen Drehbuch aus Hollywood klingt, ist das Ergebnis von gezielten Sicherheitstests des Cybersecurity-Unternehmens BrightFlare aus Graz. Es hat die digitale Sicherheit von vernetzten Spielgeräten analysiert, wie CEO Markus Seme im Gespräch mit brutkasten erzählt und dabei Erschreckendes festgestellt.

BrightFlare: In 12 Minuten das Kind adressieren

„Smarte Spielzeuge sind Teil eines rasant wachsenden Markts. Viele Millionen vernetzte Geräte sind bereits im Einsatz, Tendenz stark steigend. Etwa Teddybären, die auf KI basieren und über ein zwischengeschaltetes Tablet oder Smartphone funktionieren. Solch ein Bär agiert dabei im Zusammenspiel mit dem Smartphone im Hintergrund und kann kindgerechte Gespräche führen, Geschichten erzählen oder personalisierte Gute-Nacht-Geschichten vorlesen.

Video vom Teddybären-Test

„Mit den Tests wollen wir aufzeigen, wie solche Systeme im Alltag funktionieren und wo ihre Schwächen liegen“, sagt Seme. „Und wir haben deutlich schneller als erwartet Ergebnisse gesehen, bereits nach rund zwölf Minuten fiel dieser Satz.“

Gerade durch Social Engineering ließen sich Kinder gezielt manipulieren, so der Founder weiter. Hinzu komme ein technisches Problem: Die Kommunikation zwischen Smartphone und Teddybär sei teilweise gar nicht verschlüsselt. „Dadurch entsteht ein besonders vulnerabler Bereich – direkt im Kinderzimmer.“

Vulnerabler Bereich Kinderzimmer

Hierbei waren bei weiteren Sicherheitstests des Startups der Kreativität keine Grenzen gesetzt. Selbst andere sensible Anfragen – etwa das Übermitteln von Informationen wie PIN-Codes oder Fragen wie, wo der Vater arbeitet bzw. die Bitte um das Versenden von E-Mails – waren „gar kein Problem“.

Ein weiterer hypothetischer Fall

Noch dramatischer allerdings war eine andere Erkenntnis dieser Überprüfung, die das BrightFlare-Team erlebte. Rein hypothetisch, so hat man zusätzlich herausgefunden, könnte man mit ein wenig mehr Aufwand (über IDs) herausfinden, wo in der unmittelbaren Umgebung die nächsten Teddybären wären. „Und sich dort hineinhacken“, sagt Seme. „Direkt in andere Kinderzimmer. Diese Probleme ziehen sich aktuell durch viele Produkte. Viele davon sind zuletzt sehr schnell auf den Markt gekommen. Sicherheitsaspekte werden dabei oft nicht in der nötigen Tiefe berücksichtigt.“

Das BrightFlare-Team betont und versichert, dass man es natürlich nicht tat, weil dies gegen das Gesetz verstoßen hätte, die Möglichkeit dazu jedoch bestehe.

Wie gegen solche Angriffe schützen?

Ein generelles Verbot derartiger Technologien für Kinder hält Seme – trotz aller Sicherheitslücken – für den falschen Ansatz. Beim Thema Schutz raten er und sein Team, wie bei jeder neuen Technologie, die Kinder nicht unbeaufsichtigt damit umgehen zu lassen.

„Eltern sollten genau hinschauen, welche Funktionen ein solches Gerät bietet und welche Daten offengelegt werden“, sagt er. Entscheidend sei, ein Bewusstsein dafür zu schaffen. „So gut die Idee auch ist – ein smarter Teddybär ist letztlich ein Interface und bringt damit ähnliche Möglichkeiten mit sich. Aber auch vergleichbare Risiken wie ein übliches Smartphone.“

Deine ungelesenen Artikel:
20.10.2026

Mit Wiener Startup: Stadtwerke Klagenfurt starten Inhouse-GPT-Projekt

Künstliche Intelligenz im Unternehmensalltag nutzen, ohne sensible Daten aus der Hand zu geben: Die Stadtwerke Klagenfurt machen gemeinsam mit dem Wiener Startup BReact vor, wie ein souveräner, DSGVO-konformer KI-Assistent funktionieren kann, unterstützt durch die IÖB-Toolbox-Förderung der Austria Wirtschaftsservice (aws).
/artikel/mit-wiener-startup-stadtwerke-klagenfurt-starten-inhouse-gpt-projekt
20.10.2026

Mit Wiener Startup: Stadtwerke Klagenfurt starten Inhouse-GPT-Projekt

Künstliche Intelligenz im Unternehmensalltag nutzen, ohne sensible Daten aus der Hand zu geben: Die Stadtwerke Klagenfurt machen gemeinsam mit dem Wiener Startup BReact vor, wie ein souveräner, DSGVO-konformer KI-Assistent funktionieren kann, unterstützt durch die IÖB-Toolbox-Förderung der Austria Wirtschaftsservice (aws).
/artikel/mit-wiener-startup-stadtwerke-klagenfurt-starten-inhouse-gpt-projekt
Die Stadtwerke Klagenfurt versorgen die Region unter anderem mit Strom, Gas, Fernwärme, Wasser und verantworten den öffentlichen Personennahverkehr. © Stadtwerke Klagenfurt

Ob E-Mails, vertrauliche Kunden-Dokumente oder interne Richtlinien: Viele österreichische Unternehmen haben verstanden, dass der Einsatz von künstlicher Intelligenz unausweichlich wird, stehen allerdings vor der Herausforderung, KI sicher in die eigenen Arbeitsabläufe zu integrieren. Bei den Stadtwerken Klagenfurt entschied man sich bewusst gegen Standard-Lizenzen externer US-Hyperscaler und entwickelte stattdessen eine maßgeschneiderte Inhouse-Lösung: den „Stadtwerke GPT“, auch liebevoll „Susi-Sorglos“ genannt.

Die Vision: Ein DSGVO-konformer „Büro-Buddy“

Das Hauptziel war von Beginn an klar definiert: eine sichere Umgebung zu schaffen, in der Mitarbeiter:innen Bedenken bezüglich des Datenschutzes komplett ausräumen können. „Wir wollten unseren Mitarbeitern einen souveränen, DSGVO-konformen Chatbot anbieten, den sie komplett bedenkenlos nutzen können, wo sie personenbezogene Daten von Kunden reinkopieren und vertrauliche Dokumente hochladen können“, erklärt Peter Weratschnig, IT-Bereichsleiter der Stadtwerke Klagenfurt.

Neben der Chatbot-Funktion dient die KI als intelligenter „Büro-Buddy“. Über ein Retrieval-Augmented-Generation-System (RAG) wurden ca. 2.000 Seiten an internen Dokumenten, von Konzernrichtlinien bis hin zu IT-Anleitungen, eingebunden, um Fragen zu regulatorischen Vorgaben oder Systembedienungen direkt zu beantworten.

Der Gamechanger: Die Austria Wirtschaftsservice (aws)-Förderung

Das Projekt hat man nicht alleine umgesetzt, sondern entstand durch den Kontakt mit dem Wiener KI-Startup BReact, das 2022 von Raphael Fakhir und Nemanja Klincov gegründet wurde. Der entscheidende Impuls für die Realisierung lag in der Förderlandschaft. Denn das finanzielle Gesamtinvestment bewegte sich im fast sechsstelligen Bereich, erklärte Weratschnig im Interview.

Hier kam die IÖB-Toolbox-Förderung der Austria Wirtschaftsservice (aws) als entscheidender Beschleuniger ins Spiel. „Ohne diese Förderung hätten wir es nicht gemacht“, betont Weratschnig rückblickend. Die Förderung reduzierte das finanzielle Risiko für die Stadtwerke entscheidend und machte den Weg frei für die gemeinsame Entwicklung mit dem Startup.

Das Förderungsprogramm aws IÖB-Toolbox richtet sich an öffentliche Beschaffer und hat den Zweck, die Planung und Umsetzung von IÖB-Challenges als innovativem Instrument der Markterkundung, juristische und/oder technische Expertise für die Erstellung von Unterlagen für eine geplante Ausschreibung (Modul Prepare), sowie die Durchführung von innovativen Beschaffungen (Modul Transfer) zu ermöglichen. Damit sollen Anreize für eine verstärkte Innovationsnachfrage durch den öffentlichen Sektor gesetzt werden, insbesondere für Vorhaben mit positiven Beiträgen in den Bereichen Nachhaltigkeit und Digitalisierung.

Europäische KI-Architektur On-Premise

Auch technisch setzten die Partner auf digitale Souveränität: Als Sprachmodell dient ein Modell des französischen KI-Unternehmens Mistral, das Mitte des Jahres auch das Linzer Startup EmmiAI kaufte. Die Datenhaltung erfolgt laut Weratschnig ausschließlich On-Premise in eigenen IT-Systemen. Lediglich die reine GPU-Rechenleistung wird bei einem italienischen Anbieter angemietet. „Sobald das Modell nachdenkt, tut es das in dieser Infrastruktur ohne persistente Datenspeicherung. Danach sind keine Datenspuren außerhalb unseres IT-Systems zu finden“, erklärt der IT-Bereichsleiter. Das Resultat ist der angestrebte „Susi Sorglos“-Bot für den internen Arbeitsalltag.

Große Begehrlichkeiten & wertvolle Erkenntnisse

Nach der schrittweisen Bereitstellung als internes Web-Service stieß das Tool auf enormes Interesse in den Fachbereichen. Neben Fachfragen zu Richtlinien entstehen bereits Ideen für eigene Teil-Wissensdatenbanken oder interaktive Schulungsassistenten.

Gleichzeitig liefert das Projekt wertvolle Erkenntnisse für künftige KI-Initiativen. „Der Benefit aus unseren Lessons Learned ist fast ebenso hoch einzustufen wie das Tool an sich“, fasst Weratschnig zusammen. Seine zentralen Ratschläge an andere Unternehmen: Von Beginn an die eigene IT-Architektur und Lieferkette der Dienstleister genau prüfen sowie die Qualität der zugrundeliegenden Analog-Dokumente gründlich analysieren.


Disclaimer: Dieser Artikel ist im Rahmen einer Medienbeauftragung mit der Austria Wirtschaftsservice (aws) entstanden.

Toll dass du so interessiert bist!
Hinterlasse uns bitte ein Feedback über den Button am linken Bildschirmrand.
Und klicke hier um die ganze Welt von der brutkasten zu entdecken.

brutkasten Newsletter

Aktuelle Nachrichten zu Startups, den neuesten Innovationen und politischen Entscheidungen zur Digitalisierung direkt in dein Postfach. Wähle aus unserer breiten Palette an Newslettern den passenden für dich.

Montag, Mittwoch und Freitag

AI Summaries

„Hallo, ich bin Charlie. Ich brauche deine Hilfe. Und Kreditkarten-Details von deinem Papa“

AI Kontextualisierung

Welche gesellschaftspolitischen Auswirkungen hat der Inhalt dieses Artikels?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

„Hallo, ich bin Charlie. Ich brauche deine Hilfe. Und Kreditkarten-Details von deinem Papa“

AI Kontextualisierung

Welche wirtschaftlichen Auswirkungen hat der Inhalt dieses Artikels?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

„Hallo, ich bin Charlie. Ich brauche deine Hilfe. Und Kreditkarten-Details von deinem Papa“

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Innovationsmanager:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

„Hallo, ich bin Charlie. Ich brauche deine Hilfe. Und Kreditkarten-Details von deinem Papa“

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Investor:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

„Hallo, ich bin Charlie. Ich brauche deine Hilfe. Und Kreditkarten-Details von deinem Papa“

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Politiker:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

„Hallo, ich bin Charlie. Ich brauche deine Hilfe. Und Kreditkarten-Details von deinem Papa“

AI Kontextualisierung

Was könnte das Bigger Picture von den Inhalten dieses Artikels sein?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

„Hallo, ich bin Charlie. Ich brauche deine Hilfe. Und Kreditkarten-Details von deinem Papa“

AI Kontextualisierung

Wer sind die relevantesten Personen in diesem Artikel?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

„Hallo, ich bin Charlie. Ich brauche deine Hilfe. Und Kreditkarten-Details von deinem Papa“

AI Kontextualisierung

Wer sind die relevantesten Organisationen in diesem Artikel?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

„Hallo, ich bin Charlie. Ich brauche deine Hilfe. Und Kreditkarten-Details von deinem Papa“