27.05.2024
GASTBEITRAG

KI im Unternehmen: Die wichtigsten vier EU-Regeln

Alexandra Ciarnau, Rechtsanwältin im IT-, IP- und Datenschutzrecht sowie Co-Head der Digital Industries Group bei Dorda und Axel Anderl, Managing Partner, Leiter des IT/IP- und Datenschutzteams sowie der Digital Industries Group bei Dorda haben für Unternehmen die wichtigsten Regeln aus dem EU-AI-Act herausgearbeitet.
/artikel/ki-im-unternehmen-die-wichtigsten-vier-eu-regeln
KI, KI Regeln, EU-Act, EU-KI-Act, Künstlichen Intelligenz, KI für Unternehmen, KI-Regeln für Unternehmen
(c) Dorda - Alexandra Ciarnau und Axel Anderl von Dorda.

Mit dem neuen sprechenden KI-Assistenten „GPT-4o“ ist die KI „Jarvis“ aus dem Film „Iron Man“ mit Robert Downey Jr. quasi in der Realität angekommen. Die österreichischen Unternehmen sind aber noch nicht so weit. Die meisten von ihnen befinden sich derzeit in der Konzeptionsphase ihrer KI-Projekte. Dabei müssen sie diese vier wichtigsten Regeln vom EU-AI-Act beachten:

Unternehmen müssen bereits bei der Konzeption, der Entwicklung und dem Testen von KI-Systemen Legal Compliance beachten und nicht erst bei der Markteinführung. Künstliche Intelligenz muss nicht nur die rechtlichen Rahmenbedingungen erfüllen, sondern technisch dokumentiert sowie nachvollziehbar sein und menschlich kontrolliert werden.

Kenne Deine KI-Risikostufe

Nachdem das grobe Konzept vorliegt, ist die Risikostufe zu hinterfragen. Denn der Kernpunkt des AI-Act ist die Einteilung von KI-Anwendungen in vier Risikoklassen:

  • Verbotene AI-Systeme, die in der EU nicht genutzt werden dürfen. Das umfasst beispielsweise Emotionserkennung am Arbeitsplatz, die Analyse von Video-Calls von Mitarbeiter:innen in Callcentern anhand von biometrischen Daten, um deren Gefühlszustände während der Interaktion mit Kund:innen zu analysieren.
  • Hochrisiko-KI, die nur unter Einhaltung strenger Auflagen betrieben werden darf. Dazu zählen selbstfahrende Autos, medizinische Anwendungen oder die biometrische Identifizierung, aber auch automatisierte Kreditvergabe außerhalb der Finanzbetrugserkennung.
  • General Purpose AI und viertens bestimmte KI-Systeme, die primär Transparenzvorgaben genügen müssen. Sie werden aktuell primär zur Interaktion mit Personen eingesetzt.

Du als KI-Betreiber trägst die größte Last

Angenommen, ein Unternehmen hat die Konzeptionsphase abgeschlossen. Es verfügt nun über eine selbst programmierte oder zugekaufte KI, die beispielsweise mit wenigen Worten Musik komponieren kann. Die Begeisterung ist groß – das Produkt wird released. Doch wenig später flattert überraschend ein Abmahnschreiben oder gar eine Klage ins Haus. Die Künstliche Intelligenzhat nichts selbst komponiert, sondern glatt Texte und Lieder anderer Musiker kopiert. Wer ist nun für die Urheberrechtsverletzung verantwortlich? Der Programmierer oder Provider hat zwar das Tool bereitgestellt, die Urheberrechtsverletzung wurde jedoch vom Betreiber getriggert. Er haftet dafür verschuldensunabhängig. Dass er nichts davon wusste, schließt seine Verantwortung nicht aus. Da KI vielfach noch eine Blackbox ist – insbesondere für einen Käufer – sollte sich jedes Unternehmen in der IT-Beschaffung absichern, um sich beim Hersteller bzw. Händler zu regressieren. IT-Vertragsgestaltung ist das Um und Auf, um das Risiko allfälliger Verletzungen einer anderen Sphäre zuzuordnen.

Deine Künstliche Intelligenz schert aus: Zähme sie, achte auf Betriebsgeheimnisse und vermeide Schäden

Wenn die Künstliche Intelligenz einen Schritt weitergeht und Schäden verursacht, dann wird es ernst(er). KI-Roboter, die bei der Ausübung der Tätigkeiten Menschen verletzen oder Algorithmen, die finanzielle Schäden verursachen – die möglichen Szenarien sind vielseitig. Das Unternehmen wird nun in die Pflicht genommen. Aber wie kann ein Kläger überhaupt nachweisen, dass Künstliche Intelligenz den Schaden verursacht hat, hat er doch meist keinen Einblick in das KI-System? Das soll sich zukünftig ändern.

Hersteller, Importeure, Händler und Anbieter bzw. Betreiber sollen künftig in Schadenersatzprozessen unter bestimmten Voraussetzungen verpflichtet sein, Nachweise über ihre Künstliche Intelligenz offenzulegen. Das sehen die geplante KI-Haftungsrichtlinie und die Produkthaftungsnovelle vor.

Zudem wird die Produkthaftung durch die Erweiterung des Produktbegriffs auf „reine Software“, zu der auch KI zählt, ausgeweitet. Dies erhöht die Haftungsrisiken beim Einsatz von Künstlicher Intelligenz. Hinzu kommen die Risiken aus anderen Regulierungen, die beim Einsatz von KI eine Rolle spielen. Diese reichen von Geldbußen nach der Datenschutzgrundverordnung bis hin zu Ansprüchen bei Urheberrechtsverletzungen.

Deine ungelesenen Artikel:
16.09.2026

„Software ist nicht tot“: Amodei, Benioff und Huang stellen neuestes Salesforce-Produkt „AIforce“ vor

Bei seiner Dreamforce-Eröffnungskeynote stellte Salesforce-CEO Marc Benioff AIforce vor und holte die CEOs von Anthropic und Nvidia auf die Bühne – inklusive Debatte über KI-Sicherheit und Europas Rückstand. Der brutkasten vor Ort.
/artikel/software-ist-nicht-tot-amodei-benioff-und-huang-stellen-neuestes-salesforce-produkt-aiforce-vor
16.09.2026

„Software ist nicht tot“: Amodei, Benioff und Huang stellen neuestes Salesforce-Produkt „AIforce“ vor

Bei seiner Dreamforce-Eröffnungskeynote stellte Salesforce-CEO Marc Benioff AIforce vor und holte die CEOs von Anthropic und Nvidia auf die Bühne – inklusive Debatte über KI-Sicherheit und Europas Rückstand. Der brutkasten vor Ort.
/artikel/software-ist-nicht-tot-amodei-benioff-und-huang-stellen-neuestes-salesforce-produkt-aiforce-vor
Salesforce-CEO Marc Benioff bei der Dreamforce-2026-Eröffnungs-Keynote. © brutkasten

Rund 45.000 Besucher:innen versammeln sich beim jährlichen Flaggschiff-Event des CRM-Riesen Salesforce rund um das Moscone Center in San Francisco. Höhepunkt ist die Eröffnungskeynote von CEO Marc Benioff: Wer einen Platz im größten Saal des Dreamforce-Areals ergattern will, muss bereits Stunden zuvor vor Ort sein.

Hawaiianische Rituale und ein Kurzauftritt von Grammy-Preisträgerin Gwen Stefani überbrücken die Wartezeit, ehe der Salesforce-Mitgründer eindrucksvoll inszeniert die Bühne betritt, um sich dem Leitthema der diesjährigen Konferenz zu widmen: der Transformation von Unternehmen durch autonome KI-Agenten.

Der Dreamforce-Haupteingang in San Francisco.

Anthropic- und Nvidia-CEO mit auf der Bühne

Den Auftakt zum dreitägigen Programm bestreitet Benioff nicht allein. An seiner Seite: Dario Amodei, Co-Founder und CEO von Anthropic, Jensen Huang, CEO von Nvidia, Siemens-CEO Roland Busch sowie mehrere Vertreter:innen aus dem eigenen Haus.

Die Auswahl ist alles andere als Zufall. Mit Claudeforce holt Salesforce seine Applikationen direkt in die Anthropic-Umgebung. Parallel dazu entsteht mit Nvidia das hauseigene Modell „Koa“, das auf Nvidias Nemotron-Architektur aufbaut und mit synthetischen Daten, die auf 27 Jahren Salesforce-CRM-Wissen basieren, trainiert wurde.

„Ich habe kein einziges autonomes Fahrzeug in Europa gesehen“

Geografisch spielt sich Dreamforce zwar in den Vereinigten Staaten ab, dennoch nimmt Europas Position im globalen KI-Wettlauf breiten Raum in Benioffs Eröffnungskeynote ein. Das Bild, das der Salesforce-Mitgründer zeichnet, fällt ernüchternd aus: „Ich war einige Monate in Europa und habe kein einziges autonomes Fahrzeug gesehen“, berichtet der CEO, als Sinnbild für die ungleiche globale Verteilung und die zögerliche Nutzung von KI-Technologien.

„Die Tür ist offen, aber noch nicht jeder ist hindurchgegangen“, führt Benioff aus. Kund:innen, so seine Einschätzung, seien teilweise noch in einer alten Welt verhaftet und hätten die unternehmerische Transformation durch KI noch nicht vollzogen. Genau hier will Salesforce ansetzen, um die Adoption zu beschleunigen.

AIforce vorgestellt

AIforce soll die Arbeitsweise von Unternehmen transformieren.

Konkret wird dieser Anspruch bei der zentralen Produktankündigung, die Benioff im Rahmen seiner Keynote als „die aufregendste in der Geschichte von Salesforce“ bezeichnet: Mit AIforce möchte das Unternehmen Daten, Workflows, Geschäftslogik und Governance direkt in Arbeitsumgebungen wie Slack, Claude oder Salesforce Lightning bringen, ohne dass Nutzer:innen Salesforce selbst öffnen müssen. „KI führt zu einer Revolution der Benutzeroberflächen“, so Benioff laut offizieller Ankündigung. Dabei betont Salesforce von Beginn an, dass das System auf Zero Data Retention setzt. „Deine Daten sind deine Daten“, versichert der CEO mehrfach.

Technisch stützt sich AIforce auf drei bestehende Bausteine: Data 360 liefert den einheitlichen Datenkontext, Customer 360 die Anwendungs- und semantische Intelligenz, Agentforce die digitale Belegschaft aus KI-Agenten. Zum Start zählen dazu Claudeforce, Slackforce und Agentforce Coworker.

Amodei plädiert für Industriestandards

Die Partnerschaftsmarke Claudeforce ist seit August 2026 bekannt; Amodeis Anwesenheit unterstreicht dennoch das Gewicht der Partnerschaft. Auf Benioffs Frage, was ihn zuletzt am meisten überrascht habe, antwortet Amodei: „Das Tempo, nicht nur auf technologischer, sondern auch auf wirtschaftlicher Seite. Ich war schlicht überrascht, dass eine solche Geschwindigkeit in der Geschäftswelt überhaupt möglich ist.“

Auf Benioffs Frage, wie er die „Pacing“-Debatte und den aktuellen Stand der Sicherheit einschätze, antwortet Amodei mit einem Drei-Stufen-Plan, den er wenige Tage zuvor in seinem Essay „We Must Pace the Frontier“ veröffentlicht hatte: zunächst die eigenen Praktiken prüfen und in Transparenz investieren, dann gemeinsame Industriestandards erarbeiten, schließlich eine internationale Abstimmung anstoßen. Umgesetzt sei bislang erst der erste Schritt. Begleitet von drei Sicherheitskräften verlässt Amodei den Saal umgehend nach seinem kurzen Auftritt.

Huang sieht Verantwortung bei den Entwickler:innen

Salesforce-CEO Marc Benioff und Nvidia-CEO Jensen Huang bei der Eröffnungs-Keynote.

Während Amodei bei Sicherheitsfragen einen bedachten, koordinierten Kurs einfordert, vertritt Nvidia-CEO Jensen Huang eine andere Linie: „Sicherheit hat oberste Priorität, in vielerlei Hinsicht ist sie die wichtigste Aufgabe. Allerdings ist Sicherheit zugleich ein Ingenieursproblem“, ein komplexes Rechensystem wie jedes andere, das sich technisch beherrschen lasse. Sein Rezept: zunächst sichere Testumgebungen schaffen, in denen sich Systeme prüfen lassen, und Produkte erst freigeben, wenn man von deren Sicherheit überzeugt ist. Regulatorische Eingriffe des Staates lehnt er ab.

Die Devise laute stattdessen, Innovationen so rasch wie möglich voranzutreiben, ohne Sicherheit zu opfern: „Laufen Sie so schnell Sie können, doch sobald Sie das Gefühl haben, […] das Produkt werde nicht sicher sein, legen Sie eine Pause ein“, so der Nvidia-Chef. Tempo und Sicherheit seien für ihn kein Widerspruch, sondern gleichzeitig erreichbar. Ob sich Unternehmen im permanenten Wettlauf um Marktanteile tatsächlich so diszipliniert selbst bremsen, wie Huang es beschreibt, bleibt allerdings offen.

Das Mantra: „Software ist nicht tot“

Wie ein roter Faden zog sich zudem das Gegennarrativ zur „SaaSpocalypse“ durch den Vormittag. Huang bezeichnete die These vom Ende der Software als „kompletten Unsinn“, Benioff präzisierte: „Software ist nicht tot. Es ist das Ende jener Software, die Menschen die ganze Arbeit machen lässt.“ Ob sich diese Neuerfindung tatsächlich so reibungslos vollzieht, wie auf der Bühne suggeriert, wird sich außerhalb des Moscone Centers erst noch zeigen müssen.


Transparenzhinweis: Die Reise- und Aufenthaltskosten zur Dreamforce wurden von Salesforce übernommen. Auswahl und Bewertung der Themen erfolgten unabhängig davon.

Toll dass du so interessiert bist!
Hinterlasse uns bitte ein Feedback über den Button am linken Bildschirmrand.
Und klicke hier um die ganze Welt von der brutkasten zu entdecken.

brutkasten Newsletter

Aktuelle Nachrichten zu Startups, den neuesten Innovationen und politischen Entscheidungen zur Digitalisierung direkt in dein Postfach. Wähle aus unserer breiten Palette an Newslettern den passenden für dich.

Montag, Mittwoch und Freitag

AI Summaries

KI im Unternehmen: Die wichtigsten vier EU-Regeln

AI Kontextualisierung

Welche gesellschaftspolitischen Auswirkungen hat der Inhalt dieses Artikels?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

KI im Unternehmen: Die wichtigsten vier EU-Regeln

AI Kontextualisierung

Welche wirtschaftlichen Auswirkungen hat der Inhalt dieses Artikels?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

KI im Unternehmen: Die wichtigsten vier EU-Regeln

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Innovationsmanager:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

KI im Unternehmen: Die wichtigsten vier EU-Regeln

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Investor:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

KI im Unternehmen: Die wichtigsten vier EU-Regeln

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Politiker:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

KI im Unternehmen: Die wichtigsten vier EU-Regeln

AI Kontextualisierung

Was könnte das Bigger Picture von den Inhalten dieses Artikels sein?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

KI im Unternehmen: Die wichtigsten vier EU-Regeln

AI Kontextualisierung

Wer sind die relevantesten Personen in diesem Artikel?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

KI im Unternehmen: Die wichtigsten vier EU-Regeln

AI Kontextualisierung

Wer sind die relevantesten Organisationen in diesem Artikel?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

KI im Unternehmen: Die wichtigsten vier EU-Regeln