22.11.2022

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

Ein EU-Projekt gegen AI-Diskriminierung und für "multikriteriellen Fairness". Mit dabei: eine österreichische Forscherin des "Complexity Science Hub Vienna"
/artikel/mammoth-ki-tendenz-zur-diskriminierung-durchbrechen
(c) Stock.Adobe/ra2 studio - Science Hub entwickelt dafür sgn. "Fairness-Messungen".

Das Problem beim Einsatz Künstlicher Intelligenz ist, dass sie dazu tendiert, diskriminierende Entscheidungen zu treffen – etwa in der Bildung, bei Bewerbungsverfahren oder in der Werbung. Amazon, als Beispiel, schaffte vor vier Jahren eine KI-Software für die Bewerberauswahl wieder ab, weil die eingebaute AI Frauen benachteiligte. Microsoft nahm seinen Chatbot „Tay“ bereits zwei Jahre davor zurück, nachdem jener rassistische und extremistische Inhalte getwittert hatte. Das Projekt MAMMOth möchte dieses allgemeine Problem nun angehen.

MAMMOth = Multi-Attribute, Multimodal Bias Mitigation in AI Systemen

Denn, Unternehmen, Politik und viele andere Bereiche verlassen sich zunehmend auf Künstliche Intelligenz und treffen auf dieser Grundlage weitreichende Entscheidungen für den Einzelnen und die Gesellschaft.

„Einerseits eröffnet dies enorme Möglichkeiten für verschiedene Sektoren wie Bildung, Bankwesen oder Gesundheitswesen, aber auch auf persönlicher Ebene, zum Beispiel bei Stellenbewerbungen oder beim Targeting von Werbung. Andererseits besteht gerade bei künstlicher Intelligenz (KI) die Gefahr, dass sie die Diskriminierung von Minderheiten und Randgruppen in der Bevölkerung – basierend auf sogenannten geschützten Merkmalen wie Geschlecht, Rasse und Alter – weiter verstärkt“, erklärt Fariba Karimi, Senior Scientist bei „Computational Social Science“ am CSH in Wien.

Der „Science Hub“ entwickelt mit der Wissenschaftlerin sogenannte Fairness-Messungen, die nicht nur ein Attribut wie die Hautfarbe berücksichtigen, sondern mehrere sich überschneidende Attribute wie Geschlecht, Alter und Rasse.

„Wir wollen zum Beispiel, dass unsere Fairness-Messungen nicht nur für Frauen funktionieren, sondern auch für Frauen, die Einwanderer sind oder aus benachteiligten ethnischen Gruppen stammen“, sagt Karimi. Ihr Fokus liegt auf genau dieser „multikriteriellen Fairness“ in Netzwerkdaten – wenn beispielsweise Ungleichheiten daraus resultieren, dass Menschen im Kontext eines zugrunde liegenden Netzwerks unterschiedliche Positionen einnehmen.

Minderheiten sollten in Algorithmen nicht unsichtbar werden

Diskriminierung sei kein neues Problem, aber die Tatsache, dass die KI-Technologie sie weiterhin verstärke, habe zum Aufstieg des fairnessbewussten maschinellen Lernens (ML) als Teil der verantwortungsvollen KI geführt.

Ziel ist die Entwicklung von Modellen des maschinellen Lernens, die einerseits gute Vorhersagen machen, andererseits aber nicht nach geschützten Merkmalen wie Geschlecht oder Rasse diskriminieren.

„Es wurden viele Anstrengungen unternommen, aber bisher haben die vorgeschlagenen Methoden nur eine begrenzte Wirkung und spiegeln nicht die Komplexität und die Anforderungen der realen Anwendungen wider“, so Karimi weiter.

MAMMOth: Zwölf Institute ziehen an einem Strang

Beim EU-Projekt MAMMOth indes entwickeln Experten aus zwölf verschiedenen Institutionen eine innovative, auf Fairness ausgerichtete, datengestützte KI-Grundlage, die die notwendigen Werkzeuge zur Verfügung stellt, um Diskriminierung und Mehrfachdiskriminierung abzuschwächen und die Verantwortlichkeit von KI-Systemen zu gewährleisten.

„Durch die Entwicklung und Umsetzung von multikriteriellen Fairness-Maßnahmen und Abschwächungen wollen wir sicherstellen, dass Minderheiten in Algorithmen nicht sichtbar sind und in Bereichen, die sich bei Entscheidungsprozessen auf Maschinen verlassen, fair behandelt werden“, erklärt Karimi. „Gerechtere Algorithmen bedeuten eine bessere Repräsentation und Vielfalt in der Gesellschaft, was wiederum eine integrativere und gerechtere Gesellschaft bedeutet.“

Zu diesem Zweck wird sich das Projekt von Anfang an aktiv an zahlreiche Gemeinschaften von gefährdeten bzw. unterrepräsentierten Gruppen in der KI-Forschung wenden. Der sogenannte Co-Creation-Ansatz soll dafür sorgen, dass die tatsächlichen Bedürfnisse und Nöte der Nutzer:innen im Mittelpunkt der Forschungsagenda stehen und die Aktivitäten des Projekts leiten.

Die entwickelten Lösungen werden, laut Karimi, folglich in Pilotprojekten in drei relevanten Bereichen (Finanz-/Kreditanwendungen, Identitätsüberprüfungssysteme und akademische Bewertung) demonstriert.

Deine ungelesenen Artikel:
17.06.2026

Jeff Bezos und der „Artificial General Engineer“: Das steckt hinter seinem KI-Projekt Prometheus

brutkasten ist auf der VivaTech in Paris vor Ort. Dort hat Jeff Bezos ausführlich über Prometheus gesprochen - das KI-Unternehmen, das er Ende 2025 mitgegründet hat. Es soll das Erfinden selbst beschleunigen.
/artikel/jeff-bezos-und-der-artificial-general-engineer-das-steckt-hinter-seinem-ki-projekt-prometheus
17.06.2026

Jeff Bezos und der „Artificial General Engineer“: Das steckt hinter seinem KI-Projekt Prometheus

brutkasten ist auf der VivaTech in Paris vor Ort. Dort hat Jeff Bezos ausführlich über Prometheus gesprochen - das KI-Unternehmen, das er Ende 2025 mitgegründet hat. Es soll das Erfinden selbst beschleunigen.
/artikel/jeff-bezos-und-der-artificial-general-engineer-das-steckt-hinter-seinem-ki-projekt-prometheus
Jeff Bezos sprach am Mittwoch auf der Theater-Stage der VivaTech in Paris über sein KI-Projekt Prometheus. (c) Screenshot VivaTech

Am Mittwoch fiel der Startschuss für die zehnte Ausgabe der VivaTech. Das Event in Paris zählt zu den größten Startup- und Technologie-Treffen Europas und bringt über vier Tage hinweg Startups, Investor:innen, Tech-Konzerne und Forscher:innen zusammen. Schon am Vormittag herrschte dichter Andrang in den Hallen der Pariser Porte de Versailles: Zwischen Roboterarmen, Demo-Bühnen und unzähligen Startup-Ständen schoben sich Gründer:innen, Investor:innen und Tech-Fans durch die Gänge. brutkasten ist vor Ort. Für besonderen Andrang sorgte eines der Highlights der diesjährigen Ausgabe: Jeff Bezos, der erst zu Wochenbeginn als Speaker angekündigt worden war. Am Vormittag trat der Amazon-Gründer auf der Theater-Stage auf.

Gemeinsam mit Blue-Origin-CEO Dave Limp saß Bezos schließlich auf der Bühne, moderiert vom früheren NASA-Astronauten Mike Massimino. Der Großteil des Gesprächs drehte sich um Raumfahrt. Aufhorchen ließ Bezos aber, als er auf sein jüngstes Projekt zu sprechen kam: Prometheus, das KI-Unternehmen, das er 2025 mitgegründet hat und als Co-CEO führt.

Bezos beschrieb Prometheus als Versuch, einen „artificial general engineer“ zu bauen, also eine KI, die nicht primär Texte verarbeitet, sondern Ingenieursarbeit leistet. Das Ziel sei, den „dream-build cycle“ zu verkürzen, also die Zeit zwischen der Idee für ein Produkt und seiner serienreifen Fertigung.

„Aller Wohlstand beruht auf Erfindungen“

Diesen Anspruch rahmte Bezos grundsätzlich ein: „Aller zivilisatorische Wohlstand beruht auf Erfindungen. Vor 6.000 Jahren hat jemand den Pflug erfunden, und wir alle wurden wohlhabender.“ Wer den Erfindungszyklus beschleunige, schaffe realen Wohlstand. Was das praktisch heißt, machte er an einem Beispiel fest: Ein neues, sparsameres Triebwerk sei heute ein Zehn-Jahres-Programm. Prometheus solle das schrittweise auf fünf, drei, am Ende ein Jahr drücken.

Klassische Sprachmodelle reichen dafür nach seiner Überzeugung nicht aus. „Mit herkömmlichen großen Sprachmodellen lässt sich das nicht machen. Sie haben ihre Berechtigung“, sagte Bezos. Sein Bild dazu: „Wenn ich tausend Bücher darüber lese, wie man ein großartiger Turner wird, wäre ich danach immer noch ein miserabler Turner.“ Engineering brauche eine andere Art von Training als reine Symbolmanipulation, wie sie Sprachmodelle beherrschen.

Der Sorge, KI könnte Menschen überflüssig machen, widersprach Bezos ausdrücklich. Er erwarte eher das Gegenteil: „KI wird einen Arbeitskräftemangel erzeugen, weil sie es den Menschen ermöglicht, mehr Probleme zu identifizieren.“ Heute sei man „nicht durch unsere Vorstellungskraft begrenzt, sondern durch das, was wir tatsächlich umsetzen können“. Beschleunige man das Bauen, drehe sich dieses Verhältnis um. Als Vorgeschmack nannte er die eigene Erfahrung mit Coding-Tools: „Vor drei Jahren war ich ein miserabler Informatiker. Heute aber kann ich an einem einzigen Nachmittag eine iOS-App schreiben.“ Genau das wolle Prometheus in die physische Welt übertragen.

Querverweis zu Emmi AI

Für die heimische Szene hat die Idee einen vertrauten Klang. Mit Emmi AI verfolgt seit 2024 ein Linzer Startup einen ganz ähnlichen Ansatz, nämlich KI-Modelle, die auf die Physik der realen Welt statt auf Sprache trainiert sind und Ingenieurssimulationen drastisch beschleunigen sollen. Das Unternehmen aus dem Umfeld des KI-Labors NXAI wurde im Mai 2026 vom französischen KI-Konzern Mistral übernommen. Die Stoßrichtung, die Bezos nun auf der großen Bühne skizziert, ist also auch in Österreich prominent vertreten.

Was sonst noch ansteht

Die VivaTech feiert heuer ihr zehnjähriges Bestehen und läuft noch bis Samstag, den 20. Juni. Inhaltlich dreht sich die Jubiläumsausgabe vor allem um Künstliche Intelligenz, Deeptech, Cybersecurity und Energie, wobei sich KI durch nahezu jede der vier Bühnen zieht. Neben Bezos sind weitere prominente Stimmen angekündigt, darunter Nvidia-CEO Jensen Huang mit der GTC-Paris-Keynote, Yann LeCun (AMI Labs, zuvor Meta) und Arthur Mensch, CEO des französischen KI-Konzerns Mistral, der das Linzer Startup Emmi AI übernommen hat. Der Deeptech-Schwerpunkt reicht von Quantencomputing bis Biotech. Zum Abschluss verwandelt sich der Publikumstag am Samstag erstmals in ein offenes VivaTech-Festival, das Technologie einem breiten Publikum zugänglich machen soll.

Toll dass du so interessiert bist!
Hinterlasse uns bitte ein Feedback über den Button am linken Bildschirmrand.
Und klicke hier um die ganze Welt von der brutkasten zu entdecken.

brutkasten Newsletter

Aktuelle Nachrichten zu Startups, den neuesten Innovationen und politischen Entscheidungen zur Digitalisierung direkt in dein Postfach. Wähle aus unserer breiten Palette an Newslettern den passenden für dich.

Montag, Mittwoch und Freitag

AI Summaries

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Welche gesellschaftspolitischen Auswirkungen hat der Inhalt dieses Artikels?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Welche wirtschaftlichen Auswirkungen hat der Inhalt dieses Artikels?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Innovationsmanager:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Investor:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Politiker:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Was könnte das Bigger Picture von den Inhalten dieses Artikels sein?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Wer sind die relevantesten Personen in diesem Artikel?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Wer sind die relevantesten Organisationen in diesem Artikel?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen