22.11.2022

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

Ein EU-Projekt gegen AI-Diskriminierung und für "multikriteriellen Fairness". Mit dabei: eine österreichische Forscherin des "Complexity Science Hub Vienna"
/artikel/mammoth-ki-tendenz-zur-diskriminierung-durchbrechen
(c) Stock.Adobe/ra2 studio - Science Hub entwickelt dafür sgn. "Fairness-Messungen".

Das Problem beim Einsatz Künstlicher Intelligenz ist, dass sie dazu tendiert, diskriminierende Entscheidungen zu treffen – etwa in der Bildung, bei Bewerbungsverfahren oder in der Werbung. Amazon, als Beispiel, schaffte vor vier Jahren eine KI-Software für die Bewerberauswahl wieder ab, weil die eingebaute AI Frauen benachteiligte. Microsoft nahm seinen Chatbot „Tay“ bereits zwei Jahre davor zurück, nachdem jener rassistische und extremistische Inhalte getwittert hatte. Das Projekt MAMMOth möchte dieses allgemeine Problem nun angehen.

MAMMOth = Multi-Attribute, Multimodal Bias Mitigation in AI Systemen

Denn, Unternehmen, Politik und viele andere Bereiche verlassen sich zunehmend auf Künstliche Intelligenz und treffen auf dieser Grundlage weitreichende Entscheidungen für den Einzelnen und die Gesellschaft.

„Einerseits eröffnet dies enorme Möglichkeiten für verschiedene Sektoren wie Bildung, Bankwesen oder Gesundheitswesen, aber auch auf persönlicher Ebene, zum Beispiel bei Stellenbewerbungen oder beim Targeting von Werbung. Andererseits besteht gerade bei künstlicher Intelligenz (KI) die Gefahr, dass sie die Diskriminierung von Minderheiten und Randgruppen in der Bevölkerung – basierend auf sogenannten geschützten Merkmalen wie Geschlecht, Rasse und Alter – weiter verstärkt“, erklärt Fariba Karimi, Senior Scientist bei „Computational Social Science“ am CSH in Wien.

Der „Science Hub“ entwickelt mit der Wissenschaftlerin sogenannte Fairness-Messungen, die nicht nur ein Attribut wie die Hautfarbe berücksichtigen, sondern mehrere sich überschneidende Attribute wie Geschlecht, Alter und Rasse.

„Wir wollen zum Beispiel, dass unsere Fairness-Messungen nicht nur für Frauen funktionieren, sondern auch für Frauen, die Einwanderer sind oder aus benachteiligten ethnischen Gruppen stammen“, sagt Karimi. Ihr Fokus liegt auf genau dieser „multikriteriellen Fairness“ in Netzwerkdaten – wenn beispielsweise Ungleichheiten daraus resultieren, dass Menschen im Kontext eines zugrunde liegenden Netzwerks unterschiedliche Positionen einnehmen.

Minderheiten sollten in Algorithmen nicht unsichtbar werden

Diskriminierung sei kein neues Problem, aber die Tatsache, dass die KI-Technologie sie weiterhin verstärke, habe zum Aufstieg des fairnessbewussten maschinellen Lernens (ML) als Teil der verantwortungsvollen KI geführt.

Ziel ist die Entwicklung von Modellen des maschinellen Lernens, die einerseits gute Vorhersagen machen, andererseits aber nicht nach geschützten Merkmalen wie Geschlecht oder Rasse diskriminieren.

„Es wurden viele Anstrengungen unternommen, aber bisher haben die vorgeschlagenen Methoden nur eine begrenzte Wirkung und spiegeln nicht die Komplexität und die Anforderungen der realen Anwendungen wider“, so Karimi weiter.

MAMMOth: Zwölf Institute ziehen an einem Strang

Beim EU-Projekt MAMMOth indes entwickeln Experten aus zwölf verschiedenen Institutionen eine innovative, auf Fairness ausgerichtete, datengestützte KI-Grundlage, die die notwendigen Werkzeuge zur Verfügung stellt, um Diskriminierung und Mehrfachdiskriminierung abzuschwächen und die Verantwortlichkeit von KI-Systemen zu gewährleisten.

„Durch die Entwicklung und Umsetzung von multikriteriellen Fairness-Maßnahmen und Abschwächungen wollen wir sicherstellen, dass Minderheiten in Algorithmen nicht sichtbar sind und in Bereichen, die sich bei Entscheidungsprozessen auf Maschinen verlassen, fair behandelt werden“, erklärt Karimi. „Gerechtere Algorithmen bedeuten eine bessere Repräsentation und Vielfalt in der Gesellschaft, was wiederum eine integrativere und gerechtere Gesellschaft bedeutet.“

Zu diesem Zweck wird sich das Projekt von Anfang an aktiv an zahlreiche Gemeinschaften von gefährdeten bzw. unterrepräsentierten Gruppen in der KI-Forschung wenden. Der sogenannte Co-Creation-Ansatz soll dafür sorgen, dass die tatsächlichen Bedürfnisse und Nöte der Nutzer:innen im Mittelpunkt der Forschungsagenda stehen und die Aktivitäten des Projekts leiten.

Die entwickelten Lösungen werden, laut Karimi, folglich in Pilotprojekten in drei relevanten Bereichen (Finanz-/Kreditanwendungen, Identitätsüberprüfungssysteme und akademische Bewertung) demonstriert.

Deine ungelesenen Artikel:
28.07.2026

Because we care: Salzburger Startup plant Backend-Lösung für Pflege-Anbieter:innen

Das Startup „because we care“ hilft bei der Vereinbarkeit von Pflege und Beruf. Mit fast 200.000 Zugriffsberechtigten startet das Unternehmen nun Module für mentale Gesundheitsprävention und ein KI-gestütztes System zur Vermittlung von Pflegediensten.
/artikel/because-we-care-salzburger-startup-plant-backend-loesung-fuer-pflege-anbieterinnen
28.07.2026

Because we care: Salzburger Startup plant Backend-Lösung für Pflege-Anbieter:innen

Das Startup „because we care“ hilft bei der Vereinbarkeit von Pflege und Beruf. Mit fast 200.000 Zugriffsberechtigten startet das Unternehmen nun Module für mentale Gesundheitsprävention und ein KI-gestütztes System zur Vermittlung von Pflegediensten.
/artikel/because-we-care-salzburger-startup-plant-backend-loesung-fuer-pflege-anbieterinnen
© Rollz International / Pexels

„Der Spagat zwischen Karriere und der Betreuung von Angehörigen betrifft in Österreich derzeit rund 400.000 Erwerbstätige“, erklärt Mitgründer von because we care Andreas Gruber. Bis zum Jahr 2050 soll fast jede fünfte erwerbstätige Person eine Pflegeverantwortung übernehmen müssen, fügt er hinzu. Um diesen wachsenden Druck auf Mitarbeitende und Unternehmen abzufedern, positioniert sich „because we care“ als digitale Informationsplattform für Arbeitgeber:innen.

Das Kernprodukt mit bald 200.000 Zugriffsberechtigten hilft pflegenden Angestellten dabei, sich im hochkomplexen heimischen Pflegesystem zurechtzufinden, Anträge zu stellen und entlastende Schritte einzuleiten. Es gehe laut Gruber darum, sich mit Angehörigen auf das Alter vorzubereiten, „lange bevor jemand zu Hause die Treppe runtergefallen ist“. Ursprünglich unter dem Dach der Organisation „Austria Assisted Living“ angesiedelt, agiert die Plattform seit Ende 2024 als eigenständige GmbH, um den wachsenden Markt gezielter zu adressieren.

Branchenübergreifende Nutzungsrate von zehn Prozent

Wie Gründer Andreas Gruber im Gespräch erklärt, verzeichne man bei den teilnehmenden Unternehmen branchenübergreifend eine stabile Nutzungsrate von etwa zehn Prozent. Dies sei für ihn ein klares Indiz, dass das oft unter der Oberfläche schwelende Thema Angehörigenpflege in der Arbeitswelt „voll präsent“ sei. Bislang lag der Fokus der Plattform vor allem auf Lotsenfunktionen für akut Betroffene.

Im September erweitert das gebootstrappte Startup das Angebot jedoch um ein Modul zur mentalen Prophylaxe. Dieses wurde gemeinsam mit Fachleuten aus Psychologie und Mentaltraining entwickelt und richtet sich gezielt an die gesamte Belegschaft. Ziel ist es, rechtzeitig Strategien gegen psychische Belastungen im Arbeits- und Pflegealltag zu vermitteln.

Umbau der Pflegevermittlung

Neben der inhaltlichen Erweiterung steht das Startup vor einem nächsten großen Schritt: Im Oktober soll das System „because we match“ nach aktueller Testphase mit einem großen Salzburger Pilotkunden live gehen. Dieses adressiert einen zentralen Flaschenhals im System, wie Gruber erklärt: die oft wochenlange Suche nach verfügbaren Pflegediensten. Laut dem Gründer vergehen im Schnitt 60 Tage, bis eine Regelversorgung greift – eine Zeitspanne, in der Angehörige unzähligen Anbietern nachtelefonieren müssen. „Wir drehen dieses System jetzt um“, erklärt er im Interview.

Künftig sollen Suchende eine zentrale, rund um die Uhr erreichbare Hotline anrufen können. Dort erfasst ein KI-Voice-Agent den konkreten pflegerischen Bedarf strukturiert und filtert emotionale Bedürfnisse von harten fachlichen Anforderungen. Pflegedienstleister:innen in der jeweiligen Region sehen diese anonymisierten Gesuche auf der Plattform und können sich anschließend bei den Suchenden vorstellen und ihre Leistungen anbieten.

Sprachgesteuertes CRM für das Back-Office

Gleichzeitig sollen die Leistungserbringer von einer digitalen Entlastung im Hintergrund profitieren. Die Software soll im Idealfall für die mobilen Pflegekräfte als sprachgesteuertes CRM-System fungieren. Einsätze lassen sich direkt per Spracheingabe festhalten, während intelligente Voicemails eingehende Anrufe filtern und priorisieren.

Dieser technische Ansatz soll bürokratische Hürden drastisch reduzieren, den Dienstleister:innen das ungeliebte Backoffice abnehmen und „effizienteres Arbeiten näher am Menschen ermöglichen“. Der Hebel dieser Effizienzsteigerung ist laut Gruber beträchtlich: „Wenn wir jeder Pflegefachkraft 30 oder 40 Minuten Orga am Tag abnehmen, geht sich ein Klient mehr aus.“

Toll dass du so interessiert bist!
Hinterlasse uns bitte ein Feedback über den Button am linken Bildschirmrand.
Und klicke hier um die ganze Welt von der brutkasten zu entdecken.

brutkasten Newsletter

Aktuelle Nachrichten zu Startups, den neuesten Innovationen und politischen Entscheidungen zur Digitalisierung direkt in dein Postfach. Wähle aus unserer breiten Palette an Newslettern den passenden für dich.

Montag, Mittwoch und Freitag

AI Summaries

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Welche gesellschaftspolitischen Auswirkungen hat der Inhalt dieses Artikels?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Welche wirtschaftlichen Auswirkungen hat der Inhalt dieses Artikels?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Innovationsmanager:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Investor:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Welche Relevanz hat der Inhalt dieses Artikels für mich als Politiker:in?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Was könnte das Bigger Picture von den Inhalten dieses Artikels sein?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Wer sind die relevantesten Personen in diesem Artikel?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen

AI Kontextualisierung

Wer sind die relevantesten Organisationen in diesem Artikel?

Leider hat die AI für diese Frage in diesem Artikel keine Antwort …

MAMMOth: KI-Tendenz zur Diskriminierung durchbrechen