WU-Experiment: Entwickeln MBA-Studierende bessere Innovationsstrategien als ChatGPT?
WU-Professor Nikolaus Franke ließ 21 MBA-Studierende gegen eine künstliche Intelligenz antreten - und testete, wer die besseren Innovationsstrategien liefert.
Künstliche Intelligenz wird den Arbeitsmarkt verändern – darauf können sich die meisten einigen. Während manche jedoch befürchten, dass durch KI viele Jobs wegfallen werden, halten andere dies für übertrieben – und manche nehmen sogar an, dass KI eine 4-Tage-Woche ermöglichen wird. Letztlich läuft es immer auf eine Frage hinaus: Bei welchen Tätigkeiten kann eine KI Menschen wirklich ersetzen? Eine, die nicht dazu gehört, ist das Erstellen einer Innovationsstrategie. Zumindest ist das die Erkenntnis, die Nikolaus Franke aus einem Experiment mit MBA-Studierenden gezogen hat.
Franke ist Professor für Entrepreneurship und Innovation an der Wirtschaftsuniversität Wien und wissenschaftlicher Leiter des MBA Entrepreneurship & Innovation an der WU Executive Academy. “Wir haben 21 MBA-Studierenden der Spezialisierung Entrepreneurship & Innovation eine Aufgabe gegeben, die unternehmerische Kreativität erfordert”, schildert der Wissenschaftler. Konkret ging es dabei um die Frage, wie ein kleines Unternehmen damit umgehen soll, wenn es eine herausragende Innovationsidee hat, es diese aber nicht schützen kann.
Fünf Minuten Zeit für eigene Innovationsstrategie
Die Studierenden bekamen dann fünf Minuten Zeit um einen eigenen Vorschlag dafür zu stellen. “Die Zeit war so knapp bemessen, dass sie im Grunde sofort losschreiben mussten – für jedes Wort hatten sie nur eine gute Sekunde Zeit”, erläutert Frank. Nachdenken sei kaum möglich gewesen. Was aber bewusst so gestaltet war: “Der Grund für diese extreme Zeitbeschränkung war, dass wir den Studierenden ähnliche Bedingungen wie ChatGPT geben wollten”.
Denn genau dieselbe Aufgabe legte Franke auch dem Chatbot von OpenAI vor. Und noch eine andere Einschränkung gab es: Die Antwort durfte maximal 200 Worte umfassen.
Beurteilt wurden die Lösungen dann von zwei Wissenschaftler:innen mit mehrjähriger Erfahrung im Bereich Entrepreneurship und Innovation. Sie wussten weder, ob die jeweiligen Antworten von Studierenden oder ChatGPT kamen, noch waren sie überhaupt informiert, dass es bei dem Experiment um einen Vergleich zwischen menschlichen Fähigkeiten und künstlicher Intelligenz ging.
“Unternehmerische Intelligenz von MBA-Studierenden eindeutig überlegen”
Die beiden Wissenschaftler:innen bewerten die Ergebnisse auf einer Skala von 1 bis 5, wobei 1 für “sehr gut” und 5 für “sehr schlecht” steht. Das Ergebnis: Die Lösungen der MBA-Studierenden bewerteten sie durchschnittlich mit 2,4. Die Lösung von ChatGPT dagegen erreichte nur einen Wert von 4,5.
Auch bei den einzelnen Kritieren lagen die MBA-Studierenden deutlich vorne: Bei der Frage, wie gut die Strategie auf die Situation zugeschnitten war, kamen die Studierenden beispielsweise im Schnitt auf eine Beurteilung von 2,1. Die Lösung von ChatGPT dagegen bewerteten die Wissenschaftler mit dem schlechtestmöglichen Wert von 5,0.
Alles in allem habe jeder der 21 Studierenden eine bessere Strategie als ChatGPT abgeliefert, resümiert Franke. Dies obwohl ChatGPT fünf Anläufe für die Lösung gebraucht habe und die Studierenden “unter unrealistisch harten Bedingungen” sehr spontane Lösungen abliefern hätten müssen. “Die unternehmerische Intelligenz der MBA-Studierenden ist der künstlichen Intelligenz eindeutig überlegen”, schlussfolgert der Studiengangsleiter daher.
Allerdings: Für den Versuch verwendete Franke eine auf dem Sprachmodell GTP-3.5 basierende Version von ChatGPT, wie die WU Executive Academy auf brutkasten-Anfrage bestätigte. Seit März 2023 ist jedoch auch das Sprachmodell GPT-4 verfügbar, mit dem ChatGPT im Regelfall deutlich bessere Ergebnisse erzielt.
KI in Gesundheit, Bildung und öffentlichem Dienst: „Chancen nutzen, Risiken minimieren”
Nachlese. Was kann Künstliche Intelligenz in den Bereichen Gesundheit, Bildung und im öffentlichen Sektor leisten? Welche Chancen und Risiken bringt Künstliche Intelligenz mit sich? Wie lässt sich ihr Potenzial verantwortungsvoll nutzen, ohne ethische Leitlinien zu überschreiten? Diese und viele weitere Fragen stehen im Fokus der zweiten Folge von „No Hype KI“.
KI in Gesundheit, Bildung und öffentlichem Dienst: „Chancen nutzen, Risiken minimieren”
Nachlese. Was kann Künstliche Intelligenz in den Bereichen Gesundheit, Bildung und im öffentlichen Sektor leisten? Welche Chancen und Risiken bringt Künstliche Intelligenz mit sich? Wie lässt sich ihr Potenzial verantwortungsvoll nutzen, ohne ethische Leitlinien zu überschreiten? Diese und viele weitere Fragen stehen im Fokus der zweiten Folge von „No Hype KI“.
Gut zwei Jahre ist es her, dass ChatGPT einen Hype rund um generative KI-Modelle auslöste. Doch es stellen sich auch viele kritische Fragen beim Einsatz von KI – besonders in sensiblen Bereichen. Klar ist: Künstliche Intelligenz bietet viele Vorteile und vereinfacht komplexe Prozesse. Gleichzeitig wirft sie jedoch auch Herausforderungen und Ängste auf, mit denen man sich kritisch auseinandersetzen muss.
Was KI in den Bereichen Gesundheit, Bildung und im öffentlichen Sektor leisten kann, diskutierten in der zweiten Folge „No Hype KI”:
Bernd Konnerth (Microsoft Österreich | Public Sector Lead)
Carina Zehetmaier (Women in AI Austria | Präsidentin)
Harald Herzog (Österreichische Gesundheitskasse | Leiter Digitalisierung und Innovation)
Moritz Mitterer (ITSV | Aufsichtsratsvorsitzender)
Markus Fallenböck (Universität Graz | Vizerektor für Personal und Digitalisierung).
Menschenzentrierter Ansatz im Mittelpunkt
Künstliche Intelligenz ist schon längst Teil unseres Alltags – ob bewusst oder unbewusst. Und obwohl KI bereits in vielen Lebensbereichen der Österreicher:innen präsent ist, bleibt die Skepsis bei vielen groß. Laut Carina Zehetmaier ist es daher ein besonders wichtiger Faktor, dass man jeder einzelnen Person KI näher bringt, sodass mehr Vertrauen in die Technologie entsteht: „Derzeit gibt es noch viele Ängste rund um KI. Aber es gibt auch noch gewisse Schwachstellen wie zum Beispiel das Halluzinieren, oder auch Vorurteile, die in den Systemen drinnen sind und widergespiegelt werden können. Es ist relevant, dass man sich hier von Anfang an mit den kritischen Fragenstellungen auseinandersetzt“.
Hierbei müsse an vorderster Stelle die öffentliche Hand hohe Standards setzen – vor allem aus menschenrechtlicher Sicht. Zehetmaier befürwortet in diesem Zusammenhang den AI Act, der klare gesetzliche Rahmenbedingungen schafft. „Die öffentliche Hand ist der direkte Adressat der Grund- und Menschenrechte“, sagt sie.
Ein weiterer wichtiger Punkt von Zehetmaier ist die Notwendigkeit, marginalisierte Gruppen nicht zu übersehen. Man müsse sich bemühen, geschlechtsspezifische und andere Vorurteile in Datensätzen zu vermeiden. „Wir wissen auch, dass Automatisierung den Gender-Pay-Gap öffnet anstatt schließt, das heißt, da müssen wir aktiv und gezielt gegensteuern“.
Verantwortungsvolle KI bedeute, aktiv an den Daten und Algorithmen zu arbeiten. Nur so könne sichergestellt werden, dass KI-Anwendungen nicht nur technologisch effizient, sondern auch ethisch und gesellschaftlich verantwortungsvoll gestaltet werden.
Dass die Anwendung von generativer KI nicht bloß Kosten senken soll, sondern den Menschen Nutzen bringen muss, ist auch für Bernd Konnerth von Microsoft klar. „Wir setzen auf Responsible-AI-Standards, bei denen es um Inklusivität, Fairness, Datenschutz und all diese Themen geht. Das sind Leitplanken in unserer Produktentwicklung“, sagt der Public Sector Lead von Microsoft Österreich.
Von der Unternehmenstransformation bis hin zum öffentlichen Dienst sei ein breites Umschulungsprogramm notwendig, um Ängste abzubauen: Es sei wichtig, „Umgebungen zu schaffen, die es Mitarbeiterinnen und Mitarbeiter möglich machen, mit der Technologie zu interagieren, um den Berührungsängsten entgegen zu wirken”.
Universität Graz startete UniGPT für Mitarbeitende
Was Bildung angeht, betont Markus Fallenböck von der Universität Graz die Bedeutung einer breiten Wissensvermittlung. Es gehe nicht nur um Spezialist:innen für KI, sondern vor allem um die große Masse an Mitarbeitenden, die einen “sinnvollen Umgang mit KI erlernen” müssen: „Je mehr Wissen wir in die Bevölkerung kriegen, umso mehr können wir Chancen nutzen und Risiken minimieren“.
Die Universität Graz hat dazu eine eigene Micro-Credential-KI gestartet, um Studierenden ein Grundwissen zu KI zu vermitteln: “Das ist ein abgeschlossenes Studienpaket, das man in jedes Studium integrieren kann und das gerade in einer Pilotphase ist”, erläutert Fallenböck. Das Paket lasse sich in jedes Studium integrieren. “Da ist die Idee, dass in ein paar Jahren jeder Bachelor-Studierende, der in Graz einen Abschluss macht, ein Grundwissen hat zu KI-Bereich, Technik, Wirtschaft, Recht, Ethik”.
Für die eigenen Mitarbeiter:innen hat die Universität Graz im Mai 2024 außerdem den Chatbot UniGPT gestartet. Bereits mehrere hundert Mitarbeiter:innen wurden dafür bereits eingeschult. “Da sitzt die Universitätsprofessorin neben der Sekretariatskraft und beide interessieren sich für KI und werden es in ihrem Arbeitsalltag gut einsetzen”, schildert Fallenböck seine Eindrücke.
Über die eigenen Mitarbeitenden will die Universität Graz Wissensvermittlung aber auch in die Bevölkerung tragen. Dazu hat sie im Oktober etwa erstmals den Technology Impact Summit zum Thema KI in Graz veranstaltet. “Weil natürlich auch wichtig ist, dass wir die breite Öffentlichkeit mit dem Thema erreichen. Je mehr Wissen wir in die Bevölkerung kriegen, umso mehr, können wir auch das Chancennutzen und Risikominimieren wirklich schaffen”, erläutert Fallenböck.
ITSV: Künstliche Intelligenz im Gesundheitssystem
Die ITSV wiederum steuert und koordiniert die IT-Aktivitäten der österreichischen Sozialversicherung – und beschäftigt sich schon länger mit dem KI-Thema. Aufsichtsratsvorsitzender Moritz Mitterer erzählt im Talk, dass das Unternehmen bereits 2018 mit der Erprobung von KI-Lösungen begonnen habe. In einem geschützten Umfeld wurden dabei erste Erfahrungen gesammelt, bevor die Systeme in den Echtbetrieb übergingen. Dieser schrittweise Ansatz habe wesentlich dazu beigetragen, das Vertrauen in KI-Modelle im Unternehmen zu stärken.
Besonders bei sensiblen Daten, wie etwa Gesundheitsdaten, ist die Gefahr von Missbrauch ein zentraler Risikofaktor. Mitterer erläutert die Bedeutung von Transparenz und Nachvollziehbarkeit: „Man muss Patientinnen und Patienten mitnehmen, indem man entsprechend strenge Regeln hat und Compliance hat. Und indem man offen damit umgeht, falls doch was sein sollte“.
KI schafft Abhilfe bei steigendem Leistungsaufkommen bei ÖGK
Die ITSV arbeitet dabei unter anderem für die Österreichische Gesundheitskasse (ÖGK). Harald Herzog von der ÖGK erläutert, dass das steigende Leistungsaufkommen – etwa wachsende Fallzahlen, steigende Lebenserwartung, mehr Konsultationen – nach neuen Wegen verlangt: „Würden wir die Prozesse so weiterspielen wie bisher, bräuchten wir mehr Personal“, so Herzog. „Unsere Aufgabe ist es effizient zu arbeiten und alle technischen Möglichkeiten der KI auszunutzen“.
KI könne hier unterstützen, etwa bei der Wahlarztkostenerstattung. Ziel sei es, einen Großteil der Fälle automatisiert abwickeln zu können. Laut Herzog geht es aber nicht darum, den persönlichen Kontakt zu ersetzen, sondern lediglich zu ergänzen.
Zusätzliches Wirtschaftswachstum von bis zu 18 Prozent durch KI-Nutzung
Auch die öffentliche Verwaltung steht vor Herausforderungen, etwa aufgrund der Pensionierungswelle oder des Fachkräftemangels. Künstliche Intelligenz könnte dabei eine Rolle spielen. Bernd Konnerth von Microsoft Österreich sagt: „Künstliche Intelligenz kann eine Antwort sein – vielleicht nicht die Einzige, aber sie hat sehr viel Potenzial durch die Automatisierung wiederkehrender Tätigkeiten, viel Nutzen zu stiften“.
Aktuell befinde sich Österreich erst am Anfang, dieses Potenzial auszuschöpfen. Konnerth verweist auf eine Studie, dass Österreich ein Wirtschaftswachstum von bis zu 18 Prozent erzielen könnte, wenn das ganze Potenzial von KI ausgeschöpft werde.
Ausblick: KI-Nutzung in fünf Jahren
Wo steht der Einsatz von Künstlicher Intelligenz in fünf Jahren? „Ich hoffe, dass wir nicht mehr über die Technologie reden müssen, so wie wir heute auch nicht mehr über Strom sprechen, sondern dass sie einfach da ist“, so Microsoft-Experte Konnerth.
Carina Zehetmaier wiederum blickt auf die EU als Werteunion. In fünf Jahren solle man sehen, dass Österreich und Europa es geschafft haben, einen wertebasierten, menschengerechten KI-Einsatz umzusetzen. Für Österreich könne sich hier eine besondere Chance bieten, so Zehetmaier. Das Land könne sich als Vorreiter für einen vertrauenswürdigen, menschenzentrierten Umgang mit KI etablieren. Es gehe darum, „den menschenzentrierten Ansatz im Einklang mit Werten und Grundrechten umzusetzen“.
KI birgt enormes Potenzial
Die Diskussionsrunde ist sich einig, dass KI in sensiblen Arbeitsfeldern längst keine ferne Zukunftsvision mehr ist, sondern bereits eine zentrale Rolle darstellt. Die Chancen sind enorm – von effizienteren Verwaltungsprozessen über eine präzisere Gesundheitsversorgung bis hin zu einer gerechteren Bildung. Doch um diese Möglichkeiten zu nutzen, braucht es breites Verständnis, klare Regeln, vertrauenswürdige Technik und einen sensiblen Umgang mit Daten.
Folge nachsehen: No Hype KI – Was kann KI in den Bereichen Gesundheit, Bildung und im öffentlichen Sektor leisten?
Hier gehts es zur Nachlese von Folge 1: „No Hype KI – wo stehen wir nach zwei Jahren ChatGPT?”
Die Serie wird von brutkasten in redaktioneller Unabhängigkeit mit finanzieller Unterstützung unserer Partner:innen produziert.
Aktuelle Nachrichten zu Startups, den neuesten Innovationen und politischen Entscheidungen zur Digitalisierung direkt in dein Postfach. Wähle aus unserer breiten Palette an Newslettern den passenden für dich.