Neue KI-Risiken: Halluzinationen und kriminelle Nutzung auf der Wall Street

Neue Risiken der KI auf Wall Street

Wall Street-Firmen wie Goldman Sachs, Citigroup und JPMorgan Chase warnen Investoren vor neuen Risiken, die mit der zunehmenden Nutzung von künstlicher Intelligenz (KI) verbunden sind. Diese Risiken umfassen Software-Halluzinationen, Probleme mit der Mitarbeiter-Moral, den Einsatz durch Cyberkriminelle und die Auswirkungen sich ändernder Gesetze weltweit.

Identifizierung neuer Gefahren

Die in den Jahresberichten der Banken neu hervorgehobenen Gefahren umfassen fehlerhafte oder unzuverlässige KI-Modelle, steigenden Wettbewerb und neue Vorschriften, die die Nutzung von KI einschränken. So äußerte JPMorgan, dass KI zu einer „Arbeitsplatzverdrängung“ führen könnte, die die Mitarbeiter-Moral und -Bindung negativ beeinflusst und den Wettbewerb um die Einstellung von Mitarbeitern mit den erforderlichen technologischen Fähigkeiten erhöht.

In den letzten Jahren haben Banken zunehmend KI-bezogene Risiken in ihren Jahresberichten anerkannt, doch neue Bedenken treten auf, da der Finanzsektor zunehmend KI über eigene Software oder Angebote von Drittanbietern einsetzt.

Risiken durch Cyberangriffe

Die Banken warnen, dass sie bei unzureichender Aktualisierung mit den neuesten Entwicklungen in der KI das Risiko eingehen, Kunden und Geschäfte zu verlieren. Gleichzeitig sind sie jedoch auch Risiken ausgesetzt, die sich aus Cyberangriffen und Missbrauch ergeben können.

Ben Shorten, Leiter für Finanzen, Risiko und Compliance bei Accenture, betont die Notwendigkeit, geeignete Governing-Mechanismen zu implementieren, um sicherzustellen, dass KI sicher, fair und geschützt eingesetzt wird. “Dies ist keine Plug-and-Play-Technologie,” sagt er in einem Interview.

Datenqualität und Modelle

Banken sind gefährdet, Technologien zu testen, die möglicherweise auf veralteten, voreingenommenen oder ungenauen Finanzdatensätzen basieren. Der Jahresbericht von JPMorgan hebt die Gefahren hervor, die mit der Entwicklung und Wartung von Modellen verbunden sind, die die höchste Datenqualität erfordern.

Citigroup warnt, dass bei der Einführung von generativer KI in bestimmten Bereichen der Bank das Risiko besteht, „ineffektive, unzureichende oder fehlerhafte“ Ergebnisse zu produzieren. Diese Daten könnten unvollständig, voreingenommen oder ungenau sein, was „negative Auswirkungen auf den Ruf, die Kunden, die Geschäfte oder die Ergebnisse der Operationen und die finanzielle Situation“ haben könnte.

Integration von KI

Goldman Sachs hat seine Investitionen in digitale Vermögenswerte, Blockchain und KI erhöht. Allerdings stellen sich neue Wettbewerbsrisiken bei der rechtzeitigen Integration von KI-Technologien, um die Produktivität zu steigern, Kosten zu senken und den Kunden bessere Transaktionen, Produkte und Dienstleistungen anzubieten.

Die finanziellen Unternehmen stehen auch vor der Herausforderung, Datenprivatsphäre und regulatorische Compliance in einem „weniger sicheren und sich schnell entwickelnden“ Umfeld aufrechtzuerhalten. Im Jahr 2024 trat das EU-Gesetz über künstliche Intelligenz in Kraft, das neue Regeln für die Nutzung von KI-Systemen in der Region festlegt, in der viele US-Banken tätig sind.

Verantwortungsbewusster Umgang mit KI

Die Banken nutzen eine Kombination aus eigenen KI-Tools und solchen, die von externen Anbietern erworben wurden. Citigroup führt eine Sammlung von Werkzeugen ein, die wichtige Informationen aus öffentlichen Einreichungen synthetisieren können. AI @ Morgan Stanley übernimmt wiederkehrende Aufgaben mit einer ChatGPT-ähnlichen Schnittstelle. Die private Vermögensverwaltung von Goldman verwendet KI zur Bewertung von Portfolios und zur Analyse zahlreicher zugrunde liegender Positionen.

“Es ist von entscheidender Bedeutung, einen verantwortungsbewussten Ansatz zu verfolgen und Kontrollen anzuwenden, um sich vor möglichen Ungenauigkeiten und Halluzinationen zu schützen,” erklärte der Chief Information Officer von Goldman, Marco Argenti, letzte Woche auf der Bloomberg Invest-Konferenz in New York.

Herausforderungen durch Cyberkriminalität

Die Herausforderungen durch Cyberkriminalität nehmen ebenfalls zu, da Kriminelle zunehmend KI nutzen, um ihre Aktivitäten zu optimieren. Laut einer aktuellen globalen Umfrage von Accenture unter 600 Cybersecurity-Experten im Bankwesen haben deren Teams Schwierigkeiten, mit den Bemühungen ihrer Organisationen zur Einführung von KI Schritt zu halten. Unter den Befragten glauben 80%, dass generative KI Kriminelle schneller ermächtigt als die Banken darauf reagieren können.

Morgan Stanley stellte in seinem neuesten Jahresbericht fest, dass generative KI, Homeoffice und die Integration von Technologien von Drittanbietern Risiken für die Datenprivatsphäre darstellen könnten. Die durch den Einsatz von KI im Homeoffice eingeführten Risiken erfordern, dass Unternehmen Regeln aufstellen, um Probleme zu vermeiden.

“Diese Schritte werden nur an Bedeutung gewinnen,” fügte Shorten hinzu, “da Angreifer durch diese Technologie schneller ermächtigt werden, als die Banken reagieren können.”

More Insights

CII fordert klare Regeln für den Einsatz von KI im Finanzsektor

Der Chartered Insurance Institute (CII) hat klare Verantwortungsrahmen und eine sektorweite Schulungsstrategie gefordert, um den Einsatz von Künstlicher Intelligenz (KI) im Finanzdienstleistungssektor...

Künstliche Intelligenz in New York: Wichtige Gesetzesänderungen für Arbeitgeber im Jahr 2025

Im ersten Halbjahr 2025 hat New York, ähnlich wie andere Bundesstaaten, Gesetze zur Regulierung von Künstlicher Intelligenz (KI) auf Ebene der Bundesstaaten eingeführt. Insbesondere konzentriert sich...

Risikomanagement für Künstliche Intelligenz: Strategien zur Minimierung von Gefahren

Die Risiken von KI-Systemen können durch verschiedene Faktoren wie Datenqualität, Modellarchitektur und betriebliche Herausforderungen beeinflusst werden. Ein effektives Risikomanagement ist...

Wichtige Erkenntnisse zum EU-Gesetz über Künstliche Intelligenz

Die Europäische Union hat das Gesetz über künstliche Intelligenz (AI Act) eingeführt, das darauf abzielt, die Risiken und Möglichkeiten von KI-Technologien in Europa zu verwalten. Dieses Gesetz ist...

Koreas KI-Grundgesetz: Ein neuer Rahmen für künstliche Intelligenz

Südkorea hat sich mit dem Inkrafttreten des Gesetzes über die Entwicklung von Künstlicher Intelligenz und die Schaffung von Vertrauen, bekannt als AI Basic Act, an die Spitze der KI-Regulierung in...

EU AI-Gesetz und DORA: Finanzielle Risiken und Compliance neu definiert

Die EU AI Act und DORA stellen neue Anforderungen an Finanzinstitute, indem sie Transparenz und Resilienz in der Nutzung von KI-Systemen fordern. Unternehmen müssen die finanziellen Risiken...

KI-Regulierung im transatlantischen Kontext

Künstliche Intelligenz (KI) hat sich zu einer der bedeutendsten technologischen Kräfte der Gegenwart entwickelt und hat das Potenzial, Volkswirtschaften, Gesellschaften und die globale Governance...

EU-Kommission plant Maßnahmen zur Förderung von KI-Gigafabriken

Die EU-Kommission möchte die Hürden für den Einsatz von Künstlicher Intelligenz (KI) abbauen und plant, die Infrastruktur für Datenzentren in Europa erheblich auszubauen. Dies geschieht im Rahmen des...