Neue KI-Risiken: Halluzinationen und kriminelle Nutzung auf der Wall Street

Neue Risiken der KI auf Wall Street

Wall Street-Firmen wie Goldman Sachs, Citigroup und JPMorgan Chase warnen Investoren vor neuen Risiken, die mit der zunehmenden Nutzung von künstlicher Intelligenz (KI) verbunden sind. Diese Risiken umfassen Software-Halluzinationen, Probleme mit der Mitarbeiter-Moral, den Einsatz durch Cyberkriminelle und die Auswirkungen sich ändernder Gesetze weltweit.

Identifizierung neuer Gefahren

Die in den Jahresberichten der Banken neu hervorgehobenen Gefahren umfassen fehlerhafte oder unzuverlässige KI-Modelle, steigenden Wettbewerb und neue Vorschriften, die die Nutzung von KI einschränken. So äußerte JPMorgan, dass KI zu einer „Arbeitsplatzverdrängung“ führen könnte, die die Mitarbeiter-Moral und -Bindung negativ beeinflusst und den Wettbewerb um die Einstellung von Mitarbeitern mit den erforderlichen technologischen Fähigkeiten erhöht.

In den letzten Jahren haben Banken zunehmend KI-bezogene Risiken in ihren Jahresberichten anerkannt, doch neue Bedenken treten auf, da der Finanzsektor zunehmend KI über eigene Software oder Angebote von Drittanbietern einsetzt.

Risiken durch Cyberangriffe

Die Banken warnen, dass sie bei unzureichender Aktualisierung mit den neuesten Entwicklungen in der KI das Risiko eingehen, Kunden und Geschäfte zu verlieren. Gleichzeitig sind sie jedoch auch Risiken ausgesetzt, die sich aus Cyberangriffen und Missbrauch ergeben können.

Ben Shorten, Leiter für Finanzen, Risiko und Compliance bei Accenture, betont die Notwendigkeit, geeignete Governing-Mechanismen zu implementieren, um sicherzustellen, dass KI sicher, fair und geschützt eingesetzt wird. “Dies ist keine Plug-and-Play-Technologie,” sagt er in einem Interview.

Datenqualität und Modelle

Banken sind gefährdet, Technologien zu testen, die möglicherweise auf veralteten, voreingenommenen oder ungenauen Finanzdatensätzen basieren. Der Jahresbericht von JPMorgan hebt die Gefahren hervor, die mit der Entwicklung und Wartung von Modellen verbunden sind, die die höchste Datenqualität erfordern.

Citigroup warnt, dass bei der Einführung von generativer KI in bestimmten Bereichen der Bank das Risiko besteht, „ineffektive, unzureichende oder fehlerhafte“ Ergebnisse zu produzieren. Diese Daten könnten unvollständig, voreingenommen oder ungenau sein, was „negative Auswirkungen auf den Ruf, die Kunden, die Geschäfte oder die Ergebnisse der Operationen und die finanzielle Situation“ haben könnte.

Integration von KI

Goldman Sachs hat seine Investitionen in digitale Vermögenswerte, Blockchain und KI erhöht. Allerdings stellen sich neue Wettbewerbsrisiken bei der rechtzeitigen Integration von KI-Technologien, um die Produktivität zu steigern, Kosten zu senken und den Kunden bessere Transaktionen, Produkte und Dienstleistungen anzubieten.

Die finanziellen Unternehmen stehen auch vor der Herausforderung, Datenprivatsphäre und regulatorische Compliance in einem „weniger sicheren und sich schnell entwickelnden“ Umfeld aufrechtzuerhalten. Im Jahr 2024 trat das EU-Gesetz über künstliche Intelligenz in Kraft, das neue Regeln für die Nutzung von KI-Systemen in der Region festlegt, in der viele US-Banken tätig sind.

Verantwortungsbewusster Umgang mit KI

Die Banken nutzen eine Kombination aus eigenen KI-Tools und solchen, die von externen Anbietern erworben wurden. Citigroup führt eine Sammlung von Werkzeugen ein, die wichtige Informationen aus öffentlichen Einreichungen synthetisieren können. AI @ Morgan Stanley übernimmt wiederkehrende Aufgaben mit einer ChatGPT-ähnlichen Schnittstelle. Die private Vermögensverwaltung von Goldman verwendet KI zur Bewertung von Portfolios und zur Analyse zahlreicher zugrunde liegender Positionen.

“Es ist von entscheidender Bedeutung, einen verantwortungsbewussten Ansatz zu verfolgen und Kontrollen anzuwenden, um sich vor möglichen Ungenauigkeiten und Halluzinationen zu schützen,” erklärte der Chief Information Officer von Goldman, Marco Argenti, letzte Woche auf der Bloomberg Invest-Konferenz in New York.

Herausforderungen durch Cyberkriminalität

Die Herausforderungen durch Cyberkriminalität nehmen ebenfalls zu, da Kriminelle zunehmend KI nutzen, um ihre Aktivitäten zu optimieren. Laut einer aktuellen globalen Umfrage von Accenture unter 600 Cybersecurity-Experten im Bankwesen haben deren Teams Schwierigkeiten, mit den Bemühungen ihrer Organisationen zur Einführung von KI Schritt zu halten. Unter den Befragten glauben 80%, dass generative KI Kriminelle schneller ermächtigt als die Banken darauf reagieren können.

Morgan Stanley stellte in seinem neuesten Jahresbericht fest, dass generative KI, Homeoffice und die Integration von Technologien von Drittanbietern Risiken für die Datenprivatsphäre darstellen könnten. Die durch den Einsatz von KI im Homeoffice eingeführten Risiken erfordern, dass Unternehmen Regeln aufstellen, um Probleme zu vermeiden.

“Diese Schritte werden nur an Bedeutung gewinnen,” fügte Shorten hinzu, “da Angreifer durch diese Technologie schneller ermächtigt werden, als die Banken reagieren können.”

More Insights

Warum Unternehmen eine KI-Governance-Plattform benötigen

Künstliche Intelligenz (KI) transformiert schnell Branchen und verbessert Entscheidungsprozesse. Eine AI-Governance-Plattform bietet Unternehmen die notwendigen Werkzeuge, um die KI-Leistung zu...

KI in der Regierungsführung: Chancen und Herausforderungen

Der Artikel argumentiert, dass Kenia künstliche Intelligenz (KI) in der Regierung nutzen sollte, um die Effizienz und Transparenz zu verbessern. Der Autor hebt hervor, dass KI helfen kann, Korruption...

AI im Gesetz: Die UAE revolutionieren die Gesetzgebung

Die Vereinigten Arabischen Emirate haben einen mutigen Schritt unternommen, indem sie als erstes Land KI offiziell zur Unterstützung bei der Erstellung, Überprüfung und Aktualisierung ihrer Gesetze...

KI-Annahme erfordert verstärkte Zusammenarbeit zwischen Datenschutz- und IT-Führungskräften

Die Einführung von KI erfordert eine engere Zusammenarbeit zwischen Datenschutz- und IT-Experten, um die Risiken einer breiteren KI-Adoption zu minimieren. Diese Partnerschaft ist entscheidend, um die...

DeepSeek: KI im Dienst der sozialen Governance

DeepSeek, ein neuestes großes Sprachmodell in China, wird von der Regierung als Werkzeug zur Förderung der sozialen Governance eingesetzt. Es wird erwartet, dass KI eine wichtige Rolle bei der...

Richtlinien der EU-Kommission zu verbotenen KI-Praktiken

Die Europäische Kommission hat kürzlich ihre ersten Entwurf-Richtlinien zu den unzulässigen Praktiken von Künstlicher Intelligenz (KI) veröffentlicht. Diese Richtlinien zielen darauf ab, Unternehmen...

Nordkarolina ernennt I-Sah Hsieh zum ersten Leiter für KI-Governance und -Politik

North Carolinas Ministerium für Informationstechnologie (NCDIT) hat I-Sah Hsieh als ersten Leiter für KI-Governance und -Politik ernannt. Hsieh wird sich darauf konzentrieren, North Carolina in der...

KI-Risiko-Management: Strategien für eine verantwortungsvolle Umsetzung

Künstliche Intelligenz hat sich schnell von einem Trendthema zu einem kritischen Faktor in jeder wichtigen Branche entwickelt. Dr. Enzo Tolentino betont, dass verantwortungsvolle KI nicht nur darum...

Die unsichtbare Bedrohung durch KI: Gefahren geheimer Einsätze

Der Bericht warnt, dass unregulierte interne KI-Implementierungen katastrophale Risiken mit sich bringen könnten, da Unternehmen ihre fortschrittlichsten KI-Systeme ohne ausreichende Aufsicht...