Novos Riscos da IA: Alucinações e Uso Criminológico em Wall Street

Riscos Emergentes da IA no Setor Financeiro

Recentemente, instituições financeiras como Goldman Sachs, Citigroup e JPMorgan Chase alertaram sobre os novos riscos associados ao uso crescente da inteligência artificial (IA). Esses riscos incluem alucinações de software, problemas de moral entre os funcionários, uso por cibercriminosos, e o impacto de mudanças nas legislações globais.

Preocupações com Alucinações de Software

Um dos principais perigos identificados nos relatórios anuais dos bancos é a possibilidade de modelos de IA falhos ou não confiáveis. Por exemplo, o JPMorgan alertou que a IA pode levar ao deslocamento da força de trabalho, afetando a moral e a retenção de funcionários, além de aumentar a competição por talentos com habilidades tecnológicas.

Impactos na Competitividade

À medida que o setor financeiro adota cada vez mais a IA, também surgem novos desafios. As instituições correm o risco de perder clientes e negócios se não acompanharem os últimos desenvolvimentos em IA. Por outro lado, o uso aumentado da IA também as expõe a risco de ciberataques e uso indevido.

Necessidade de Governança Adequada

Ben Shorten, da Accenture, destacou a importância de ter mecanismos de governança adequados para garantir que a IA seja implementada de maneira segura, justa e protegida. Ele enfatizou que a tecnologia não deve ser vista como uma solução plug-and-play.

Qualidade dos Dados e Modelos

Os bancos estão em risco de testar tecnologias construídas com conjuntos de dados financeiros desatualizados ou tendenciosos. O relatório anual do JPMorgan destacou os perigos associados ao desenvolvimento e à manutenção de modelos com a mais alta qualidade de dados.

Desafios da Integração de IA

A Citigroup mencionou que, ao implementar a IA generativa em partes selecionadas do banco, existem riscos de resultados ineficazes, inadequados ou defeituosos para seus analistas. Isso pode impactar negativamente sua reputação e a confiança de clientes e negócios.

Privacidade de Dados e Conformidade Regulatória

As instituições financeiras enfrentam o desafio de manter a privacidade dos dados e a conformidade regulatória em um ambiente cada vez mais incerto e em rápida evolução. Com a entrada em vigor da Lei de Inteligência Artificial da UE em 2024, que estabelece novas regras para o uso de sistemas de IA, a situação se torna ainda mais complexa.

Conclusão

À medida que os bancos adotam a IA, os cibercriminosos também estão se tornando mais sofisticados em seu uso. Um estudo recente da Accenture revelou que 80% dos executivos de segurança cibernética acreditam que a IA generativa está capacitando os criminosos mais rapidamente do que os bancos podem responder. Portanto, é crucial que as instituições financeiras implementem regras rígidas para evitar problemas relacionados ao uso da IA em um ambiente de trabalho remoto.

More Insights

Por que a Inteligência Artificial é Essencial na Governança

A inteligência artificial (IA) pode melhorar a governança ao otimizar processos e aumentar a transparência nas instituições. Ao invés de substituir a humanidade, a IA deve fortalecer a competência dos...

Colaboração Crucial entre Privacidade e TI na Adoção de IA

A adoção de IA está rapidamente transformando as dinâmicas entre profissionais de privacidade e TI, exigindo uma colaboração mais próxima para evitar riscos. Especialistas destacam a importância de...

DeepSeek: A Revolução da Governança Social na China

O DeepSeek é um novo modelo de linguagem que está sendo utilizado na China para guiar a opinião pública e garantir a estabilidade social, enquanto propaga a linha do Partido Comunista. Embora tenha...

Carolina do Norte Nomeia I-Sah Hsieh como Líder em Governança de IA

A Carolina do Norte nomeou I-Sah Hsieh como o primeiro líder de governança e política de IA do estado, com o objetivo de promover o avanço ético da tecnologia. Hsieh, com 25 anos de experiência na...