Régulation des chatbots : un risque clair pour la sécurité publique

A foggy mirror

La réglementation des chatbots IA : une réponse floue et confuse

La récente déclaration d’un organisme de charité met en lumière la réponse confuse de l’autorité de régulation de la sécurité en ligne, Ofcom, face aux dangers potentiels des chatbots IA, qui pourraient représenter un risque clair pour le public.

Des préoccupations croissantes

Andy Burrows, le directeur général de la Molly Rose Foundation, une organisation dédiée à la sécurité en ligne et à la prévention du suicide, a exprimé ses inquiétudes concernant la manière dont trop de chatbots IA sont lancés à la hâte par les entreprises technologiques, dans une bataille pour la part de marché dans le domaine en pleine expansion de l’IA générative.

Un rapport récent du Wall Street Journal a révélé que les chatbots IA de Meta participaient à des jeux de rôle romantiques et même sexuels avec les utilisateurs, y compris des enfants. Bien que Meta ait qualifié ces tests de manipulatifs et non représentatifs de l’engagement des utilisateurs, des modifications ont été apportées à ses produits à la suite de ces découvertes.

Appel à des actions plus strictes

Burrows a déclaré que ce rapport devrait inciter Ofcom à réglementer plus strictement les chatbots IA en vertu de la Loi sur la sécurité en ligne, un sujet sur lequel il estime que l’autorité n’a pas été suffisamment claire.

« Chaque semaine apporte de nouvelles preuves du manque de protections de base en matière de sécurité dans les chatbots générés par l’IA, qui sont rapidement lancés par les entreprises technologiques dans une lutte pour la part de marché », a-t-il déclaré.

« Malgré cela, la réponse d’Ofcom aux risques demeure floue et confuse. »

Des clarifications nécessaires

Le directeur de la stratégie de sécurité en ligne d’Ofcom, Mark Bunting, a reconnu lors d’une session de témoignage que la position légale n’était « pas entièrement claire » et « complexe ». Il a précisé que le contenu de l’IA générative qui répond aux définitions de contenu illégal ou nuisible pour les enfants est traité de la même manière que tout autre type de contenu dans le cadre de la Loi.

« Nous pensons que les chatbots et les services de caractère que nous avons vus liés à des dommages au cours des derniers mois sont, dans certaines circonstances, couverts par la Loi, mais pas nécessairement dans toutes les circonstances », a-t-il ajouté.

Les risques associés aux chatbots IA

Les groupes de sécurité en ligne ont soulevé plusieurs préoccupations concernant les chatbots IA, notamment leur capacité à propager rapidement de fausses informations en raison de données d’entraînement défectueuses ou d’hallucinations de l’IA. De plus, des outils de génération d’images par IA ont été utilisés pour créer des matériaux d’abus sexuels sur enfants.

Plus tôt ce mois-ci, l’organisation de sécurité Internet Watch Foundation (IWF) a signalé des niveaux records de pages web hébergeant des matériaux d’abus sexuels sur enfants en 2024, et a averti que le contenu généré par l’IA était un facteur clé de cette augmentation.

Articles

Renforcer la sécurité des LLM : l’alignement responsable de l’IA

Ce document traite de l'alignement responsable de l'IA dans le développement de phi-3, mettant l'accent sur les principes de sécurité adoptés par Microsoft. Des méthodes de test et des ensembles de...

Contrôle des données dans l’ère des clouds IA souverains

Les nuages d'IA souverains offrent à la fois contrôle et conformité, répondant aux préoccupations croissantes concernant la résidence des données et le risque réglementaire. Dans un environnement où...

L’Alliance Écossaise de l’IA : Vers une Intelligence Artificielle Éthique

L'Alliance écossaise de l'IA a publié son rapport d'impact 2024/2025, révélant une année de progrès significatifs dans la promotion d'une intelligence artificielle éthique et inclusive en Écosse. Le...

UE AI Act : Préparez-vous au changement inévitable

L'annonce de la Commission européenne vendredi dernier selon laquelle il n'y aura pas de retard concernant la loi sur l'IA de l'UE a suscité des réactions passionnées des deux côtés. Il est temps de...

Fiabilité des modèles linguistiques : un défi à relever avec la loi sur l’IA de l’UE

Les modèles de langage de grande taille (LLM) ont considérablement amélioré la capacité des machines à comprendre et à traiter des séquences de texte complexes. Cependant, leur déploiement croissant...

Pause ou avancée : l’avenir de la réglementation de l’IA en Europe

Le Conseil européen a maintenu le calendrier de l'Acte sur l'IA malgré les pressions, affirmant qu'il n'y aura pas de pause dans sa mise en œuvre. Le Premier ministre suédois a appelé à un...

Nouvelles restrictions sur l’IA : impacts et opportunités

L'administration Trump prépare de nouvelles restrictions sur les exportations de puces AI vers la Malaisie et la Thaïlande pour empêcher que des processeurs avancés n'atteignent la Chine via des pays...

Gouvernance de l’IA : Garantir l’éthique et la transparence dans les entreprises modernes

La gouvernance de l'IA et la gouvernance des données sont essentielles pour garantir le développement de solutions d'IA éthiques et fiables. Ces cadres de gouvernance sont interconnectés et vitaux...

LLMOps : Optimisez l’IA Responsable à Grande Échelle avec Python

Dans un paysage hyper-compétitif, déployer des modèles de langage de grande taille (LLM) n'est pas suffisant ; il faut un cadre LLMOps robuste pour garantir la fiabilité et la conformité. Python, avec...