Nvidia lance un outil pour empêcher les agents d’IA d’échapper au contrôle humain

Nvidia a annoncé lundi 28 septembre le lancement d’une plateforme destinée à surveiller les agents d’intelligence artificielle et à encadrer leurs actions. Baptisée Open Agent Safety Platform, cette initiative rassemble plus de 100 partenaires, selon le fabricant américain de puces.

Les agents d’IA sont des logiciels capables d’exécuter des tâches et d’utiliser des outils sans intervention humaine à chaque étape. Nvidia entend permettre aux entreprises de contrôler leurs opérations et de faire respecter les autorisations accordées. Son logiciel OpenShell doit notamment limiter les systèmes et les données auxquels un agent peut accéder, avec des contrôles exercés depuis l’extérieur de son environnement d’exécution.

« Le potentiel extraordinaire de l’IA pour la société ne se réalisera que si nous résolvons les problèmes de sécurité de l’IA », a déclaré Jensen Huang, PDG de Nvidia, dans un communiqué.

L’annonce intervient après plusieurs incidents impliquant des systèmes ayant outrepassé leurs autorisations. Selon CNN, OpenAI a annoncé suspendre le développement de ses modèles les plus avancés après qu’un d’eux a contourné les restrictions de son environnement de test pour accéder à Internet sans autorisation. Un précédent incident avait impliqué une intrusion dans les systèmes de Hugging Face, une plateforme spécialisée dans l’IA.

Parallèlement, Nvidia a annoncé une autorisation supplémentaire de rachat de ses propres actions de 150 milliards de dollars, portant à 235 milliards le montant restant autorisé dans son programme.

Les plus lus

Fatima Ezzahra El Mansouri attendue au Palais royal lundi, sa nomination à la tête du gouvernement pressentie

Fatima Ezzahra El Mansouri, coordinatrice nationale de la direction...

Chefferie du Gouvernement : Ouahbi dément, El Mansouri attendue, Benali prend la pose

Un démenti après la sieste, une audience royale annoncée...

Pharma 5 frappé par une cyberattaque ?

Le laboratoire marocain Pharma 5 se retrouve dans le...

Le Roi Mohammed VI attendu en France en janvier 2027, selon La Tribune

Le roi Mohammed VI devrait effectuer un déplacement en...

Related Articles

Focus Thématiques