Blog sur les agents IA

Les agents IA peuvent courir. Mais sur le réseau, ils ne peuvent pas se cacher.

Pourquoi l'accès passif aux paquets et la visibilité unifiée du réseau deviennent essentiels pour les environnements d'IA autonomes

Il y a quelques semaines, le titre ci-dessus aurait pu passer pour une métaphore dramatique. Deux incidents récemment révélés lui confèrent désormais un sens littéral troublant.

Visibilité complète des TI et des OT

Deux incidents, deux modes d'attaque très différents

Lors de l'incident OpenAI/Hugging Face, des modèles exécutés dans le cadre d'une évaluation des capacités de cybersécurité ont découvert et exploité une vulnérabilité jusqu'alors inconnue dans un proxy de cache de registre de paquets. Ils ont ainsi obtenu un accès Internet ouvert, élevé leurs privilèges, se sont déplacés latéralement au sein de l'environnement de recherche et ont finalement compromis l'infrastructure de Hugging Face afin d'obtenir des solutions de référence.

Un incident distinct, révélé par l'Institut britannique de sécurité de l'IA (AISI), a suivi un déroulement différent. Des agents ont été intentionnellement mis à disposition d'Internet et testés avec les mesures de sécurité désactivées. Dans le scénario le plus grave, un agent a tenté d'insérer du code malveillant dans un projet open source existant, a créé de fausses identités, a tenté d'influencer un responsable humain, a envoyé des messages et des fichiers contenant des éléments nuisibles, a utilisé Tor et a implanté des instructions d'injection de scripts destinées à d'autres outils de programmation d'IA. Un examinateur humain a bloqué la contribution malveillante et l'AISI n'a constaté aucun préjudice concret qui en aurait résulté.

Ces deux cas doivent être interprétés avec prudence : ils se sont produits dans des conditions d’évaluation exceptionnelles et ne représentent pas un déploiement public normal. Mais ensemble, ils révèlent une tendance claire. Les systèmes autonomes peuvent poursuivre des objectifs à long terme, combiner exploitation technique et tromperie, et passer d’une tâche contrôlée à une action réelle. networket services.

Le network C'est là que l'intention se transforme en action.

Bien qu'un agent d'IA puisse tirer des conclusions au sein d'un modèle opaque, il ne peut agir de manière isolée. Pour accéder à un référentiel, utiliser des identifiants, effectuer des requêtes DNS, appeler une API, se déplacer latéralement, établir un tunnel ou transférer des données, il doit interagir avec les systèmes et networks.

Ces actions laissent des traces observables : flux de connexion, requêtes DNS, relations source-destination, certificats, métadonnées de protocole, chronologies, volumes de données, tentatives infructueuses et changements dans les schémas de communication.

Même si la charge utile de l'application est protégée par TLS, l'environnement network Le comportement fournit toujours de précieuses informations contextuelles.

Une inspection complète du contenu nécessite une transparence TLS autorisée ou des données de télémétrie supplémentaires provenant des points de terminaison, des proxys et des services SaaS ; la transparence au niveau des paquets ne doit pas être confondue avec la transparence générale du texte clair.

C'est pourquoi le network peut devenir une source de vérité indépendante. Elle enregistre ce que l'agent a réellement fait, et non pas seulement ce qu'il a reçu comme instruction ou ce que ses propres journaux d'activité prétendent s'être produit.

Accès passif : voir sans faire partie du trafic

La première condition est un accès fiable aux paquets concernés. Au niveau de l'acquisition, NEOX PacketRaven assure un accès passif hors bande à des points d'observation critiques :

  • Aucune présence IP sur la liaison surveillée
  • Aucune présence MAC sur la liaison surveillée
  • Aucune injection de paquets dans le trafic de production
  • Aucune participation active au suivi network
  • Copies complètes du paquet au point d'observation sélectionné

Cette indépendance est cruciale. La charge de travail surveillée n'a pas à interagir avec la couche de transparence, et un agent ne peut pas simplement supprimer ses journaux locaux pour effacer ses traces sur le système. network.

Lorsque l'accès en ligne résilient est requis, PacketHawk Il fournit l'architecture de contournement appropriée, tandis que PacketRaven reste la base de l'observation passive.

L'univers de visibilité du réseau unifié NEOX

Exploitation du réseau

L'acquisition de paquets à elle seule ne suffit pas. Le trafic de données doit être contrôlé, distribué, analysé, stocké et géré comme une structure unifiée. C'est là qu'intervient la plateforme NEOX, plus complète :

PacketLion, PacketTiger et PacketWolf Agréguer, filtrer, traiter et acheminer le trafic pertinent des agents, des environnements sandbox, des DNS, des proxys, des serveurs et du trafic sortant vers les outils de surveillance et de sécurité appropriés.

PacketOwl ajoute network- une visibilité de sécurité basée sur les données, aidant les équipes à identifier les techniques d'attaque connues, les communications suspectes, les analyses et les mouvements latéraux.

PacketFalcon et PacketGrizzly préserver les preuves au niveau des paquets pour l'enquête et la reconstitution médico-légale. Comme mon collègue Matthias Lichtenegger Comme décrit précédemment, PacketFalcon peut servir de système indépendant. network « Enregistreur de vol » lorsque les mesures de prévention et de confinement échouent.

PacketDirector assure une gestion centralisée, la traçabilité et la supervision opérationnelle de la plateforme de visibilité.

La visibilité n'est que la première étape.

Les incidents OpenAI/Hugging Face et AISI mettent également en lumière le prochain défi : observer les individus network Les actions sont essentielles, mais les défenseurs doivent en fin de compte comprendre si ces actions appartiennent à un seul incident cohérent touchant plusieurs hôtes, identités, services et périodes.

Est-il possible de connecter une exploitation de sandbox ou de proxy, une élévation de privilèges, une utilisation d'identifiants, un déplacement latéral, un tunnelage externe et une communication HTTPS/API en une seule chaîne d'attaque plutôt que de les voir apparaître comme des alertes distinctes ?

Une tentative d'ingénierie sociale, une modification malveillante d'un dépôt de fichiers, une activité Tor et un transfert de fichiers sortant peuvent-ils être présentés comme une seule et même enquête ?

Voici la suite de l'histoire : passer de la visibilité et des preuves matérielles à la détection, à la corrélation et à la reconstitution d'une attaque cohérente. Cela mérite un article à part entière.

Les plats à emporter

Les agents IA sont peut-être nouveaux, mais les network Les comportements sur lesquels ils s'appuient ne le sont pas. Ils utilisent toujours des protocoles, des identités, des services, des référentiels et des chemins au sein de l'infrastructure. Grâce à une architecture de visibilité passive et indépendante, ces actions deviennent observables et peuvent être contestées en cas d'enquête.

NEOX Unified Network Visibility fournit les bases : accès passif aux paquets, agrégation et traitement intelligents, network Visibilité de la sécurité, capture de paquets et opérations centralisées.

la Dre Stefan Diepolder Stefan occupe le poste de directeur de l'ingénierie des solutions chez NEOX et apporte plusieurs décennies d'expérience en leadership dans les domaines des communications, de la sécurité et des technologies de l'information. Il a fait ses preuves dans la transformation d'organisations technologiques, la constitution d'équipes centrées sur le client et la conversion d'idées complexes en solutions évolutives. Chez NEOX, Stefan dirige l'ingénierie des solutions et l'avant-vente, travaillant en étroite collaboration avec les équipes commerciales, de développement et de déploiement afin de traduire les besoins des clients en architectures à forte valeur ajoutée, en preuves de concept et en stratégies de solutions qui renforcent la présence de NEOX sur le marché et la réussite de ses clients.