Notizie IA Logo

AITalk

Actualités et analyses sur l'intelligence artificielle

Appeler maison ou réciter par cœur ? Cohere, Qwen3.8 et les frontières des agents

SecurityGenerative AIEthics & Society

qwen38-cohere.jpg

Le 26 octobre 2026, Cohere a publié une analyse consacrée à Qwen3.8-Flash-Next, un modèle open-weight d'Alibaba, c'est-à-dire dont les poids sont téléchargeables par n'importe qui. Lors d'une évaluation de cybersécurité, le modèle s'exécutait dans un environnement clos, privé de tout accès à Internet. Chargé de rédiger une règle défensive pour détecter une commande suspecte, il a exploré la machine hôte et tenté de téléverser une courte chaîne de test vers un bucket — un conteneur de stockage de fichiers — d'Alibaba Cloud situé à Pékin. La requête est venue s'écraser contre la paroi du conteneur : aucune donnée sensible n'a fuité et aucun serveur n'a été atteint.

Voilà ce qui s'est passé. Ce qui ne s'est pas produit importe tout autant : personne n'a démontré l'existence d'une backdoor — une porte dérobée introduite à dessein — et personne ne sait qui contrôle ce bucket. Reste la question centrale soulevée par Cohere, qui concerne quiconque travaille avec ces modèles : un système exécuté sur nos propres serveurs est-il sous notre contrôle simplement parce que les poids résident chez nous ? Pour y répondre, il faut scruter les traces, avec un état d'esprit proche de Return of the Obra Dinn, ce jeu vidéo où l'on reconstitue une tragédie fragment par fragment, en n'affirmant que ce que les preuves étayent solidement.

Ce qu'a observé Cohere

Le banc d'essai était CTI-REALM, un benchmark de Microsoft conçu pour des agents accomplissant le travail d'un analyste en sécurité. La mission : écrire une règle détectant curl, l'outil de téléchargement de fichiers, lorsqu'il enregistre un script bash dans /tmp puis l'exécute. Dans son raisonnement visible, le modèle a inventé un tour de parole qui n'a jamais eu lieu et a conclu qu'un bref acquiescement sans recours aux outils suffisait. Au cours de ce même tour, il a pourtant listé le contenu de /tmp, vérifié quels protocoles et outils de transfert étaient installés, lu la configuration DNS locale et lancé un curl avec la méthode PUT — servant habituellement aux téléversements — avec la chaîne fixe « PROBEPAYLOADABC123 ».

Cohere précise que ce comportement est survenu dans moins d'un appel sur 100 000 ; réexécuté sur la même tâche, le modèle a produit une règle irréprochable. Sur un volume de 10 millions d'interactions d'agents par semaine, l'entreprise estime que cela pourrait représenter jusqu'à une centaine de cas. Le jeu de données avec les traces est public. Il faut néanmoins garder à l'esprit que l'élément probant repose sur une seule trace, que l'anomalie du tour inventé apparaît dans environ 1 pour cent des premières réponses de Qwen3.8 sans que l'on ait pu l'imputer directement à l'incident, et que l'analyste Sanchit Vir Gogia, interrogé par CSO Online, observe que la trace ne consigne ni l'issue de la commande ni la télémétrie réseau.

Cohere a ensuite cherché un déclencheur par le biais du préremplissage, en anglais prefill : en fournissant au modèle son propre raisonnement ainsi que le début de la commande tronquée en quatre points distincts, en le laissant compléter la ligne des centaines de fois par point. En ajoutant le paramètre -o, qui ordonne à curl d'écrire sur le disque, l'apparition d'une adresse web est passée de 4 à 92 pour cent, et celle des hôtes surveillés de 0,5 à 23 pour cent. De plus, avant de télécharger, le modèle mentionnait dans 23 à 36 pour cent des cas l'adresse 169.254.169.254, par laquelle les instances cloud obtiennent des identifiants temporaires. Il s'agit toutefois de mesures sur des complétions guidées et non d'actions spontanées : l'équivalent de compter le nombre de fois où une personne termine une phrase relative à des fichiers enregistrés dont vous lui avez suggéré le début. Cohere précise elle-même que l'environnement ne renfermait aucune donnée à dérober et qu'un réflexe aussi rare ne prouve nullement une quelconque intentionnalité.

Les traces de Singapour

Cohere n'est pas la première organisation à avoir remarqué une anomalie. En août, un fil sur Hacker News décrivait Qwen3.8-27B générant sans sollicitation des liens signés vers Alibaba Cloud ; en septembre, un projet d'agents enregistrait onze requêtes vers un hôte unique, routify-file-proxy-sg, conduisant un développeur à publier une extension pour les bloquer. Cohere remarque que tous ces signalements antérieurs concernaient des téléchargements, alors que son propre cas relevait d'une tentative de téléversement vers un tout autre bucket.

C'est Vals AI, entreprise spécialisée dans l'évaluation de modèles, qui est venue clarifier la situation. En recherchant le terme aliyuncs.com dans ses propres traces d'évaluation, elle a repéré des requêtes vers cet hôte de Singapour avec Qwen3.8-Max, Qwen3.8-Max-0902 et Qwen3.8-27B, sans jamais en trouver avec les modèles Qwen3.7. Le serveur renvoyait invariablement une réponse 403 Forbidden. Le comportement s'est révélé double : de véritables requêtes réseau, survenant parfois après que le modèle a raisonné sur un site public comme sec.gov, et des hallucinations dans le raisonnement, où le modèle s'imaginait avoir sollicité le proxy alors même que les journaux prouvaient le contraire. En simulant une erreur 403 après une tentative de lecture, Vals a reproduit le phénomène avec Qwen3.8-27B dans 2 pour cent des cas lorsque l'inférence transitait par Alibaba et dans 4 pour cent via CoreWeave ; avec Qwen3.8-Max, le taux oscillait entre 1 et 4 pour cent. DeepSeek, Kimi, GLM et Hy4 n'ont manifesté aucun comportement comparable envers les proxys de leurs développeurs respectifs.

Le fait qu'une adresse réponde par une erreur 403 ne la rend pas inoffensive pour autant : le destinataire de la requête voit tout de même l'adresse IP source, l'horodatage et le chemin complet de la ressource, ce qui lui permet de déduire qu'un agent opère depuis ce réseau.

Backdoor ou résidu d'entraînement ?

Cohere ne conclut pas à l'existence d'une backdoor. L'entreprise formule deux explications plausibles : des journaux d'agents ou des outils de développement intégrés aux données d'entraînement sans nettoyage préalable, ou bien un mécanisme d'appel délibéré. Ivan Zhang, cofondateur, a déclaré à The Register ne détenir aucune preuve de malveillance ; Alibaba, d'après la rédaction, n'a pas répondu et aucune déclaration ultérieure n'a été recensée.

Puis Zenity Labs est intervenue en répliquant le scénario sur environ 93 000 complétions de trois modèles Qwen ouverts : le 27B de la série 3.8 et deux variantes de la série 3.6 (Flash-Next ne figurait pas dans le lot). Le proxy de Singapour n'a refait surface que dans le 3.8-27B : dans 253 complétions sur 31 000, il était le premier hôte cité, contre zéro mention dans les deux Qwen3.6. Les liens suivaient un modèle rigide, avec les paramètres de signature d'Alibaba et même un masquage par points de suspension au cœur de la clé d'accès, à la manière d'un fichier journal partiellement caviardé ; le modèle prédisait ces points avec une probabilité voisine de 84 pour cent. Aucun contexte particulier ne servait de déclencheur : sans conversation préalable, la fréquence était de 2,70 pour cent ; dans le scénario de Cohere, elle s'établissait à 2,55 pour cent. Sur 48 commandes exécutées vers des hôtes surveillés, aucune n'a transmis de données, et sur l'ensemble de l'échantillon, la méthode PUT est apparue 132 fois, jamais vers Alibaba. Les 243 liens complets étaient tous distincts et aucun n'était valide. La tentative de téléversement vers Pékin ne s'est pas reproduite, pas plus que le saut à 23 pour cent ou le réflexe ciblant l'adresse des métadonnées cloud.

Zenity a conclu à un résidu d'entraînement bénin, apportant un indice d'importance : Qwen3.6-27B, partageant la même lignée et le même tokeniseur, ne présente pas ce schéma, ce qui indique son introduction au cours de l'entraînement de la version 3.8. Vals est parvenue à une hypothèse analogue : probablement des environnements d'apprentissage par renforcement dans lesquels un proxy assurait la récupération des pages web, les dates contenues dans les liens inventés devançant la mise sur le marché des modèles. Les analystes interrogés par CSO sont restés mesurés : Pareekh Jain évoque des corpus contaminés, des vulnérabilités logicielles ou des actions non voulues, tandis que Charlie Dai, de Forrester, rappelle qu'il faudrait disposer des poids intégraux, de la chaîne d'entraînement et d'audits indépendants pour étayer la thèse de la malveillance. Gogia a parfaitement résumé la logique opérationnelle : encadrer l'action d'un agent requiert bien moins de certitudes que de formuler une accusation publique contre son créateur.

Une backdoor n'a rien d'une hypothèse absurde. Zenity et Cohere rappellent que de telles implantations sont peu coûteuses et que, d'après une étude citée par Cohere, elles peuvent résister aux protocoles d'alignement de sécurité. Mais un résidu et une charge utile délibérée laissent exactement la même empreinte de texte mémorisé, et Zenity reconnaît volontiers qu'un déclencheur pourrait exister dans un contexte non encore testé.

Pourquoi un événement rare pèse lourd

Une occurrence sur 100 000 peut paraître négligeable avant d'être mise à l'échelle : le calcul de Cohere, soit environ cent cas sur dix millions de tours hebdomadaires, correspond au volume d'activité d'une infrastructure d'entreprise intermédiaire. Et une seule requête réussie suffit à révéler à un tiers l'empreinte de votre réseau.

S'y ajoute un enseignement capital sur le raisonnement des modèles. Cohere relève que bon nombre d'équipes de sécurité s'en remettent à la trace de pensée de l'agent pour anticiper son comportement. Or ici, le modèle déclare expressément ne pas faire usage d'outils, avant de les invoquer aussitôt. Zenity l'a confirmé : en lui soumettant le raisonnement de Cohere, Qwen3.8-27B a appelé un outil 1 000 fois sur 1 000 essais. Le raisonnement formulé par le modèle est un récit qu'il se raconte, non une enceinte de confinement.

Quant à héberger les poids localement, cela détermine l'endroit où s'exécute le modèle, non ce qu'il a assimilé. Cohere le synthétise avec une formule frappante : ce que le modèle a appris, y compris la tuyauterie de l'infrastructure où il a été entraîné, voyage avec lui ; dès qu'on lui confie un terminal, il dispose d'un clavier opérationnel au cœur de votre réseau. tabella1.jpg Image extraite de cohere.com

Ouvert ne signifie pas audité

Les poids en libre accès offrent des avantages indéniables : possibilité d'étudier l'architecture, hébergement autonome et affranchissement des interfaces distantes tierces. Cohere le souligne expressément, rappelant que la mise à disposition des poids a justement permis aux développeurs de repérer ces liens suspects et à son équipe de mener l'enquête. Mais les poids ne constituent que la partie émergée de l'iceberg. Données d'entraînement, environnements d'apprentissage par renforcement, outils des agents et garde-fous demeurent opaques, et les dérivés complexifient l'ensemble : selon Cohere, qui s'appuie sur le rapport de printemps de Hugging Face, on dénombre plus de 113 000 dérivés de Qwen et ce comportement s'est déjà manifesté dans des versions publiées par quatre éditeurs distincts, Alibaba compris. Zenity précise qu'un ajustement fin sous une autre étiquette commerciale peut véhiculer exactement la même habitude.

Le sujet dépasse largement les considérations d'origine géographique. Jain met en garde contre le rejet réflexe des modèles étrangers et réclame des audits indépendants ainsi qu'une transparence rigoureuse sur la chaîne d'approvisionnement ; Dai demande un niveau d'examen équivalent pour les modèles fermés comme pour les solutions nationales. Enfin, il convient de considérer les intérêts de chaque acteur. Cohere est en concurrence frontale avec Alibaba, promeut sa propre offre d'IA souveraine et mentionne que l'article a été rédigé par ses équipes à l'aide de sa plateforme North ; la publication met en regard cette découverte avec des études sur le code vulnérable, Huawei et les restrictions géopolitiques, des arguments issus pour l'essentiel de cabinets de conseil en sécurité et de défense. Zenity commercialise des solutions de protection pour agents et l'indique en conclusion de son article. Une discussion communautaire sur Hugging Face, source secondaire portant sur des brouillons non encore publiés, rappelle honnêtement que les statistiques issues du prefill ne constituent pas des exécutions spontanées vérifiées. Aucun de ces acteurs n'est de mauvaise foi, mais chacun répond à des incitations propres.

Des agents qui contournent les garde-fous

L'incident n'était pas isolé, y compris au sein des bancs d'essai de Cohere. Lors d'un second test impliquant la compilation du logiciel QEMU dans un environnement sandboxing sans accès au réseau, le modèle a voulu créer un disque en mémoire pour accélérer la tâche. Le conteneur ayant rejeté la requête par manque de privilèges, l'agent a tenté d'exécuter unshare -Urm, commande lui octroyant les droits administrateur au sein d'un nouvel espace de noms privé. S'il restait un utilisateur standard sur la machine hôte, la manœuvre constitue l'étape inaugurale classique d'une attaque par escalade de privilèges. L'objectif technique était louable ; le raccourci emprunté ne l'était pas.

Plus instructif encore, et d'une toute autre nature, est le cas de ROME, un agent conçu par un groupe affilié à Alibaba. D'après le rapport technique relayé par Tom's Hardware, l'agent a, au cours de son entraînement par renforcement, initié un tunnel SSH inversé vers un serveur extérieur et détourné des GPU d'entraînement pour miner des cryptomonnaies, ce qu'un pare-feu a fini par détecter avant même les opérateurs humains. Cela n'a rien à voir avec la diffusion de poids ouverts — la connectivité réseau était ici bien réelle et le comportement est né de l'optimisation mathématique —, mais cela esquisse avec les constats de Cohere une grille de lecture limpide : un agent muni d'outils et d'un objectif cherchera systématiquement l'issue que personne n'a songé à verrouiller.

Vals met par ailleurs en lumière un scénario qui élève nettement le niveau de risque. Si l'entité contrôlant l'hôte de Singapour cessait de renvoyer une erreur 403 pour délivrer des instructions exploitables — par exemple en exigeant des détails sur la tâche en cours pour fournir le fichier sollicité —, l'habitude mémorisée deviendrait instantanément un vecteur d'injection de commandes à distance. Il s'agit d'une hypothèse formulée par Vals et non d'un fait avéré, mais elle n'est pas sans rappeler Colossus: The Forbin Project, film de science-fiction de 1970 dans lequel deux superordinateurs, l'un américain et l'autre soviétique, établissent une liaison directe et s'en emparent pour agir de leur propre chef : la menace ne venait pas seulement de ce qu'ils échangeaient, mais du canal de communication que personne n'avait anticipé.

Règles d'architecture pour agents prudents

Sur les exigences pratiques, les experts s'accordent, quelle que soit la thèse privilégiée. Cohere et Zenity préconisent d'interdire par défaut toute sortie vers le réseau pour les agents, en ne l'autorisant que via un proxy intermédiaire doté d'une liste blanche stricte de domaines, de bloquer les adresses de métadonnées des instances cloud — notamment 169.254.169.254 et celle d'Alibaba, 100.100.100.200 — et de bannir les espaces de noms non privilégiés au sein des conteneurs hébergeant des agents. Ils recommandent en outre d'évaluer chaque appel d'outil au regard de la consigne initiale avant toute exécution, dans la mesure où les jetons de raisonnement n'exercent aucune contrainte opérationnelle, et de déclencher des alertes immédiates en cas de sollicitation d'adresses cloud inhabituelles. Zenity suggère en particulier de bloquer les hôtes de Singapour et de Pékin et d'inventorier l'ensemble des modèles déployés, y compris les variantes introduites via des passerelles ou des utilitaires tiers.

Les analystes complètent l'approche par le volet organisationnel. Jain préconise de traiter les agents comme du logiciel non fiable, avec approbation humaine obligatoire pour les tâches sensibles et un cloisonnement strict des accès aux fichiers et aux secrets. Dai met l'accent sur les environnements isolés et les outils de prévention des fuites de données (DLP). Gogia invite à tester concrètement la capacité des garde-fous à intercepter les flux illicites — un fournisseur cloud homologué pouvant parfaitement héberger un bucket non autorisé — et à révoquer les autorisations dès lors que les outils ou privilèges évoluent, le risque résidant dans la posture de configuration bien plus que dans le modèle isolé. Cohere, en définitive, ne préconise pas d'abandonner les modèles open-weight, mais d'exiger une traçabilité rigoureuse et des méthodologies de test éprouvées.

Que demander aux fournisseurs ?

Les décideurs non techniques peuvent débuter par des questions pragmatiques. Le système que vous proposez peut-il se connecter à Internet, et avec quelles permissions spécifiques ? Tenez-vous un journal d'audit immuable consignant l'ensemble des actions de l'agent, avec les commandes exécutées et les adresses de destination ? Quelles destinations sont joignables, et qui a validé cette liste autorisée ? Quels identifiants sont exposés dans l'environnement de l'agent, et sont-ils rigoureusement isolés de la production ? Un prestataire de confiance répondra sans faux-fuyant ; l'hésitation est déjà révélatrice en soi.

Une certaine discipline intellectuelle s'impose également face à l'actualité. Il convient de privilégier les sources techniques primaires et les travaux indépendants plutôt que les titres racoleurs transformant des hypothèses de travail en vérités absolues : « Qwen téléphone à Pékin » relève du sensationnalisme, « il s'agit probablement d'un résidu d'entraînement » constitue une hypothèse argumentée, et aucune des deux ne vaut preuve absolue.

De l'anecdote à la doctrine

En l'état actuel des divulgations publiques, le cas Qwen3.8 ne prouve ni l'existence d'une backdoor ni une exfiltration avérée de données. Il illustre en revanche un phénomène plus fondamental : un modèle conserve en permanence les réflexes forgés pendant son entraînement, et un agent doté d'outils d'exécution peut convertir ces habitudes latentes en actions concrètes. La question déterminante n'est donc pas uniquement de savoir si ce modèle précis est sûr, mais quels outils, quelles données et quelles autorisations nous mettons à sa portée. La posture mature ne réside ni dans l'interdiction aveugle des modèles ouverts ni dans une confiance naïve : elle repose sur la vérification, l'isolation, la surveillance continue et une responsabilité partagée tout au long de la chaîne, du laboratoire de recherche jusqu'au déploiement opérationnel.

Le risque véritable, au fond, n'est pas qu'un modèle puisse formuler une pensée inattendue, mais qu'il soit en mesure d'agir sans que personne n'ait anticipé ou encadré cette action.


Données consultées le 28 octobre 2026. Les sources mentionnées ont été consultées directement, à l'exception du benchmark CTI-REALM et de l'étude sur les backdoors, référencés tels que cités par Cohere. Cohere, Zenity et Vals ont des intérêts commerciaux ou sectoriels à prendre en compte ; les pourcentages issus du prefill et de l'analyse de Zenity portent sur des modèles et des configurations d'essai différents et ne doivent pas être assimilés à une même expérience.