AISI et CAISI jugent Kimi K3 nettement en retrait sur le cyber
TL;DR
- Kimi K3 scored 32.2% on ExploitBench versus 76.2% for top US frontier models, with zero arbitrary code execution achieved across 41 vulnerabilities tested.
- Kimi K3 reached step 17 of a 32-step network attack simulation; the most capable models averaged step 28.5, confirming a large gap in full autonomous penetration capability.
- Kimi K3's safeguards failed to block offensive cyber operation requests during testing, a direct deployment risk once Moonshot's open-weight release ships.
L'évaluation conjointe publiée par l'UK AI Security Institute et le US Center for AI Standards and Innovation sur Kimi K3, sorti le 16 juillet 2026 par Moonshot AI, tranche sans détour : le modèle « performs significantly below the most recent frontier cyber-capable models » sur les évaluations préliminaires en cybersécurité.
Les chiffres donnent l'échelle. Sur ExploitBench, Kimi K3 obtient 32%, devant GLM-5.2 (24%) qui était depuis juin 2026 le modèle open-weight le plus capable en cyber. Mais sur les 41 échantillons du benchmark, il n'a réussi aucune exécution de code arbitraire, là où les modèles américains les plus capables en réussissent en moyenne 20. Sur « The Last Ones », un scénario simulé d'attaque de réseau d'entreprise en 32 étapes, Kimi K3 atteint en moyenne l'étape 17, contre 28,5 pour les modèles américains de tête. Une fois sur dix, toutefois, il boucle l'ensemble de la chaîne de manière autonome, dans la limite des 100M tokens fixée par le test.
Le point le plus inconfortable pour Moonshot AI n'est pas le score brut mais le comportement des garde-fous : selon les deux agences, « Kimi K3's safeguards did not prevent it from attempting cyber exploit development or offensive cyber operations ». Un modèle en retrait qui accepte tout de même d'assister à l'offensive change la lecture du risque, en particulier contre des cibles faiblement défendues où un accès réseau initial suffit.
Ce que le rapport ne détaille pas, en revanche, c'est l'identité précise des modèles frontière utilisés comme point de comparaison, ni la nature exacte des exploits éprouvés dans ExploitBench, ni la réponse envisagée par Moonshot AI. À prendre donc comme un état des lieux préliminaire, pas comme un verdict.
L'intérêt de fond est ailleurs. Voir deux régulateurs transatlantiques publier ensemble une évaluation chiffrée d'un modèle open-weight installe une méthode et un barème. Pour les responsables sécurité qui suivent la disponibilité d'outils offensifs ouverts, la donnée à retenir tient en une phrase : l'écart mesurable subsiste côté performance frontière, mais l'écart d'usage abusif, lui, est déjà largement refermé.
Ce qu'en disent les autres médias
-
NIST Lire →
Official US government co-publication; highlights that TLO solves are no longer exclusive to a small model set, framing Kimi K3's single solve as part of an emerging capability trend.
Kimi K3 performs significantly below the most recent frontier cyber-capable models on preliminary cyber evaluations.
-
South China Morning Post Lire →
Frames the findings against Washington's anxiety over Chinese open-source AI; adds direct GLM-5.2 comparison and US-China tech rivalry context absent from the official technical report.
Kimi K3 achieved an overall score of 32.2 per cent, lagging well behind top US models that averaged 76.2 per cent.
-
Interesting Engineering Lire →
Features David Sacks urging against over-regulation and calling fears of Chinese model supremacy exaggerated; frames the assessment as a policy reality check for Washington.
Article original publié par aisi.gov.uk
Lire l'article original →Titre original : AISI et CAISI : Kimi K3 échoue 0/41 en exploits ACE et s'arrête à l'étape 17/32 en attaque réseau