L’AISI voit les modèles ouverts rattraper les leaders

L’AISI voit les modèles ouverts rattraper les leaders

Par Arthur Dekeyser

En résumé

1

L’AISI observe un écart réduit entre modèles ouverts et propriétaires sur des évaluations cyber.

2

Kimi K3 affiche des performances de pointe et ses poids doivent être publiés dans les prochaines semaines.

3

Demis Hassabis propose un organisme de standards pour tester les modèles d’IA avancés.

💡

Le signal : L’AISI mesure un écart de 4,3 mois entre GLM-5.2 et Claude Opus 4.6 sur 70 évaluations cyber.

NEWSLETTER BUSINESS & IA

Vous appréciez ce genre d'analyse ?

Chaque mardi et vendredi, l'essentiel en business & IA décryptées en 5 minutes. Gratuit, sans engagement.

+11 000 fondateurs abonnés

L’AISI mesure l’écart entre modèles ouverts et propriétaires en cybersécurité. Dans son analyse, l’institut britannique compare des modèles récents sur 70 évaluations consacrées à des capacités cyber étroites. GLM-5.2 se rapproche de Claude Opus 4.6, publié 4,3 mois plus tôt. DeepSeek-V4-Pro se situe entre Claude Opus 4.5 et GPT-5, publiés respectivement en 2025. L’AISI estime que l’écart observé cette année est inférieur à celui mesuré durant la majeure partie de 2025. Il atteignait alors six à dix mois. L’institut prévoit aussi de tester Kimi K3 lorsque ses poids seront publiés. Lire l’analyse de l’AISI.

Les écarts varient selon les tests. Sur la cyberrange The Last Ones, GLM-5.2 atteint le niveau d’Opus 4.5, sorti moins de sept mois avant lui. DeepSeek-V4-Pro reste sous Sonnet 4.5, modèle situé sept mois avant lui. L’AISI constate donc un écart plus important sur les opérations longues que sur les tâches cyber étroites. Ces exercices évaluent la capacité à enchaîner plusieurs compétences pour réaliser une opération complète. L’institut écrit que les modèles ouverts peuvent se montrer très performants sur certaines tâches, tout en généralisant moins bien. Selon l’AISI, les défenseurs disposent d’une courte période pour se préparer avant une diffusion plus large de capacités cyber avancées.

Kimi K3 rapproche les modèles

Kimi présente un modèle de 2,8 billions de paramètres. L’entreprise affirme que Kimi K3 atteint des scores élevés sur les tâches utilisées pour comparer les principaux modèles propriétaires. Elle indique que le modèle égale ou suit Claude Fable 5 et GPT 5.6 Sol. Kimi précise toutefois que ses performances globales restent derrière ces deux modèles. L’entreprise annonce aussi des poids disponibles dans les prochaines semaines, avec un article de recherche. L’auteur d’Import AI relève une possible fragilité liée à l’optimisation des évaluations. Cette interprétation n’est pas présentée comme une conclusion de Kimi. Lire la présentation de Kimi K3.

Kimi décrit deux démonstrations techniques. Dans la première, Kimi K3 a développé MiniTriton, un compilateur inspiré de Triton. Le système comprend une couche intermédiaire au niveau des tuiles, des passes d’optimisation et une génération de code PTX. Kimi affirme que MiniTriton atteint des performances comparables ou supérieures à Triton et torch.compile sur les bancs de test pris en charge. Dans la seconde, Kimi K3 a conçu une puce pour un nano-modèle fondé sur sa propre architecture. Kimi indique qu’une exécution autonome de 48 heures a permis de construire, optimiser et vérifier cette puce. Le processus utilisait des outils EDA au code ouvert et la bibliothèque Nangate 45 nm.

Hassabis propose un organisme de standards

Demis Hassabis propose un cadre américain pour évaluer les systèmes d’IA avancés. Le fondateur de DeepMind suggère un organisme de standards inspiré de la Financial Industry Regulatory Authority. Cette structure associerait supervision publique et participation privée. Elle développerait des protocoles d’évaluation avec des agences fédérales et les laboratoires nationaux américains. Son travail servirait à tester les capacités liées à la sécurité nationale et à définir ce qu’est un modèle avancé. Hassabis propose d’abord un fonctionnement volontaire. Les laboratoires pourraient transmettre leurs modèles jusqu’à 30 jours avant leur sortie. Une formalisation légale pourrait suivre lorsque les protocoles seraient jugés robustes. Lire la proposition de Demis Hassabis.

Gardez un coup d'avance en IA et tech.

Chaque mardi et vendredi, l'essentiel en business & IA décryptées en 5 minutes. Zéro spam.

+11 000 fondateurs abonnés

À lire aussi