StepFun Step 5 Preview : 600B MoE open-weights pour agents IA

Ce qui s'est passé

Le 15 octobre 2026, StepFun — laboratoire d'IA fondé par l'ancien vice-président de Microsoft Research Asie, Cheng Jianxing — a mis en ligne les poids ouverts de Step 5 Preview sur Hugging Face et ModelScope. Cette publication, annoncée lors du lancement initial du modèle le 20 septembre 2026, marque une étape significative dans la course mondiale aux modèles de langage open-weights de très grande taille.

Step 5 Preview est un modèle de type Mixture-of-Experts (MoE) sparse : sur les 600 milliards de paramètres totaux, seuls 27 milliards sont activés par token en entrée. Cette architecture permet d'obtenir une capacité de raisonnement comparable à un modèle dense de 600B tout en réduisant considérablement les coûts de calcul à l'inférence. La conception s'inspire directement des travaux de Mixtral et DeepSeek, mais pousse la taille totale à un niveau inédit pour un modèle open-weights grand public.

L'une des caractéristiques les plus remarquables de Step 5 Preview est sa fenêtre de contexte d'un million de tokens — soit l'équivalent de plusieurs romans entiers ou de l'intégralité d'une grande base de code logicielle. Cette capacité est rendue possible par une architecture combinant des couches d'attention glissante (gated sliding-window attention) et des couches d'attention complète, dans un ratio de 3 pour 1. Ce choix d'ingénierie permet de traiter efficacement les très longues séquences sans faire exploser la mémoire GPU.

Le positionnement cible de StepFun pour Step 5 Preview est explicitement agentique. Le modèle est conçu pour gérer des workflows d'agents IA pouvant durer jusqu'à 24 heures de façon continue, navigant dans de grandes bases de code, coordonnant des modifications multi-fichiers, analysant de longs documents financiers ou juridiques, et exécutant des tâches de recherche et de synthèse complexes. Ce positionnement vise directement le marché émergent des agents de travail de connaissance, où des IA semi-autonomes remplacent ou assistent des professionnels humains sur des missions de plusieurs heures.

Sur le plan des performances matérielles, NVIDIA a confirmé que Step 5 Preview atteint près de 8 000 tokens par seconde par GPU sur sa plateforme GB300 en utilisant le format de quantification NVFP4. Les configurations recommandées pour l'inférence sont les suivantes : le format FP8 nécessite 4 GPU B300 ou 8 GPU H200 au minimum, tandis que le format BF16 exige 8 GPU B300 ou 16 GPU H200. Ces exigences matérielles le placent hors de portée des déploiements grand public, mais l'accessibilisent aux laboratoires de recherche, aux grandes entreprises et aux fournisseurs cloud.

La publication de Step 5 Preview intervient dans un contexte de vive concurrence entre les laboratoires chinois sur le segment open-weights. DeepSeek avait publié V4.1-Flash-1017 sous licence MIT juste avant, avec 552 milliards de paramètres totaux. Reflection AI avait également annoncé Beam (501 milliards de paramètres) dans la même fenêtre temporelle. Cette effervescence témoigne d'une stratégie délibérée des acteurs chinois : publier des modèles open-weights compétitifs pour accélérer l'adoption mondiale de leurs architectures et influencer les standards de l'industrie.

Du côté des benchmarks, StepFun revendique des performances compétitives sur les évaluations de codage (SWE-bench, LiveCodeBench), de raisonnement mathématique (AIME, MATH-500) et de compréhension de documents longs (HELMET, RULER). Selon MarkTechPost et plusieurs analyses indépendantes parues sur Hugging Face au moment de la publication des poids, Step 5 Preview se situe dans la même famille de performances que GPT-5.5 d'OpenAI et Gemini 4 Pro de Google sur les tâches agentiques complexes, tout en étant entièrement librement déployable. Ces résultats, publiés par StepFun eux-mêmes, restent à valider par des évaluations indépendantes tierces.

La licence de publication des poids est présentée comme permissive par StepFun, autorisant l'utilisation commerciale sous certaines conditions. Les détails exacts — notamment les restrictions éventuelles sur la distillation ou le fine-tuning à des fins de création de modèles concurrents — font l'objet d'une analyse approfondie par la communauté open-source. Les checkpoints sont disponibles en formats FP8 et BF16, avec un checkpoint optimisé NVFP4 également mis à disposition pour les utilisateurs de la plateforme NVIDIA GB300.

Pourquoi c'est important

La publication de Step 5 Preview illustre la rapidité avec laquelle le paysage des modèles open-weights de très grande taille évolue en 2026. Il y a encore deux ans, les modèles dépassant les 100 milliards de paramètres en accès libre étaient l'exception ; aujourd'hui, plusieurs laboratoires — principalement chinois — publient en quelques semaines des modèles de 500B à 600B paramètres avec des licences permettant l'usage commercial. Cette démocratisation de la puissance brute des LLM redistribue les cartes entre les acteurs du marché de l'IA.

Pour les entreprises françaises et européennes, l'émergence de modèles open-weights performants comme Step 5 Preview ouvre une voie alternative à la dépendance aux API fermées des grands fournisseurs américains. Déployer un modèle en interne ou via un fournisseur cloud européen permet de garder les données et les requêtes sous contrôle juridictionnel européen — un argument de poids dans le contexte du Cloud Sovereignty Framework et du règlement européen sur l'IA. La capacité à traiter un million de tokens de contexte en local ouvre la porte à des cas d'usage d'analyse documentaire à grande échelle sans envoyer d'informations sensibles vers des serveurs étrangers.

Le positionnement agentique de Step 5 Preview annonce également une nouvelle ère dans l'automatisation des tâches de connaissance. La capacité à faire tourner un agent IA autonome pendant 24 heures sur une tâche complexe — refactoriser une base de code entière, analyser des milliers de documents juridiques, automatiser un pipeline de recherche scientifique — change fondamentalement l'équation économique de ces activités. Les cabinets de conseil, les études juridiques, les services financiers et les DSI vont devoir anticiper ces impacts sur leurs métiers dans les 18 à 24 prochains mois.

Enfin, la concentration de publications open-weights de très haute performance entre des laboratoires chinois (StepFun, DeepSeek, Alibaba QWEN, Baidu) soulève des questions géopolitiques et de souveraineté technologique que les gouvernements occidentaux commencent à adresser, notamment via le contrôle des exportations de puces et les réglementations sur l'IA. La disponibilité globale de ces modèles crée une tension avec les tentatives de régulation unilatérales, puisqu'un modèle une fois publié en open-weights ne peut plus être retiré de la circulation.

Ce qu'il faut retenir

• Step 5 Preview de StepFun est un modèle open-weights de 600B paramètres totaux (27B actifs), spécialisé pour les agents IA longue durée jusqu'à 24 heures et les très longs contextes d'un million de tokens.
• Son architecture MoE sparse le rend économiquement viable à déployer malgré sa taille totale colossale, mais nécessite encore un minimum de 4 à 8 GPU de dernière génération (B300 ou H200).
• Pour les entreprises européennes, ce type de modèle représente une opportunité de souveraineté numérique : des capacités IA de pointe déployables en interne sans dépendance aux API américaines ou chinoises.