StepFun ouvre les poids de son IA Step 5 : 600 milliards de paramètres, 27 milliards actifs
La start-up chinoise StepFun a publié en accès libre les poids de son modèle d’IA Step 5 Preview, un système de 600 milliards de paramètres dont seulement 27 milliards sont activés à l’inférence (MoE). Le modèle traite un contexte d’un million de tokens, une performance qui rivalise avec les leaders du secteur comme GPT-4 ou Claude. Un billet technique détaille son architecture à 92 couches, son mécanisme d’attention dispersée (Sparse GQA) et son entraînement via des agents long-horizon. Cette ouverture, rare pour un modèle chinois de cette taille, vise à attirer la communauté de recherche internationale et à accélérer l’adoption de StepFun dans l’écosystème open source, face à DeepSeek ou Qwen. Pour les développeurs et entreprises, cela signifie un accès à un modèle très performant, personnalisable, sans dépendre des API propriétaires américaines, ce qui réduit les coûts et renforce la souveraineté technologique en Asie.