Upstage publie Solar Open 2, MoE 250B ouvert à 1M de contexte
TL;DR
- Solar Open2 activates 15B parameters per token from a 250B total via hybrid linear-softmax MoE, enabling INT4 and NVFP4 deployment on DGX Spark without server-class GPU clusters.
- Aju Press reports a LiveCodeBench score of 92.4, one point above DeepSeek V4-Flash at 92.3 and eight points above Mistral Medium 3.5 at 84.9.
- Upstage trained Solar Open2 inside 'Officeverse,' a proprietary simulation of real workplace tasks covering document editing, spreadsheet analysis, and presentation generation.
Upstage a poussé en ligne un nouveau modèle open-weight qui mérite qu'on regarde l'architecture avant la taille. Publié sur Hugging Face, Solar Open 2 est un modèle Mixture-of-Experts de 250B paramètres dont 15B s'activent par token, positionné explicitement pour l'agentique bureautique, le travail documentaire et le code.
Le détail qui distingue cette annonce, c'est l'architecture d'attention hybride. Upstage alterne des couches softmax et linéaires selon un motif régulier, sans encodage positionnel rotatif (NoPE), et déclare tenir une fenêtre de contexte de 1M tokens. Le modèle compte 321 experts, dont 320 routés et 1 partagé, avec 8 experts routés plus le partagé activés par token. Côté matériel, l'inférence demande au minimum 4 GPU NVIDIA H200, 8 étant recommandés pour la production. La fiche revendique aussi un pré-entraînement d'environ 12 trillions de tokens sur GPU NVIDIA B200.
Sur les benchmarks affichés dans la fiche, Solar Open 2 revendique 92.4 sur LiveCodeBench v6, un cheveu devant les 92.3 attribués à DeepSeek-V4-Flash, avec 86.2 sur MMLU-Pro et 70.4 sur SWE-Bench Verified. À prendre comme des chiffres constructeur: DeepSeek-V4-Flash conserve d'ailleurs l'avantage sur SWE-Bench Verified (73.8) et GPQA-Diamond (88.9) selon la même fiche.
La prudence honnête porte sur deux points que le document ne traite pas vraiment. D'abord, ces scores viennent d'Upstage sans reproduction indépendante à ce stade. Ensuite, la licence Upstage Solar impose un préfixe 'Solar' aux dérivés et un badge 'Built with Solar' en communication publique, ce qui n'est pas de l'open source au sens strict et mérite lecture avant tout déploiement commercial.
Pour qui compte-t-il? Une équipe qui veut internaliser un moteur d'agent de code capable, avec un budget matériel d'un nœud H200, dispose d'une option supplémentaire face aux poids ouverts qui dominaient ce segment, notamment côté coréen et japonais où la couverture linguistique native change concrètement la donne.
Ce qu'en disent les autres médias
-
Aju Press Lire →
Korean business press covers the Solar Open Weight Day conference, the Officeverse training simulation, and CEO framing around agent task execution over conversational fluency.
If you can't perform tasks when asked, you're treated like a fool. That's why we focused on developing the capabilities of AI agents.
-
NVIDIA Developer Forums Lire →
Developer community benchmarks on DGX Spark across sequence lengths; places the model inside Korea's five-company state-sponsored AI sovereignty cohort.
Solar-Open2-250B (250B-A15B) is released together with INT4 and NVFP4 quantization.
Article original publié par huggingface.co
Lire l'article original →Titre original : Upstage libère Solar Open2, un MoE 250B-A15B ouvert avec 1 M de contexte pour l'agentique