Meta publie Muse Spark Open, un modèle multimodal de 816 milliards de paramètres
Meta a publié les poids de Muse Spark Open, un modèle multimodal conçu pour le code et les tâches agentiques. Le modèle compte 816 milliards de paramètres au total, dont 42 milliards actifs par token, avec une fenêtre de contexte d’un million de tokens.
Pourquoi c'est important
Les équipes peuvent télécharger et adapter un grand modèle agentique au lieu de dépendre exclusivement d’une API, mais l’exploitation locale exige au moins 700 Go de mémoire GPU en NVFP4 ou deux Mac Studio M5 Ultra optimisés.
Resume
Le modèle accepte du texte, des images, de l’audio et de la vidéo, et produit du texte. Il est distribué sous la licence Muse de Meta, disponible en BF16 et NVFP4, et peut être servi avec vLLM, SGLang, TensorRT-LLM, Hugging Face ou llama.cpp.
Le point a retenir
L’ouverture des poids élargit le contrôle technique sans transformer un modèle de cette taille en solution légère.
Sources vérifiées
Texte source original
Meta a rendu disponibles les poids de Muse Spark Open, une version destinée au code, au raisonnement multimodal et aux tâches agentiques. Le modèle de type mixture-of-experts totalise 816 milliards de paramètres et en active 42 milliards par token. Sa fenêtre de contexte atteint un million de tokens. La fiche du modèle indique des entrées en texte, image, audio et vidéo, pour une sortie textuelle. Les poids sont proposés en BF16 et NVFP4 sous la licence Muse de Meta. Le déploiement est pris en charge par plusieurs outils, dont vLLM, SGLang, TensorRT-LLM, Hugging Face, Unsloth et llama.cpp. Meta recommande néanmoins des garde-fous supplémentaires adaptés au cas d’usage, surtout lorsque le modèle peut agir par l’intermédiaire d’outils. Les poids ouverts donnent aux organisations davantage de possibilités d’audit, de personnalisation et de maîtrise des données, mais les besoins matériels restent élevés : la fiche mentionne au moins 700 Go de mémoire GPU pour la version NVFP4 et 2 To pour la BF16. Le modèle est aussi optimisé pour fonctionner sur deux Mac Studio équipés de puces M5 Ultra. Les performances et évaluations de sécurité publiées demeurent celles de Meta et devront être vérifiées dans chaque environnement de production.