Test de Muse Spark 1.2 : tests de performances, API, tarifs et tests de programmation

Muse Spark 1.2 allie un coût par jeton exceptionnellement bas à une fenêtre contextuelle de 1 million de jetons, et a réussi les trois tâches de codage du modèle de base lors de notre première série de tests via l'API. Meta a lancé ce modèle le 5 août 2026, avec une fenêtre contextuelle d'un million de tokens, deux niveaux tarifaires pour l'API et un agent terminal distinct appelé Muse Code. Les résultats des tests de performance de Meta sont prometteurs ; les classements publics indépendants en matière de programmation n'ont toutefois pas encore validé ces mêmes combinaisons de modèles et d'agents.

Cette analyse distingue le modèle de l’agent, les scores officiels des preuves indépendantes, et la tarification standard du compromis entre utilisation des données et niveau « Contributor ». Lors de nos tests, le modèle a mené à bien une correction d’idempotence en Python, une refactorisation TypeScript préservant la compatibilité et une fonctionnalité JSONL à l’échelle du dépôt, sans aucune tentative de rattrapage. L’exécution de l’agent Muse Code n’a pas été testée, pas plus que la fiabilité des appels d’outils. Si vous souhaitez d’abord comparer l’ensemble du secteur, consultez notre guide sur le Les meilleurs modèles d'IA pour le codage donne une vue d'ensemble du contexte concurrentiel.

Test de Muse Spark 1.2 : en bref

En bref : Muse Spark 1.2 est un modèle Meta axé sur le codage, doté d’une fenêtre de 1 million de tokens, d’un accès API compatible avec le SDK OpenAI et d’un niveau « Contributor » particulièrement attractif. Son principal atout, mis en avant publiquement, est son rapport qualité-prix : 1 TP 41 T 0,10 en entrée et 1 TP 41 T 0,20 en sortie par million de tokens sur le modèle « Contributor ». Ce niveau peut être utilisé pour améliorer les produits Meta, alors que le modèle standard, plus coûteux, n’est pas destiné à cet usage.

Les performances devraient être interprétées avec plus de prudence. Meta annonce un score de 82,91 TP40T sur Terminal-Bench 2.1 pour Muse Spark 1.2 avec Muse Code, et de 59,31 TP40T sur DeepSWE. Il s'agit là de résultats obtenus par Meta. Les classements publics de Terminal-Bench et DeepSWE ne mentionnaient toujours pas Muse Spark 1.2 lors d'une vérification effectuée le 26 août 2026. Analyse artificielle fournit une vérification indépendante : son « Intelligence Index » reste à 57, soit un niveau supérieur à la médiane de 35 pour les modèles comparables.

• La meilleure raison de l'essayer dès maintenant : des tarifs avantageux pour les contributeurs, un contexte étendu et une API qui suit le modèle client OpenAI bien connu.
• La meilleure raison de rester prudent : Ces trois tâches contrôlées sur le modèle de base ne permettent pas d'établir la fiabilité de l'agent Muse Code, la qualité des appels d'outils ni ses performances au sein d'un vaste référentiel de production.
• Choix important concernant la confidentialité : Utilisez le modèle standard pour le code ou les invites que vous ne souhaitez pas voir utilisés pour améliorer les produits Meta.

Muse Spark 1.2 en bref

Meta décrit Muse Spark 1.2 comme un modèle offrant une plus grande précision de codage dès la première tentative et un appel d'outils plus fiable que Muse Spark 1.1. Il s'agit là d'allégations du fournisseur issues du page officielle du modèle Muse Spark, et non des conclusions tirées de notre propre session de codage.

Muse Spark 1.2 vs Muse Code

Muse Spark 1.2 est le modèle. Muse Code est un agent terminal bêta distinct qui s'appuie sur ce modèle. Cette distinction est importante car un agent peut intégrer des fonctionnalités de planification, d'orchestration des outils, de navigation dans le référentiel, d'isolation de l'arborescence de travail, de journalisation et de gestion des tentatives de réessai autour du modèle sous-jacent.

Le page officielle du Muse Code qualifie ce produit d’« agent de codage bêta ». Cela rend les comparaisons avec des produits tels que Claude Code et Codex plus pertinentes que de prétendre que chaque différence observée dans le flux de travail provient uniquement d’un modèle de prédiction. Notre Comparaison entre Codex et le code Claude explique pourquoi l'environnement de développement peut influencer l'expérience du développeur autant que le modèle lui-même.

Tests de performances de Muse Spark 1.2 : ce que révèlent réellement les résultats

Le tableau comparatif de Meta place Muse Spark 1.2 parmi les meilleurs résultats de plusieurs évaluations de codage. Ces chiffres méritent d’être examinés, mais ils ne constituent pas un classement unique et clair de la qualité brute du modèle. Le modèle, l’agent, le harnais, la capacité de raisonnement et le protocole de tâche peuvent tous évoluer simultanément.

Meta-reported Terminal-Bench 2.1

Le chiffre 82,9% correspond à un Résultat du code Muse généré par Meta-run. Le Classement public de Terminal-Bench 2.1 n'a pas répertorié Muse Spark 1.2 le 26 août 2026, donc il s'agit Entrée non vérifiée dans le classement public. Le tableau public indiquait en effet une valeur de 76,21 TP40T ± 1,21 TP40T pour le Muse Spark 1.1 équipé du mini-SWE-agent.

DeepSWE 1.1 tel que rapporté par Meta

Le Classement public DeepSWE v1.1 utilise mini-swe-agent sur l'ensemble de ses modèles répertoriés, par souci de cohérence. Au moment de la vérification, Muse Spark 1.2 n'avait pas encore été ajouté ; Muse Spark 1.1 était répertorié sous la référence 53%. Le résultat de Meta (59,3%) utilise Muse Code ; les deux chiffres ne correspondent donc pas exactement au même banc d'essai.

Évaluations internes et par des agents généraux de Meta

Meta’s méthodologie d'évaluation Selon Terminal-Bench, le système utilise l’ensemble des 89 tâches et obtient un « pass@1 » sur cinq tentatives. DeepSWE couvre 113 tâches réparties sur 91 dépôts et cinq langages, avec également un « pass@1 » sur cinq tentatives. Meta précise également que sa configuration n’est peut-être pas optimisée pour les modèles tiers. Pour une comparaison actuelle avec la concurrence, fondée sur des décisions réelles en matière de produits, voir Claude Opus 5 contre GPT-5.6.

Analyse artificielle : un contexte indépendant utile

Le Page du modèle d'analyse artificielle attribue à Muse Spark 1.2 un indice d'intelligence de 57, soit un chiffre supérieur à la médiane des modèles comparables, qui s’élevait à 35 lors de la vérification effectuée le 26 août 2026. Son harnais affiche 80% sur Terminal-Bench v2.1, 57% normalisé sur GDPVal-AA v2, 56% sur SciCode et 83% lors de l’évaluation AA-LCR à long contexte.

La leçon à en tirer est simple : Muse Spark 1.2 semble compétitif, mais aucun score pris isolément ne permet de cerner le modèle. Considérez le graphique de Meta comme une preuve en faveur du système Muse Code, les classements publics comme une vérification croisée distincte, et Artificial Analysis comme une évaluation indépendante mais configurée différemment.

Muse Spark 1.2 : compromis entre prix et confidentialité

Meta propose deux identifiants de modèle d'API dont les prix varient considérablement. L'option la moins chère n'est pas simplement une réduction : elle modifie la manière dont les données transmises peuvent être utilisées.

Les tarifs « Contributor » sont 12,5 fois moins chers pour les entrées, 75 fois moins chers pour les entrées mises en cache et 21,25 fois moins chers pour les sorties que ceux du niveau standard. Il n’existe pas de pourcentage de réduction unique qui s’applique à tous les types de jetons.

Un chercheur de Meta a présenté le niveau “ Contributor ” comme étant “ jusqu’à 250 fois moins cher ” que Fable et « 150 fois moins cher » que GPT-5.6 Sol. Cela comparaison sociale utilise les tarifs « Contributor », et non le modèle standard, et doit toujours être assorti de la mention relative à l'utilisation des données. Les lecteurs qui souhaitent comparer les coûts actuels des concurrents peuvent consulter notre Guide des tarifs GPT-5.6 et Répartition des prix selon le code Claude.

Pour les dépôts publics, les tâches synthétiques ou les environnements d'évaluation jetables, le niveau « Contributor » peut s'avérer intéressant. En revanche, pour le code privé, les données clients, les identifiants ou les architectures propriétaires, le niveau « Standard » constitue le choix par défaut le plus sûr. Meta indique également qu’elle commence à accepter les demandes de non-conservation des données via son service commercial, ce qui constitue une voie d’accès distincte du paramètre par défaut en libre-service.

Accès à l'API Muse Spark 1.2 et exemple

Le API du méta-modèle prend en charge un flux de travail compatible avec le SDK OpenAI. Le guide officiel de Meta utilise l'URL de base https://api.meta.ai/v1 et lit la clé à partir de MODEL_API_KEY. La page du produit décrit également l'ancrage de la recherche, tandis que le guide pratique aborde les complétions dans le chat, le streaming, l'appel d'outils, la sortie structurée, la mise en cache des invites, les contrôles de raisonnement, la vision, le contexte étendu, les nouvelles tentatives et les recettes de recherche.

Exemple de livre de recettes officiel — version enregistrée : Le Guide officiel de GitHub utilise toujours muse-spark-1.1. Cela permet de vérifier la structure du client et l'URL de base, et non pas que l'exemple ait été mis à jour pour la version 1.2.

import os

from openai import OpenAI

client = OpenAI(
    base_url="https://api.meta.ai/v1",
    api_key=os.environ["MODEL_API_KEY"],
)

response = client.chat.completions.create(
    model="muse-spark-1.1",
    messages=[{"role": "user", "content": "Hello, world!"}],
)

print(response.choices[0].message.content)

Adaptation documentée — non exécutée : Meta les répertorie séparément muse-spark-1.2 sous la référence standard 1.2. La substitution minimale ci-dessous combine deux informations officielles, mais aucune demande payante n'a été envoyée au cours de cet examen.

response = client.chat.completions.create(
    model="muse-spark-1.2",
    messages=[{"role": "user", "content": "Hello, world!"}],
)

Muse Spark est un modèle de raisonnement, et les jetons de raisonnement sont facturés en tant que production. Cela confère au taux de sortie standard $4.25 une importance plus grande qu'il n'y paraît à première vue : une réponse apparemment brève peut tout de même receler un raisonnement sous-jacent significatif. La latence réelle, le temps nécessaire pour obtenir le premier token, le taux de réessai et le coût par tâche ne sont pas mesurés ici.

Ce qu'apporte Muse Code

Muse Code s'installe depuis le terminal et intègre Muse Spark 1.2 dans un workflow d'agent. Meta’s Analyse approfondie pour les développeurs décrit plusieurs comportements qui ne relèvent pas d'un simple appel d'API :

• Agents parallèles : Les tâches peuvent s'exécuter dans des arborescences Git isolées.
• Journal d'événements en ajout seul : Les sessions et les actions sont enregistrées dans un fichier JSONL local à des fins d'audit et de relecture.
• Reprise du flux : CV de Muse peut reprendre les sessions interrompues.
• Contrôle du raisonnement : le /effort Cette commande permet de régler l'intensité du raisonnement.
• Compétences explicites : Noms de Meta /goût, /cuisson au barbecue, /grill-avec-documentation, et /plan.

Cet ensemble de fonctionnalités fait de Muse Code un acteur incontournable sur le marché plus large des agents de programmation, où la planification, l'isolation, la relecture et la rigueur dans l'utilisation des outils sont tout aussi importantes que l'intelligence des modèles. Le Guide comparatif : OpenClaw vs Claude Code vs OpenCode Cela fournit un contexte utile pour comprendre ces différences au niveau des produits.

Allégations relatives au lancement et premières réactions de la communauté

Selon le service d'IA de Meta, Muse Spark 1.2 a bénéficié d'une puissance de calcul accrue pour l'entraînement au codage, d'environnements plus variés, d'une attention accrue portée à la génération et au débogage de dépôts complets, ainsi que d'un entraînement conjoint avec Muse Code. Un autre fil de discussion de lancement décrit un test de résistance d'une durée pouvant aller jusqu'à 24 heures, avec plus de 1 000 appels de fonctions sur des GPU NVIDIA Hopper.

C'est une démonstration impressionnante, mais il ne s'agit pas d'un taux de réussite global mesuré. Elle ne nous indique pas à quelle fréquence l'agent a choisi le bon outil, a su se remettre d'une erreur, a évité les appels redondants ou a mené à bien une tâche courante liée au référentiel sans intervention humaine.

Les premiers messages publiés sur Reddit sont tout aussi mitigés. L'un d'entre eux Un utilisateur de r/opencode a fait part d'une expérience positive avec OpenCode et a salué son prix. Un autre Discussion sur la tarification des contributeurs ont soulevé des questions concernant l'utilisation des données, le coût de l'offre standard, la disponibilité et la fiabilité. Il s'agit là de réactions individuelles, et non d'un consensus au sein de la communauté.

Tests de programmation Muse Spark 1.2 : 3 tâches sur 3 réussies

Lors de nos tests, le modèle de base Muse Spark 1.2 a réalisé trois tâches de codage contrôlées via une API de complétion de chat compatible avec OpenAI. Chaque tâche a fait l'objet d'une seule tentative, sans aucune nouvelle tentative ni intervention humaine. Nous avons évalué les fichiers renvoyés dans des dépôts jetables à l'aide de tests publics et cachés. L'exécution de l'agent Muse Code n'a pas été testée, pas plus que la fiabilité des appels d'outils ; ces résultats ne doivent donc pas être considérés comme un benchmark de l'agent.

Test 1 : correction d'un bug d'idempotence en Python — Réussi

L'évaluateur caché d'origine exigeait à tort un appel en double pour renvoyer une valeur. Faux, alors que la tâche exigeait simplement de ne pas facturer deux fois l'expéditeur. Après avoir corrigé cette exigence inventée concernant la valeur de retour, la première réponse, qui n'avait pas été modifiée, a réussi les six tests. Nous n'avons ni réessayé ni modifié la sortie du modèle.

Test 2 : refactorisation d'un projet TypeScript à plusieurs fichiers — Réussi

Le premier évaluateur a comparé des objets avec des données brutes JSON.stringify, de sorte que des objets équivalents dont l'ordre d'insertion des clés différait apparaissaient comme inégaux ; sa version Windows npx Le lancement a également échoué avant la vérification des types. Grâce à un comparateur insensible à l'ordre des éléments et à un appel de commande compatible avec Windows, la réponse d'origine a passé tous les contrôles avec succès. Là encore, aucune nouvelle tentative n'a été effectuée.

Test n° 3 : fonctionnalité de référentiel JSONL — Réussi

Ce que révèlent les tests : Muse Spark 1.2 est capable de générer des correctifs multi-fichiers exploitables, de respecter les contraintes de compatibilité, d'ajouter des tests et de traiter une fonctionnalité de portée modeste à l'échelle du référentiel en une seule opération. Le coût moyen rapporté était d'environ $0,0151 par tâche, mais ces tests étaient de petite envergure et ne doivent pas servir à estimer le coût d'une base de code de grande envergure.

À qui s'adresse Muse Spark 1.2 ?

Utilisez le modèle standard pour le code sensible, sauf si votre organisation a approuvé séparément les conditions d'utilisation pour les contributeurs. Si le prix de vente standard modifie le calcul de la valeur, comparez-le avec le prix actuel Tarification Codex, le code Claude et les autres coûts liés aux agents de codage avant de s'engager dans un processus de travail.

Verdict de l'essai du Muse Spark 1.2

Muse Spark 1.2 figure parmi les finalistes de l'évaluation, mais ne fait pas l'objet d'une recommandation automatique pour la mise en production. Le contexte du jeton 1M, la structure familière de l'API, les tarifs avantageux pour les contributeurs, les trois tentatives de codage dès la première approche et les excellents scores obtenus par le code Muse lors des tests de Meta : autant d'éléments qui rendent ce projet difficile à ignorer. Meta s'est également montré plus transparent que de nombreux autres lancements en publiant les détails de sa méthodologie.

Les bémols sont tout aussi concrets. La tarification des contributeurs s'accompagne d'un compromis en matière d'utilisation des données. Les tokens de sortie et de raisonnement standard peuvent faire grimper le coût réel. Les meilleurs résultats de Meta en matière de codage n’ont pas été reproduits sous forme d’entrées correspondantes sur les tableaux publics Terminal-Bench ou DeepSWE, et notre échantillon pratique couvre trois tâches de modèles de base plutôt que l’exécution d’agents Muse Code.

La démarche la plus judicieuse consiste à mener un test contrôlé sur du code non sensible, en enregistrant les données brutes d'utilisation et en effectuant une vérification locale. Considérez les coûts et la latence mesurés comme un échantillon issu de tâches mineures, puis testez la taille de votre propre référentiel, la reprise après défaillance et le flux de travail des agents avant de l'adopter en production.

FAQ Muse Spark 1.2