Les modèles Muse de Meta en tête du nouveau benchmark de Scale AI : l'arbitre appartient à 49 % à Meta

Depuis l'opération de 14,3 milliards de dollars conclue en 2025, Meta détient 49 % de Scale AI. La société vient de publier un benchmark qui classe les modèles Muse de Meta aux trois premières places. OpenAI, Google et Anthropic ont tous refusé de le cautionner.

Lire l’original

Vincent JiangVincent Jiang · 3 min read
Share
Alexandr Wang, directeur de l'IA de Meta et président de Scale AI
1 / 6Slide 1 of 6
Alexandr Wang, directeur de l'IA de Meta, reste président de Scale AI après l'opération de 14,3 milliards de dollars qui a propulsé Meta au conseil d'administration de l'arbitre de l'industrie.

Ce que Meta a réellement acheté pour 14,3 milliards de dollars

Le 30 juin 2025, Meta+0.02% — Meta, up 0.02 percent today a déboursé 14,3 milliards de dollars pour prendre 49 % de Scale AI$29B — Scale AI, private, latest valuation $29B, valorisant la société, spécialisée dans la donnée et l'évaluation, à près de 29 milliards de dollars. Le même jour, le groupe a recruté son cofondateur, Alexandr Wang, comme directeur de l'IA, à la tête de Meta Superintelligence Labs 1. Wang a quitté la direction générale de Scale, mais en est resté le président 2. Ce que Meta a laissé derrière elle, c'est l'arbitre de l'industrie : Scale le reconnaît elle-même dans un communiqué. Son moteur de données sous-tend le développement des modèles de la plupart des grands laboratoires de pointe, et sert le gouvernement américain comme les entreprises du Fortune 500 2.

Le classement de l'arbitre place les modèles de son actionnaire en tête

Le 8 octobre, Scale a publié DistressBench : 718 conversations de crise rédigées par 19 cliniciens et conseillers agréés, évaluées selon 6 901 critères pondérés par les cliniciens 34. Sur l'ensemble des 25 modèles de pointe passés au crible, dans 35,3 % des conversations où un modèle remplissait tous les critères permettant d'identifier une crise suicidaire ou d'automutilation, il échouait pourtant à orienter l'utilisateur vers une aide humaine 3. Le meilleur modèle a délivré 88,4 % de la prise en charge requise, la médiane 71,4 %, contre 98,7 % pour les réponses de référence des cliniciens 3. Les trois premières places du classement reviennent aux modèles Muse de Meta 3.

Aucun modèle n'approche la prise en charge des cliniciens

0%50%100%Meilleur modèle (Muse Spark 1.2)Modèle de pointe médianRéponses de référence des cliniciens98.7%
Data
Part de la prise en charge requise délivrée
Meilleur modèle (Muse Spark 1.2)88.4%
Modèle de pointe médian71.4%
Réponses de référence des cliniciens98.7%
Sur l'ensemble des 25 modèles de pointe passés au DistressBench de Scale AI : part du poids des critères définis par les cliniciens satisfaite réponse par réponse. Les réponses de référence des cliniciens fixent le plafond. Scale AI DistressBench, octobre 2026.3

Les modèles Muse de Meta trustent les trois premières places du DistressBench de Scale AI

0%20%40%60%80%100%Muse Spark 1.2 (Meta)88.39%Muse Spark 1.3 (Meta)84.88%Muse Glimmer 30B (Meta)80.57%GPT-5.6 Terra (OpenAI)76.44%Claude Opus 5.5 (Anthropic)75.58%Gemini 3.8 Flash (Google)70.74%
Data
Value
Muse Spark 1.2 (Meta)88.39%
Muse Spark 1.3 (Meta)84.88%
Muse Glimmer 30B (Meta)80.57%
GPT-5.6 Terra (OpenAI)76.44%
Claude Opus 5.5 (Anthropic)75.58%
Gemini 3.8 Flash (Google)70.74%
Score selon la grille d'évaluation pondérée : part du poids des critères définis par les cliniciens satisfaite par chaque réponse, en moyenne sur 718 conversations de crise rédigées par des cliniciens, à raison de trois exécutions par tâche. Classement DistressBench de Scale AI, octobre 2026 ; recherche de l'entreprise, non évaluée par des pairs.3

OpenAI, Google et Anthropic refusent de le cautionner

OpenAI$1.18T — OpenAI, private, latest valuation $1.18T a déclaré ne pas disposer « d'éléments suffisants pour évaluer pleinement » l'étude ; Google a décliné tout commentaire ; Anthropic$350B — Anthropic, private, latest valuation $350B n'a pas répondu 4. La méthode est dévoilée avec un luxe de détails inhabituel : un trio de juges issus des modèles d'Anthropic, de Google+0.44% — Google, up 0.44 percent today et de Meta, retenu parmi 455 combinaisons possibles sur la base de 2 908 étiquettes de cliniciens, et dont l'accord avec ces derniers atteint un κ de Cohen de 0,732 3. Scale elle-même prévient qu'un score élevé « ne vaut pas autorisation de déploiement en tant que produit de santé mentale », et le benchmark, uniquement en anglais, est construit autour des lignes d'écoute de crise américaines 3.

La nouvelle du PDG qui circule a déjà un an

Un rapport qui fait le tour de la presse cette semaine affirme que Scale va promouvoir son directeur de la stratégie, Jason Droege, au poste de directeur général, tandis que Wang part chez Meta 5. Or ce scénario est celui de juin 2025 : Droege a assuré l'intérim à la tête de Scale à partir de cette date, et Scale a annoncé, le 30 juillet 2026, la nomination de Francis deSouza, passé par Google Cloud et Illumina−0.08% — Illumina, down 0.08 percent today, au poste de directeur général à compter du 10 août 2. La véritable nouveauté de la semaine, elle, était souveraine : un mémorandum d'entente avec Presight, l'opérateur d'IA souveraine d'Abou Dabi, signé le 9 octobre, pour évaluer et gouverner des agents destinés aux systèmes d'électricité, d'eau, de santé et de transport du Golfe 6.

Reste à voir si les rivaux continuent de payer l'arbitre

Mark Zuckerberg a affirmé le 12 octobre que Meta avait envisagé fin 2025 un engagement de 100 à 200 milliards de dollars, avant même que ses modèles ne fassent leurs preuves ; sa directrice financière, Susan Li, avait prévenu Wang qu'un échec serait « vraiment, vraiment mauvais » sur le plan financier, et la fourchette d'investissements annoncée pour 2026 se situe entre 130 et 145 milliards de dollars 7. Lancés le 8 septembre, les modèles Muse ont dépassé les 2,5 millions de téléchargements en une quinzaine de jours, et le titre a bondi de 11 % en une séance, gagnant environ 200 milliards de dollars de capitalisation boursière 8. Côté Meta, le marché a déjà intégré le pari. Le véritable indicateur, désormais, sera de voir si OpenAI, Google et Anthropic continuent de se soumettre à un arbitre partiellement détenu par leur concurrent.

Deepdive

AI-generated from this story and its cited sources. Not investment advice.

Reader comments

0 comments

    Sign up

    Get your curated digest

    After email confirmation, you will receive a daily digest of the most relevant news that matter to your portfolio