Model

Finir Minecraft a coûté 1 040 dollars de jetons aux agents Gemini de Google, à plein tarif

Une étude de Google DeepMind dresse une facture détaillée du travail des agents de pointe : quatre agents Gemini 4 Argon, 27 heures, un Ender Dragon abattu, environ 520 dollars aux tarifs promotionnels. Tous les tarifs doublent le 1er décembre. La mise à mort la moins chère jamais recensée reste l'apanage du modèle d'Anthropic, à qui l'on avait fourni ses outils.

Lire l’original

Vincent JiangVincent Jiang · 3 min read
Share
L'Ender Dragon, boss final de Minecraft, vole parmi les piliers d'obsidienne de l'Ender
1 / 7Slide 1 of 7
L'Ender Dragon, boss final de Minecraft, dans l'Ender : quatre agents Gemini 4 Argon l'ont abattu au bout de 27 heures et 14 minutes, après 605 morts.

Quatre agents, 27 heures, une facture

Quatre agents propulsés par Gemini 4 Argon, le modèle de raisonnement phare de Google, ont été lâchés dans un monde de survie Minecraft généré aléatoirement, avec une seule consigne : tuer l'Ender Dragon, le boss final du jeu 12. Le dragon est mort 27 heures et 14 minutes plus tard 1.

Le résultat vient d'un article publié sur arXiv le 15 octobre par des chercheurs de Google DeepMind, Maxence Faldor, Satinder Singh et Roberta Raileanu 1. Les agents ont écrit eux-mêmes l'intégralité de leurs 2 783 programmes, échangé 229 messages de chat et sont morts 605 fois. Les chercheurs, qui suivaient un tableau de bord en direct, n'ont jamais eu à intervenir 13.

La nouveauté, c'est la facture. L'exploit a consommé environ 1,35 milliard de jetons (tokens) d'entrée, répartis sur quelque 24 000 appels au modèle, et 91 % de ces jetons ont été servis depuis le cache 45. Les chercheurs chiffrent le coût à environ 520 dollars au tarif promotionnel d'Argon et à 1 040 dollars au tarif standard 45.

Un cinquième agent a surveillé la partie pour y chercher de la triche, sans en trouver. Observateur compris, la session complète a coûté environ 810 dollars, soit 1 620 dollars au tarif standard 45.

La mise à mort la moins chère s'est faite avec des outils écrits par des humains

La mise à mort du dragon la moins chère jamais recensée n'est pas celle de Google−1.83% — Google, down 1.83 percent today. Une tentative lancée par la communauté sur le Claude Opus 5 d'Anthropic$350B — Anthropic, private, latest valuation $350B a vaincu le même boss en 3 heures et 56 minutes, avec 388 appels d'outils, une seule mort et environ 93 dollars aux tarifs équivalents de l'API 5. La différence : on lui avait fourni 37 outils de haut niveau, prêts à l'emploi 5.

Les agents de Google n'ont rien reçu d'autre que Mineflayer, une bibliothèque open source de bots. Ils ont écrit tous leurs outils eux-mêmes, et 22 % de ces programmes ont tout de même généré des erreurs 45. La partie la moins chère jamais recensée est aussi celle où des humains avaient écrit la logique du jeu.

Autre point de repère : en septembre, le GPT-6 Astra d'OpenAI$1.18T — OpenAI, private, latest valuation $1.18T a mis environ 24 heures à finir le jeu Portal, pour 571 dollars de jetons 5.

Facture de jetons par partie : 93 dollars avec des outils prêts à l'emploi, 1 040 dollars sans aucun outil

  • Estimate
$0$500$1,000$1,500Opus 5, Minecraft$93Argon, Minecraft (promotionnel)$520GPT-6 Astra, Portal$571Argon, Minecraft (tarif public)$1,040Fin du tarif promotionnel le 30 novembre
Data
Value
Opus 5, Minecraft$93
Argon, Minecraft (promotionnel)$520
GPT-6 Astra, Portal$571
Argon, Minecraft (tarif public) (estimate)$1,040
Coût en jetons par partie aux tarifs de l'API, d'après les estimations des auteurs de chaque partie. La partie d'Opus 5 disposait de 37 outils écrits par des humains ; les agents Argon ont écrit eux-mêmes leurs 2 783 programmes. Session Argon complète, agent observateur compris : 810 dollars au tarif promotionnel, 1 620 dollars au tarif standard.4,5

Environ vingt dollars de l'heure, jusqu'au 1er décembre

Le 1er décembre, tous les tarifs d'Argon doublent : entrée, sortie et cache

  • Tarif promotionnel
  • Tarif public à partir du 1er décembre
$0$5$10$15$20Entrée par million de jetonsSortie par million de jetonsEntrée en cache par million de jetons$0.2
Data
Tarif promotionnelTarif public à partir du 1er décembre
Entrée par million de jetons$2$4
Sortie par million de jetons$10$20
Entrée en cache par million de jetons$0.1$0.2
Tarifs de l'API Gemini 4 Argon pour développeurs, en dollars américains par million de jetons. Les tarifs promotionnels expirent le 30 novembre. Source : Google AI for Developers, tarification de l'API Gemini pour développeurs.2

Divisez chaque facture par la durée de la partie, et les trois se retrouvent presque au même niveau. Opus 5 a coûté environ 24 dollars de l'heure, le GPT-6 Astra environ 24 dollars lui aussi, et les agents Argon environ 19 dollars. Aucune source citée ne donne de coût horaire ; ces chiffres sont simplement les coûts annoncés divisés par les durées annoncées.

Cela change le 1er décembre : la même session avec Argon sera facturée près de 38 dollars de l'heure 2. Les tarifs promotionnels expirent le 30 novembre. Le tarif d'entrée passe de 2 à 4 dollars par million de jetons, celui de sortie de 10 à 20 dollars, et celui de l'entrée en cache de 0,10 à 0,20 dollar 2.

C'est le cache qui contient la facture. Il coûte un vingtième du tarif d'entrée, quel que soit le tarif, et 91 % des jetons de la partie en provenaient 25. Sans lui, 1,35 milliard de jetons d'entrée au tarif public de 4 dollars coûteraient à eux seuls environ 5 400 dollars, et non 1 040 dollars 5.

Ce que l'étude reconnaît, et ce qu'Alphabet a comptabilisé

L'étude est franche sur ses limites. Mineflayer indique aux agents la position de chaque bloc et de chaque créature, y compris derrière la roche solide. Le monde était réglé sur la difficulté « Facile ». Et le résultat tient à une seule partie 4.

Comme le note TechRepublic pour les acheteurs professionnels, les morts qui ne coûtent rien dans un bac à sable auraient un coût en production 6. La demande que cette facture est censée chiffrer figure déjà dans les comptes : The Inference a évalué le carnet de commandes cloud d'Alphabet à 514 milliards de dollars en septembre.

Décembre, pas le dragon

Argon est sorti du laboratoire il y a peu. Google a dévoilé le modèle le 30 septembre auprès de professionnels de la cybersécurité agréés, avant de le rendre largement disponible le 13 octobre. La version payante de l'API Gemini le propose désormais à tous 278. Google le met en avant pour l'ingénierie logicielle, l'analyse financière, le juridique, la cybersécurité et la recherche scientifique 7.

Le vrai test tombe le 1er décembre, à l'expiration du tarif promotionnel : la même session de Minecraft sera alors facturée environ 38 dollars de l'heure. Le prochain rapport cloud d'Alphabet sera le premier à intégrer une consommation facturée aux tarifs de décembre. Reste à savoir si la demande d'agents tiendra le choc : c'est le chiffre à surveiller.

Get Model by email, free

The AI labs, their models, and the business behind them. In our daily email, every weekday.

Loading Google DeepMind…

Reader comments

0 comments

    Model

    Replit's exit from Anthropic's top five lands the same week Anthropic asks the market for $750 billion

    Amjad Masad says Replit was a top-five Anthropic customer until it moved its default to OpenAI this week. Anthropic's S-1, out the same week, asks public buyers to fund up to $750 billion of compute on a two-customer concentration story.

    Model

    OpenAI's 97.9% COBOL score revives the promise that knocked 13% off IBM in February

    OpenAI is the second frontier lab in eight months to claim its models can translate decades-old bank COBOL almost perfectly. The first claim cost IBM its worst day since 2000; the market reversed it by June, and the damage that stuck came from IBM's own numbers.

    Model

    Black Forest Labs gives Klein away free; fal prices FLUX 3 Max at 75% off and keeps the customer

    fal launched FLUX 3 Max on October 19: Black Forest Labs' foundation model, post-trained, priced and sold only by fal. Four days earlier the lab gave away Klein's weights for free commercial use. The model maker publishes the model; the platform keeps the pay.

    Model

    Anthropic told investors it turned its first profit as OpenAI races to raise $30 billion

    The Claude maker told investors it took $16.8 billion in the third quarter and turned its first profit. The method behind that profit is unpublished, OpenAI disputes how the revenue is counted, and the IPO yardstick is being discounted before it trades.

    Model

    Meta's free Muse Spark Open license forces API sellers over $20 million in revenue to sign; Nebius sells it

    Meta's "open" 816-billion-parameter model carries a license clause that requires API sellers earning over $20 million a year to notify Meta and sign a separate agreement. Nebius, the only listed launch partner, is selling the tokens.

    Model

    SpaceX's AI revenue is set to more than double to $6.47 billion on turbines a Clean Air Act suit could shut

    Tonight's Q3 report prices an AI segment expected to become SpaceX's largest, built on gas turbines a Fifth Circuit fight could strip of legal cover, while the company buys out the neighbors suing it.

    Get the newsletter

    The day's AI and market news, in your inbox every weekday.