Provoz autonomních AI agentů přináší extrémní spotřebu tokenů a vysoké finanční nároky. Článek analyzuje příčiny nárůstu nákladů a ukazuje, jak je efektivně snížit pomocí dynamického směrování modelů.
Provoz pokročilých autonomních systémů s sebou nese výrazné finanční nároky. Garry Tan v podcastu The Builders uvedl, že za tokeny pro AI agenty utratí zhruba 100 000 až 200 000 dolarů ročně[1]. Současné náklady na provoz osobních AI agentů přitom Tan označil za příliš vysoké a za výsadu, kterou si nemůže dovolit každý[2]. Sám přitom sdílel na platformě GitHub sadu 23 dovedností pro Claude Code pod názvem gstack[3]. Příkladem rozsáhlého nasazení v praxi je akcelerátor Y Combinator, který využívá interního AI agenta Stray Light disponujícího kompletním kontextem všech podpořených zakladatelů, e-mailů i přihlášek[4].
Proč spotřeba tokenů narůstá do extrémních rozměrů
Podle inženýrského týmu společnosti Anthropic spotřebují samostatní agenti zhruba 4× více tokenů než chat a multi-agentní systémy přibližně 15× více tokenů než běžné chatové interakce[5]. Zvýšená spotřeba je však vykoupena výkonem, jelikož multi-agentní systém Anthropic překonal jednoho agenta Claude Opus 4 o 90,2 % v interní evaluaci výzkumných úloh[6]. V evaluačním testu BrowseComp samotná spotřeba tokenů vysvětlila 80 % rozptylu ve výkonu systémů[7].
Za strmým nárůstem spotřeby stojí kumulace dat v jednotlivých krocích. Při desetistupňové úloze agent neplatí pouze za deset jednotlivých kroků, ale za kumulativní součet 1+2+3…+10 přeposílané historie[8]. K tomu se přidává masivní režie nástrojových rozhraní, kdy samotný MCP server pro GitHub obsahuje přibližně 55 000 tokenů schémat nástrojů[9]. Konfigurace zahrnující MCP servery pro GitHub, Slack a Sentry načte zhruba 143 000 tokenů ještě před odesláním první zprávy agentovi[10].
Značné nároky vyžaduje i samotný start pomocných procesů. Audit subagentů Claude Code v roce 2025 vyčíslil režijní náklad na inicializaci jednoho subagenta na zhruba 20 000 tokenů[11]. Měření z července 2026 navíc zjistilo, že obecný subagent s hierarchií instrukcí o rozsahu 28 620 slov spotřeboval 111 253 tokenů, aniž provedl jediné volání nástroje[12].
Od ceny za tokeny k ceně za vyřešený úkol
Kvůli specifickému fungování agentních smyček se rozhodující metrikou produkční ekonomiky autonomních kódovacích agentů stává cena za úspěšně vyřešený úkol, nikoli cena za milion tokenů[13]. Pokusy o naivní snížení nákladů však často selhávají. Omezení parametru maxOutputTokens na 300 tokenů u modelu gemini-3.8-flash nepřineslo u jednoduchých úloh žádnou finanční úsporu[14]. Tento nastavený strop 300 výstupních tokenů naopak způsobil selhání u 7 z 25 náročných úloh, protože modelu došel prostor pro proces uvažování[15].
Dynamické směrování modelů v praxi
Doporučenou metodou snížení nákladů je směrování subagentů podle rolí, kde orchestrátor zůstává na nejpokročilejším modelu a dílčí úlohy přebírají levnější modely[16]. Pro efektivní třídění požadavků je však nutné správně odhadnout jejich složitost. Lokální heuristika v Pythonu založená na délce promptu a regulárních výrazech sice dosáhla na 16 vývojových úlohách úspěšnosti 93,8 %[17], na 34 neviděných testovacích úlohách však úspěšnost zmrazené lokální heuristiky klesla o 23,2 procentního bodu na 70,6 %[18].
Naproti tomu specializovaný klasifikátor Jev vyhodnocuje strukturované klasifikační primitiva v jediném dopředném průchodu místo postupného generování textu token po tokenu[19]. Jeho klasifikační primitivum Noul vrací pravděpodobnost v rozmezí 0 až 1 pro binární tvrzení[20]. Klasifikátor Jev správně zařadil všech 34 neviděných úloh a dosáhl celkové shody 96,0 % napříč 50 testovanými úlohami[21].
V experimentu byl nejúspěšnější konfigurací bez směrovače model Gemini 3.8 Flash s nízkou úrovní uvažování, který vyřešil všech 50 úloh[22]. Model Flash-Lite sám o sobě sice zodpověděl jednoduché úlohy za půl sekundy, ale selhal u 6 z 25 náročných úloh[23]. Směrovač Jev proto posílá všechny úlohy nejprve na Flash-Lite a eskaluje na Gemini 3.8 s nízkým uvažováním jen komplexní dotazy, čímž vyřešil všech 50 úloh při nižších nákladech a odezvě[24].
Garry Tan uvedl v podcastu The Builders, že za tokeny pro AI agenty utratí zhruba 100 000 až 200 000 dolarů ročně.
“I spend about maybe $100[,000] to $200,000 a year on tokens,” he told Isaacson.
techcrunch.comOtevřít zdroj
Klasifikační primitivum Noul vrací pravděpodobnost v rozmezí 0 až 1 pro binární tvrzení.
a Noul, which returns a 0 to 1 probability for a binary statement.
developers.googleblog.comOtevřít zdroj
Směrovač Jev posílá všechny úlohy nejprve na Flash-Lite a eskaluje na Gemini 3.8 s nízkým uvažováním jen komplexní dotazy, čímž vyřešil všech 50 úloh při nižších nákladech a odezvě.
It sends every task to Flash-Lite first and escalates only what Jev flags as complex. It also solved all 50 tasks, and it can help reduce both cost and response time compared with running low thinking on everything.
developers.googleblog.comOtevřít zdroj
Y Combinator využívá interního AI agenta Stray Light, který má k dispozici kompletní kontext všech podpořených zakladatelů, e-mailů i přihlášek.
“We now have an internal AI agent, for instance, named Stray Light that kind of has a personality, and then it has a company brain. Like it actually has the total context of every founder we’ve ever backed, anyone who’s ever emailed us, like all the applications.”
techcrunch.comOtevřít zdroj
Multi-agentní systém Anthropic překonal jednoho agenta Claude Opus 4 o 90,2 % v interní evaluaci výzkumných úloh.
It beat a single Opus 4 agent by 90.2% on Anthropic's internal research eval.
getnadir.comOtevřít zdroj
Nejúspěšnější konfigurací bez směrovače byl model Gemini 3.8 Flash s nízkou úrovní uvažování, který vyřešil všech 50 úloh.
The strongest setup without a router was Gemini 3.8 Flash on low thinking. It solved all 50 tasks. That's the number a router had to beat.
developers.googleblog.comOtevřít zdroj
Podle inženýrského týmu Anthropic spotřebují samostatní agenti zhruba 4× více tokenů než chat a multi-agentní systémy přibližně 15× více tokenů než běžné chatové interakce.
"agents typically use about 4× more tokens than chat interactions, and multi-agent systems use about 15× more tokens than chats." Source: Anthropic Engineering, "How we built our multi-agent research system," June 13, 2025
getnadir.comOtevřít zdroj
Audit subagentů Claude Code v roce 2025 vyčíslil režijní náklad na inicializaci jednoho subagenta na zhruba 20 000 tokenů.
Amit Kothari's audit of Claude Code subagents put that load at roughly 20,000 tokens per spawn in 2025.
getnadir.comOtevřít zdroj
Klasifikátor Jev správně zařadil všech 34 neviděných úloh a dosáhl celkové shody 96,0 % napříč 50 testovanými úlohami.
Jev classified all 34 unseen tasks with 100.0% agreement, 34 of 34, reaching 48 of 50, or 96.0%, across the full suite.
developers.googleblog.comOtevřít zdroj
Model Flash-Lite sám o sobě zodpověděl jednoduché úlohy za půl sekundy, ale selhal u 6 z 25 náročných úloh.
On its own, Flash-Lite answered every simple task in half a second but missed 6 of the 25 hard ones. Jev flagged all 6 as complex with high confidence and escalated them.
developers.googleblog.comOtevřít zdroj
Lokální heuristika v Pythonu založená na délce promptu a regulárních výrazech dosáhla na 16 vývojových úlohách úspěšnosti 93,8 %.
On the 16 development questions used to write those exact rules, the local heuristic scored 15 of 16, or 93.8%.
developers.googleblog.comOtevřít zdroj
Měření z července 2026 zjistilo, že obecný subagent s hierarchií instrukcí o rozsahu 28 620 slov spotřeboval 111 253 tokenů, aniž provedl jediné volání nástroje.
His re-measurement on July 30, 2026 found a general-purpose subagent that made zero tool calls still reporting 111,253 tokens, on a setup with a 28,620-word instruction hierarchy, so the floor grows with your instruction files.
getnadir.comOtevřít zdroj
Garry Tan sdílel na GitHubu sadu 23 dovedností pro Claude Code pod názvem gstack.
He uses agents for countless work projects and coding tasks and has freely shared his set of 23 Claude Code skills, called gstack, on GitHub — an effort to help teach others what agents can do, he said.
techcrunch.comOtevřít zdroj
Na 34 neviděných testovacích úlohách klesla úspěšnost zmrazené lokální heuristiky o 23,2 procentního bodu na 70,6 %.
On the 34 held-out questions, the frozen heuristic dropped 23.2 percentage points to 70.6%.
developers.googleblog.comOtevřít zdroj
Konfigurace zahrnující MCP servery pro GitHub, Slack a Sentry načte zhruba 143 000 tokenů ještě před odesláním první zprávy agentovi.
and a GitHub, Slack and Sentry setup loads roughly 143,000 before the agent sees its first message.
getnadir.comOtevřít zdroj
Rozhodující metrikou produkční ekonomiky autonomních kódovacích agentů se stává cena za úspěšně vyřešený úkol, nikoli cena za milion tokenů.
The dominating metric is now cost per successful task: total spend across every loop iteration, tool call, retry and internal thinking pass divided by the number of tasks that pass verification.
developers.googleblog.comOtevřít zdroj
Samotný MCP server pro GitHub obsahuje přibližně 55 000 tokenů schémat nástrojů.
GitHub's MCP server alone ships about 55,000 tokens of tool schemas, and a GitHub, Slack and Sentry setup loads roughly 143,000 before the agent sees its first message.
getnadir.comOtevřít zdroj
Omezení parametru maxOutputTokens na 300 tokenů u modelu gemini-3.8-flash nepřineslo u jednoduchých úloh žádnou finanční úsporu.
Capping the model's output at 300 tokens didn't save any money on easy tasks. The cap is only a ceiling, and easy answers never came close to it.
developers.googleblog.comOtevřít zdroj
Nastavený strop 300 výstupních tokenů způsobil selhání u 7 z 25 náročných úloh, protože modelu došel prostor pro proces uvažování.
All the cap did was break 7 of the 25 hard tasks. On six of them, the model ran out of room while still reasoning and never gave an answer. On the seventh, it squeezed its reasoning to fit, finished on time and got the answer wrong.
developers.googleblog.comOtevřít zdroj
Při desetistupňové úloze agent neplatí pouze za deset jednotlivých kroků, ale za kumulativní součet 1+2+3…+10 přeposílané historie.
every turn resends the full conversation history, so a 10-step task doesn't pay for 10 turns of context, it pays for the 1+2+3…+10 accumulation of all of them.
getnadir.comOtevřít zdroj
Doporučenou metodou snížení nákladů je směrování subagentů podle rolí, kde orchestrátor zůstává na nejpokročilejším modelu a dílčí úlohy přebírají levnější modely.
Map each subagent role to the cheapest model that role has been benchmarked to handle. The orchestrator keeps the frontier model: it's the one place a bad call is expensive to recover from.
getnadir.comOtevřít zdroj
Klasifikátor Jev vyhodnocuje strukturované klasifikační primitiva v jediném dopředném průchodu místo postupného generování textu token po tokenu.
Rather than generating text token by token, Jev—a specialized structured-output classifier designed for high-throughput decision pipelines—evaluates structured classification primitives in a single forward pass
developers.googleblog.comOtevřít zdroj
V evaluačním testu BrowseComp samotná spotřeba tokenů vysvětlila 80 % rozptylu ve výkonu systémů.
on the BrowseComp evaluation, token usage by itself explained 80% of the performance variance.
getnadir.comOtevřít zdroj
Garry Tan označil současné náklady na provoz osobních AI agentů za příliš vysoké a za výsadu, kterou si nemůže dovolit každý.
“It’s too expensive right now,” he said, adding that he knows the amount of money he spends on AI agents is “a crazy privilege that not everyone can do.”
techcrunch.comOtevřít zdroj