Documentos destinados a investidores indicam que os custos de inferência superam metade da receita tanto na OpenAI quanto na Anthropic. Na OpenRouter, modelos chineses respondem por cerca de 60% dos tokens usados por empresas dos EUA. Os números parecem contar histórias distintas — uma sobre custos, outra sobre geografia —, mas convergem em uma decisão que, até pouco tempo atrás, a maioria dos aplicativos tomava uma única vez.
Principais conclusões
- A escolha do modelo está deixando de ser uma decisão única de arquitetura para se tornar uma alocação feita a cada solicitação, com base em custo, qualidade, latência, disponibilidade, políticas e governança de dados.
- Um sistema de roteamento pode transformar as interfaces de vários fornecedores em uma camada portátil para cargas de trabalho, mas seu valor estratégico está em registrar por que cada modelo, alternativa de contingência, ferramenta e caminho de escalonamento foi escolhido.
- A economia da inferência torna caras as escolhas estáticas: segundo relatos, OpenAI e Anthropic gastam mais da metade da receita com inferência, enquanto possíveis reduções de custos podem alterar rapidamente quais modelos são economicamente viáveis para cada tarefa.
- Os fluxos de trabalho com agentes reforçam o papel do roteamento, porque cada etapa de planejamento, recuperação de informações, uso de ferramentas e execução pode exigir um modelo, orçamento, política ou nível de revisão diferente.
- O roteamento aumenta o poder de negociação do comprador, mas também cria um ponto de estrangulamento: seu operador pode observar a demanda, definir quais modelos são elegíveis, aplicar regras geográficas e redirecionar o tráfego sem alterar os aplicativos.
Na primeira fase de adoção dos modelos fundacionais, a escolha do modelo era tratada como uma questão de arquitetura. A equipe selecionava um fornecedor, integrava sua interface, ajustava as instruções ao comportamento do modelo e encarava a dependência resultante como um compromisso técnico. Em tese, era possível trocar de fornecedor; na prática, o custo era alto. A interface, a lógica das ferramentas, os controles de segurança e o comportamento do modelo acabavam incorporados ao aplicativo.
As equipes podiam conviver com essas dependências enquanto a escolha do modelo fosse pouco frequente. Isso deixa de ser possível quando capacidades e custos de inferência mudam tão depressa. O modelo indicado para uma pesquisa complexa pode ser um desperdício em tarefas de classificação. Um modelo adequado para responder diretamente ao cliente pode ser lento demais para um agente executado em segundo plano. Um modelo aprovado para determinada região ou categoria de dados pode ser proibido em outra. As equipes avançaram por conta própria rumo ao roteamento porque a lógica econômica mudou.
A camada intermediária surgiu porque a escolha do modelo deixou de ser estável
Uma camada intermediária de acesso a modelos oferece aos aplicativos uma interface comum para vários fornecedores. Ela traduz solicitações e pode aplicar autenticação, limites de uso, registro de atividades, alternativas de contingência e regras de roteamento. Essa compatibilidade se torna mais importante quando o serviço por trás da interface muda com frequência.
A mudança arquitetônica é conhecida. Uma linguagem comum para solicitações separa o domínio do aplicativo da implementação do fornecedor. Em vez de ensinar a cada fluxo de trabalho do produto a linguagem específica de cada interface de modelo, a camada intermediária estabelece uma linguagem única entre eles. Isso não torna os modelos equivalentes. Apenas permite administrar suas diferenças em um só lugar.
O roteamento acrescenta decisões a essa camada. Ele classifica a solicitação, compara-a com os modelos elegíveis, faz a alocação conforme os requisitos de custo e desempenho, avalia o resultado e, se necessário, escala a tarefa. O sistema de roteamento não executa a operação de negócio em si; ele muda o plano operacional usado para realizá-la.
| Decisão de roteamento | Variável otimizada | Responsabilidade da camada de controle |
|---|---|---|
| Aceitar ou rejeitar | Política, categoria de dados, jurisdição | Registrar qual regra determinou o tratamento da solicitação |
| Selecionar um modelo | Custo, qualidade, latência, disponibilidade | Preservar a justificativa da escolha |
| Executar em paralelo | Grau de confiança e dificuldade da tarefa | Comparar os resultados segundo um método previamente definido |
| Escalar ou tentar novamente | Falha, incerteza, sensibilidade | Manter o histórico das decisões e das alternativas acionadas |
| Aceitar um resultado | Limites de qualidade e segurança | Associar o resultado ao modelo, à política e à versão correspondentes |
O sistema de roteamento ocupa o ponto de encontro entre objetivos que não podem ser maximizados ao mesmo tempo. O modelo mais barato pode ser mais lento. O mais rápido pode ser menos confiável em determinado setor. A execução em paralelo pode aumentar a confiança, mas também eleva os custos. Uma interface comum pode ocultar recursos específicos de um fornecedor que produziriam resultados melhores. Com o roteamento, essas concessões passam a ser feitas continuamente, em vez de ficarem escondidas em uma revisão anual de fornecedores.
Cada solicitação de inferência está se tornando um ato de compra
Documentos destinados a investidores indicaram que OpenAI e Anthropic registraram custos de inferência superiores à metade da receita, ao mesmo tempo que apresentaram projeções de rentabilidade com e sem os custos de treinamento. O treinamento chama atenção porque ocorre em concentrações espetaculares de capacidade computacional. Já a inferência se repete toda vez que um usuário ou agente solicita uma tarefa. Nessa escala, adotar um único modelo como padrão equivale a manter uma política de compras nunca questionada.
A curva de custos também é instável. Segundo relatos, engenheiros da OpenAI identificaram um método capaz de reduzir os custos de inferência em mais da metade. Uma mudança dessa magnitude altera quais cargas de trabalho são economicamente viáveis, quais combinações de latência e qualidade são aceitáveis e quanto valor o comprador pode capturar ao distribuir solicitações entre modelos.
Uma estrutura de contratação de modelos transforma a seleção de um compromisso com uma plataforma em uma decisão de compra recorrente. A unidade relevante não é o custo por token, mas o custo por tarefa útil, incluindo novas tentativas, chamadas de ferramentas, avaliações, latência e falhas. Um modelo aparentemente barato pode sair caro se exigir três tentativas. Um modelo de ponta pode ser econômico quando uma única chamada substitui uma longa sequência de modelos mais fracos.
Por isso, o comprador define a política de roteamento antes de negociar volumes com fornecedores: quais tarefas justificam um modelo de ponta, quais falhas exigem escalonamento, quais dados podem atravessar fronteiras e se a economia persiste depois das novas tentativas. A contratação deixa de ser uma tabela de avaliação de fornecedores e passa a funcionar como uma política dinâmica de alocação.
O Fusion da OpenRouter torna explícita essa lógica de carteira. Ele envia instruções a vários modelos em paralelo e afirma oferecer inteligência no nível do Fable pela metade do preço. A OpenRouter não validou essa medição de forma independente, mas o desenho do produto é o sinal relevante: o que se vende já não é o acesso a um único modelo, mas um resultado montado a partir de uma carteira.
O roteamento não torna irrelevantes os modelos de ponta. Ele apenas deixa mais claro o valor econômico de suas diferenças de qualidade. Se todos os modelos fossem intercambiáveis, uma lista de preços bastaria. O roteamento tem valor justamente porque algumas tarefas justificam recursos mais caros, enquanto outras não.
A Meta está agindo como uma grande compradora de inteligência
A incubadora interna de IA da Meta está desenvolvendo um sistema de roteamento de modelos inspirado na abordagem da OpenRouter, com o objetivo declarado de enviar algumas tarefas a modelos de menor custo. O projeto importa não porque a Meta tenha descoberto as camadas intermediárias, mas porque uma empresa que investe pesadamente em modelos e infraestrutura ainda quer uma camada capaz de recusar a opção mais cara. Ao construí-la, a Meta cria uma infraestrutura de contratação e programação de capacidade para inteligência.
O contexto financeiro deixa o incentivo evidente. A Meta captou US$ 62 bilhões em dívida desde 2022, aproximadamente metade desse total durante 2025. Também retirou de seu balanço US$ 30 bilhões em dívida destinada à construção de centros de dados para IA por meio de sociedades de propósito específico. Considerando Alphabet, Microsoft, Amazon, Meta e Oracle, a dívida estimada fora do balanço cresceu cerca de oito vezes desde 2022, para aproximadamente US$ 1.65 trilhão.
O mercado mais amplo de capacidade contratada para IA transforma poder computacional com fornecimento de energia em infraestrutura que pode ser financiada e alugada. Quando essa capacidade envolve compromissos financeiros de longo prazo, a qualidade do uso importa tanto quanto seu volume. Um sistema de roteamento pode extrair mais trabalho útil dessa base financiada ao reservar a capacidade mais cara para solicitações que realmente precisam dela.
A mudança no discurso em torno da Meta reflete essa mesma guinada operacional. O enfoque empresarial na cobertura da Meta subiu de 10.8% para 15.7%, enquanto o enfoque em pesquisa caiu de 16.5% para 12.0%. A ênfase está deixando de ser a capacidade da Meta de construir um modelo para se concentrar em como a empresa aloca, financia e governa seu uso.
O sistema de roteamento da Meta continua sendo um projeto interno em desenvolvimento. Não há evidências de que seja um produto público, muito menos um padrão de interoperabilidade adotado pelo mercado. O sinal é comportamental, não comercial: uma grande desenvolvedora de modelos concluiu que a escolha do modelo merece infraestrutura própria.
Os agentes transformam o roteamento no programador dos fluxos de trabalho
Um aplicativo convencional pode fazer uma chamada a um modelo e aguardar. Já um fluxo de trabalho com agentes pode acionar um modelo, pesquisar na internet, recuperar arquivos, usar ferramentas externas, examinar o resultado, revisar um plano e então chamar outro modelo. Cada etapa tem um custo de erro e uma exigência de capacidade diferentes.
A Responses API e o Agents SDK da OpenAI oferecem aos agentes uma estrutura de coordenação para pesquisar na internet, examinar arquivos e operar computadores. Mais tarde, a Responses API incorporou servidores MCP remotos, geração de imagens e Code Interpreter. O Codex foi lançado com mais de 20 integrações iniciais, entre elas Figma, Notion, Gmail e Slack.
Esses acréscimos tornam os fluxos de trabalho mais úteis, mas também multiplicam as decisões. Uma etapa rotineira de extração pode exigir um modelo rápido e barato. Uma etapa de planejamento pode justificar um modelo mais potente. O uso de uma ferramenta que envolva registros confidenciais pode exigir um modelo aprovado para aquela categoria de dados. Uma ação final pode depender de revisão humana, independentemente do modelo que a gerou.
Um mecanismo tradicional de contingência pergunta se o modelo preferencial está disponível. Um sistema de roteamento de agentes pergunta qual modelo deve executar determinada etapa, sob certa política e orçamento, considerando o que ocorreu anteriormente. É a diferença entre um estepe e o controle de tráfego aéreo.
Interfaces para agentes, conjuntos de desenvolvimento, integrações e controles de segurança específicos de cada fornecedor dificultam a portabilidade. Uma camada intermediária pode padronizar a chamada ao modelo, enquanto o fluxo de trabalho continua dependente da lógica das ferramentas, do estado da conversa, do ambiente isolado ou do sistema de avaliação de um único fornecedor. As equipes conseguem transferir as instruções antes das ferramentas e as ferramentas antes do histórico operacional.
OpenAI e Anthropic, portanto, ganham quando suas interfaces se tornam o ambiente operacional nativo do aplicativo. A profundidade da integração pode preservar a demanda mesmo quando as chamadas básicas aos modelos podem ser roteadas. Assim, os fornecedores conseguem oferecer interfaces comuns enquanto tornam seus próprios caminhos mais úteis.
Portabilidade e controle de acesso chegam pela mesma interface
Um sistema de roteamento pode transformar um conjunto de interfaces de fornecedores em uma camada portátil para cargas de trabalho. O aplicativo aponta para uma única interface, enquanto o sistema troca o modelo nos bastidores. Isso aumenta o poder de negociação do comprador, reduz o custo operacional de testar alternativas e pode tornar rotineira a substituição entre regiões.
A OpenRouter oferece um indício particularmente claro do que acontece quando um intermediário reduz o atrito do consumo entre fornecedores e regiões:
Esse número não representa todo o mercado dos EUA. Ele mostra como os desenvolvedores se comportam quando uma interface comum facilita o uso de alternativas. As empresas dos EUA não anunciaram coletivamente uma estratégia para transferir a demanda por tokens a modelos chineses. Desenvolvedores individuais reagiram a preço, capacidade e disponibilidade, e a camada intermediária reuniu essas escolhas em um padrão de importância estratégica.
A mesma interface pode se tornar um ponto de estrangulamento. Seu proprietário vê os padrões das solicitações, determina quais fornecedores são elegíveis, define o comportamento das alternativas de contingência, controla a capacidade de acompanhamento e pode impor regras geográficas ou de tratamento de dados. Também pode redirecionar a demanda sem alterar o código do aplicativo acima da camada nem os modelos abaixo dela.
Essa posição está atraindo interesse estratégico. Segundo relatos, a OpenRouter discutiu uma possível venda por uma avaliação de vários bilhões de dólares, acima dos US$ 1.3 bilhão informados em maio. O ativo não se resume à agregação de interfaces. Ele oferece visibilidade sobre a demanda das cargas de trabalho e a capacidade de direcioná-la.
O modelo de negócios do proprietário determina como esse poder será usado. A OpenRouter se beneficia ao preservar um mercado amplo de modelos. O sistema interno da Meta busca otimizar os resultados econômicos da própria Meta. AWS Bedrock, Google Vertex AI e Microsoft Azure AI Foundry oferecem portabilidade dentro de seus respectivos perímetros administrativos. Fornecedores chineses de modelos ganham distribuição quando as camadas intermediárias permitem substituí-los operacionalmente por outras opções. A interface pode parecer comum, mas os interesses que a governam continuam distintos.
Ferramentas específicas de fornecedores impedem que o roteamento se torne universal
Os sistemas de roteamento não conseguem apagar diferenças entre modelos que vão além do preço e da qualidade medida em testes comparativos. Os fornecedores oferecem ferramentas, comportamentos de contexto, sistemas de segurança, garantias de saída estruturada e controles operacionais distintos. Aplicativos construídos em torno desses recursos nem sempre conseguem substituir um modelo sem perder funcionalidades.
O roteamento paralelo também tem custos próprios. Enviar uma tarefa a vários modelos pode aumentar a chance de obter uma resposta útil, mas consome mais inferência e exige um método de pontuação. Se o avaliador não for confiável, o sistema apenas transferiu o julgamento difícil da geração para a seleção. Um sistema de roteamento só consegue otimizar aquilo que sua função de objetivo mede.
Nem o projeto interno da Meta, nem a interface da OpenRouter, nem qualquer serviço gerenciado de computação em nuvem se tornaram um padrão universal de interoperabilidade. As diferentes camadas intermediárias padronizam operações comuns, mas preservam extensões exclusivas ao seu redor.
O roteamento também não elimina a concentração. Se um modelo de ponta continuar sendo claramente superior em um número suficiente de tarefas valiosas, o tráfego permanecerá concentrado nele. Uma dinâmica em que o vencedor fica com todo o mercado exige vantagens de capacidade grandes o bastante para superar restrições de custo, latência, portabilidade e políticas. O roteamento torna esse limite visível; não determina o resultado.
Essas camadas só continuam relevantes enquanto os compradores dispõem de vários modelos viáveis, baixo atrito de troca, diferenças significativas de capacidade e liberdade para transferir cargas de trabalho. Retire o acesso amplo aos modelos ou torne indispensáveis as ferramentas específicas de cada fornecedor, e a camada intermediária volta a ser apenas um mecanismo de contingência.
Trocar com facilidade é algo reproduzível; prestar contas pelas decisões, não
Uma equipe consegue copiar uma lógica básica de roteamento: escolher o modelo elegível mais barato, tentar novamente em caso de falha e enviar solicitações difíceis a um fornecedor de ponta. Isso é útil, mas não cria uma camada de controle duradoura. A capacidade mais difícil está em decidir diante de várias restrições e manter um registro auditável dessa decisão.
Um sistema de roteamento orientado por políticas precisa responder a perguntas que um simples comparador de preços não consegue. A solicitação tinha permissão para sair de determinada jurisdição? O modelo escolhido podia processar aquela categoria de dados? Qual limite de qualidade se aplicava? Qual versão do modelo produziu o resultado? Por que o fluxo de trabalho acionou ou dispensou um revisor humano? O que aconteceu quando o primeiro modelo falhou?
A barreira competitiva mais difícil não é o menor custo, mas a auditabilidade da segurança: a capacidade de reconstruir a política, o modelo, as ferramentas, as condições dos dados e o caminho de escalonamento por trás de um resultado automatizado.
Os sistemas de moderação da Meta mostram por que métricas de eficiência não bastam. A Meta afirma que sua moderação por IA comete 13% menos erros e identifica 10% mais violações do que moderadores humanos, enquanto alguns usuários do Instagram e do Facebook relataram que a moderação automatizada excluiu suas contas. Os dois fatos podem coexistir. Uma melhora agregada não comprova que determinada decisão de alto impacto tenha sido correta, passível de revisão ou reversível.
Uma equipe que otimiza apenas o custo médio ou a precisão pode reproduzir esse problema em escala maior. Seu sistema de roteamento pode enviar uma tarefa sensível a um modelo que apresenta bom desempenho estatístico, mas viola uma política específica. Pode reduzir a latência pulando uma revisão ou escolher um modelo com base em um teste que não representa o usuário afetado. Ao alocar o modelo antes da geração, o sistema automatiza o julgamento uma camada antes.
Por isso, os operadores precisam de regras explícitas de escalonamento, limites de políticas, registros das versões dos modelos e retorno sobre os resultados. Não devem buscar um modelo universalmente superior; nenhum modelo é o melhor independentemente da tarefa. Precisam tornar cada concessão declarada, reproduzível e verificável.
O poder passa para a camada que toma as decisões
Um sistema de roteamento não precisa ser proprietário dos modelos nem da capacidade computacional para moldar o mercado. Precisa apenas de opções viáveis em quantidade suficiente para que a seleção seja real e de contexto suficiente sobre o fluxo de trabalho para que essa escolha tenha consequências. Assim, consegue direcionar a demanda e registrar quem estava apto, quanto foi gasto e por que determinado modelo venceu.
Custos de inferência superiores à metade da receita e uma participação de 60% no uso de tokens por empresas dos EUA não são apenas números sobre custos e geografia. Ambos apontam para a mesma mudança: escolher um modelo deixou de ser uma decisão arquitetônica tomada uma única vez e passou a ser uma compra recorrente, sujeita à prestação de contas. Quando a inteligência é comprada a cada solicitação, a camada capaz de explicar cada compra passa a comandar toda a estrutura.
Como mudou o enfoque da cobertura da Meta, de 2024 a 2026
| Enfoque | Participação em 2024 | Participação em 2026 |
|---|---|---|
| Consumidor | 37.3% | 33.6% |
| Desenvolvedor | 14.9% | 12.5% |
| Empresarial | 10.8% | 15.7% |
| Regulação | 18.7% | 14.0% |
| Pesquisa | 16.5% | 12.0% |
Perguntas frequentes
O que é um sistema de roteamento de modelos de IA?
É uma camada de controle que classifica cada solicitação, identifica os modelos elegíveis, seleciona um deles com base em custo, qualidade, latência, disponibilidade e restrições de políticas e, se necessário, tenta novamente, escala a tarefa ou compara resultados.
Por que as empresas estão adotando o roteamento de modelos agora?
As capacidades dos modelos e os preços de inferência estão mudando rápido demais para que a adoção de um único modelo como padrão continue eficiente. O roteamento permite reservar os modelos mais caros para tarefas que os justifiquem e enviar trabalhos rotineiros a alternativas mais baratas ou rápidas.
O sistema de roteamento de modelos da Meta está disponível como produto público?
Não. O texto o descreve como um projeto interno em desenvolvimento, sem evidências de que seja uma oferta pública ou um padrão de interoperabilidade adotado.
O roteamento elimina a dependência de fornecedores de IA?
Não por completo. Uma camada intermediária pode padronizar chamadas básicas aos modelos, mas ferramentas exclusivas, estado das conversas, sistemas de segurança, garantias de saída estruturada, ambientes isolados e sistemas de avaliação ainda podem vincular os fluxos de trabalho a um fornecedor.
O que torna um sistema de roteamento defensável, em vez de fácil de copiar?
O roteamento básico por preço e os mecanismos de contingência podem ser reproduzidos. A capacidade mais difícil é a auditabilidade: reconstruir a política, a versão do modelo, as ferramentas, as condições dos dados, o avaliador, as falhas e o caminho de escalonamento por trás de cada resultado automatizado.