Shopping cart

Subtotal $0.00

View cartCheckout

Building better devs

TnewsTnews
  • Home
  • IA
  • Fine-tune de US$ 500 Bateu o Claude e GPT-5.5 num Cenário Real
IA

Fine-tune de US$ 500 Bateu o Claude e GPT-5.5 num Cenário Real

Email : 14

Você gastou US$ 34 para classificar 1.000 produtos com o Claude. Seu concorrente gastou US$ 0,50 e acertou mais. A diferença? Um fine-tune de US$ 500 num modelo open-source de 9 bilhões de parâmetros.

A FermiSense publicou um estudo que deveria tirar o sono de qualquer empresa que assina API de modelo frontier. Eles pegaram o Qwen 3.5-9B, um modelo que roda numa única GPU de consumo, aplicaram GRPO (Group Relative Policy Optimization) com dados proprietários de catálogo de produtos, e o resultado superou Claude, GPT-5.5 e Gemini 3.1 Pro numa task real de produção.

Não estamos falando de benchmark sintético. Estamos falando de 40 milhões de decisões por dia em catálogo de e-commerce, onde cada erro custa dinheiro de verdade.

Os números que importam

O modelo fine-tunado atingiu 87,3% da pontuação máxima alcançável na tarefa de revisão de catálogo. O melhor modelo frontier, depois de prompt engineering exaustivo, ficou em 76,9%. Isso é 13,5% de melhoria relativa, o que em produção se traduz em milhões de classificações corretas a mais por mês.

Mas o dado que realmente muda a conversa é o custo:

ModeloCusto por 1.000 listagensCusto anual (40M decisões/dia)
Melhor frontier (Claude/GPT-5.5)US$ 34,00~US$ 500 milhões
Fine-tune Qwen 3.5-9BUS$ 0,50~US$ 7 milhões

Leu certo. A diferença é de 68x. Meio bilhão de dólares por ano versus sete milhões. E o modelo menor não só é mais barato: ele acerta mais.

Por que modelos pequenos vencem em tarefas específicas

Existe uma lógica contraintuitiva aqui. Um modelo de 9 bilhões de parâmetros treinado especificamente para a sua tarefa supera um de 1 trilhão porque ele não precisa saber escrever poesia, traduzir mandarim ou explicar mecânica quântica. Ele precisa saber uma coisa, e saber muito bem.

Quando você fine-tuna com 10.000 exemplos do seu domínio, o modelo aprende a terminologia exata, os edge cases reais e o formato de saída que você precisa. Um modelo generalista precisa inferir tudo isso a partir do prompt, e inferência não é conhecimento.

A Particula Tech compilou dados de vários deployments em produção, e os números são consistentes:

TarefaModelo especializado 7BGPT-5Claude Opus
Geração de JSON válido99,8%~85%~87%
Classificação de texto96%+~88%~89%
Throughput10.000 req/s100 req/s80 req/s
Custo por 1M tokensUS$ 0,03 a 0,10US$ 1,25 (input)US$ 15 (input)

A validação de JSON é o exemplo mais gritante. O modelo especializado erra 2 a cada 1.000 saídas. O GPT-5 erra 150. Em produção, cada JSON malformado é um retry, um timeout, uma reclamação no Sentry.

GRPO: o molho secreto do fine-tune em 2026

O GRPO virou o padrão de fine-tuning para 2026 e isso não aconteceu por acaso. Diferente do RLHF clássico, que precisa de um modelo de recompensa separado (caro, instável, cheio de viés), o GRPO usa otimização relativa dentro do próprio grupo de respostas.

Na prática, funciona assim:

  1. Você dá um problema ao modelo
  2. Ele gera múltiplas respostas
  3. Cada resposta é avaliada por uma função de recompensa verificável (não um modelo externo)
  4. O modelo aprende a preferir as respostas que pontuaram melhor dentro do grupo
from trl import GRPOTrainer, GRPOConfig

config = GRPOConfig(
    output_dir="./catalog-reviewer",
    num_generations=4,
    max_new_tokens=512,
    learning_rate=5e-7,
    per_device_train_batch_size=2,
    gradient_accumulation_steps=8,
)

trainer = GRPOTrainer(
    model=model,
    config=config,
    reward_funcs=[catalog_accuracy_reward, format_reward],
    train_dataset=catalog_dataset,
)

trainer.train()

O DeepSeek R1 já usava GRPO. O que mudou é que agora a TRL 0.14 integra tudo nativamente com vLLM para rollouts, e frameworks como o ART (Agent Reinforcement Trainer) permitem aplicar GRPO em qualquer pipeline Python.

O custo de treinamento? Com QLoRA numa única H100 (aluguel de ~US$ 3/hora), o fine-tune inteiro leva algumas horas. Daí os US$ 500 de custo total que a FermiSense reportou.

Quando fine-tune vale a pena (e quando não vale)

Eu já vi empresa gastar US$ 20 mil em fine-tune para uma task que um prompt de 3 linhas resolvia. Então vamos ser honestos sobre quando essa estratégia faz sentido.

Fine-tune compensa quando:

  • Você processa mais de 10 a 20 milhões de tokens por mês
  • A tarefa é repetitiva e bem definida (classificação, extração, formatação)
  • Você tem dados proprietários que diferenciam seu negócio
  • Latência importa (APIs frontier adicionam 1 a 2 segundos por request)
  • Compliance exige que os dados não saiam da sua infra

Fine-tune NÃO compensa quando:

  • A tarefa muda toda semana
  • Você não tem pelo menos 1.000 exemplos rotulados
  • O volume é baixo (menos de 100 mil tokens/mês)
  • Você precisa de capacidade generalista (suporte ao cliente, chatbot open-domain)

O crossover econômico costuma acontecer em torno de 10 a 20 milhões de tokens mensais. Abaixo disso, a API frontier é mais pragmática. Acima de 100 milhões, usar API frontier é queimar dinheiro de forma injustificável.

O cenário real: como a FermiSense fez

O caso da FermiSense é interessante porque eles não começaram querendo fine-tunar. Começaram testando os melhores modelos frontier do mercado numa tarefa específica: revisar listagens de catálogo de e-commerce e classificar atributos como categoria, marca, condição e preço.

Primeiro, otimizaram prompts. Testaram Claude, GPT-5.5, Gemini 3.1 Pro. Cada modelo com dezenas de variações de prompt, few-shot, chain-of-thought. O melhor resultado? 76,9% da pontuação máxima. E todos os frontiers ficaram em torno desse patamar, sem importar quanto prompt engineering jogassem no problema.

O teto existia porque modelos generalistas não entendem a semântica específica de um catálogo de milhões de SKUs. Eles não sabem que “recondicionado grau A” e “refurbished grade A” significam a mesma coisa no contexto daquele marketplace, ou que “kit com 3” afeta a precificação de uma forma específica.

Aí veio o GRPO. Com exemplos rotulados do próprio catálogo como função de recompensa, o Qwen 3.5-9B aprendeu essas nuances em algumas horas de treino. O resultado foi 87,3%, quebrando o teto que nenhum frontier conseguiu ultrapassar.

A era dos modelos especialistas

Laurence Seldo, ex-CTO do npm, escreveu em abril que 2026 é o ano dos modelos fine-tunados. O argumento: o salto de performance entre gerações de modelos frontier está diminuindo. De GPT-2 para GPT-3, a diferença era absurda. De GPT-3 para GPT-4, menor. De GPT-4 para GPT-5, quase imperceptível em muitas tarefas.

Isso cria uma oportunidade estratégica. Se o modelo generalista de US$ 75 por milhão de tokens (output do Claude Opus) entrega 88% em classificação, e um modelo de US$ 0,10 entrega 96%, a decisão deveria ser óbvia. Mas muita empresa ainda opera no piloto automático do “use o melhor modelo disponível”, sem questionar se “melhor” significa “mais caro”.

O Cursor, por exemplo, já faz isso. Usa múltiplos modelos fine-tunados pequenos para diferentes tipos de interação: um para autocomplete, outro para edição de arquivo, outro para chat. Cada um otimizado para sua função. O resultado é uma experiência fluida a um custo que viabiliza o produto.

A Airbnb também entrou nessa. Ao invés de depender exclusivamente de um único modelo frontier, fine-tunaram modelos menores para tarefas específicas da plataforma, como moderação de anúncios e sugestão de preços.

Como começar: o guia prático

Se você quer testar essa abordagem na sua empresa, o caminho em 2026 ficou surpreendentemente acessível.

Passo 1: escolha o modelo base

Para a maioria das tarefas, estes são os melhores candidatos:

  • Qwen 3.5-9B: equilíbrio ideal entre performance e custo. Roda numa RTX 4090 com quantização
  • Llama 4-8B: boa alternativa, ecossistema maduro
  • Gemma 3-9B: forte em tarefas de raciocínio

Passo 2: prepare os dados

Você precisa de, no mínimo, 1.000 exemplos rotulados. Ideal: 5.000 a 10.000. O formato depende da técnica:

  • SFT (Supervised Fine-Tuning): pares de instrução/resposta
  • DPO: pares de resposta preferida vs rejeitada
  • GRPO: problemas com respostas verificáveis (a função de recompensa calcula o score)

Passo 3: fine-tune com QLoRA + GRPO

# Instalar dependências
pip install trl>=0.14 unsloth vllm

# QLoRA reduz memória de GPU drasticamente
# Uma H100 de 80GB treina modelos de 9B confortavelmente
# Uma RTX 4090 de 24GB funciona com quantização 4-bit

O combo QLoRA + GRPO é o sweet spot de 2026. QLoRA reduz o consumo de memória para que você treine na sua própria GPU. GRPO dispensa modelo de recompensa externo. O resultado é um pipeline end-to-end que roda numa única máquina.

Passo 4: avalie antes de deployar

Compare seu modelo fine-tunado com o frontier na sua task específica. Não em benchmarks genéricos. Na sua task, com seus dados, nos seus edge cases. Se não superar, o fine-tune não valeu a pena para esse caso.

Passo 5: sirva com eficiência

Para servir o modelo em produção, vLLM é o padrão. Com continuous batching e PagedAttention, um modelo de 9B serve milhares de requests por segundo numa única GPU.

# Servir com vLLM
vllm serve ./catalog-reviewer \
  --tensor-parallel-size 1 \
  --max-model-len 4096 \
  --gpu-memory-utilization 0.9

O mito do “modelo mais inteligente”

Existe uma falácia que permeia a indústria de IA: a de que o modelo mais inteligente é sempre o melhor para qualquer tarefa. Isso confunde inteligência geral com competência específica.

Um cirurgião cardíaco é mais “inteligente” que um eletricista? Depende do contexto. Se o seu problema é um curto no quadro de força, o eletricista resolve em 20 minutos; o cirurgião não sabe nem por onde começar.

Modelos de IA funcionam igual. O Claude Opus 5 é extraordinário para raciocínio complexo, escrita criativa e análise multi-etapa. Mas para classificar 40 milhões de produtos por dia num catálogo de e-commerce? Um modelo 100x menor, treinado especificamente para isso, faz melhor e por uma fração do custo.

O problema é que vender “use nosso modelo gigante para tudo” é mais lucrativo do que dizer “fine-tune um modelo pequeno e cancele sua assinatura”. Por isso, quem mais advoga por modelos especialistas são empresas independentes e pesquisadores, não os labs que vendem API.

Os riscos que ninguém menciona

Seria desonesto não falar dos problemas.

Fine-tune cria lock-in técnico. Seu modelo treinado funciona para a tarefa de hoje. Se a tarefa muda, você precisa retreinar. Se os dados mudam (novo formato de catálogo, nova categoria de produto), o modelo degrada.

Também existe o risco de overfitting. Um modelo que memorizou seus 10.000 exemplos pode falhar catastroficamente num edge case que não estava no treinamento. Modelos frontier, por terem sido treinados em trilhões de tokens, são mais robustos a inputs inesperados.

E tem a questão de manutenção. API frontier é “alguém cuida disso pra você”. Fine-tune é “você cuida de tudo”: monitoramento, retreino, infraestrutura, fallback. Pra equipes pequenas sem expertise em ML, isso pode ser mais caro do que a economia sugere.

A recomendação honesta? Se você processa menos de 10 milhões de tokens por mês e não tem alguém que entende de ML no time, fique com a API. O custo extra é basicamente um seguro contra complexidade operacional.

O que vem pela frente

A tendência é clara: modelos frontier vão se tornar commodities (já estão se tornando), e o diferencial competitivo vai migrar para quem consegue especializar modelos nos seus dados proprietários.

As ferramentas já estão prontas. GRPO na TRL 0.14, QLoRA no Unsloth, servindo com vLLM. O custo de entrada caiu de milhões para centenas de dólares. E os provedores de inferência (Together AI, Fireworks, Groq) oferecem hosting de modelos customizados a preços que fazem API frontier parecer extravagância.

A pergunta que deveria estar na pauta de toda reunião de arquitetura: “estamos pagando por inteligência geral quando precisamos de competência específica?”

Se a resposta for sim, US$ 500 e uma tarde de trabalho podem mudar completamente a equação.


Fonte de inspiração: When Machines Take The Wheel, FermiSense

Leave a Reply

Your email address will not be published. Required fields are marked *

Related Posts