Uma comparação gerada de dois cartões, com o cabeçalho "UserRepGen-4B vs Qwen 3.8 - uma geração atrás de propósito", sob o título "Construído sobre a base de fevereiro, mirando o carro-chefe de agosto". O cartão da esquerda, UserRepGen-4B, lista o backbone Qwen3.5-4B de fevereiro de 2026, treinado de julho a agosto de 2026, enviado em 14 de outubro de 2026 sem anúncio, custo de execução na sua GPU e 9,1 GB de pesos, vantagem alegada de 4,95 contra o GPT-5.5 com 3,90. O cartão da direita, Qwen 3.8, lista geração de agosto de 2026, disponibilizado para membros nas versões Max, 27B e Flash, contexto de 1M de tokens no Max, custo de execução de US$ 2,00 e US$ 6,00 por 1M no Max, benchmark próprio de 90,3 no LiveCodeBench v6. Um rodapé diz "Números da Microsoft não auditados; números do Qwen reportados pelo fornecedor." O logotipo da OrcaRouter está composto no canto inferior direito.
Guides & Insights

RepGen-4B vs Qwen 3.8: Um Fine-Tune 4B de Sete Meses de Idade Contra o Atual Modelo Principal da Alibaba

Autor

Alistair Wren

Data de publicação

Modelos mais recentes · 20Ver todos os modelos →
Benchmarks: Artificial Analysis · atualizado diariamente
Voltar para todas as publicações

Comece pelo fato que torna esta combinação estranha. microsoft/UserRepGen-4B, publicado em 14 de outubro de 2026 sem anúncio, é um fine-tune de Qwen3.5-4B — o checkpoint de fevereiro de 2026, uma geração inteira atrás do modelo com o qual está sendo comparado aqui. Qwen 3.8 é a geração de agosto de 2026 da Alibaba, e seus membros servidos incluem Qwen3.8-Max, o carro-chefe a US$ 2,00 por milhão de tokens de entrada e US$ 6,00 por milhão de saída em um contexto de um milhão de tokens, Qwen3.8-27B a US$ 0,33 e US$ 2,40 em 262.144 posições, e Qwen3.8-Flash a US$ 0,15 e US$ 0,47. A Microsoft olhou para essa família e voltou uma geração para escolher uma base de 4B. Depois, publicou uma tabela mostrando o modelo resultante superando o GPT-5.5 na única coisa que ele faz. Essa combinação é o artigo inteiro: o que um fine-tune direcionado compra que um carro-chefe mais novo não compra, e quanto custa conseguir isso.

Primeiro, a que se refere o nome "Qwen 3.8"

Vale a pena esclarecer isto antes de qualquer comparação, porque o nome da família abrange vários artefatos muito diferentes e os preços variam mais de treze vezes. Os três membros atendidos são os que importam para uma decisão:

• Qwen3.8-Max — o carro-chefe, multimodal nativo em texto, imagem e vídeo, contexto de 1M de tokens, disponibilizado em três formatos de transmissão, incluindo um compatível com Anthropic. O nível premium, para quando a precisão em problemas difíceis vale mais do que o custo.

• Qwen3.8-27B — o modelo denso de pesos abertos sob Apache 2.0, com contexto de 262.144 tokens e entrada de texto, imagem e vídeo. A própria ficha técnica da Alibaba informa 90,3 no LiveCodeBench v6, 89,2 no GPQA Diamond, 84,3 no OSWorld-Verified e 79,0 no QwenSWEBench — valores informados pelo fornecedor, não reproduzidos de forma independente.

• Qwen3.8-Flash — a faixa de volume, contexto de 1M de tokens, com preço para a tarefa curta executada um milhão de vezes. Há também um Qwen3.8-Max (0902) snapshot datado no catálogo, pelas mesmas tarifas, que você fixa quando precisa de comportamento reproduzível em vez da fronteira móvel.

Nada disso é novidade, e esta página não está noticiando um lançamento do Qwen. A geração tem cinco meses. Ela está aqui porque é o lado mais novo, maior e com melhores benchmarks da comparação, e porque a afirmação interessante só faz sentido diante de algo tão forte.

A generated two-column scoreboard headed "UserRepGen-4B vs Qwen 3.8 - the scoreboard", titled "Five months, one generation, and a very different kind of release". The UserRepGen-4B column reads: released 14 October 2026 quietly; reachable as a 9.1 GB download; who serves it nobody on either side; context 8,192 prompt tokens; price not applicable, not hosted; best result 4.95 fidelity on its own eval. The Qwen 3.8 column reads: released 3 and 13 August 2026; reachable as hosted API plus open weights; who serves it the vendor API and third parties; context 1M tokens on Max; price $2.00 and $6.00 per 1M on Max; best result 90.3 LiveCodeBench v6. A footer reads "Microsoft figures unaudited; Qwen figures vendor-reported." The OrcaRouter logo is composited bottom-right.

A afirmação, formulada com precisão

O cartão de modelo da Microsoft relata uma avaliação de fidelidade em 700 conversas reservadas, pontuadas de 1 a 10 por um juiz LLM, na qual cada gerador de representação é conectado ao mesmo loop de simulação:

• Qwen3.5-4B, o backbone intocado — 3,41 melhor de 1, 4,42 melhor de 3.

• GPT-5.5, instruído com um prompt padrão para descrever o usuário — 3,90 e 4,90.

• UserRepGen-4B, após ajuste fino supervisionado online por meio de destilação retrospectiva — 4,95 e 6,02.

Todos os números são da própria Microsoft, avaliados pelo GPT-5.4 mini, e nada disso foi reproduzido fora do laboratório. Leia isso como uma alegação direcional, não como um resultado consolidado. Mas a direção é inequívoca e não se trata de contagem de parâmetros: o método de treinamento melhorou o backbone em 1,54 pontos no best-of-1, e superou um generalista de fronteira no caminho. A leitura pretendida não é "modelos pequenos superam modelos grandes" — é que um modelo base de 4B de fevereiro, ajustado intensamente para um único comportamento restrito, pode superar um modelo muito maior que foi meramente solicitado a executar esse comportamento.

O Qwen3.8-Max não está nessa tabela. Presumivelmente, teria um desempenho melhor do que o GPT-5.5, porque é um modelo geral mais forte. Ainda assim, continuaria tentando adivinhar o comportamento, porque nada em seu treinamento foi otimizado para isso.

{{1}}Por que uma base com sete meses de idade foi a escolha certa

A headless-browser capture of the Hugging Face model card for Qwen/Qwen3.5-4B, showing the Qwen organisation, the Image-Text-to-Text pipeline tag, the qwen3_5 architecture tag, and the opening of the card describing the repository as post-trained model weights and configuration files in the Hugging Face Transformers format, compatible with Transformers, vLLM, SGLang and KTransformers.

A lacuna geracional parece um erro até você descobrir do que o ajuste fino realmente precisa em seu backbone. Ele precisa de um modelo que seja aproximadamente fluente, barato de executar e estável o suficiente para que um LoRA de rank 64 consiga alterá-lo sem destruí-lo. Ele não precisa de raciocínio de fronteira, porque a tarefa não é raciocínio — é descrever uma conversa que lhe foi entregue.

Dois detalhes no cartão confirmam essa leitura. O primeiro é o teto de saída: 1.024 tokens para a representação, contra 8.192 para a conversa. O segundo é o orçamento de treinamento — julho a agosto de 2026, dois meses — e o fato de que os dois métodos mais pesados perderam. O OPSD marcou 4,46/5,60 e o GRPO, 3,57/4,59, ambos abaixo do ajuste fino supervisionado simples, de 4,64/5,68. Quando um método barato supera dois caros, o gargalo nunca foi a capacidade do backbone. Mudar para uma base de topo de linha de 2026 teria comprado um modelo que custa mais por passada para fazer o mesmo trabalho com o mesmo teto.

Há um custo nessa escolha, e o card é franco sobre isso em vez de escondê-lo. Como a torre de visão veio junto com o checkpoint pai, o modelo é carregado via AutoModelForImageTextToText e traz caminhos de código de imagem e vídeo que nunca usa — a entrada de imagem e vídeo é explicitamente não suportada nesta versão. Você herda a bagagem da arquitetura junto com a fluência.

A aritmética dos custos, que não sai como as pessoas esperam

O reflexo é que a inferência local é mais barata. Na escala para a qual este modelo foi projetado, normalmente não é, e fazer as contas com honestidade muda a decisão. Considere um lote de 700 conversas — o mesmo tamanho da própria avaliação da Microsoft — a cerca de 2.000 tokens de prompt e 400 tokens de saída por chamada.

• Com o Qwen3.8-27B a $0,33 e $2,40 por milhão: cerca de $1,13 no gasto total de tokens para todo o lote.

• Via Qwen3.8-Max a $2,00 e $6,00: cerca de $4,48.

Em contrapartida, o UserRepGen-4B custa um download de 9,1 GB, uma GPU com memória suficiente para mantê-lo em bfloat16 e o trabalho de engenharia para conectar uma classe Python. A Microsoft relata que ele foi servido com vLLM em hardware H100, A100, RTX A6000 e B200, e observa que a inferência em CPU exige float32 e "substancialmente mais memória do que o arquivo de pesos de aproximadamente 9,1 GB". Se a única consideração fosse dólares por token, o acesso via API a um modelo mais forte vence nesse volume, e não é por pouco.

O que significa que as verdadeiras razões para executar o UserRepGen-4B você mesmo são aquelas que não aparecem numa tabela de preços: as conversas que você está a alimentá-lo. A própria ficha técnica do modelo diz para processar apenas conversas que você está autorizado a processar, para minimizar primeiro as informações identificadoras, e que as representações não são dados anonimizados — as descrições de comportamento do modelo identificam uma pessoa entre quatro candidatos em 51,02% das vezes, melhor do que as conversas brutas que resumem, em 44,22%. Um componente que transforma conversas em perfis portáteis legíveis por humanos é algo que você pode querer manter dentro da sua própria rede, independentemente do que custaria uma chamada de API.

Onde uma camada de roteamento se encaixa em um pipeline como este

Esta é uma configuração de dois modelos com mais frequência do que uma de um modelo único: o gerador de representação no seu próprio hardware, e um modelo geral fazendo o lado do assistente, o julgamento ou o ciclo de avaliação em torno dele. A segunda metade é a parte que funciona por meio de uma API.

Todos os três membros servidos do Qwen 3.8 estão no OrcaRouter ao preço de tabela do provedor, sem nenhum acréscimo — $2.00 e $6.00 para o Max, $0.33 e $2.40 para o 27B, $0.15 e $0.47 para o Flash — em uma única chave, com failover automático entre provedores para que uma chamada de juiz em um loop de avaliação não morra por causa de um único upstream. Se você estiver percorrendo um lote de centenas de conversas através de vários simuladores e juízes, esse failover importa mais do que a taxa por token, porque uma execução que morre na conversa 400 desperdiça as 399 anteriores. A DSL de roteamento permite compor o assistente e o juiz em uma única chamada, em vez de encadear duas. O que não fazemos é servir o UserRepGen-4B: nosso catálogo não tem entrada para ele, e nada aqui deve ser interpretado como uma declaração de disponibilidade para o checkpoint da Microsoft.

A headless-browser capture of OrcaRouter's own model page for qwen/qwen3.8-max, showing the Qwen3.8 Max heading, Vision, Tools, JSON and Reasoning badges, the byline "by Qwen - 2026-08-03", the description of it as Alibaba's flagship positioned against GPT-5.5, Claude Opus 4.7 and Gemini 3.1 Pro, the three supported wire formats, prices of $2.00 and $6.00 per million tokens, and a p50 TTFT of 4.18 seconds.

A decisão, sem hesitação

Se você quer um modelo geral que raciocina, programa, lê imagens e comporta um milhão de tokens, nada neste artigo argumenta contra o Qwen3.8-Max — o UserRepGen-4B não consegue fazer nada disso, e a comparação com um modelo de ponta não é uma em que ele tenha entrado. Se você quer um simulador de usuário condicionado ao comportamento real de conversação, nenhum dos membros do Qwen 3.8 foi treinado para isso tampouco, e a escolha é entre um pequeno ajuste fino local com uma vantagem medida e um grande modelo de API sem nenhuma vantagem.

A questão em aberto é a mesma que paira sobre todo o lançamento: não há artigo. O card diz que a citação está "pendente de confirmação", uma linha sobre o repositório ser privado ainda continua na seção de uso depois de o repositório se tornar público, e todos os números da tabela de fidelidade remontam ao próprio avaliador de um laboratório. A Microsoft criou um modelo que supera o baseline mais forte contra o qual foi testado. Saber se ele supera o seu baseline é algo que só uma avaliação que você mesmo executar pode responder.

Um fine-tune de sete meses avaliado em relação a um modelo de ponta atual também é um bom lugar para perguntar o que já falhou antes: os incidentes de IA documentados e as falhas de agentes em torno de modelos dessa classe estão reunidos no OrcaRouter AI Incident Archive, onde cada entrada traz suas próprias fontes, gravidade, grau de confiança e sinalizador de contestação.

Comparados neste artigo3

Detectado a partir deste artigo · Benchmarks: Artificial Analysis · atualizado diariamente