Intern-S2-Mobius-1
Engineering & Research

Intern-S2-Mobius: O Modelo de 35B Que Separa Conhecimento de Raciocínio

Autor

Jim Song

Data de publicação

Modelos mais recentes · 20Ver todos os modelos
Benchmarks: Artificial Analysis · atualizado diariamente
Voltar para todas as publicações

A equipe InternLM do Laboratório de IA de Xangai publicou silenciosamenteIntern-S2-Mobius, um modelo fundacional de pesos abertos com 35B de parâmetros que faz algo que quase nenhum outro modelo lançado faz: ele para de armazenar conhecimento dentro de suas camadas. Em vez do arranjo padrão de Transformers — onde cada camada carrega seu próprio bloco feed-forward cheio de fatos memorizados — o Mobius extrai todo esse conhecimento para uma única Memória globalmente compartilhada e permite que um pequeno número de Raciocinadores a consulte repetidamente. O benefício declarado não é uma pontuação mais alta em benchmarks. É velocidade: as mesmas respostas em aproximadamente um terço a um quinto dos tokens de raciocínio, e até 4,6x a taxa de transferência de requisições. Este guia explica o que o Mobius realmente é, o que seu arquivo de configuração revela que o model card não revela, o que os benchmarks publicados mostram linha por linha — incluindo as duas linhas em que ele perde — onde a alegação de "4x mais rápido" se sustenta e onde ela se desfaz, e quem deveria realmente se importar.

Nota de precisão: todos os números abaixo provêm da própria ficha técnica do InternLM, de seus números publicados de desempenho e eficiência, de seu guia de implantação e dos arquivos de configuração do modelo no Hugging Face. Não há avaliação independente de terceiros do Intern-S2-Mobius até o momento da redação deste texto — ele não está listado em nenhum ranking independente, não está implantado por nenhum provedor de inferência, e seu contador de downloads ainda está em zero. Trate todos os números comparativos como divulgados pelo fornecedor até que alguém os reproduza. Especificações e código de um modelo tão novo mudam rapidamente; verifique antes de construir.

TL;DR. O Intern-S2-Mobius é um modelo fundacional multimodal de 35B de parâmetros, licenciado sob Apache 2.0, continuamente pré-treinado a partir do Qwen3.5-35B e depois pós-treinado com SFT e aprendizado por reforço. Sua novidade é arquitetural: o design Mobius-v0 substitui o armazenamento de conhecimento feed-forward limitado por camadas por uma Memória globalmente compartilhada de 2,560 especialistas, consultada por quatro blocos Reasoner empilhados que podem acessar conhecimento fora de sua própria profundidade (uma Conexão Residual Reversa) e refinar os estados ocultos por meio de iteração latente recorrente antes da decodificação (Raciocínio Latente Dinâmico). Na avaliação do próprio InternLM, ele supera o baseline Qwen3.5-35B do qual foi construído em sete dos nove benchmarks gerais (média de 67.88 contra 65.05) e o destrói em tarefas científicas (52.14 contra 18.20), ao mesmo tempo em que produz trilhas de raciocínio cerca de 1.5x mais curtas em média — 4.6x mais curtas no MMLU Pro, 5.0x mais curtas no GPQA Diamond. É dessa compressão de trilhas que vem o ganho de throughput: 2.9x no batch 16, subindo para 4.6x no batch 256. As ressalvas são reais: ele perde nos dois benchmarks de raciocínio mais difíceis (HLE e UGD hard), o ganho de throughput desaparece em grande parte na matemática de competição, e ninguém fora do laboratório verificou nada disso.

Principais conclusões

• Lançamento com foco em arquitetura: Mobius-v0 desacopla vetores de conhecimento de operadores de raciocínio — uma Memória compartilhada de 2.560 especialistas servindo quatro blocos Reasoner, em vez de 40 camadas, cada uma acumulando seu próprio conhecimento FFN.

• Eficiência, não inteligência, é o apelo: o comprimento médio da saída cai cerca de 1,5x, e a taxa de transferência de requisições aumenta de 2,9x no batch 16 para 4,6x no batch 256 em relação à linha de base Transformer.

• Ele genuinamente supera seu próprio modelo base: 67,88 vs 65,05 de média em tarefas gerais, vencendo MMLU Pro (89,05 vs 85,31), AIME 2026 (95,31 vs 92,08) e HMMT 2026 (85,51 vs 78,50).

• Mas perde onde a deliberação é mais importante: HLE 19.11 vs 22.40 e UGD hard 73.02 vs 78.02 — as duas avaliações mais difíceis do conjunto, ambas vencidas pelo Transformer simples.

• O salto nas ciências é o maior resultado individual: Biology-Instructions 51,40 vs 3,77, Mol-Instructions 45,73 vs 21,70, MolecularIQ 59,29 vs 29,13.

• Aberto, mas não disponível: pesos Apache 2.0 no Hugging Face, nenhum provedor de inferência o hospeda, ~73 GB de pesos bfloat16 — auto-hospedagem é atualmente a única forma de executá-lo.

O que Intern-S2-Mobius realmente é

Intern-S2-Mobius é um modelo fundamental de 35B publicado pela internlm, a organização Hugging Face por trás da série Intern do Shanghai AI Laboratory. Os pesos foram disponibilizados no Hugging Face em 29 de julho de 2026, e o repositório GitHub correspondente — README, guia de implantação e um relatório técnico completo em PDF — foi tornado público em 5 de agosto de 2026. Ele é lançado sob a licença Apache 2.0, que é praticamente a mais permissiva possível para pesos abertos: uso comercial, modificação e redistribuição são todos permitidos.

Não é um fine-tune. É um pré-treinamento contínuo com cirurgia de arquitetura. A InternLM pegou o Qwen3.5-35B — o modelo mixture-of-experts de 35B com pesos abertos da Alibaba, lançado em 4 de março de 2026 — reestruturou a forma como o modelo armazena e acessa o conhecimento e continuou pré-treinando o resultado; depois, aplicou fine-tuning supervisionado e aprendizado por reforço por cima. Essa linhagem importa para interpretar os benchmarks: toda comparação que a InternLM publica é Mobius contra o modelo exato do qual ela foi derivada, que é a ablação mais limpa possível da mudança de arquitetura e também, convenientemente, a comparação mais provável de favorecê-la.

O modelo é multimodal. O Hugging Face o classifica como image-text-to-text, e a configuração confirma um codificador de visão completo, além do processamento de tokens de vídeo. A julgar pelo que acompanha os pesos, ele também é claramente voltado para a ciência — mais sobre isso abaixo.

A arquitetura Mobius, em linguagem simples

Um Transformer convencional intercala duas tarefas em cada camada. A atenção move informações entre tokens; a rede feed-forward (ou, em um modelo de mistura de especialistas, um banco de FFNs especialistas) armazena conhecimento. Como a FFN fica dentro da camada, o conhecimento que ela guarda só é acessível naquela profundidade. Um fato aprendido na camada 30 não pode ser consultado pelo raciocínio que ocorre na camada 5. A informação flui para frente, camada por camada, e esse é o único caminho.

Mobius quebra esse vínculo. InternLM descreve três consequências.

Separação entre conhecimento e raciocínio. O armazenamento de FFN vinculado a camadas é substituído por uma Memory globalmente compartilhada. Em vez de 40 camadas, cada uma possuindo uma fatia do conhecimento do modelo, há um único pool que cada estágio de raciocínio pode acessar. O argumento do InternLM é que isso melhora a compressão do conhecimento — os mesmos fatos não precisam ser reaprendidos de forma redundante em múltiplas profundidades — e dá a cada Reasoner um espaço de conhecimento muito mais amplo do que o FFN de uma única camada poderia oferecer.

Conexão Residual Reversa. Como a Memória é compartilhada, estágios de raciocínio superficiais e profundos alcançam o mesmo repositório. O acesso ao conhecimento não flui mais estritamente para a frente. Um estágio superficial pode puxar algo que, em uma pilha padrão, só estaria disponível trinta camadas depois. A afirmação da InternLM é que isso permite que o modelo componha conhecimento entre profundidades de forma mais flexível e, crucialmente, sintetize informações úteis em menos etapas de raciocínio. Essa última parte é toda a tese do lançamento.

Raciocínio Latente Dinâmico. Em vez de externalizar cada etapa de deliberação como tokens visíveis de cadeia de pensamento, a Mobius refina seus estados ocultos contínuos por meio de iteração latente recorrente antes de decodificar qualquer coisa. Parte do "pensamento" acontece no espaço de representação interna do modelo, em vez de no texto gerado, e a quantidade dessa computação interna é alocada dinamicamente por token. O efeito prático é que o modelo precisa escrever menos palavras para chegar à mesma conclusão — e, como a geração é autorregressiva e serializada, escrever menos palavras é a maneira mais direta de tornar um modelo de raciocínio mais rápido.

Em conjunto, a proposta é um modelo de raciocínio que pensa mais e digita menos.

Intern-S2-Mobius-2

O que o arquivo de configuração revela

O cartão do modelo descreve a arquitetura em prosa. O code>config.json/code> torna tudo concreto, e contém vários números que valem a pena conhecer.

Quatro Reasoners em 40 camadas. A configuração de texto declara 40 camadas ocultas, mas apenas quatro blocos. As 40 camadas são organizadas em quatro estágios de Reasoner que iteram contra a Memória compartilhada, em vez de quarenta unidades independentes de conhecimento e atenção.

2.560 especialistas. Esta é a Memória compartilhada tornada literal. Mobius carrega 2.560 especialistas com 8 ativados por token e um tamanho intermediário minúsculo de 512 por especialista, além de um especialista compartilhado. Para efeito de escala, seu irmão Intern-S2-Preview usa 256 especialistas. Um pool dez vezes maior de especialistas muito menores é exatamente como "um armazenamento global de conhecimento em vez de FFNs por camada" se parece quando você escreve isso como uma configuração.

35B na caixa, ~36B no disco, ~3B ativos. A ficha do modelo diz 35B; o leitor de safetensors do Hugging Face relata 36B parâmetros; o índice de pesos totaliza 72,96 GB em bfloat16, o que dá cerca de 36,5B. O guia de implantação é o mais preciso: ele se refere ao lançamento como 30B-A3B, um modelo — cerca de 3B parâmetros ativos por token. Como em qualquer MoE esparso, você paga pelo conjunto completo de pesos na memória e obtém computação de modelo pequeno por token.

Atenção híbrida, 3:1. A lista de camadas alterna três camadas de atenção linear para uma camada de atenção completa, até o fim — dez camadas de atenção completa em 40. A atenção linear evita que a memória de contexto longo e o custo computacional explodam; as camadas periódicas de atenção completa preservam a recuperação exata que a atenção linear pura abandona. As camadas lineares usam um kernel de convolução de largura 4 e um estado SSM em float32, a receita agora padrão no estilo gated-delta.

Contexto de 256K.O número máximo de embeddings de posição é 262.144. Observe a diferença entre o que a arquitetura suporta e como ela foi avaliada: a InternLM executou seus benchmarks de texto em 128K e em 64K no MMLU Pro, SimpleQA e HLE. Um teto de 256K não é o mesmo que 256K de qualidade validada.

Uma cabeça integrada de predição multi-token. Há um módulo MTP de uma camada com seus próprios 256 especialistas. Isso não é decoração — o guia de implantação recomenda executar com decodificação especulativa MTP e quatro tokens de rascunho, então parte da história de velocidade no mundo real é decodificação especulativa, não apenas arquitetura.

Uma verdadeira torre de visão.Um codificador de visão com 27 camadas e 1152 unidades ocultas, com tamanho de patch 16, fusão espacial 2x2 e patch temporal para vídeo, projetando no fluxo de texto de 2048 dimensões com RoPE multimodal intercalado. Imagens e vídeo entram, texto sai.

• Outros detalhes para os curiosos: 16 cabeças de atenção com dimensão de 256, 2 cabeças chave-valor (atenção agressiva de consulta agrupada), saídas de atenção gated, fator rotativo parcial de 0.25, RoPE theta de 10 milhões e vocabulário de 251.392 tokens.

Os benchmarks, linha por linha

A InternLM foi avaliada com o OpenCompass e publicou uma comparação única: Intern-S2-Mobius-35B contra Qwen3.5-35B, o modelo a partir do qual foi continuamente pré-treinada. Nove benchmarks gerais, três científicos.

Em tarefas gerais, Mobius vence sete de nove. MMLU Pro — conhecimento amplo de múltiplos domínios com distratores mais difíceis que o MMLU original — vai de 89.05 para 85.31, um ganho de 3.7 pontos e o resultado de conhecimento mais claro do conjunto. GPQA Diamond, perguntas de ciência de nível de pós-graduação escritas para serem à prova de Google, é essencialmente um empate em 80.81 contra 80.24. IMO Bench, matemática de nível olímpico, vai de 81.25 para 77.50. AIME 2026, o American Invitational Mathematics Examination, vai de 95.31 para 92.08. HMMT 2026, o Harvard-MIT Mathematics Tournament, é a maior variação matemática com 85.51 contra 78.50. AMO vai de 58.00 para 50.00. E SimpleQA — recordação factual de forma curta, o benchmark que mede mais diretamente se um modelo realmente sabe as coisas — salta de 21.39 para 28.90, uma melhoria relativa de 35% que é a melhor evidência para o argumento da InternLM de que "memória compartilhada comprime conhecimento melhor".

Depois, as duas perdas, e são elas as linhas interessantes. UGD hard vai na direção oposta: 73,02 para Mobius contra 78,02 para a linha de base, um déficit de cinco pontos. E HLE — Humanity's Last Exam, a avaliação geral mais difícil em uso amplo, onde os modelos de fronteira ainda pontuam na casa dos dez e dos vinte — é 19,11 contra 22,40. O Transformer simples vence por 3,3 pontos no benchmark especificamente projetado para exigir o máximo de raciocínio.

Esse padrão não é ruído e não está oculto: a InternLM o publicou. A leitura mais plausível é que o raciocínio latente é uma compressão, e a compressão é com perdas na cauda. Internalizar a deliberação em estados ocultos contínuos funciona lindamente quando a deliberação é pesada em recuperação ou segue uma forma familiar — o que descreve MMLU Pro, SimpleQA e a maior parte da matemática competitiva. Em problemas que genuinamente exigem longas cadeias de pensamento exploratórias e de correção de erros, o rastreamento explícito token a token ainda parece valer o seu custo. A média geral — 67,88 contra 65,05 — é uma vitória real, mas é uma média que esconde uma troca, não uma melhoria uniforme.

Os resultados científicos apresentam uma diferença em outra escala. Biology-Instructions vai de 3.77 a 51.40. Mol-Instructions, que cobre compreensão e geração molecular, vai de 21.70 a 45.73. MolecularIQ vai de 29.13 a 59.29. A média é de 52.14 contra 18.20. Números como 3.77 subindo para 51.40 não são vitórias de arquitetura; são a assinatura de treinamento direcionado por domínio em tarefas que o modelo base simplesmente nunca foi ensinado a fazer. O Qwen3.5-35B obter menos de 4% em Biology-Instructions significa que ele não entende o formato da tarefa, não que ele seja ruim em biologia. Leia essas três linhas como "a InternLM adicionou uma especialização científica", o que é genuinamente valioso e é exatamente o propósito da linha Intern-S — apenas não o atribua à arquitetura Mobius.

Onde "4x mais rápido" é real, e onde não é

A afirmação de eficiência é a razão pela qual este modelo existe, então ela merece uma leitura cuidadosa. A manchete da InternLM é "aceleração de inferência de ponta a ponta de quase 4x". O valor de throughput publicado é mais informativo do que a manchete, e mais honesto.

Medido como vazão de requisições em função do tamanho do lote, com média entre os benchmarks, o Mobius supera a baseline do Transformer em 2,9x no lote 16 e 4,6x no lote 256. A diferença aumenta com o tamanho do lote, o que é esperado quando a vantagem vem de gerar menos tokens por requisição: quanto mais requisições você agrupa, mais as etapas de decodificação economizadas se acumulam. O destaque "quase 4x" é um ponto médio de um intervalo, não uma constante.

Detalhando por benchmark, o quadro fica mais nítido. Em MMLU Pro e GPQA Diamond, Mobius é dramaticamente mais rápido em todos os tamanhos de lote — as curvas de throughput se separam imediatamente e continuam divergindo. Em IMO Bench, ele lidera consistentemente, mas de forma modesta. Em AIME 2026 e HMMT 2026, o Transformer de base é na verdade mais rápido em tamanhos de lote intermediários, com Mobius assumindo a liderança apenas no lote 256. Na matemática de competição mais difícil, a vantagem de throughput é nula ou pior em grande parte da faixa operacional útil.

Por quê? Porque o throughput acompanha quase perfeitamente a compressão do trace. O comprimento médio da saída nos benchmarks cai cerca de 1,5x, de aproximadamente 20.400 tokens para aproximadamente 13.200. Mas essa média abrange uma faixa enorme: 4,6x mais curto no MMLU Pro (cerca de 1.100 tokens contra 5.150) e 5,0x mais curto no GPQA Diamond (cerca de 2.600 contra 12.900), contra apenas 1,4x no IMO Bench, 1,5x no AIME 2026, e 1,2x no HMMT 2026. Onde o modelo consegue comprimir seu raciocínio, ele voa. Onde o problema exige 24.000 tokens de derivação de qualquer maneira, ele não consegue, e as sobrecargas da arquitetura aparecem em vez disso.

Em termos práticos: se sua carga de trabalho envolve recuperação de conhecimento, múltipla escolha, perguntas e respostas técnicas ou classificação, o ganho de velocidade é grande e imediato. Se sua carga de trabalho é derivação matemática ou científica difícil, espere aproximadamente paridade e seja agradavelmente surpreendido. Qualquer um que cite "4x mais rápido" como uma propriedade geral do modelo está citando uma média de dois comportamentos muito diferentes.

Intern-S2-Mobius-3

O stack de ciência escondido na lista de arquivos

Uma das coisas mais reveladoras sobre esta versão não está no cartão do modelo — está na listagem de arquivos do repositório. Junto com os arquivos de tokenizer usuais, o Intern-S2-Mobius inclui três tokenizers de domínio adicionais: code>tokenizer_PROT.model/code> para sequências de proteínas, code>tokenizer_SMILES.model/code> para estruturas moleculares em notação SMILES, e code>tokenizer_XNA.model/code> para sequências de ácidos nucleicos. Há também um array NumPy perdido de dados sísmicos no repositório.

Tokenizadores dedicados para proteínas, moléculas e DNA/RNA não são algo que se adiciona casualmente. Eles significam que o modelo foi treinado para ler esses tipos de sequência como entradas de primeira classe, em vez de texto comum que, por acaso, contém letras. É isso que transforma um 3,77 em um 51,40 no Biology-Instructions, e coloca o Mobius na mesma família que seu irmão Intern-S2-Preview, que adicionou modalidades de séries temporais e visão e, segundo a InternLM, foi o primeiro modelo de código aberto com capacidade de geração de estruturas cristalinas de materiais.

Se você é um desenvolvedor de propósito geral, isso é algo trivial. Se você trabalha em biologia computacional, quimioinformática ou ciência dos materiais, esta pode ser a linha mais importante deste artigo: este é um modelo pequeno, sob licença Apache-2.0, auto-hospedável, que fala SMILES e sequência de proteínas nativamente.

Onde se encaixa na família Intern

A linha Intern-S é a série multimodal científica do Shanghai AI Laboratory. O Intern-S1 estabeleceu o formato. O Intern-S1-Pro o escalou para a classe de trilhão de parâmetros. O Intern-S2-Preview, lançado pouco antes do Mobius, é a aposta em eficiência: um modelo com 36B no total, 3B ativos, 256 especialistas e contexto de 262K que, segundo a InternLM, equivale ao S1-Pro de escala de trilhão em tarefas científicas profissionais centrais — uma redução de aproximadamente 30x nos parâmetros para capacidade científica comparável.

Intern-S2-Mobius é uma terceira coisa: uma arquitetura lançada com o nome Intern-S2. O "v0" em Mobius-v0 está fazendo trabalho real nesse rótulo — esta é a primeira iteração pública de um design, não uma linha de produtos madura. Ele se conecta ao ArchSpace, plataforma aberta da InternLM para validar inovações em arquitetura de LLM, cujo objetivo declarado é "transformar a exploração de arquiteturas de LLM em conhecimento reutilizável para a comunidade", com revisão por pares e resultados publicados, incluindo os negativos. Mobius é o que esse programa parece quando uma proposta passa de uma sonda de escala 1B para um modelo de 35B que você pode realmente baixar. Um relatório técnico completo acompanha o repositório do GitHub para quem quiser as derivações.

Visto por esse prisma, as duas perdas nos benchmarks são uma característica do lançamento, não um constrangimento. Este é um laboratório publicando honestamente um experimento de arquitetura, inclusive onde ele regrediu.

Como executá-lo

Intern-S2-Mobius é suportado por três pilhas de inferência, e o guia de implantação fornece invocações funcionais para cada uma.

LMDeploy é o caminho recomendado e o único que o guia mostra em uma única GPU: sirva com o backend PyTorch, code>--trust-remote-code/code>, paralelismo de tensor de 1 e decodificação especulativa MTP habilitada via algoritmo especulativo qwen3_5_mtp com quatro tokens de rascunho. vLLM é mostrado com paralelismo de tensor de 2, o parser de raciocínio qwen3, o parser de chamada de ferramentas qwen3_coder, escolha automática de ferramentas e decodificação especulativa MTP com quatro tokens especulativos. Transformers funciona para inferência básica por meio de code>AutoModelForImageTextToText/code> com code>trust_remote_code=True/code> e bfloat16 — note que o modelo vem com código de modelagem personalizado, portanto a execução remota de código é obrigatória, e a configuração visa o Transformers 5.2.

Os parâmetros de amostragem recomendados do InternLM são temperature 0.8, top-p 0.95, top-k 50 e min-p 0.0 — mais quentes do que as configurações quase-gulosas que a maioria dos modelos de raciocínio prefere, o que vale respeitar em vez de sobrescrever por hábito.

Em termos de hardware: cerca de 73 GB de pesos em bfloat16 mais o cache KV e as ativações significam que um único acelerador de 80 GB fica apertado, enquanto uma única placa de 141 GB é confortável — o que presumivelmente explica por que o exemplo do vLLM usa duas GPUs e o do LMDeploy assume uma placa grande. Trabalhos com contexto longo aumentarão esse requisito. Ative o MTP — o guia recomenda isso explicitamente, e uma parcela significativa da aceleração anunciada está aí, e não na arquitetura base.

A ressalva prática mais importante: nenhum provedor de inferência hospeda atualmente este modelo. O painel de provedores da Hugging Face diz isso claramente, e o contador de downloads ainda estava em zero quando isto foi escrito. Não há endpoint de API, nem preço por milhão de tokens, nem uma maneira gerenciada de experimentá-lo. Auto-hospedagem é a única opção hoje.

Intern-S2-Mobius-4

Quem deveria realmente se importar?

1. Equipes que executam cargas de trabalho de raciocínio de alto volume, moldadas por recuperação

Este é o perfil para o qual a arquitetura foi construída. Se você está servindo grandes lotes de Q&A técnico, análise de documentos, extração estruturada ou classificação de múltipla escolha por meio de um modelo de raciocínio, e sua fatura é dominada por tokens de raciocínio que você nunca mostra ao usuário, um modelo que chega à mesma resposta com um quinto dos tokens é uma redução direta de custo. Os números MMLU Pro e GPQA — traces 4.6x e 5.0x mais curtos com precisão igual ou melhor — são exatamente essa forma. Avalie-o contra seu próprio tráfego antes de acreditar, mas o mecanismo é sólido e o incentivo é grande.

2. Grupos de ciência computacional

Tokenizadores nativos de proteínas, SMILES e ácidos nucleicos, além de grandes ganhos medidos em benchmarks biológicos e moleculares, em um modelo Apache 2.0 que cabe em uma ou duas GPUs. Para um laboratório que precisa manter os dados no local e não pode enviar estruturas moleculares para uma API comercial, essa combinação é rara. A linha Intern-S vem avançando nesse sentido, e Mobius é o ponto de entrada mais barato até agora.

3. Pesquisadores e observadores de arquitetura

O desacoplamento de conhecimento e raciocínio e o raciocínio latente têm sido linhas de pesquisa ativas há algum tempo; pouquíssimas foram validadas em escala de 35B e lançadas abertamente com os casos de falha intactos. Se você se importa com para onde as arquiteturas pós-Transformer vão a seguir, o relatório técnico e as duas linhas perdedoras são mais interessantes do que a pontuação média. A ArchSpace foi explicitamente construída para tornar esse tipo de resultado reutilizável.

Quem não deveria se importar, pelo menos por enquanto: qualquer pessoa que procura um assistente de propósito geral para produção. Não há endpoint hospedado, nenhuma avaliação independente, nenhuma ferramenta de ecossistema e nenhum histórico. Isso não é uma crítica ao modelo — é uma descrição de um lançamento de pesquisa que tem uma semana.

Como se encaixa em uma stack de produção

A posição honesta do Intern-S2-Mobius hoje é candidato a avaliação, não modelo padrão. É um artefato de pesquisa não hospedado, não verificado, com uma semana de vida, com uma arquitetura genuinamente interessante e um ponto forte muito específico — raciocínio eficiente em termos de tokens em tarefas moldadas por recuperação — além de uma verdadeira especialização em dados de sequências científicas.

Um padrão sensato é manter o tráfego de produção em um endpoint independente de fornecedor, como o OrcaRouter, que fornece uma API compatível com OpenAI para muitos modelos, e configurar o Mobius separadamente em seus próprios GPUs para a fatia restrita onde ele possa vencer. Meça o que realmente importa para este modelo: não apenas a precisão, mas tokens gastos por resposta correta. Esse é o eixo para o qual o Mobius é otimizado, e é o eixo que a maioria das ferramentas de avaliação ignora. Se ele se sustentar na sua carga de trabalho, você terá um caminho auto-hospedado barato para operar e sem impedimentos legais. Se não, você perdeu um dia de tempo de GPU e seu caminho de produção nunca se moveu.

A mesma lógica se aplica em sentido inverso se um provedor eventualmente a hospedar: um roteador permite que você faça um teste A/B de um novo modelo contra o seu atual sem reescrever nada, o que é exatamente a maneira certa de adotar uma arquitetura que ninguém tenha testado de forma independente.

Limitações e ressalvas

Comece pelo maior: não há verificação independente de nenhum dos números deste artigo. Cada benchmark, cada curva de throughput e cada comparação de comprimento de tokens vem da InternLM. A comparação também é estruturalmente favorável — a Mobius é medida apenas contra a baseline específica a partir da qual foi continuamente pré-treinada, não contra a fronteira atual, e o SFT e o RL adicionais no pós-treinamento significam que a comparação não é uma ablação limpa de arquitetura, mesmo sendo apresentada como tal. Parte do ganho é da Mobius; parte é simplesmente mais treinamento.

As regressões são reais e estão nas tarefas mais difíceis. Perder HLE por 3,3 pontos e UGD hard por 5 pontos, enquanto vence quase tudo que é mais fácil, é uma assinatura coerente e levemente preocupante para um modelo cujo diferencial é a eficiência de raciocínio.

Operacionalmente, o atrito é significativo. Código de modelagem personalizado significa code>trust_remote_code/code> e uma versão de ponta do Transformers. Os frameworks que o suportam precisam ser recentes o suficiente para saber o que um code>interns2_mobius/code> é, e o próprio guia da InternLM alerta que estas são configurações de referência em desenvolvimento ativo. Aproximadamente 73 GB de pesos não é um modelo de laptop. Não há API hospedada, nem preços, nem limites de requisição, nem SLA — porque não há serviço.

Por fim, note o que não foi publicado: nenhum resultado de benchmarks multimodais, apesar de um encoder de visão completo; nenhuma avaliação de contexto longo, apesar de um teto de 256K; nenhum benchmark de codificação; nenhuma avaliação de segurança ou alinhamento; e nenhuma comparação com qualquer outro modelo além do Qwen3.5-35B. Para uma implantação de propósito geral, essas são grandes lacunas. Para um artigo de arquitetura com pesos anexados, elas estão simplesmente fora do escopo — que é a maneira correta de interpretar este lançamento.

Perguntas Frequentes

O que é Intern-S2-Mobius?

Um modelo fundacional multimodal de 35B parâmetros, licença Apache 2.0, da equipe InternLM do Laboratório de Inteligência Artificial de Xangai, construído sobre a arquitetura Mobius-v0, que separa o armazenamento de conhecimento do cálculo de raciocínio. Foi continuamente pré-treinado a partir do Qwen3.5-35B e pós-treinado com SFT e aprendizado por reforço, e publicado no Hugging Face em 29 de julho de 2026.

O que torna a arquitetura Mobius diferente?

Transformadores convencionais armazenam conhecimento em um bloco feed-forward dentro de cada camada; portanto, o conhecimento só é acessível na profundidade onde reside. O Mobius substitui isso por uma Memória globalmente compartilhada — 2.560 especialistas na configuração lançada — que quatro blocos Reasoner consultam repetidamente, permitindo acesso ao conhecimento entre profundidades e deixando que parte da deliberação ocorra em estados ocultos contínuos em vez de tokens gerados de cadeia de pensamento.

O Intern-S2-Mobius é realmente 4x mais rápido?

Em média e em tamanhos de lote grandes, aproximadamente sim: a InternLM mede um throughput de requisições 2,9x maior no lote 16, subindo para 4,6x no lote 256. Mas isso varia enormemente por tarefa. No MMLU Pro e no GPQA Diamond o ganho é grande em todos os tamanhos de lote; no AIME e no HMMT, matemática de competição, o Transformer de base é na verdade mais rápido em tamanhos de lote intermediários. A aceleração acompanha o quanto o modelo consegue encurtar sua trilha de raciocínio.

Como ele se compara ao Qwen3.5-35B?

Ele vence sete dos nove benchmarks gerais com uma média de 67,88 contra 65,05, incluindo MMLU Pro (89,05 vs 85,31), AIME 2026 (95,31 vs 92,08), HMMT 2026 (85,51 vs 78,50) e SimpleQA (28,90 vs 21,39). Ele perde UGD hard (73,02 vs 78,02) e HLE (19,11 vs 22,40). Em tarefas científicas, está muito à frente — média de 52,14 contra 18,20.

Posso usar o Intern-S2-Mobius através de uma API?

Atualmente, não. Nenhum provedor de inferência o hospeda, não há preços publicados e o Hugging Face não lista nenhuma implantação. O self-hosting com LMDeploy, vLLM ou Transformers é a única maneira de executá-lo hoje.

De que hardware preciso para executá-lo?

Os pesos têm cerca de 73 GB em bfloat16, então planeje uma aceleradora classe 141 GB ou duas GPUs de 80 GB, mais margem para o cache KV. O exemplo do LMDeploy da InternLM usa paralelismo de tensor de 1; o exemplo do vLLM usa 2. É recomendado ativar a decodificação especulativa MTP com quatro tokens de rascunho.

Qual é o comprimento do contexto dele?

A configuração suporta 262.144 tokens (256K). Observe que a InternLM foi avaliada em 128K na maioria dos benchmarks de texto e 64K em MMLU Pro, SimpleQA e HLE, portanto, a qualidade validada em 256K completo ainda não foi demonstrada.

É multimodal?

Sim. A Hugging Face classifica-o como imagem-texto-para-texto, e a configuração inclui um codificador de visão de 27 camadas com processamento de tokens de vídeo. No entanto, a InternLM não publicou resultados de benchmark multimodal com este lançamento, portanto, a capacidade de visão não é documentada na prática.

Por que ele inclui tokenizadores de proteínas e SMILES?

Porque a linha Intern-S é uma família de modelos científicos. Tokenizadores dedicados para sequências de proteínas, notação molecular SMILES e ácidos nucleicos significam que o modelo lê esses formatos como tipos de entrada nativos, razão pela qual ele alcança 51,40 em Biology-Instructions, onde a linha de base alcança 3,77.

A licença é realmente Apache 2.0?

Sim — Apache 2.0, com o arquivo de licença no repositório. Uso comercial, modificação e redistribuição são permitidos, o que é notavelmente mais permissivo do que muitos lançamentos de pesos abertos de grandes laboratórios.

Devo usar isso em produção?

Ainda não. Ele tem apenas uma semana de existência, não está hospedado, não foi verificado por nenhum terceiro e carece de avaliações de codificação, multimodalidade, contexto longo e segurança. Trate-o como um candidato a avaliação para raciocínio eficiente em tokens ou trabalho com sequências científicas, mantenha o tráfego de produção em modelos consolidados por meio de um endpoint independente de fornecedor e volte a avaliá-lo quando houver números independentes.

Conclusão

Intern-S2-Mobius é um dos lançamentos de modelo genuinamente mais interessantes do ano, e quase nada disso tem a ver com suas pontuações. A InternLM pegou uma ideia arquitetural real — parar de vincular conhecimento a camadas, colocá-lo em uma Memória compartilhada, e deixar o modelo fazer parte do seu raciocínio em espaço latente em vez de em tokens — escalou para 35B, treinou adequadamente, e liberou os pesos sob Apache 2.0 junto com o relatório técnico e os resultados que não saíram como esperado. O mecanismo de eficiência é legível e as evidências são internamente consistentes: os traces ficam 1,5x mais curtos em média e até 5x mais curtos em tarefas com grande carga de conhecimento, e o throughput aumenta exatamente na proporção que se poderia prever a partir disso.

As ressalvas são igualmente claras. Ninguém fora do Shanghai AI Laboratory verificou um único número. A comparação é contra a base do próprio modelo e inclui pós-treinamento extra, portanto não é a ablação limpa que aparenta ser. O ganho de velocidade desaparece em grande parte em matemática difícil. O modelo perde nos dois benchmarks de raciocínio mais exigentes em sua própria tabela. E não há como experimentá-lo sem alugar GPUs.

Então: não é um modelo para implantar esta semana, mas certamente um para ficar de olho, e uma opção genuinamente atraente para dois públicos específicos — equipes cuja conta de raciocínio é dominada por tokens que ninguém lê, e grupos científicos que precisam de um modelo pequeno, com licença permissiva, que fale nativamente sobre proteínas e moléculas. Mantenha a stack de produção em modelos comprovados por meio de um endpoint neutro de fornecedor, como o OrcaRouter, suba o Mobius no seu próprio hardware para o caso específico, e meça tokens por resposta correta em vez de apenas precisão. Se a arquitetura se sustentar sob escrutínio independente, o Mobius-v0 será lembrado menos como um modelo de 35B do que como o número de versão anterior àquele que importou.

© 2026 OrcaRouter

Para provedores

Opera uma plataforma de inferência? Traga seus modelos para o OrcaRouter.

Fale conosco

Junte-se à comunidade

DiscordEmailXGitHubYouTube