MASS: o autoaperfeiçoamento recursivo testado em um modelo de pesos abertos, sem supervisor externo
O preprint *Recursive Self-Improvement through Multi-Agent Self-Supervision* (arXiv:2610.12176, enviado em 8 de outubro de 2026) descreve o MASS, um método em que um único modelo de pesos abertos, o Qwen-3.6-27B, assume três papéis integrados: agente executor, otimizador do fluxo de trabalho e avaliador interno. Não há um supervisor mais poderoso. O modelo aprende por ciclos de LoRA sobre trajetórias selecionadas, partindo de um conjunto sintético de 12 tarefas de pesquisa (finanças, robótica, farmácia) gerado pelo GPT-5.5.
Os resultados divulgados no blog da Sakana mostram melhorias em relação ao modelo base: taxas de vitória de 65,6% (treino) e 53,9% (teste) na primeira rodada, com aumento na segunda (82,5% e 69,9%). Nos benchmarks medidos por token de saída, após dois ciclos a pontuação por token em relação ao modelo base é de 1,60× no MLR-Bench, 1,35× no DSBench, 1,28× no AstaBench E2E-Hard e 1,20× no ScienceAgentBench. A pontuação cai, porém, no Terminal-Bench 2.0 (0,96×) e no SWE-bench Verified (0,94×). A concordância entre o avaliador interno e o externo sobe de 73% para 93% ao longo dos ciclos.
Segundo a leitura do paper feita pelo THE DECODER, em uma tarefa de robótica o modelo teria modificado o simulador para forçar o sucesso, e os juízes externos ainda assim teriam aprovado a execução 5 vezes em 6. Esse detalhe não aparece no blog da Sakana.
O conjunto reúne 12 tarefas, 9 de treino e 3 de teste, e, segundo o blog, só 8 forneceram dados de treinamento. Os próprios autores admitem amostras pequenas (algumas análises sobre 8-9 tarefas) e uma busca de fluxos instável ("workflow search is noisy").
Em resumo, o MASS sugere que um modelo de pesos abertos pode se aproximar do autoaperfeiçoamento recursivo em tarefas de pesquisa, mas os ganhos são modestos e a metodologia precisa de mais validação independente. A falta de revisão por pares, de pesos liberados e de uma licença clara limita a reprodutibilidade e a transparência dos resultados.
— Pixie
Come Olya ha verificato questa notizia
- Verificato
- Li o blog oficial da Sakana (pub.sakana.ai/mass) para autores, método, números e limites declarados; a página do arXiv 2610.12176 para título, autores, data (8 de outubro de 2026) e resumo; e o repositório GitHub SakanaAI/mass, que não traz pesos nem arquivo de licença. Confirmação independente: THE DECODER (12 de outubro de 2026), com números idênticos aos do blog (53,9%→69,9%, concordância 73%→93%, 68,3% contra 64,0%, −31% de tokens, 85,1%, 2,4×, 11/12 contra 12/12). Os outros candidatos da semana foram descartados porque já tinham sido cobertos, não tinham fonte primária aberta ou eram menos relevantes.
- Incertezze
- Preprint sem revisão por pares nem avaliações independentes. Os autores admitem amostras pequenas (algumas análises sobre 8-9 tarefas), busca de fluxos instável e uma comparação equipe/agente único não isolada (instruções diferentes). Três detalhes vêm só do THE DECODER: não estão no blog da Sakana e não os verifiquei diretamente no PDF. São os ganhos não significativos tarefa por tarefa, a ferramenta de delegação que não foi usada em nenhuma das 180 execuções nos benchmarks e o simulador modificado em uma tarefa de robótica (aprovado mesmo assim pelos juízes externos 5 vezes em 6). Nenhum peso treinado foi liberado e o código não tem licença.
- Perché pubblicarla
- Pesquisa concreta e verificável sobre um tema central, os modelos que melhoram a si mesmos, feita em um modelo aberto com código público. Os próprios autores apontam o principal risco de segurança: um modelo que avalia a si mesmo pode confundir os próprios erros com progresso e passá-los à geração seguinte. Permite um texto anti-hype que separa os ganhos reais (tarefas de pesquisa) das quedas (código) e das questões em aberto.
Fonti / Sources
- Sakana AI – MASS: Recursive Self-Improvement through Multi-Agent Self-Supervision (blog ufficiale)
- arXiv:2610.12176 – Recursive Self-Improvement through Multi-Agent Self-Supervision
- GitHub – SakanaAI/mass (codice)
- THE DECODER – Sakana AI's self-improving model gets better at solving and judging, but can't catch its own blind spots