Novo "exame" académico mostra que agentes de IA ainda falham a aprender com a experiência a longo prazo
Um benchmark chamado Continual Learning Exam (CLE), construído por mais de 50 especialistas em 89 profissões, revela que mesmo os modelos de linguagem mais avançados têm grande dificuldade em aprender e acumular experiência ao longo de tarefas sucessivas.
Segundo o artigo (arXiv:2610.33956, outubro de 2026), o CLE é composto por 120 tarefas organizadas em "escadas" de cinco níveis cada (600 níveis no total), em que cada nível só pode ser tentado depois de o anterior ser superado.
Testando 17 combinações de modelos e "harnesses" com os LLMs mais avançados disponíveis, os autores concluem que o melhor sistema só supera 47,7% de todos os níveis, e termina as cinco etapas completas em apenas 23,3% das tarefas.
Fontes
- arXiv arxiv.org
- Hugging Face Daily Papers huggingface.co
Resumo editorial em português feito com apoio de inteligência artificial a partir das fontes indicadas. Como fazemos o Boletim IA.