Limitar o juiz de IA supera voto majoritário em pipelines

Limitar o juiz de IA supera voto majoritário em pipelines

Estudo do arXiv mostra que, em pipelines de raciocínio, a regra de decisão importa mais que a acurácia do LLM judge. Limitar o poder do juiz com certificados de evidência superou voto majoritário e juiz livre em GSM8K e HotpotQA.

Por Redação Mapa Paper11 ago
Mendel Gödel Machine: agentes de código que evoluem por comparação

Mendel Gödel Machine: agentes de código que evoluem por comparação

Preprint no arXiv propõe a Mendel Gödel Machine, método em que agentes de programação se auto-melhoram usando o histórico completo de tentativas, com base em princípios de herança mendeliana. Testes em SWE-bench e Polyglot indicam ganhos consistentes de performance, eficiência e generalização.

Por Redação Mapa Paper11 ago
MCF-CVA: abordagem multiagente para alinhar IA a valores humanos

MCF-CVA: abordagem multiagente para alinhar IA a valores humanos

Paper submetido ao arXiv propõe o MCF-CVA, framework que combina múltiplos agentes morais para alinhar modelos de linguagem a valores contextuais. Testes indicam desempenho superior a abordagens com agente único em métricas padrão.

Por Redação Mapa Paper11 ago
Contaminação em benchmarks: estudo define quando é detectável

Contaminação em benchmarks: estudo define quando é detectável

Estudo submetido ao arXiv formaliza quando a contaminação de benchmarks de IA é detectável e mostra que 'sem evidência' pode refletir apenas uma auditoria sem poder estatístico. A eficácia dos detectores pode ser estimada antes da auditoria, mas orçamentos simples falham em amostras pequenas.

Por Redação Mapa Paper11 ago
LLMs preferem filmes aclamados pela crítica a blockbusters

LLMs preferem filmes aclamados pela crítica a blockbusters

Estudo do arXiv mostra que oito modelos de linguagem de quatro famílias — incluindo Anthropic e OpenAI — preferem consistentemente filmes aclamados pela crítica a sucessos comerciais, revelando um viés de prestígio cultural embutido nos LLMs.

Por Redação Mapa Paper11 ago