← Voltar à edição11 / 11 · Semana de 3 de ago de 2026

ExtractBench mede extração além da resposta certa

O ExtractBench é um benchmark de extração de documentos guiada por schema, com 4.869 páginas e 370 documentos empresariais; ele mede precisão de valores, completude de registros, grounding e custo em conjunto. Por que importa: Uma extração pode devolver campos com aparência correta e ainda perder uma lista longa ou a página que sustenta o dado. Essas verificações ausentes aparecem depois, quando alguém precisa confiar no registro.

Para testar: Rode dez documentos de um fluxo pelo extrator e meça a precisão dos campos, a completude, o grounding por página-fonte e o custo antes de comparar modelos.

Fonte
arXiv — ExtractBench
conteúdo em inglês
Ver fonte →

Receba o field brief toda semana.

Um sinal principal, três sinais rápidos, uma coisa para testar, um conceito decodificado - e o resto da semana na linha. Para quem quer saber o que importa e o que fazer a seguir.

Assine grátis →
Grátis toda semana·Sem spam·Cancele quando quiser