Descoberta de erros transforma saídas revisadas em rubricas de avaliação

Hamel Husain e Shreya Shankar mostram um ciclo de revisão assistida por agentes: inspecionar saídas reais, anotar falhas, agrupá-las em critérios e aplicar juízes de LLM focados. Por que importa: Avaliações automáticas encontram falhas óbvias, mas o vídeo defende que o julgamento específico do produto surge ao revisar exemplos reais e registrar os motivos das decisões.

Para testar: Revise 20 rastros recentes de agentes ou candidatos editoriais, marque cada falha no próprio item e transforme os rótulos recorrentes em avaliações separadas de passa/falha.