← Voltar à edição8 / 22 · Semana de 27 de jul de 2026

smevals separa falhas do harness da nota do modelo

O smevals é um framework CLI sob licença MIT que registra execuções imutáveis para pares de tarefa e modelo-ou-harness e depois as avalia com checks ordenados e reutilizáveis. Por que importa: Uma queda de rede ou um runner travado é falha do harness, não resultado do modelo. Guardar esses registros sem avaliá-los torna uma comparação de roteamento mais auditável.

Para testar: Monte um eval de dez tarefas para um trabalho recorrente de revisão, adicione um checker determinístico de citação ou esquema e compare duas configurações de modelo ou harness antes de mudar o padrão.

GitHub 120 stars · ago 2verificar ↗
Fonte
GitHub — prime-radiant-inc/smevals
conteúdo em inglês
Ver fonte →

Receba o field brief toda semana.

Um sinal principal, três sinais rápidos, uma coisa para testar, um conceito decodificado - e o resto da semana na linha. Para quem quer saber o que importa e o que fazer a seguir.

Assine grátis →
Grátis toda semana·Sem spam·Cancele quando quiser