Machinist mede execuções de agentes de código

Machinist é um plano de controle de fábrica de software que enfileira tarefas de código, despacha workers para harnesses de agentes e registra métricas por execução, como tempo, tokens, comandos e resultados. Por que importa: Um fluxo compartilhado de agentes torna comparáveis, ao longo do tempo, mudanças em prompts, modelos e harnesses, em vez de depender de relatos. O ganho prático é um caminho repetível dos dados de execução até uma melhoria específica do fluxo, como substituir uma etapa rotineira de agente por um script determinístico.

Para testar: Execute uma tarefa recorrente de código com um prompt fixo e registre um rastro com tempo da tarefa, uso de tokens, comandos e resultado dos testes; compare essa linha de base com uma mudança de modelo ou harness.