Cómo pasa desapercibido
La compilación falló, pero el agente ya pasó a escribir un resumen. ¿Se recuperó, o una falla importante desapareció entre dos pasos? La siguiente acción suele ser donde conviene comenzar la revisión.
En una sesión activa, un error puede pasar desapercibido justo antes de otra llamada a una herramienta. El agente puede tener una estrategia de recuperación válida, o puede estar avanzando sin manejar la falla. De cualquier manera, necesitas la secuencia completa para decidir.
Qué detecta ClawMetry
ClawMetry marca un resultado de herramienta fallido seguido de actividad continua sin un reintento o reconocimiento reconocido. Genera un hallazgo informativo de discrepancia de acción. Esa severidad menor importa: es una invitación a inspeccionar la transición, no un veredicto sobre la intención del agente.
La diferencia que cambia el hallazgo
Ejemplo que activa el detector
Falla, herramienta diferente
Hallazgo informativo
Comparación sin hallazgo
Falla, reintento con la misma herramienta
Sin hallazgo para este detector.
El ejemplo verificado falla una compilación de shell y luego llama a una herramienta diferente. Genera un hallazgo informativo. Una falla seguida de otra llamada a la misma herramienta se trata como reintento y no activa este detector.
Inspeccionar el resultado del detector
{
"kind": "action_discrepancy",
"severity": "info",
"evidence": {
"failed_tool": "Bash",
"continued_as": "tool_call"
}
}Cómo se verificó el ejemplo
Estos ejemplos evalúan el detector publicado con datos de eventos creados o archivos de configuración desechables. Los videos ilustran esos comportamientos. No son grabaciones de agentes en uso ni de la interfaz del producto. Ningún comando de los ejemplos fue ejecutado.
El resultado establece el comportamiento para estas entradas. No establece ingesta en tiempo real, prevención ni un compromiso real. Inspeccionar el contrato de código fuente fijado.
Qué revisar a continuación
Compara el paso fallido con lo que siguió. ¿Fue la nueva acción una ruta de recuperación? ¿Se reconoció el error en otro lugar? Antes de confiar en un informe de finalización, verifica el resultado subyacente que la operación fallida debía producir.
- Inspeccionar el resultado fallido
- Revisar la ruta de recuperación
- Verifica el resultado declarado
Qué establece esta señal
El detector no verifica el reporte final de finalización. Una recuperación legítima mediante otra herramienta también puede coincidir.