Cómo pasa desapercibido
La compilación falló, pero el agente ya pasó a redactar un resumen. ¿Se recuperó, o un fallo importante desapareció entre dos pasos? La siguiente acción suele ser donde conviene comenzar la revisión.
En una sesión activa, un error puede quedar atrás justo antes de una llamada a otra herramienta. El agente puede tener una estrategia de recuperación válida, o bien continuar sin gestionar el fallo. En cualquier caso, necesitas la secuencia circundante para decidir.
Qué detecta ClawMetry
ClawMetry marca un resultado de herramienta fallido seguido de actividad continua sin un reintento o confirmación reconocida. Genera un hallazgo informativo de discrepancia de acción. La severidad reducida importa: es un aviso para inspeccionar la transición, no un veredicto sobre la intención del agente.
La diferencia que cambia el hallazgo
Ejemplo que activa el detector
Fallo, herramienta diferente
Hallazgo informativo
Comparación sin hallazgo
Fallo, reintento con la misma herramienta
Sin hallazgo para este detector.
El ejemplo verificado falla una compilación de shell y luego llama a una herramienta diferente. Genera un hallazgo informativo. Un fallo seguido de otra llamada a la misma herramienta se trata como reintento y no activa este detector.
Inspeccionar el resultado del detector
{
"kind": "action_discrepancy",
"severity": "info",
"evidence": {
"failed_tool": "Bash",
"continued_as": "tool_call"
}
}Cómo se verificó el ejemplo
Estos ejemplos evalúan el detector publicado con datos de eventos elaborados o archivos de configuración desechables. Los videos ilustran esos comportamientos. No son grabaciones de agentes en vivo ni de la interfaz del producto. Ningún comando de los ejemplos fue ejecutado.
El resultado establece el comportamiento para estas entradas. No establece la ingesta en tiempo de ejecución, la prevención ni un compromiso real. Inspeccionar el contrato de fuente fijado.
Qué revisar a continuación
Compara el paso fallido con lo que siguió. ¿Fue la nueva acción una ruta de recuperación? ¿Se reconoció el error en otro lugar? Antes de confiar en un informe de finalización, verifica el resultado subyacente que debía producir la operación fallida.
- Inspeccionar el resultado fallido
- Verificar la ruta de recuperación
- Verifica el resultado declarado
Qué establece esta señal
El detector no verifica la declaración de finalización. Una recuperación legítima mediante otra herramienta también puede coincidir.