容易被忽视的原因
智能体又打开了一个文件,然后又一个。会话看起来很繁忙,但修复仍未出现。当你同时监控多个智能体时,持续的活动流很容易掩盖一个没有推进的任务。
设想请求一个小的代码修改。智能体读取了二十五个文件,却没有进行任何编辑或完成轮次。你可以通过滚动浏览会话来发现这一点,而 ClawMetry 为你提供了一个具体信号来直接调查。
ClawMetry 检测什么
无进展检测器计算自最新用户轮次或完成标记以来的工具调用次数。如果调用次数达到阈值时没有记录到写入或编辑操作,则触发警告。检测结果包含观察到的调用次数、阈值和零次记录的写入。
影响检测结果的关键差异
触发示例
25次读取,零次编辑
警告发现
静默对比
24次读取,然后一次编辑
此检测器无发现。
所检查的示例有二十五次读取调用并触发警告。将其中一次替换为编辑操作,此检测器即保持静默。新的用户轮次会重置检测窗口。如果运行时在其学习样本中从不暴露写入操作,ClawMetry 可禁用此信号,而不是对每个会话都标记。
检查检测器结果
{
"kind": "no_progress",
"severity": "warning",
"evidence": {
"tool_calls": 25,
"writes": 0,
"threshold": 20,
"threshold_source": "static",
"baseline": null
}
}下载输入和完整结果(JSON)示例的检查方式
这些示例使用预设事件数据或一次性配置文件评估已发布的检测器。视频展示了相应行为,并非真实智能体或产品界面的录屏。示例中的命令均未实际执行。
结果仅反映这些输入的行为,不代表运行时摄取、防护或真实的攻击场景。 查看固定源合约.
接下来检查什么
从任务本身入手。研究类任务涉及大量读取可能是正常的,而请求的代码修复可能需要干预。检查智能体试图了解什么,明确停止点,并寻找第一个有意义的更改。
- 检查任务类型
- 检查最新活动
- 定义有效的停止点
此信号说明什么
没有记录到编辑并不等于工作被浪费。只读研究可能是合理的,阈值也取决于可用的遥测数据。