為何容易被忽略
您的代理又開啟了一個檔案,再一個。工作階段看起來很忙碌,但修復仍未出現。當您同時監看多個代理時,活動的洪流可能掩蓋一個毫無進展的任務。
想像您要求進行小幅程式碼修改,代理卻讀取了二十五個檔案,既未進行編輯也未完成該回合。您可以透過滾動工作階段來發現這一點,但 ClawMetry 直接給您一個具體的訊號供您調查。
ClawMetry 偵測的內容
無進展偵測器會計算自最新使用者回合或完成標記以來的工具呼叫次數。若計數在沒有識別到寫入或編輯的情況下達到閾值,則觸發警告。發現結果包含觀察到的呼叫次數、閾值及零次記錄寫入。
改變發現結果的關鍵差異
觸發範例
25 次讀取,零次編輯
警告發現
靜默對比
24 次讀取,然後一次編輯
此偵測器無發現。
已檢查的範例有二十五次讀取呼叫並觸發警告。將其中一次替換為編輯,此偵測器便保持靜默。新的使用者回合會重置視窗。若某執行環境在其學習樣本中從未公開寫入,ClawMetry 可停用此訊號,而非標記每個工作階段。
檢查偵測器結果
{
"kind": "no_progress",
"severity": "warning",
"evidence": {
"tool_calls": 25,
"writes": 0,
"threshold": 20,
"threshold_source": "static",
"baseline": null
}
}下載輸入及完整結果 (JSON)範例的檢查方式
這些範例使用已撰寫的事件資料或一次性設定檔來評估已發布的偵測器。影片說明這些行為,並非即時代理或產品介面的錄製內容。範例中沒有任何指令被實際執行。
結果確立了這些輸入的行為,並不確立執行時期擷取、預防或實際入侵。 檢查已固定的原始碼合約.
接下來要檢查什麼
從任務開始著手。研究型工作確實可能涉及大量讀取;請求的程式碼修復則可能需要介入。檢查代理試圖了解什麼、明確停止點,並尋找第一個有意義的變更。
- 確認任務類型
- 檢查最新活動
- 定義有意義的停止點
此訊號確立的範圍
沒有記錄到編輯並不代表工作白費。純讀取研究可能是合理的,且閾值取決於可用的遙測資料。