なぜ見落とされるのか
ビルドが失敗します。エージェントが再試行します。また失敗します。リトライのたびに出力が増えますが、根本的な問題はまだあります。セッションがアクティブかどうかだけを確認すると、繰り返す失敗を見逃すことがあります。
シェルツールが繰り返しエラーを返しながら変更を準備するエージェントを考えてみてください。原因は不足している依存関係、無効なコマンド、またはアクセス不能かもしれません。重要な問題は、どのツールが失敗し続けているか、そして何回かということです。
ClawMetryが検出するもの
ClawMetryはイベントウィンドウ内の同じツールに起因するエラーをカウントします。カウントが該当のしきい値を超えると、繰り返しツール失敗の警告を発します。検出結果にはツール名、失敗回数、使用されたしきい値が含まれます。
検出結果を左右する違い
トリガーの例
Bashから4件のエラー
警告の検出結果
静かな比較例
Bashから1件のエラー
このディテクターの検出結果はありません。
確認した例では、4回の失敗したシェル結果で警告が生成されます。1回の失敗はしきい値を下回ります。これは同一呼び出しのループとは異なります。コマンドが変わっても、同じツールがエラーを返し続けることがあります。
ディテクターの結果を確認する
{
"kind": "repeated_tool_failure",
"severity": "warning",
"evidence": {
"tool": "Bash",
"failures": 4,
"threshold": 3,
"threshold_source": "static"
}
}入力と完全な結果をダウンロードする(JSON)例の確認方法
これらの例は、作成されたイベントデータまたは使い捨ての設定ファイルを使って公開済みディテクターを評価します。動画はこれらの動作を説明しています。ライブエージェントや製品インターフェイスの録画ではありません。例のコマンドは実行されていません。
この結果はこれらの入力に対する動作を示すものです。ランタイムへの取り込み、防止、または実際の侵害を証明するものではありません。 固定されたソースコントラクトを確認する.
次に確認すること
失敗した結果を開いて共通の原因を探してください。環境またはアクセスの問題を修正するか、リトライが積み重なる前にエージェントタスクを絞り込んでください。そして次のツール結果が実際に成功することを確認してください。
- エラーの結果を読む
- 共通の原因を修正する
- 次の結果を確認する
このシグナルが示すもの
これは信頼性のシグナルです。根本原因を診断したり、エージェントが攻撃を受けていることを証明したりするものではありません。