Jak to umyka uwadze
Twój agent otworzył kolejny plik. I jeszcze jeden. Sesja wygląda na aktywną, ale poprawka wciąż się nie pojawiła. Gdy obserwujesz wiele agentów, strumień aktywności może ukryć zadanie, które nie posuwa się naprzód.
Wyobraź sobie prośbę o małą zmianę w kodzie. Agent odczytuje dwadzieścia pięć plików bez edycji ani zakończenia tury. Możesz to odkryć, przewijając sesję. ClawMetry daje Ci konkretny sygnał do zbadania.
Co wykrywa ClawMetry
Detektor braku postępu liczy wywołania narzędzi od ostatniej tury użytkownika lub znacznika ukończenia. Jeśli liczba osiągnie próg bez rozpoznanego zapisu lub edycji, generuje ostrzeżenie. Znalezisko zawiera zaobserwowaną liczbę wywołań, próg i zero zarejestrowanych zapisów.
Różnica zmieniająca wynik
Przykład wyzwalający
25 odczytów, zero edycji
Ostrzeżenie
Porównanie bez alarmu
24 odczyty, potem edycja
Brak znaleziska dla tego detektora.
Sprawdzony przykład ma dwadzieścia pięć wywołań odczytu i generuje ostrzeżenie. Zastąp jedno z nich edycją, a ten detektor pozostanie cichy. Nowa tura użytkownika resetuje okno. Jeśli środowisko uruchomieniowe nigdy nie udostępnia zapisów w swoim nauczonym próbce, ClawMetry może wyłączyć ten sygnał zamiast oznaczać każdą sesję.
Sprawdź wynik detektora
{
"kind": "no_progress",
"severity": "warning",
"evidence": {
"tool_calls": 25,
"writes": 0,
"threshold": 20,
"threshold_source": "static",
"baseline": null
}
}Jak sprawdzono przykład
Te przykłady oceniają opublikowany detektor z autorskimi danymi zdarzeń lub jednorazowymi plikami konfiguracyjnymi. Filmy ilustrują te zachowania. Nie są nagraniami działających agentów ani interfejsu produktu. Żadne polecenie z przykładów nie zostało wykonane.
Wynik określa zachowanie dla tych danych wejściowych. Nie ustala pozyskiwania danych w czasie rzeczywistym, zapobiegania ani rzeczywistego naruszenia. Sprawdź przypiętą umowę źródłową.
Co sprawdzić dalej
Zacznij od zadania. Badania mogą słusznie obejmować wiele odczytów. Żądana poprawka kodu może wymagać interwencji. Sprawdź, czego agent próbuje się dowiedzieć, doprecyzuj punkt zatrzymania i poszukaj pierwszej znaczącej zmiany.
- Sprawdź typ zadania
- Przejrzyj ostatnią aktywność
- Określ przydatny punkt zatrzymania
Co ustala ten sygnał
Brak zarejestrowanej edycji to nie dowód na zmarnowaną pracę. Badania tylko do odczytu mogą być uzasadnione, a progi zależą od dostępnej telemetrii.