இது எப்படி கவனிக்கப்படாமல் போகிறது
உங்கள் agent மற்றொரு கோப்பை திறந்தது. பின்னும் மற்றொன்றை. Session பரபரப்பாக தோன்றுகிறது, ஆனால் சரிசெய்தல் இன்னும் தோன்றவில்லை. பல agents-ஐ கவனிக்கும்போது, செயல்பாட்டின் ஓட்டம் முன்னேறாத பணியை மறைத்துவிடலாம்.
ஒரு சிறிய code மாற்றத்தை கேட்கிறீர்கள் என்று கற்பனை செய்யுங்கள். Agent திருத்தம் செய்யாமல் அல்லது turn முடிக்காமல் இருபத்தைந்து கோப்புகளை படிக்கிறது. Session-ஐ scroll செய்து அதை கண்டுபிடிக்கலாம். ClawMetry உங்களுக்கு பதிலாக ஆய்வு செய்ய ஒரு குறிப்பிட்ட signal தருகிறது.
ClawMetry என்ன கண்டறிகிறது
No progress detector சமீபத்திய user turn அல்லது completion marker-இல் இருந்து tool அழைப்புகளை எண்ணுகிறது. எண்ணிக்கை அதன் வரம்பை அங்கீகரிக்கப்பட்ட write அல்லது edit இல்லாமல் எட்டினால், எச்சரிக்கை எழுப்புகிறது. கண்டுபிடிப்பு கவனிக்கப்பட்ட அழைப்பு எண்ணிக்கை, வரம்பு மற்றும் பூஜ்ய பதிவு செய்யப்பட்ட writes-ஐ சேர்க்கிறது.
கண்டுபிடிப்பை மாற்றும் வேறுபாடு
தூண்டும் எடுத்துக்காட்டு
25 reads, பூஜ்ய edits
எச்சரிக்கை கண்டுபிடிப்பு
அமைதியான ஒப்பீடு
24 reads, பின்னர் ஒரு edit
இந்த detector-க்கு எந்த கண்டுபிடிப்பும் இல்லை.
சரிபார்க்கப்பட்ட எடுத்துக்காட்டில் இருபத்தைந்து read அழைப்புகள் உள்ளன, எச்சரிக்கை எழுப்புகிறது. அந்த அழைப்புகளில் ஒன்றை edit-ஆக மாற்றினால், இந்த detector அமைதியாக இருக்கும். புதிய user turn சாளரத்தை மீட்டமைக்கிறது. ஒரு runtime அதன் கற்ற மாதிரியில் writes-ஐ வெளிப்படுத்தாதபோது, ClawMetry ஒவ்வொரு session-ஐயும் கொடியிடுவதற்கு பதிலாக இந்த signal-ஐ முடக்கலாம்.
Detector முடிவை ஆய்வு செய்யுங்கள்
{
"kind": "no_progress",
"severity": "warning",
"evidence": {
"tool_calls": 25,
"writes": 0,
"threshold": 20,
"threshold_source": "static",
"baseline": null
}
}எடுத்துக்காட்டு எப்படி சரிபார்க்கப்பட்டது
இந்த எடுத்துக்காட்டுகள் எழுதப்பட்ட event data அல்லது disposable configuration files-உடன் வெளியிடப்பட்ட detector-ஐ மதிப்பிடுகின்றன. வீடியோக்கள் அந்த நடத்தைகளை விளக்குகின்றன. அவை live agents அல்லது தயாரிப்பு இடைமுகத்தின் பதிவுகள் அல்ல. எடுத்துக்காட்டுகளில் எந்த கட்டளையும் இயக்கப்படவில்லை.
முடிவு இந்த உள்ளீடுகளுக்கான நடத்தையை நிறுவுகிறது. Runtime ingestion, தடுப்பு அல்லது உண்மையான சமரசத்தை நிறுவுவதில்லை. Pinned source contract ஆய்வு செய்யுங்கள்.
அடுத்து என்ன சரிபார்க்கலாம்
பணியில் தொடங்குங்கள். ஆராய்ச்சி சரியாக பல reads-ஐ உள்ளடக்கியிருக்கலாம். கோரப்பட்ட code சரிசெய்தலுக்கு தலையீடு தேவைப்படலாம். Agent என்ன கற்க முயற்சிக்கிறது என சரிபார்க்கவும், நிறுத்தப் புள்ளியை தெளிவாக்கவும், முதல் அர்த்தமுள்ள மாற்றத்தை தேடுங்கள்.
- பணி வகையை சரிபார்க்கவும்
- சமீபத்திய செயல்பாட்டை ஆய்வு செய்யுங்கள்
- பயனுள்ள நிறுத்தப் புள்ளியை வரையறுக்கவும்
இந்த signal என்ன நிறுவுகிறது
பதிவு செய்யப்பட்ட edit இல்லாதது வீணான வேலையின் ஆதாரம் அல்ல. Read-only ஆராய்ச்சி சட்டபூர்வமாக இருக்கலாம், வரம்புகள் கிடைக்கும் telemetry-ஐ பொறுத்தது.