இது எப்படி கவனிக்கப்படாமல் போகிறது
Build தோல்வியடைந்தது, ஆனால் agent ஏற்கனவே சுருக்கம் எழுதுவதற்கு நகர்ந்துவிட்டது. அது மீட்டெடுத்ததா, அல்லது இரண்டு படிகளுக்கு இடையில் ஒரு முக்கியமான தோல்வி மறைந்துவிட்டதா? அடுத்த செயல்பாடு பெரும்பாலும் பயனுள்ள மதிப்பீடு தொடங்கும் இடம்.
ஒரு பரபரப்பான session-இல், ஒரு வேறு கருவி அழைப்புக்கு சற்று முன்பு ஒரு பிழை கடந்து செல்லலாம். Agent-க்கு சரியான மீட்பு உத்தி இருக்கலாம். அல்லது தோல்வியை கையாளாமல் தொடரலாம். எப்படியிருந்தாலும், முடிவெடுக்க சுற்றியுள்ள வரிசை தேவை.
ClawMetry என்ன கண்டறிகிறது
ClawMetry தொடர்ந்த செயல்பாட்டுடன் தோல்வியடைந்த கருவி முடிவை அடையாளம் காண்கிறது, அங்கு அங்கீகரிக்கப்பட்ட மறுமுயற்சி அல்லது ஒப்புதல் இல்லாமல். இது ஒரு தகவல் action discrepancy கண்டுபிடிப்பை உருவாக்குகிறது. அந்த குறைந்த தீவிரம் முக்கியமானது: இது agent நோக்கம் பற்றிய தீர்ப்பு அல்ல, மாற்றத்தை ஆய்வு செய்ய ஒரு தூண்டுதல்.
கண்டுபிடிப்பை மாற்றும் வேறுபாடு
தூண்டும் எடுத்துக்காட்டு
தோல்வி, வேறு கருவி
தகவல் கண்டுபிடிப்பு
அமைதியான ஒப்பீடு
தோல்வி, அதே கருவி மறுமுயற்சி
இந்த detector-க்கு எந்த கண்டுபிடிப்பும் இல்லை.
சரிபார்க்கப்பட்ட உதாரணம் ஒரு shell build-ஐ தோல்வியடையச் செய்து பின்னர் வேறு கருவியை அழைக்கிறது. இது ஒரு தகவல் கண்டுபிடிப்பை எழுப்புகிறது. அதே கருவிக்கான மறு அழைப்பால் தொடர்ந்த தோல்வி மறுமுயற்சியாக கருதப்பட்டு இந்த detector-க்கு அமைதியாக இருக்கும்.
Detector முடிவை ஆய்வு செய்யுங்கள்
{
"kind": "action_discrepancy",
"severity": "info",
"evidence": {
"failed_tool": "Bash",
"continued_as": "tool_call"
}
}எடுத்துக்காட்டு எப்படி சரிபார்க்கப்பட்டது
இந்த எடுத்துக்காட்டுகள் எழுதப்பட்ட event data அல்லது disposable configuration files-உடன் வெளியிடப்பட்ட detector-ஐ மதிப்பிடுகின்றன. வீடியோக்கள் அந்த நடத்தைகளை விளக்குகின்றன. அவை live agents அல்லது தயாரிப்பு இடைமுகத்தின் பதிவுகள் அல்ல. எடுத்துக்காட்டுகளில் எந்த கட்டளையும் இயக்கப்படவில்லை.
முடிவு இந்த உள்ளீடுகளுக்கான நடத்தையை நிறுவுகிறது. Runtime ingestion, தடுப்பு அல்லது உண்மையான சமரசத்தை நிறுவுவதில்லை. Pinned source contract ஆய்வு செய்யுங்கள்.
அடுத்து என்ன சரிபார்க்கலாம்
தோல்வியடைந்த படியை அதற்கு பின்னர் வந்ததோடு ஒப்பிடவும். புதிய செயல்பாடு மீட்பு பாதையா? பிழை வேறு எங்காவது ஒப்புக்கொள்ளப்பட்டதா? ஒரு completion report-ஐ நம்புவதற்கு முன், தோல்வியடைந்த செயல்பாடு உருவாக்கியிருக்க வேண்டிய அடிப்படை முடிவை சரிபார்க்கவும்.
- தோல்வியடைந்த முடிவை ஆய்வு செய்யுங்கள்
- மீட்பு பாதையை சரிபார்க்கவும்
- கூறப்பட்ட முடிவை சரிபார்க்கவும்
இந்த signal என்ன நிறுவுகிறது
Detector இறுதி completion claim-ஐ சரிபார்க்காது. மற்றொரு கருவி மூலம் சட்டப்பூர்வமான மீட்பும் பொருந்தலாம்.