觸發(fā)與評估操作手冊對值得測試的技能使用此操作手冊。A. 觸發(fā)評估創(chuàng)建三個(gè)提示桶1. 應(yīng)觸發(fā)明顯需要該技能的提示。目標(biāo)驗(yàn)證召回率2. 不應(yīng)觸發(fā)明顯超出技能邊界的提示。目標(biāo)驗(yàn)證精確率3. 近鄰看起來相似但應(yīng)使用另一個(gè)技能或不使用技能的提示。目標(biāo)捕獲誤報(bào)和模糊路由B. 執(zhí)行評估對每個(gè)重要用例創(chuàng)建 1 到 3 個(gè)帶以下內(nèi)容的真實(shí)提示用戶式措辭代表性輸入或文件類型預(yù)期輸出描述關(guān)鍵檢查C. 修訂循環(huán)當(dāng)技能表現(xiàn)不佳時(shí)在添加更多正文之前先修復(fù)邊界或描述問題。將脆弱的邏輯移入腳本或模板。如果SKILL.md變得臃腫拆分參考內(nèi)容。在擴(kuò)展范圍之前重新運(yùn)行相同的評估集。D. 按技能層級的最低 QA個(gè)人技能2 個(gè)真實(shí)提示手動(dòng)審查團(tuán)隊(duì)技能3 到 5 個(gè)真實(shí)提示觸發(fā)正例和負(fù)例一個(gè)修訂循環(huán)基礎(chǔ)設(shè)施或元技能5 個(gè)以上執(zhí)行提示觸發(fā)正例、負(fù)例和近鄰跨修訂的基準(zhǔn)說明所有權(quán)和漂移審查