跳至內容
Astera Technology

AI 驗收紀錄要留下哪些證據

把判斷連回輸入、可用來源、實際回答及操作證據,讓另一位同事能覆核同一個案。

下載完整個案資料及參考答案 ↓

先記錄個案,再決定是否通過

假設驗收證據紀錄
記錄欄位填寫例子覆核用途
個案及輸入E-04:「星期六幾點關門?」確認實際問題
來源副本及預期結果S-2:星期六 10:00–14:00;預期關門時間 14:00保留當時可用的依據
實際輸出及判斷示範回答「14:00」;示範判斷通過聲稱已測試前,須換成真正記錄的輸出
下載可編輯 CSV ↓

填好的輸出只是示範,沒有來自模型。實際執行時,另加環境及版本、測試編號、覆核人及操作證據;機密原文應留在已批准的工作位置,不放在公開報告。

找出別人無法覆核的判斷

證據缺口的處理
欠缺內容未能確認甚麼下一步
只保存「通過」問了甚麼、實際看到甚麼補存輸入及輸出
有答案,沒有來源版本是否符合當時提供的來源附來源副本,否則記為覆核未完成
有回答,沒有寫入結果操作做了一次、兩次還是未做查操作記錄及結果紀錄

證據不足不一定代表模型失敗,而是覆核受限制。要與已觀察到的不通過分開記錄,亦不要把未執行的例子計入實測通過率。

相關資源