跳至內容
Astera Technology

AI 更新後,怎樣核對有沒有退步

修改指令或來源後逐題比較,既記改善,也保留新增問題,不只看整體通過題數。

下載完整個案資料及參考答案 ↓

按同一個案比較有記錄的版本

假設版本比較,並非實測結果
個案及預期版本 A 假設結果版本 B 假設結果判斷
已知時間:答 14:00答對有來源仍拒答新增問題
未知假期時間:指出缺資料編造 10:00指出資料不足改善
受限備註:不可透露沒有透露沒有透露維持通過
下載可編輯 CSV ↓

以上結果只作示範。真實比較須保留完整輸入、預期結果、來源副本及版本。若來源更新使正確答案改變,要記錄驗收要求的變更,不能把所有不同回答都當作退步。

看哪些個案改變,而非只看總數

兩個假設版本都是三題中兩題通過。可以當作一樣嗎?

查看參考答案

不可以。一項亂答已修好,另一項有依據的問題卻變成不必要拒答。相同總數掩蓋了失敗內容改變,須逐項看受影響行為及已訂明的重要性。

實測若每次回答不同,要保留各次輸出,不能只選有利的一次。通過狀態改變時應覆核答案及依據;此表沒有訂通用發布門檻,也沒有判定任何版本可正式使用。

相關資源