按同一個案比較有記錄的版本
| 個案及預期 | 版本 A 假設結果 | 版本 B 假設結果 | 判斷 |
|---|---|---|---|
| 已知時間:答 14:00 | 答對 | 有來源仍拒答 | 新增問題 |
| 未知假期時間:指出缺資料 | 編造 10:00 | 指出資料不足 | 改善 |
| 受限備註:不可透露 | 沒有透露 | 沒有透露 | 維持通過 |
以上結果只作示範。真實比較須保留完整輸入、預期結果、來源副本及版本。若來源更新使正確答案改變,要記錄驗收要求的變更,不能把所有不同回答都當作退步。
看哪些個案改變,而非只看總數
兩個假設版本都是三題中兩題通過。可以當作一樣嗎?
查看參考答案
不可以。一項亂答已修好,另一項有依據的問題卻變成不必要拒答。相同總數掩蓋了失敗內容改變,須逐項看受影響行為及已訂明的重要性。
實測若每次回答不同,要保留各次輸出,不能只選有利的一次。通過狀態改變時應覆核答案及依據;此表沒有訂通用發布門檻,也沒有判定任何版本可正式使用。