檢查和重現結果
區分核對儲存的檔案與重新執行評估。
**驗證(Verification)**檢查儲存的檔案是否與評估記錄一致。重現則按照記錄的輸入和設定重複工作。兩者回答不同的問題。
檢查儲存的記錄
Knotest 為輸入和生成的證據記錄身份資訊。驗證會檢查這些身份,以及記錄之間的關係。檔案缺失或變化時會報告問題。
驗證透過說明保留的檔案一致,但不能說明資料代表實際用途、標準選擇合理,或模型透過了標準。
驗證失敗時,保留受影響的副本,並從完整備份恢復匹配檔案。不要修改記錄的雜湊值或已固定的結果來消除提示。
重複一次比較
保留資料集與模型版本、分割槽、樣本選擇、種子、推論設定、變換和執行環境資訊。只記錄“強度 3”不足以描述變換後的輸入。
需要支援或重現檔案時,使用 Export evidence。在其他環境執行前,閱讀匯出說明及限制。
要測試新假設時,按需要建立新預測集或評估。保留兩份記錄,更容易解釋差異。