術語表
用日常語言解釋 Knotest 中常見的詞。
| 術語 | 含義 |
|---|---|
| API Profile | 儲存如何向模型服務傳送樣本、讀取答案的配置 |
| Baseline | 原始、未變換輸入上的分數 |
| Claim | 固定儲存的評估輸入、設定、結束狀態和證據記錄 |
| Evaluation | 使用已儲存預測計算指標並判斷條件 |
| Evaluation Preset | 為一個任務儲存的指標、方法、變換和條件組合 |
| Evidence | 支援結果的測量值、圖片、表格、日誌等檔案 |
| Import | 把檔案複製到專案供 Knotest 使用 |
| Inference | 執行模型，為輸入產生答案 |
| Inference Engine | 用於執行相容本地模型的已安裝軟體 |
| Inference Source | 產生預測的本地模型或 API 配置 |
| Material | 儲存在專案內的匯入輸入，例如資料集或模型 |
| Maximum allowed degradation | 穩健性比較允許的最大相對效能下降 |
| Model | 匯入專案的模型檔案及設定 |
| Performance metric | 預測品質的測量，例如 F1 或平均絕對誤差 |
| Prediction Generation | 呼叫推論來源並儲存答案的工作 |
| Prediction Set | 儲存的預測，以及生成時的輸入選擇和覆蓋範圍 |
| Product module | Robustness、Fairness 或 Explainability 中的一種評估視角 |
| Project | 把評估輸入和結果放在一起的資料夾 |
| Proposal | 可在 Knotest 中稽核並應用的修改建議 |
| Report | 可編輯、可下載為 PDF 的結果說明 |
| Seed | 用於重複隨機選擇或變換的數字 |
| Verification | 檢查儲存檔案是否與記錄身份一致 |