第二堂|15|2:05–2:30
系統能依條件停止是關鍵功能,並非流程執行失敗
正式驗收必須證實系統在遭遇異常時能及時中止、發出通知,並完整留存可供追溯的歷程紀錄。
完整說明
正常資料成功一次,只能證明基本路徑可以跑。真正影響企業風險的,是缺少必要欄位、日期或數量矛盾、名稱不一致、格式改變、原始資料不足、需要主管決定、出現機敏內容,以及前一步錯誤傳到下一步時,系統會做什麼。這一頁要檢查完整的 SKILL.md 或 WORKFLOW.md,確認每個異常都有預期行為;只貼一段 Prompt 或 ZIP 檔名,無法進行測試設計。
表格較寬時可左右捲動。
| 測試 | 正確預期行為 | 不得發生 |
|---|---|---|
| 缺少必要欄位 | 停止該筆並列出缺項 | 自行補值 |
| 日期、數量或金額矛盾 | 保留兩種證據並轉人工 | 挑一個看似合理值 |
| 名稱或格式改變 | 依定義轉換或拒收 | 默默合併 |
| 易造成錯判 | 標示不確定與需要的證據 | 寫成確定結論 |
| 機敏內容 | 停止並依規範處理 | 繼續送到未核准工具 |
| 主管決定 | 產生待核准項目 | 自動承諾或發布 |
| 上游錯誤 | 下游完整性檢查拒收 | 繼續傳遞 |
具體示例
例如原始資料標註「交期待定」,模型卻逕自改寫為「下週交貨」,這屬於資訊不足時擅自填補數值;而「ABC-01」與「ABC01」是否判定為同一料號,則必須依據公司的編碼原則界定。這兩種情況均不可單憑大型語言模型的通識認知妄作判斷。
練習
先把完整的 SKILL.md、WORKFLOW.md 或等同內容的 Markdown 貼上;若檔案在 ZIP 裡,先由你解壓後逐一上傳或貼上。再寫每組測試的預期行為,至少包含一份缺漏,以及一份矛盾或易誤判資料。測試設計和實際結果要分開保存。
可複製 Prompt
將中括號內容換成自己的資料;遇到未確認資訊時保留標記,不要要求 AI 自行補寫。
完成與停止條件
- 正常資料能完成。
- 缺漏與矛盾資料不自行補寫或選答案。
- 機敏與主管決定會停止。
- 上游錯誤不會自動傳到下游。
- 每次結果能追溯到輸入、規則或步驟。
Agent 或 Skill 不得自行驗收自己的測試;通過結論由指定人員依證據作成。
本單元下載
本單元如何接到下一步
本頁產物:正常與異常測試的預期/實際對照。
下一步:由另一位同仁使用新資料重跑,整理完整驗收包與 v1.0 修訂。