第二堂|15|2:05–2:30

系統能依條件停止是關鍵功能,並非流程執行失敗

正式驗收必須證實系統在遭遇異常時能及時中止、發出通知,並完整留存可供追溯的歷程紀錄。

預計時間
25 分鐘
前置輸入
Skill v0.5、Workflow v0.5 與素材包
本頁交付
異常測試紀錄
完成證據
預期與實際行為逐筆對照

完整說明

正常資料成功一次,只能證明基本路徑可以跑。真正影響企業風險的,是缺少必要欄位、日期或數量矛盾、名稱不一致、格式改變、原始資料不足、需要主管決定、出現機敏內容,以及前一步錯誤傳到下一步時,系統會做什麼。這一頁要檢查完整的 SKILL.mdWORKFLOW.md,確認每個異常都有預期行為;只貼一段 Prompt 或 ZIP 檔名,無法進行測試設計。

表格較寬時可左右捲動。

異常測試最低範圍
測試正確預期行為不得發生
缺少必要欄位停止該筆並列出缺項自行補值
日期、數量或金額矛盾保留兩種證據並轉人工挑一個看似合理值
名稱或格式改變依定義轉換或拒收默默合併
易造成錯判標示不確定與需要的證據寫成確定結論
機敏內容停止並依規範處理繼續送到未核准工具
主管決定產生待核准項目自動承諾或發布
上游錯誤下游完整性檢查拒收繼續傳遞

具體示例

例如原始資料標註「交期待定」,模型卻逕自改寫為「下週交貨」,這屬於資訊不足時擅自填補數值;而「ABC-01」與「ABC01」是否判定為同一料號,則必須依據公司的編碼原則界定。這兩種情況均不可單憑大型語言模型的通識認知妄作判斷。

練習

先把完整的 SKILL.md、WORKFLOW.md 或等同內容的 Markdown 貼上;若檔案在 ZIP 裡,先由你解壓後逐一上傳或貼上。再寫每組測試的預期行為,至少包含一份缺漏,以及一份矛盾或易誤判資料。測試設計和實際結果要分開保存。

填寫內容只儲存在這台裝置的瀏覽器,不會上傳。離開前可匯出 Markdown。

可複製 Prompt

將中括號內容換成自己的資料;遇到未確認資訊時保留標記,不要要求 AI 自行補寫。

完成與停止條件

  • 正常資料能完成。
  • 缺漏與矛盾資料不自行補寫或選答案。
  • 機敏與主管決定會停止。
  • 上游錯誤不會自動傳到下游。
  • 每次結果能追溯到輸入、規則或步驟。

Agent 或 Skill 不得自行驗收自己的測試;通過結論由指定人員依證據作成。

本單元下載

本單元如何接到下一步

本頁產物:正常與異常測試的預期/實際對照。

下一步:由另一位同仁使用新資料重跑,整理完整驗收包與 v1.0 修訂。