AI 能力實測指南 · PDF、範本、MCP 與報表
BPM 的 AI 功能如何驗收?
用同一組去識別化 PDF、表單範本與流程需求,依序記錄 AI 的規劃建議、人員確認、產生結果、修改方式與例外處理。先約定預期結果,再判斷功能是否適合企業作業。
本篇聚焦演示與試作的驗收方法。若正在整理預算、導入範圍與交付責任,請先閱讀企業 BPM 採購與交付檢核指南。
最後更新:
慧智科技編寫|更新日期:2026-09-23。下列為建議測試方法,並非已測得的產品成效。讓需求,成為可運作的流程
AI 協助設計與執行,人員掌握確認與治理。
- 01
提供起點
既有 PDF
把現在的作業帶進來
表單範本
自然語言需求 - 02
AI 規劃與調整
辨識內容與欄位
不需逐欄拖拉編排
規劃流程與報表
依對話修改範本 - 03
您確認建議
確認欄位與規則
確認後才產生
補充缺少的資訊
提出修改需求 - 04
產生工作成果
電子表單
測試後依程序發布
簽核流程
管理報表 - 05
填表與分析
混合憑證智慧填表
讓資料持續產生價值
依流程完成簽核
資料統計與問答
同一套能力,串起不同角色的工作
先準備一組可重複測試的樣本
- 一份去識別化 PDF:包含欄位、表格及必要附件說明,另外列出文件沒有寫明的規則。
- 一份既有表單範本:準備要新增、刪除或調整的欄位及核決條件。
- 一段自然語言需求:寫明申請人、審核角色、金額分支與希望看到的報表。
- 一組已知答案的測試資料:先由業務確認合計、篩選範圍與權限,作為報表核對基準。
事前確認可使用的測試環境、資料傳送範圍及負責人。不要在演示中上傳未經允許的個資、機密或正式交易資料。
六個測試情境:輸入、預期結果與需追查的情況
以下是驗收方法,實際可操作項目依產品版本、設定及導入範圍確認。
| 情境與輸入 | 應核對的結果 | 需追查的情況 |
|---|---|---|
| PDF 轉成應用規劃 | 核對欄位、型別、必填及表格;未載明的流程規則列為待確認。 | 遺漏欄位、誤判金額或自行補入未確認的核決規則。 |
| 自然語言規劃與修改 | 先檢視表單、流程及報表建議;要求修改後,再確認產生。 | 修改要求未反映、未確認就產生,或無法分辨建議與正式成果。 |
| 以對話調整既有範本 | 新增一個欄位並修改一項條件,核對既有規則及資料對應是否保留。 | 不相關欄位被改動、規則衝突或成果仍需哪些人工設定未說明。 |
| 混合憑證填表 | 逐筆核對來源、日期、金額及重複單據;記錄更正與人工確認方式。 | 漏單、重複填入、合計不符或無法追溯資料來源。 |
| MCP 工具與權限 | 列出可用工具及操作範圍,測試允許與不允許的角色,以及失敗回應。 | 越權操作、工具失敗卻回報成功,或無法區分讀取與寫入。 |
| 報表與自然語言分析 | 以已知資料核對篩選期間、合計、幣別與角色可見範圍。 | 數值或口徑不符、混用期間,或顯示不應存取的資料。 |
每次演示都留下可重現的實測紀錄
記錄樣本版本、需求原文、產品與環境、預期結果、實際結果、需人工處理的步驟、證據位置、負責人及複測結果。結果分為「通過」「待修正」「未測試」「不在本次範圍」,不要把未測試寫成通過。
若比較耗時或欄位正確率,先約定計算方式,使用相同樣本與環境,記錄人工更正時間。不要用單次演示推估所有文件的成效。
下載 AI 能力實測紀錄表(文字檔)AI 產生完成後,還要驗證什麼?
產生表單、流程或報表之後,仍要核對角色權限、分支、例外及資料來源,依企業程序測試與發布。若涉及 ERP,須分別驗證「簽核完成」和「交易寫入成功」,確認失敗重送及避免重複建單的處理。
SmartBPM 管理流程,SmartESB 規劃資料介接;AI 設計成果不代表 ERP 已完成串接。請依環境查閱BPM 與 ERP 分工及驗收重點、SAP 整合評估或NetSuite 整合評估。
以 SmartAI 演示規劃、確認與產生
SmartAI 支援以 PDF、範本或自然語言作為設計起點,由 AI 表單助理調整範本、提出表單、流程與報表規劃,使用者確認後產生。MCP 的可用工具、操作及權限依導入範圍確認。
帶入上述樣本,逐項記錄適用情境與待確認事項,再將確認結果列入採購與交付條件。
查看 SmartAI 設計流程與能力範圍 →常見問題
驗收 AI 功能前要先準備什麼?
準備一份去識別化 PDF、一份既有表單範本、一段自然語言需求與一組已知答案的測試資料,並事先確認可使用的測試環境、資料傳送範圍及負責人。
演示時可以上傳正式資料嗎?
不要在演示中上傳未經允許的個資、機密或正式交易資料。
測試結果要怎麼記錄?
記錄樣本版本、需求原文、產品與環境、預期結果、實際結果、需人工處理的步驟、證據位置、負責人及複測結果。結果分為「通過」「待修正」「未測試」「不在本次範圍」,不要把未測試寫成通過。
AI 產生表單與流程後,就代表 ERP 已串接完成嗎?
不代表。AI 設計成果不代表 ERP 已完成串接,須分別驗證「簽核完成」和「交易寫入成功」,並確認失敗重送及避免重複建單的處理。
帶一組樣本,確認 AI 能做到哪一步
先提供需求摘要,樣本與資料使用範圍於確認聯繫方式後討論。
預約 AI 能力演示回到 BPM 採購與交付檢核