PoC 上線交接範本:驗收準則、護欄設定與交付清單(可下載)
PoC 跑通不等於能上線,兩者之間隔著一整段沒人做的交接。這份 PoC 上線交接範本把 FDE 方法論裡最關鍵、也最常被跳過的一步,拆成驗收準則、護欄設定與交付清單三份可下載文件——因為 Demo 很美不算數,上線且有人在用才算數。
작성자
Tenten AI FDE 團隊
導入方法論
게시일
2025년 8월 31일
읽는 시간
5 分鐘

PoC 跑通那天,大家最容易做錯一件事:把「模型答對了」當成「專案可以上線了」。這兩件事之間,隔著一整個交接環節。而多數 PoC 之所以死在抽屜裡,不是技術不行,是交接沒人做——沒有人把驗收準則、護欄、責任歸屬白紙黑字地交出去。
PoC 上線交接範本,就是把這段最容易被跳過的環節,變成一份可以照著填、照著簽的文件。它回答三個問題:這套系統在什麼條件下算「驗收通過」?它被允許做什麼、禁止做什麼?上線後誰負責看、誰負責修?把這三題寫清楚,PoC 才有資格談上線。
為什麼交接是 PoC 最脆弱的一段
我們接過一個製造業的案子。RAG 知識系統在 PoC 階段回答準確率漂亮,客戶很滿意,原廠也交了一份 30 頁的技術報告。三個月後我們回訪,系統幾乎沒人用。
問題出在交接。那份報告寫滿了模型指標,卻沒寫「當文件更新後,誰負責重建索引」;沒寫「回答引用到過期規範時,系統該擋還是該放」;也沒寫「現場工程師發現答錯,回報給誰」。於是第一次答錯之後,沒有人知道該找誰,信任崩了,大家默默改回翻紙本。
Demo 很美不算數,上線且有人在用才算數。交接文件的作用,就是把「有人在用」需要的所有前提,從工程師的腦袋裡搬到紙上。
驗收準則:寫成可量測的門檻,不是形容詞
「準確度要高」不是驗收準則,是願望。可驗收的準則長這樣:在 200 題黃金測試集上,答案正確率 ≥ 85%,引用來源正確率 ≥ 95%,單次回應 P95 延遲 ≤ 4 秒,幻覺率(無來源杜撰)≤ 2%。
關鍵是這組數字要在交接前雙方簽字確認,而且測試集由客戶的業務專家出題,不是工程團隊自己出。我們的做法是把驗收拆成兩層:功能層(答得對不對)和營運層(壞了看不看得到)。營運層常被忽略,但它決定系統能不能活過第一個月。
護欄設定:定義系統「不准做什麼」
護欄比功能更能決定上線信任。一套沒有護欄的 Agentic 工作流,能力越強越危險。交接時至少要明確以下幾類邊界。
| 護欄類型 | 要設定的內容 | 失守後果 |
|---|---|---|
| 輸入護欄 | 敏感資料遮罩、越權查詢攔截 | 個資外洩、合規事故 |
| 輸出護欄 | 無來源不作答、免責與轉真人條件 | 幻覺被當成官方答覆 |
| 行動護欄 | Agent 可執行/需人工覆核的動作清單 | 自動發出錯誤指令 |
| 成本護欄 | 單日 token 上限、異常呼叫告警 | 帳單失控、被濫用 |
每一條護欄都要對應一個「觸發時的處置」和「負責人」。護欄沒有負責人,等於沒有護欄。
交付清單:交接當天要交出的東西
交接不是開個會口頭說明,是交出一份可被稽核的清單。以下是我們每個 FDE 專案上線前必到齊的項目。
| 交付項 | 內容 | 驗收方式 |
|---|---|---|
| 驗收報告 | 黃金測試集結果與門檻對照 | 雙方簽字 |
| 護欄設定表 | 四類護欄 + 處置 + 負責人 | 逐條演練一次 |
| 監控儀表板 | 正確率、延遲、成本、回報量 | 現場登入確認 |
| 回報與修復流程 | 誰回報、誰分診、SLA 時限 | 跑一次模擬工單 |
| 資料更新流程 | 知識來源更新後的重建步驟 | 實際更新一次 |
| 回滾方案 | 出事時如何降級或切回舊流程 | 演練切換 |
| 責任分工表(RACI) | 上線後每項工作的歸屬 | 相關人確認 |
這份清單的精神是:每一項都要「當場驗一次」,而不是「文件裡有寫」。文件裡有寫,和現場真的能跑,是兩回事——這條界線,就是 PoC 死亡率的分水嶺。
交接完成,採用才剛開始
一份好的交接範本,不會讓專案上線那天變輕鬆,它只是把後面三個月會踩的雷,提前攤在桌上。真正的採用曲線,是從交接後第一次答錯、第一次資料更新、第一次有人回報開始長出來的。
我們在 Tenten 做 FDE,把工程師派進客戶現場,很大一部分工作就是盯著這份清單一項一項驗完,再把系統交到會用它的人手上。範本可以下載、可以照抄,但那句話始終沒變:上線且有人在用,才算數。
