返回文章列表

營運與維護 · 實作指南

修改提示,也應視為一次業務版本發布

提示只改幾個字,也可能改變分流、依據使用及對客戶承諾的語氣。

提示詞修改走經版本管理、測試與回復的發佈路徑。
AAhouse 原創 AI 輔助主題插畫

先說清楚行為改變

假設團隊修改提示,希望客服回覆更有信心。這可能同時減少不確定語氣,讓原本待核實的內容變成承諾。測試前先寫出預期行為改變,以及哪些界線不得改動。風格改善若把缺乏依據的答案寫成無條件保證,或改變需要人工覆核的範圍,就不是可接受的文字優化。

連周邊設定一起版本化

提示須連同模型設定、工具定義、檢索政策和輸出格式一起保存。某份提示在一種背景測試良好,其他輸入改變後可能完全不同。每次修改附上簡短原因,並連到測試。營運真正需要知道的,不是誰寫了聰明句子,而是哪個設定產生了已接受行為,以及出了問題時要回到哪個版本。

流程一覽

輸入整理審核執行
示意流程圖,請按團隊實際情況調整。

比較差異,而不只看總分

用同一批獲准案件比較新舊版本,檢查升級、來源選擇或事實承諾改變的例子,也要加入以前失敗過的情況。總分較高可能掩蓋新引入的不可接受錯誤。把原始輸出與覆核解釋並排保存,讓之後維護的人知道某個例子為何重要,而不是只繼承一串不知道由來的測試分數。

逐步推出,保留返回路徑

先在受限流程或用戶群推出,觀察相關例外,並保留舊設定及回復條件。結構化開發文件提供背景,但接受標準仍來自企業自己的覆核。不要因為一次展示好看,就在所有客戶中靜默換提示。小字眼可能影響大責任,讓變更可見、可測、可返回,才是可維護的導入方式。

可以立即進行的練習

列一項預期改善與兩項不得改變的行為,逐項測試,並把差異解釋連到版本。新例外出現時,先做成可重現案例,不要只加長提示。回歸集是有用證據,不是所有未來對話的保證。也要檢查工具、模型與檢索版本是否一起改了,否則無法把結果歸因到文字修改;一次只改可解釋的變量,比靠綜合分數宣布提示變得更好更可靠。

來源與延伸閱讀

編輯原則

本系列以 AI 輔助原創撰寫,並對照連結的公開來源。實作建議與假設情境屬編輯分析,並非客戶實績。來源發布日期及產品細節可能與本系列整理日期不同。

想把想法變成可驗證的試行?

聊聊你的工作流程