營運與維護 · 實作指南
修改提示,也應視為一次業務版本發布
提示只改幾個字,也可能改變分流、依據使用及對客戶承諾的語氣。

先說清楚行為改變
假設團隊修改提示,希望客服回覆更有信心。這可能同時減少不確定語氣,讓原本待核實的內容變成承諾。測試前先寫出預期行為改變,以及哪些界線不得改動。風格改善若把缺乏依據的答案寫成無條件保證,或改變需要人工覆核的範圍,就不是可接受的文字優化。
連周邊設定一起版本化
提示須連同模型設定、工具定義、檢索政策和輸出格式一起保存。某份提示在一種背景測試良好,其他輸入改變後可能完全不同。每次修改附上簡短原因,並連到測試。營運真正需要知道的,不是誰寫了聰明句子,而是哪個設定產生了已接受行為,以及出了問題時要回到哪個版本。
流程一覽
輸入整理審核執行
比較差異,而不只看總分
用同一批獲准案件比較新舊版本,檢查升級、來源選擇或事實承諾改變的例子,也要加入以前失敗過的情況。總分較高可能掩蓋新引入的不可接受錯誤。把原始輸出與覆核解釋並排保存,讓之後維護的人知道某個例子為何重要,而不是只繼承一串不知道由來的測試分數。
逐步推出,保留返回路徑
先在受限流程或用戶群推出,觀察相關例外,並保留舊設定及回復條件。結構化開發文件提供背景,但接受標準仍來自企業自己的覆核。不要因為一次展示好看,就在所有客戶中靜默換提示。小字眼可能影響大責任,讓變更可見、可測、可返回,才是可維護的導入方式。
可以立即進行的練習
列一項預期改善與兩項不得改變的行為,逐項測試,並把差異解釋連到版本。新例外出現時,先做成可重現案例,不要只加長提示。回歸集是有用證據,不是所有未來對話的保證。也要檢查工具、模型與檢索版本是否一起改了,否則無法把結果歸因到文字修改;一次只改可解釋的變量,比靠綜合分數宣布提示變得更好更可靠。
來源與延伸閱讀
- Building effective agentsBuilding effective agentsAnthropic · 官方文件 ·
- Generative AI lifecycle — Generative AI LensGenerative AI lifecycle — Generative AI LensAmazon Web Services · 官方文件 ·
編輯原則
本系列以 AI 輔助原創撰寫,並對照連結的公開來源。實作建議與假設情境屬編輯分析,並非客戶實績。來源發布日期及產品細節可能與本系列整理日期不同。