营运与维护 · 实作指南
修改提示,也应视为一次业务版本发布
提示只改几个字,也可能改变分流、依据使用及对客户承诺的语气。

先说清楚行为改变
假设团队修改提示,希望客服回覆更有信心。这可能同时减少不确定语气,让原本待核实的内容变成承诺。测试前先写出预期行为改变,以及哪些界线不得改动。风格改善若把缺乏依据的答案写成无条件保证,或改变需要人工覆核的范围,就不是可接受的文字优化。
连周边设定一起版本化
提示须连同模型设定、工具定义、检索政策和输出格式一起保存。某份提示在一种背景测试良好,其他输入改变後可能完全不同。每次修改附上简短原因,并连到测试。营运真正需要知道的,不是谁写了聪明句子,而是哪个设定产生了已接受行为,以及出了问题时要回到哪个版本。
流程一览
输入整理审核执行
比较差异,而不只看总分
用同一批获准案件比较新旧版本,检查升级、来源选择或事实承诺改变的例子,也要加入以前失败过的情况。总分较高可能掩盖新引入的不可接受错误。把原始输出与覆核解释并排保存,让之後维护的人知道某个例子为何重要,而不是只继承一串不知道由来的测试分数。
逐步推出,保留返回路径
先在受限流程或用户群推出,观察相关例外,并保留旧设定及回复条件。结构化开发文件提供背景,但接受标准仍来自企业自己的覆核。不要因为一次展示好看,就在所有客户中静默换提示。小字眼可能影响大责任,让变更可见、可测、可返回,才是可维护的实施方式。
可以立即进行的练习
列一项预期改善与两项不得改变的行为,逐项测试,并把差异解释连到版本。新例外出现时,先做成可重现案例,不要只加长提示。回归集是有用证据,不是所有未来对话的保证。也要检查工具、模型与检索版本是否一起改了,否则无法把结果归因到文字修改;一次只改可解释的变量,比靠综合分数宣布提示变得更好更可靠。
来源与延伸阅读
- Building effective agentsBuilding effective agentsAnthropic · 官方文件 ·
- Generative AI lifecycle — Generative AI LensGenerative AI lifecycle — Generative AI LensAmazon Web Services · 官方文件 ·
编辑原则
本系列以 AI 辅助原创撰写,并对照连结的公开来源。实作建议与假设情境属编辑分析,并非客户实绩。来源发布日期及产品细节可能与本系列整理日期不同。