为什么个人技巧不够
早期做 AI 产品时,Prompt 往往靠少数人“调”。某个同事很会写,效果就好;换一个人维护,质量就波动。这种方式适合 Demo,但不适合长期交付。
Prompt 本质上是产品规则、业务知识、交互策略和模型约束的组合。只要它影响线上结果,就应该像代码一样被管理。
Prompt Engineering 的工程化,不是把 Prompt 写得更玄,而是让它可审查、可复用、可回归、可追踪。
先建立模板
模板不是为了限制创造力,而是为了减少低级错误。一个稳定模板至少包含角色、目标、输入、输出格式、约束、边界处理和示例。
Prompt 必须有版本
如果线上回答变差,但你不知道当时用的是哪个 Prompt,就很难复盘。Prompt 版本要和模型版本、知识库版本、工具版本一起记录。
我会把 Prompt 分为三类管理:系统级 Prompt、任务级 Prompt、场景级 Prompt。系统级控制安全边界,任务级控制执行方式,场景级适配具体业务表达。
| 类型 | 用途 | 变更频率 |
|---|---|---|
| 系统级 | 身份、边界、安全规则 | 低 |
| 任务级 | 分类、检索、总结、评估等任务 | 中 |
| 场景级 | 不同业务场景的话术和规则 | 高 |
建立评审机制
Prompt 变更不能只靠“我试了几个问题感觉不错”。至少要经过样本回归、同伴评审和线上灰度。尤其涉及用户权益、流程判断、敏感回答时,必须有人确认业务边界。
- 样本回归:固定测试集不退化,新增样本有解释。
- 同伴评审:检查是否过度约束、是否遗漏异常场景。
- 灰度发布:先小流量观察,再扩大范围。
- 回滚方案:每次变更都能快速恢复到上一个稳定版本。
评估器是 Prompt 的保险
Prompt 再好也不能保证每次输出都可靠。评估器的作用,是在交付前再检查一次:事实是否一致、格式是否正确、是否引用了证据、是否需要转人工。
团队规范怎么落地
最后要形成一份团队规范:命名规则、模板结构、变更流程、评估样本、发布节奏、日志字段。规范不需要一开始很重,但必须让每个人知道该怎么改、改完怎么验。
当 Prompt 被纳入工程流程后,它就不再是某个人的“技巧”,而是团队可以持续迭代的产品资产。
总结
Prompt Engineering 的工程化,是 AI 产品走向稳定交付的一步。它让团队从“会调 Prompt”变成“能管理 Prompt”。前者靠经验,后者靠体系。
欢迎通过邮件和我交流:shaoyanyan91@163.com
本文首发于邵炎炎个人博客。转载请注明出处。