Prompt Versioning
提示词版本管理
提示词版本管理会保存有名称、内容固定的正式版本。团队能审核、测试、发布,也能回到确定的旧版。
revision → eval → release → rollbackowner: support-ai · rev 7f2a客服团队把 refund-prompt.md 从 v6 改为 v7。他们用保存的案例测试两个版本,先让少量请求使用 v7,结果变差就回到 v6。+ 规则更清楚48 / 4810% → v7prompt file + revision + eval + release reference + rollbackOPS另一个例子
客服团队把 refund-prompt.md 从 v6 改为 v7。他们用保存的案例测试两个版本,先让少量请求使用 v7,结果变差就回到 v6。
主要部分
- 01提示词文件或标识名称
- 02固定版本内容
- 03更改差异和负责人
- 04评测结果
- 05发布引用
- 06回滚引用
什么时候用
正式提示词跟随代码更改,而且需要审核、测试、发布或回滚时,可以使用。
什么时候不要用
不要在没有保存新旧版本时直接修改正式提示词。每次更改仍要经过审核和测试。
代码里的名称
prompt file + revision + eval + release reference + rollback 上线前要检查
检查模型与提示词版本、参考数据、有版本号的评估集与指标。验证答案能否连回来源证据,也要检查工具权限与隐私。再检查常见失败、拒答、安全备用做法与人工复核。也要检查监控、成本、速度与恢复方式。
预期结果:使用或评估 提示词版本管理 (Prompt Versioning),让 AI 行为可以衡量,也能连回证据。 用户场景:客服团队把 refund-prompt.md 从 v6 改为 v7。他们用保存的案例测试两个版本,先让少量请求使用 v7,结果变差就回到 v6。 AI 方法或概念:提示词版本管理 (Prompt Versioning)。 适用理由:正式提示词跟随代码更改,而且需要审核、测试、发布或回滚时,可以使用。 不应使用的情况:不要在没有保存新旧版本时直接修改正式提示词。每次更改仍要经过审核和测试。 AI 要求:定义输入与参考证据。设置模型和工具权限。使用有版本号的评估数据与指标。说明失败、拒答、隐私、速度与成本限制。 运营防护:保留可查询记录,并隐藏其中的敏感数据。提供用户看得懂的安全备用做法。标出必须由人工复核的步骤,并定义模型或提示词的恢复方式。 验收标准:在有版本号的评估集上记录当前基线与目标。测试边界案例与恶意输入。验证安全备用做法、监控、权限与恢复方式。 证据与限制(证据边界):它只代表该来源的官方说法。其他平台或团队可能有不同用法。 待确认:目标任务、模型与版本、评估负责人、参考数据、风险阈值、工具权限,以及生产环境的安全备用做法。
检查这份需求
请 AI 编程助手检查当前如何使用 提示词版本管理 (Prompt Versioning)。 定义:提示词版本管理会保存有名称、内容固定的正式版本。团队能审核、测试、发布,也能回到确定的旧版。 生产环境检查:检查模型与提示词版本、参考数据、有版本号的评估集与指标。验证答案能否连回来源证据,也要检查工具权限与隐私。再检查常见失败、拒答、安全备用做法与人工复核。也要检查监控、成本、速度与恢复方式。 修改程序前,先列出看到的证据、缺口、严重程度,以及最小且安全的修正。