∞直接答案
直接答案
在模型退役前,保存团队能控制的工作成果。将提示词、测试案例和带日期的结果保存在服务商面板之外。提示词是引导模型的文本。用真实任务测试新路径。为旧路径终止后准备安全的备用方案。指定切换负责人,也为每个未解决问题指定负责人。
列清哪些功能可能停止工作
先选一个使用外部 AI 模型的核心任务。列出准确的模型标识和托管它的公司。模型标识就是请求中使用的模型名称。再加上 API 路径,也就是代码调用的服务路径。记录所需的已保存提示词、文件和工具。
核对该模型、服务和托管方的通知。不要给整个品牌套用同一个停用日期。按 2026 年 11 月 5 日阅读的内容,OpenAI 列出了近期服务变化。其已保存的提示词对象和 Evals 服务计划于 2026 年 11 月 30 日关闭。Evals 已于 10 月 31 日转为只读。这些日期不代表所有 OpenAI 模型都将停止服务。 [1]
Anthropic 表示,调用已退役模型会失败。对于公开发布的模型,其通知期至少为 60 天。这适用于正在使用模型的客户。合作伙伴运营的托管平台可以自行设定日期。 [2] 核对你所用的托管方,不要只看模型名称。
- 核心任务、准确模型标识和托管方。
- API 路径、已保存状态和关联工具。
- 通知链接、核查日期和切换负责人。
保存可用的工作副本
将有权保留的文件存入自己的安全空间。保存提示词原文和每次任务会变动的字段。也要保留代码版本、工具规则和回答必需的字段。不要把密钥等秘密放入这组文件。删除测试不需要的客户信息。
OpenAI 的提示词指南要求将提示词内容移入代码。它也把提示词版本和测试移入自己的代码仓库。代码仓库保存代码及其变更记录。 [4] 只有已保存的提示词标识,不等于有提示词原文。确认团队不用该标识也能运行任务。
保存测试输入、预期结果和带日期的历史输出。如果测试工具终止服务,要在别处重建检查。OpenAI 的 Evals 迁移指南说明如何在 Promptfoo 中重建测试。它不要求使用 Evals 导出功能。指南提醒,评分可能不同。信任重建的测试前,先验证它们。 [5]
- 提示词原文、变动字段和代码版本。
- 测试输入、预期结果和历史输出。
- 评分规则、源文件和访问限制。
测试完整任务,不只测试模型
从用户需要完成的工作中选择案例。包括常见任务、难题和不安全请求。OpenAI 建议使用针对具体任务的测试,并由人核查。同一输入也可能得到不同的 AI 输出。 [3] 一次成功演示不足以证明切换安全。
用同一组获准使用的测试输入运行新旧路径。检查事实、回答字段和工具动作。测试产品支持的每种语言。检查文件缺失或调用失败时会怎样。换了模型名称,不代表完整任务就能正常运行。
在同一组任务上测量成本和耗时。也要统计失败调用和重试。重试是在一次尝试失败后再次调用。在每项结果旁记录测试日期、模型标识和案例数量。复杂判断应由人负责。
- 相同任务输入和明确的通过规则。
- 事实、字段、工具和安全拒绝检查。
- 成本、耗时、失败情况和审核人笔记。
设定暂停规则和备用方案
开始测试前,先定好自己的通过规则。这里没有适用于所有初创公司的通过分数。私人数据泄露不应被平均分掩盖。核心安全检查失败时,应暂停切换。修复并重新测试后,再扩大使用范围。
检查通过后,先小范围上线。定好谁能停止上线,以及什么情况会触发停止。只有旧模型仍在服务,才能切回去。模型退役后,它就不再是备用方案。 [2]
准备另一条已测试的路径,或功能有限的人工模式。人工模式由人完成任务。告知用户哪些功能暂停了。未经批准,不要把用户数据发送给新的托管方。改变私人文件的去向前,检查数据条款和当地法律。
- 核心安全或任务检查失败时的暂停规则。
- 小范围上线、停止条件和指定负责人。
- 旧路径结束后仍可用的已测试备用方案。
试做客服回答的切换记录
这是示例,不是真实初创公司的结果。一家公司用 AI 根据客服指南起草回答。创始人计划在当前模型退役前迁移。团队将指南、提示词和测试集保存在自己的安全空间。
测试要求回答正确,并附上来源链接。不明确的案例必须交给人处理。团队检查新路径是否遵守这些规则。也检查指南缺失时是否会安全暂停。这里不声称任何成本、速度或通过率。
如果新路径编造退款规则,应暂停切换。问题修复前,让员工继续起草回答。记录失败案例、负责人和下次测试日期。清楚的记录说明哪里失败,而不只是说测试做过了。
- 任务:根据已批准的指南起草回答。
- 证据:带日期的案例、来源链接和审核笔记。
- 问题:编造规则;暂停并重新测试。
向投资者展示证据和未解决问题
尽职调查就是投资前的检查。给投资者一份简短、附有来源链接的退出记录。说明哪项任务依赖哪家托管方。展示已保存文件、测试日期、结果和备用方案。未经测试的说法应标为未解决,不要标为已完成。
种子前阶段,先做产品最需要的任务。种子轮阶段,将测试对应到已经交付的代码版本。A 轮阶段,指定工具变化时由谁重复检查。这些是规划步骤,不是每个融资阶段的固定规则。
在记录中保留通知链接和下次检查日期。请技术负责人审核切换计划。复杂的数据或合同问题,应咨询有资质的本地律师。经测试的退出方案减少一项风险,但不会消除外部公司或工具带来的全部风险。
- 主张、带日期的证据和未解决问题。
- 指定负责人、下次检查和停用触发条件。
- 备用方案的范围及用户会看到的限制。
FAQ
常见问题
被弃用是否意味着模型已经关闭?
不一定。Anthropic 用“弃用”表示模型仍能工作。已退役模型不再可用,请求会失败。 [2] 核对准确的模型、托管方和日期。
能否只保留旧提示词标识?
不能。保留有权存储的提示词原文和变动字段。OpenAI 的迁移指南将提示词放入产品代码。 [4] 不要假定服务结束后,已保存标识仍能使用。
能否复制托管的模型本身?
不要这样假定。本计划保存的是有权保留的工作成果和证据。它不赋予你服务商模型文件的权利。与服务商核对合同和可用工具。
投资者应该看到什么?
展示核心任务、托管方、带日期的测试和未解决问题。加上切换负责人及已测试的备用方案。服务商推荐的模型只是起点,不是任务能正常工作的证明。
REF
资料来源
- 1
- 2
- 3
- 4
- 5
OpenAI — Konstantine Kahadze
Moving from OpenAI Evals to Promptfoo — 3 June 2026 ↗
