“平台可用”不等于“场景适用”
企业过去采购软件,往往先选择平台,再在平台内配置流程。模型进入核心应用后,决策顺序正在发生变化:平台决定数据、权限、审批和交易如何运行,模型则影响信息如何被理解、判断和生成。
这两部分不能混为一谈。
例如,在同一套供应链系统中,模型可能分别承担:
这些任务表面上都属于“供应链 Agent”,但对模型的要求完全不同。材料归纳更看重覆盖率与引用准确性,结构化提取更看重字段稳定性,异常解释更看重推理质量,而触发交易还必须验证权限、参数与审批条件。
因此,企业不应问“哪个模型最好”,而应问:
> 对这个具体任务,在这些业务约束下,哪个模型的综合表现可以被接受?
这是从模型排行榜走向业务准入的关键一步。
- 归纳供应商风险材料;
- 从合同和邮件中提取交付约束;
- 解释异常库存形成的可能原因;
- 草拟处置建议;
- 调用工作流发起补货、替换部件或升级审批。
建立一张“场景—模型资格表”
当核心应用允许使用多个模型时,最容易出现的误区,是把模型切换当作普通技术配置:只要接口兼容、调用成功,就认为可以替换。
实际上,模型变化可能改变答案结构、工具调用方式、拒答边界、延迟、成本以及错误分布。Google Cloud 在近期关于基础模型升级的实践文章中也指出,模型更新通常需要重新测试和证明质量,人工验证可能成为升级的主要成本。
企业需要的不是一份静态“推荐模型名单”,而是一张持续更新的场景—模型资格表。每个组合至少应说明:
| 管理项 | 需要回答的问题 | | --- | --- | | 业务任务 | 模型究竟完成哪一步,输出交给谁或哪个系统? | | 允许边界 | 只读、建议、起草、发起操作,还是可以完成交易? | | 质量门槛 | 准确率、完整率、引用、结构稳定性分别达到什么水平? | | 风险要求 | 哪些错误不可接受,哪些结果必须人工复核? | | 运行约束 | 延迟、吞吐、成本、数据地域与日志保留有何要求? | | 已批准版本 | 当前允许使用哪个模型及版本,依据哪组测试? | | 备选与回退 | 主模型异常、涨价、退役或质量下降时如何切换? |
这样,企业批准的就不再是抽象的“Gemini”“Claude”或“某某大模型”,而是“某个模型版本在某个任务边界内具备资格”。
模型更换,应被视为一次业务变更
模型迭代速度远快于传统 ERP 版本。新模型可能更便宜、更快,也可能在某些能力上明显提升。但“更新”本身并不自动等于“对现有流程更好”。
尤其当 Agent 已经连接业务对象、审批流和交易系统时,模型升级会影响整个执行链。企业至少应保留四项机制:
1. 固定业务回归集
回归集不能只包含通用问答,而应来自真实业务:正常案例、边界案例、历史事故、高金额操作、信息冲突和不完整输入都要覆盖。测试结果还要按风险分层,不能用平均分掩盖关键场景退化。
2. 比较输出之外的行为
除了答案是否正确,还要检查模型选择了什么工具、传递了哪些参数、何时请求审批、是否引用了正确数据、遇到不确定信息时是否停止。对可执行 Agent 而言,行为轨迹往往比文本表达更重要。
3. 小流量并行验证
新旧模型可以先在不执行真实交易的条件下并行运行,比较结果和行为差异;通过后再进入有限场景或有限用户的灰度阶段。重要的是预先定义扩大范围和立即回退的条件,而不是上线后凭感受观察。
4. 保留可审计的选择依据
企业需要知道某次业务结果由哪个模型、哪个版本、哪套提示与规则产生,并能解释为什么当时允许它用于该场景。这既是问题定位的基础,也是采购谈判、风险审查和后续复盘所需的证据。
多模型不会自然带来自由,只有可替换能力才会
更多模型进入企业应用,理论上可以减少单一供应商依赖,也能让企业按任务平衡质量、速度与成本。但如果流程、评测和提示资产都绑定在某一模型的特殊行为上,“模型可选”仍可能只是产品页面上的选项。
真正的可替换能力来自三类企业自有资产:
1. 任务定义属于企业。 输入、输出、权限、人工责任和成功标准不能只存在于供应商配置中。 2. 评测证据属于企业。 企业要掌握真实业务测试集、历史失败案例和验收记录,而不是只看厂商基准。 3. 运行记录属于企业。 模型版本、调用轨迹、异常、人工修改和最终业务结果需要能够关联起来。
有了这些资产,企业才可能在模型性能、成本或供应条件变化时重新评估,而不必从头理解自己的流程。
现在可以先做一件小事
企业无需立即建设庞大的“多模型平台”。更实际的起点,是选择一个已进入真实工作的 AI 场景,做一次模型替换演练:
这次演练的价值,不只是找到一个备选模型。它会暴露企业是否真正掌握了任务标准、评测资产和运行证据。
Oracle 与 Google Cloud 的新合作说明,模型正在越来越深入地进入企业核心应用。接下来,企业竞争力不会来自“接入了最多模型”,而来自能否让不同模型在明确边界内接受验证、稳定工作,并在条件变化时安全替换。
当模型成为业务系统的可变部件,模型治理也必须从采购清单,走进日常变更管理。
---
- 明确当前模型承担的最小任务边界;
- 用另一款模型运行同一组真实案例;
- 比较质量、行为、成本和人工复核负担;
- 记录无法直接替换的原因;
- 补齐回归测试与回退方案。