跳到主要内容

评估模板

最近更新 2026/10/30

评估模板提供可复用的 Judge Prompt。使用模板创建的是独立评估器,模板本身不承担任务评分。

适用对象:使用模板的业务人员及维护项目模板的管理员。核对基线:2026-10-30 项目当前实现;已部署环境的入口可能随版本和权限有所不同。

检索关键词:内置模板、项目模板、启用、停用、模板版本。

1. 从模板创建评估器​

  1. 进入“评估器”,点击“从模板创建”。
  2. 填写评估器名称,选择已启用的模板,预览用途和 Prompt。
  3. 创建后进入评估器详情,补齐模型并按场景调整 Prompt,保存后确认已发布版本。

模板只是起点。即使名称相同,也应检查它要求哪些变量、适用于回答质量还是执行过程,以及需要什么执行证据。

2. 管理项目模板​

  1. 在评估器列表点击“管理模板”。管理员点击“新建模板”,填写名称、分类、Judge Prompt 与可选说明。
  2. Prompt 的变量按双花括号语法自动提取,确认名称、分类、Prompt 与变量后创建。当前创建表单不需要手动填写模板编码。
  3. 创建后检查列表中的编码、版本、来源和状态。系统保留模板版本;创建新模板不会改写已有评估器。
  4. 需要停止后续使用时停用项目模板,恢复时启用。内置模板保持只读。

同编码优先选用当前项目最新的已启用版本;没有可用项目版本时可回退内置模板。停用一个项目模板不一定意味着同编码内置模板也不可用。模板启停只影响后续创建,不修改已存在评估器或历史评分。

3. 语言与适用边界​

内置模板的名称、说明和 Prompt 随界面语言展示。基于内置模板创建时保存当时语言的内容;后续切换界面语言不会重新翻译已保存的评估器。项目自定义模板保留用户原文。

工具链路合理性模板依赖在线 Agent 的执行轨迹,不能用于预置结果或模型直调。看不到的远端内部过程不能据此推断;轨迹不完整时可能导致该项评分失败。

4. 下一步与相关页面​

返回使用手册首页:

AI评测平台

这篇文档对你有帮助吗?