这个提示词用来做什么
想评估某个 Agent / 模型在真实任务上的水平,不满足于跑官方榜单,需要自己出题、自己定判分标准
提示词全文
帮我给 {要测的 Agent / 模型} 出一套能自己判分的小测。
## 先定清楚
要测的能力:{比如代码改动 / 多步检索 / 长文档问答 / 工具调用,挑一两个}
它在真实工作里长什么样:{一两句场景}
我手上有哪些能当标准答案的材料:{数据 / 参照结果 / 官方文档}
## 出题要求
1)出 8~12 道题,每题都给「标准答案或判定规则」,让我能客观判对错,而不是凭感觉打印象分。
2)难度分开:3~4 道基础、4~5 道需要多步推理、2~3 道容易踩坑(信息不全、有干扰项、指令里埋了陷阱)。
3)每题标注:考的是什么、坑有多大、怎么算分(全对才给分,还是部分给分)。
4)其中至少 2 道要能暴露「看着对、其实没核对事实」的毛病——比如给一个不存在的前提,看它会不会顺着往下编。
5)再给一份判分表模板,我跑完直接填。
最后提醒我:这套题只测了这几项能力,别拿它推出「它总体上聪明不聪明」的结论。
怎么用
- 把上面的提示词全文复制到对话窗口或工作流里。
- 把花括号占位符(如 {任务描述})替换成你自己的内容。
- 条目越具体,产出越稳定;不需要的条目可以直接删掉。
输出示例
自测的价值在于判分标准是你自己定的、贴着你的真实任务;官方榜单测的是通用能力,答得好不代表它在你那件具体活儿上靠谱。留几道埋坑题,比多刷几道常规题更能看出它在没人盯着时会不会编。
基本信息
- 分类:Agent
- 标签:Agent · 评测 · 出题 · 可验证
- 收录日期:2026-10-13
同类提示词
- AI Agent 任务分解器
- AI Agent 需求评审清单
- 多 Agent 协作任务编排
- 把重复劳动固化成 Agent 技能:记录、参数化、验收、沉淀四步
- 给 Agent 开权限前做最小化评审:列动作、分风险、定审批与审计
- Agent 失败复盘五问:判断问题出在模型、工具还是流程
- Agent 交接摘要:把会话之外的状态写成可接手的交接单
- 权限三档:把一次任务拆成「可自主 / 需确认 / 禁止」
- 智能体出网与凭据边界自查:把训练/评测沙箱当成生产攻击面
- 智能体上线前的授权边界清单:它能读什么、能改什么、出事怎么查
- 让 AI 先替你列「这套 Agent 上线后会怎么坏」,再决定要不要上线
- 给要跑长链路的智能体列一份「必须停下来问人」的清单