专业提示词工程师和普通用户的差别,不是「会写」,而是「会改」。面对坏输出,先判断它坏在哪一类,再针对性修改。

四类典型问题与对策

  • 内容不对:缺上下文或示例 → 补 Few-shot、补背景材料
  • 格式不对:没约束输出结构 → 声明 JSON / Markdown / 字数
  • 风格不对:角色与语气没对齐 → 加角色设定与「禁止」清单
  • 推理错误:复杂任务一步到位 → 拆步骤、要求思维链

调试流程

  1. 记录:保留坏输出与当时的完整提示词,别凭记忆改
  2. 单变量:一次只改一个因素(示例、格式、温度、模型)
  3. 对比:新旧输出并排看,确认改对了而不是改巧合了
  4. 回归:保留一组基准测试用例,防止改 A 坏 B

别忽略「模型」这个变量

同样的提示词,换模型结果可能完全不同;温度从 0 调到 1 也会明显改变风格。调试时把模型、温度、提示词当成三个独立变量。

好的提示词是改出来的:每次迭代只动一个变量,坏输出是免费的测试样本。