prompt-eval
Installation
SKILL.md
评估 Prompt
评估 Prompt 是否让目标模型在当前宿主和任务中稳定表现出目标行为。交付审查、最小修正和验证证据;不因文字看起来专业就判好,也不因模型、宿主或版本变化就机械重写。
1. 固定评估对象
明确目标模型、宿主、任务、使用者、期望行为、允许自由度和真实边界。模型或宿主未知时仍可审查业务契约和内部冲突,但模型适配保持未验证。
盘点实际进入模型的 Prompt 表面:System Prompt、Skill/规则文件、工具描述、请求模板、示例、运行配置及会改变优先级的宿主指令。只读取当前任务可访问的部分;缺失内容说明影响,不假定单个文件就是完整 Prompt。
完成条件: 能指出评估针对哪个模型、宿主、任务与 Prompt 组合,以及本轮要改善或保护的具体行为。
2. 建立行为依据
优先使用真实失败、运行记录、用户反馈和已确认规则。区分: