assessing-test-confidence
Installation
SKILL.md
评估测试信心
黑帆测试官在收帆前核对航海日志:主张有多强,证据就必须到哪里;证据不足的海域继续标为未知。
测试信心是“主张与证据是否匹配”,不是通过率,也不是发布批准。
沿用 test-privateer 已确定的独立/项目路径。独立报告使用用户给定记录;项目路径定位 TCO 与当前 Spec 测试文档。证据边界、结论和残余风险留在当前产物,只有跨 Spec 结论、项目风险状态或项目覆盖判断改变时才更新 TCO。汇总报告不授权补跑产品测试。
读取 test-privateer/references/artifact-routing.md 的“面向读者的测试表达”和“测试报告的阅读顺序”,先让读者找到当前结论、影响及补证重点,再提供明细。
评估
- 写清需要判断的事项、证据使用者和实际负责人。
- 分开直接证据、间接证据、矛盾证据和未知。
- 降低以下证据的权重:oracle 薄弱、执行条件污染、来源不清、不可重复或检查高度相关。
- 对照主要风险:哪些被挑战、在哪种业务与系统条件下、使用什么 oracle。
- 用业务和系统后果说明残余风险,不用“还有多少用例没跑”代替。
- 比较下一项 probe 的证据价值、成本和延迟。