技能创建器

一个用于创建新技能并迭代改进它们的技能。

从宏观层面来看，创建技能的过程如下：

• 确定你希望技能做什么以及大致的实现方式
• 撰写技能草稿
• 创建几个测试提示词，并在"带技能的 Claude"上运行
• 帮助用户从定性和定量两个方面评估结果
  • 在后台运行的同时，如果还没有定量评估，就起草一些（如果已有则直接使用或按需修改）。然后向用户解释它们（或者如果已经存在，解释现有的评估）
  • 使用 eval-viewer/generate_review.py 脚本向用户展示结果，同时让他们查看定量指标
• 根据用户评估的反馈重写技能（如果定量基准测试中有明显缺陷，也一并修复）
• 反复迭代直到满意
• 扩大测试集并再次大规模测试

你使用此技能时的任务是弄清楚用户处于这个流程的哪个阶段，然后介入帮助他们推进。例如，用户可能说"我想做一个关于 X 的技能"。你可以帮助缩小范围、撰写草稿、编写测试用例、确定评估方式、运行所有提示词并反复迭代。

另一方面，用户可能已经有了技能草稿。这种情况下你可以直接进入"评估/迭代"环节。