Meta-Skills 与自我改进

四类 Meta-Skills

Meta-Skills: 其任务是创作、评估或改进其他 Skills 的 Skills。

  1. Authoring(创作): 从工作流描述生成 SKILL.md 草稿

    • Google ADK “skill factory” pattern
    • Anthropic’s skill-creator
  2. Assisted authoring from traces(从轨迹辅助创作): 观察 Agent 成功执行,将轨迹转化为 Skill

  3. Improvement(改进): 取现有 Skill + 失败的评估用例,提出编辑建议

    • Saboo’s SkillOptimizer
    • Karpathy’s autoresearch pattern
  4. Library evolution(库演化): 随时间增长库,如 Voyager 的 Minecraft Skill 库

哪里会出问题?

Meta-Skills 只有在评估套件完善时才能工作。Agent 会愉快地优化你指向的任何指标,包括容易作弊的指标。

必须保持的习惯: - Agent 写的任何内容都进入 “草稿” 级别,无论 Meta-Skill 多自信 - 前几次编辑保持人工参与 - 不要从 Meta-Skills 开始 —— 先让手动创作循环跑通