Meta-Skills 与自我改进
四类 Meta-Skills
Meta-Skills: 其任务是创作、评估或改进其他 Skills 的 Skills。
Authoring(创作): 从工作流描述生成 SKILL.md 草稿
- Google ADK “skill factory” pattern
- Anthropic’s skill-creator
Assisted authoring from traces(从轨迹辅助创作): 观察 Agent 成功执行,将轨迹转化为 Skill
Improvement(改进): 取现有 Skill + 失败的评估用例,提出编辑建议
- Saboo’s SkillOptimizer
- Karpathy’s autoresearch pattern
Library evolution(库演化): 随时间增长库,如 Voyager 的 Minecraft Skill 库
哪里会出问题?
Meta-Skills 只有在评估套件完善时才能工作。Agent 会愉快地优化你指向的任何指标,包括容易作弊的指标。
必须保持的习惯: - Agent 写的任何内容都进入 “草稿” 级别,无论 Meta-Skill 多自信 - 前几次编辑保持人工参与 - 不要从 Meta-Skills 开始 —— 先让手动创作循环跑通