Sep 22, 2026

Orchestra 的 98 个研究 skill 给 agent 带来完整 ML 生命周期

一套 13k-star、覆盖 23 个类别的 98 个 skill——微调、后训练、推理、评测、论文写作——顶层的 autoresearch 负责调度整个研究回路。

#tutorial#research#ai-agents

做 ML 研究意味着同时摆弄几十种专用工具,Orchestra Research 的 README 诊断得很直接:研究者花在调试基础设施上的时间比验证假设还多。它给出的答案就是这套 13k-star 的库——README 自称是最全面的开源 skill 库,能让 AI agent 自主完成从想法到论文的 AI 研究。

为什么这个 Skill 重要

这份清单在 v1.7.1 做过全仓对账,并配了一个 CI 漂移守卫——文档里的数量一旦和磁盘上的实际数量分叉,CI 直接失败——目前为 23 个类别、98 个 skill。覆盖面正对应一条真实的研究链路:4 个微调 skill(Axolotl、LLaMA-Factory、PEFT、Unsloth),8 个后训练 skill(TRL、GRPO、OpenRLHF、SimPO、verl、slime、miles、torchforge),6 个分布式训练 skill,4 个推理 skill(vLLM、TensorRT-LLM、llama.cpp、SGLang),5 个 RAG skill,7 个多模态 skill,外加评测、机制可解释性、MLOps、ML 论文写作和选题构思。

站在最上层的是 autoresearch——单个编排 skill,采用双回路架构:内层优化回路加外层综合回路。它管理从文献调研到论文写作的完整生命周期,并自动路由到领域 skill,agent 不需要知道该调用哪个领域 skill。demos 画廊里有两篇 README 称由 agent 用它端到端完成的论文:一篇发现范数异质性可以预测微调难度,另一篇把 DPO 分析为秩 1(rank-1)扰动。

安装

一条命令启动交互式安装器,自动探测你已装的编程 agent(README 列出 Claude Code、Hermes Agent、OpenCode、Qoder、Cursor、Gemini CLI 等):

npx @orchestra-research/ai-research-skills

skill 安装到 ~/.orchestra/skills/ 并以符号链接接入各个 agent(Windows 上回退为复制),你可以全量安装,也可以只装 quickstart 套装、某个类别或单个 skill。两个管理命令负责日常维护:

npx @orchestra-research/ai-research-skills list
npx @orchestra-research/ai-research-skills update

也可以一句话把整座库交给你的 agent:

Read https://www.orchestra-research.com/ai-research-skills/welcome.md and follow the instructions to install and use AI Research Skills.

实战:经 Claude Code marketplace 安装单个类别

全库装入是很重的上下文。如果你只需要微调,marketplace 路线可以只安装单个类别:

/plugin marketplace add orchestra-research/AI-research-SKILLs
/plugin install fine-tuning@ai-research-skills

其他类别同理——post-training@ai-research-skills、inference-serving@ai-research-skills、distributed-training@ai-research-skills。

实战:直接要一次微调

skill 装好之后,照 README 用例的方式把任务说出口:

I need to fine-tune Llama 3 with my custom dataset. Use the Axolotl skill
to set up a YAML config, then walk me through launching training.

每个 skill 结构一致:一份 50–150 行的 SKILL.md 速查,背后是 references/ 目录里的深度文档——README 称其素材来自官方仓库、真实 GitHub issue 和生产级工作流。

技巧

  • 除非要跑自主研究,否则按类别安装而不是 98 个全上——消费整份清单的是 autoresearch 这一层。
  • README 自己的统计表给出平均每个 skill 约 420 行,所以单看任何一个 skill 也比速查表厚得多。
  • 所有 skill 都同步到了 Orchestra Research 网站,可以一键添加——如果你更喜欢浏览而非安装。
  • 各个 skill 引用的库可能各有自己的许可证——README 请你在使用前逐一确认。

何时不用这个 Skill

这是一套面向研究和 ML 工程的库,不是通用 Web 开发工具箱——如果你的任务是上线一个应用,这里的 skill 都帮不上忙。框架知识的时效也走得快:这些 skill 记录的是各自上次同步时的工具状态,遇到刚发布的库版本,官方文档可能已经走在前面。另外,如果你只想要某一个深度工具的精选演示而不是全生命周期覆盖,单个厂商的文档读起来更聚焦。


查看 排行榜 了解更多 skill。