Hugging Face 把 Claude Code、Codex 等编码工具变成 RL 训练环境
Hugging Face 的 Clément Delangue 宣布把 Claude Code、Codex、Hermes、Pi、opencode 等编码工具变成 RL 环境,不改动工具本身也不改动训练代码,全部开源。做法是用一个 capture proxy 伪装成模型 API,兼容 OpenAI Chat Completions、OpenAI Responses、Anthropic Messages、Gemini 四种格式,转发到 vLLM 并记录 token ID 与 logprobs,再交给 TRL 训练,目前已有 10 个工具接入且均未修改。在 LFM2.5-2.6B 上,单工具训练后 OpenCode 从 34% 提升到 58%,四工具同时训练后四者均提升(42% 到 54%),而用 Qwen3.8-27B 的 3,189 条 rollout 做 SFT 只停在 47.5%。
匹配字段标题、摘要



