Open GGOOAI 开源项目
miles

miles

基础设施学习
GitHub官网2.9K— / 6h

项目解读

AI 解读 · 1 个月前更新

这个项目是什么?

Miles像一套给大模型做强化学习训练的工作台,把LLM和VLM的后训练流程组织起来。

解决了什么问题?

大模型强化学习常卡在 rollout 和训练互相等待、模型权重更新太慢;Miles处理这些大规模后训练环节。

可以用来做什么?

可以拿来做LLM、VLM和部分扩散模型的强化学习后训练;比如训练超大模型,让它按奖励持续改进回答。

正在读取最新信息…
正在读取评论…