来源:市场资讯
(来源:量子位)
当下的具身智能行业,正站在从“数据驱动”迈向“经验驱动”的关键拐点上。机器人不再满足于静态模仿,而是需要在真实世界中持续学习、在线进化。但在现实中,强化学习流程复杂、系统组件异构、资源形态多样以及真实世界在线学习难以规模化等关键问题,成为影响具身智能走进真实世界的行业痛点。
今天,由无问芯穹联合清华大学等共同研发的全球首个面向具身智能持续进化的大规模强化学习基础设施项目 RLinf,正式宣布升级为 RLinf v0.3,为破解具身智能行业发展瓶颈构建了新一代“进化底座”!
RLinf v0.1 和 v0.2 分别完成了强化学习系统抽象与真实世界在线学习基础设施建设。新版RLinf v0.3进一步升级为面向具身智能持续进化的一站式开发平台,首次完整打通数据采集、数据管理、监督微调(SFT)、强化学习(RL)、模型评测以及真机部署等关键环节,实现从仿真训练到真实机器人在线学习、再到持续迭代优化的统一开发闭环。
由此,RLinf不仅能够高效训练机器人策略,更能够支撑机器人在真实世界中的长期持续进化。
具体来说,RLinf v0.3围绕模型、算法、真机、仿真、系统五个维度,进行了全面升级,系统性地降低具身智能开发门槛,提升训练效率与部署灵活性,覆盖更加丰富的具身智能开源生态。
针对强化学习中“参数难调、结果难复现”的行业痛点,RLinf 始终将训练效果的严格可复现作为核心标准。在此次 v0.3 正式发布前,研发团队已对大量应用示例完成了深度的复现性测试,详见v0.3 Release Notes。
本次发版已与包括百度智能云在内的多家云厂商协同上线。
RLinf v0.3 Release Notes:https://rlinf--1379.org.readthedocs.build/zh-cn/1379/rst_source/resources/release_v0.3.html
快速上手:
https://docs.neogpu.com/posts/rlinf-ppo-vla.html
https://cloud.baidu.com/doc/AIHC/s/fmrenj9u1
Github链接:
https://github.com/RLinf/RLinf
RLinf Tech Report:https://arxiv.org/abs/2509.15965
RLinf v0.3继续扩展模型生态,新增 6 款具身模型支持,涵盖世界模型、VLA 模型及系统级加速:
新版在真机 RL、仿真 RL 和人在环学习三个方向均有重要算法新增,表现出SOTA的真机任务成功率。具体:
真机强化学习算法:
仿真强化学习算法:
人在环学习:
新版全面打通数据采集 → SFT → RL → 真机部署的闭环链路,新增 3 种遥操作方式、3 款真机平台、2 款末端执行器,真机实操能力显著增强:
数据采集支持:
训练链路支持:
真机平台与末端支持:
RLinf v0.3提升仿真强化学习的场景覆盖,新增 5 种仿真器,完善基于仿真器的训练示例与效果:
RLinf v0.3在系统层面新增多项重磅组件:
性能优化方面,新增torch.compile加速、rollout与训练overlap、权重同步升级(broadcast/增量同步/分桶同步/仅同步可训练参数)、FSDP全offload支持,并修复了显存泄漏等关键问题。
值得关注的是,RLinf v0.3全面支持昇腾Ascend(CANN/torch-npu)、AMD ROCm、Musa等国产及异构AI计算平台,真正做到跨机器人、跨模型、跨仿真器、跨计算硬件的统一训练能力。
RLinf v0.3为智能体 RL 场景提供了更强大的训练和评测基础:
RLinf 自开源以来,以开放共享为核心理念,迅速形成全球影响力。截至目前在 GitHub 已获得4100+ Stars 、 600+ Forks、100+ Contributors,成为具身智能与大模型强化学习领域最受关注的基础设施项目之一。
RLinf 已被 Isaac Lab 官方收录为其首个面向具身大模型的训练引擎,体现了其在具身智能基础设施方向的国际技术引领能力。值得一提的是,RLinf团队与 NVIDIA 团队合作的医疗器械组装任务成功登上 NVIDIA GTC 2026,进一步验证了其全球技术影响力。
此外,项目荣获 EAI-100年度十大突破奖,入选Pytorch Ecosystem、蚂蚁开源榜,代表其在具身智能基础设施领域的技术领先性与行业认可度。
未来,RLinf将坚持开源路线,提升易用性,并携手社区同行持续贡献前沿算法。为了更好地与社区互动,RLinf团队也已经创建开发Roadmap(
https://github.com/RLinf/RLinf/issues/1322),建立答疑群(https://raw.githubusercontent.com/RLinf/misc/refs/heads/main/pic/wechat.jpg),欢迎研究者们加入社区,共同开发!
转载来源:无问芯穹
本文为量子位获授权转载,观点仅为原作者所有。
热门跟贴