DEEP Robotics releases five research results on embodied brain

近日，云深处科技围绕自研具身大脑DEEPRobotics-Brain密集发布多篇论文，集中公布五项研究成果：世界模型DR-WM-1.0、具身基础模型DR-VLA-2.0、具身智能体DR-Agent、策略优化框架DR-APO和数据闭环平台DR-Benchmark。五项成果覆盖具身大脑全链路技术，勾勒出云深处具身大脑的清晰架构。 这五项研究并非单点突破，而是围绕具身大脑体系开展的协同攻关。云深处科技联合麻省理工学院、加州大学圣地亚哥分校、伊利诺伊大学、清华大学、浙江大学、香港科技大学、北京理工大学七所国际顶尖高校，分别聚焦数据闭环平台、具身智能体、具身基础模型、策略优化算法与空间智能五大领域开展创新探索。论文成果环环相扣，共同拼出一张面向真实场景作业的具身智能版图。 随着技术拼图逐块落位，云深处具身大脑DEEPRobotics-Brain日益清晰——它是一套面向真实场景作业的具身智能架构。DEEPRobotics-Brain要回答的是：具身智能如何扎根真实物理世界，读懂人的意图、适配人的需求，并在持续交互中自主迭代进化，使机器人成为可信、可靠的智能搭档。 01 世界模型DR-WM-1.0： 引入物理约束性 预见真实未来 世界模型是具身智能走向真实世界的重要“训练场”。传统机器人训练依赖真实环境中的反复试错，周期长、成本高；而新兴的视频生成式世界模型虽然能够模拟丰富的视觉场景，却普遍缺乏对真实物理规律的准确建模，难以可靠预测机器人动作的实际后果。基于视频生成的世界模型，可以生成机器人穿过雪地的精致视频却忽视了极低的摩擦会导致打滑。 视觉上的合理，不等于动力学上的可行，这正是现阶段生成式世界模型用于机器人决策时最危险的断层：像素空间的美学想象能力难以转换为用于具身智能的物理想象能力，而云深处科技发布的DR-WM-1.0则直击这一断层。 云深处科技联合浙江大学、北京理工大学、清华大学、麻省理工学院和伊利诺伊大学发布的DR-WM-1.0，在四足机器人领域的世界模型中首次引入摩擦力、粗糙度与刚度等物理特性，在传统的基于视频生成的世界模型基础上加入了进行大规模训练的物理属性先验模块，使得世界模型预测未来的画面，不仅真实还能符合物理规律。模型基于258万张图像与超10万段真机片段预训练，在保证泛化性的同时：双ControlNet架构将场景几何与相机运动引入视频生成，自回归推理延续机器狗与控制器状态，使仿真进程与真实控制闭环保持一致。 这相当于为机器人提供一个行动前的“物理预演器”，帮助它提前判断：这条路走上去会发生什么，怎样走更稳妥。DR-WM将环境感知、物理预测与行动决策连接起来，为缩小视觉真实感与物理真实性之间的差距提供了一条可分析、可验证的技术路径。以雨雪后的变电站巡检为例：面对一条湿滑近路与一条绕行路线，机器人可以先分别“预演”，预判打滑、姿态失稳与前进受阻的可能，再结合安全风险与通行效率作出决策。 02 具身基础模型DR-VLA-2.0： 理解人类社会规则 真正“听懂”指令 预演能力就位，机器人得以走向真实的道路与工位——但下一个考验随即而来：机器人如何更好地融入人类生活，理解人类的社交行为？ 01 DR-VLA 机器人要真正融入人类社会，奔赴街道、园区、物流配送等一线场景，导航不能只解决路径规划，还要具备指令理解、障碍物避让、动态环境实时应对的综合能力。 然而机器人示教依赖遥控操作，采集成本高，难以覆盖丰富的环境与交互情境。虽然机器人可以借助海量人类第一视角视频，学习绕障、让行和路径选择等导航经验，但人类与机器人的相机视角、成像特征和运动方式不同，视频也缺少机器人能够直接执行的动作标签。如何从普通网络视频中提炼可迁移的导航知识，并将其转化为机器人可执行的轨迹，是导航方向聚焦的核心问题。 云深处科技联合来自麻省理工学院、伊利诺伊大学厄巴纳香槟分校、清华大学、浙江大学的研究者，探索“无动作标签的人类视频预训练—机器人示教适配”的四足机器人导航学习路径。团队构建的EgoLynx数据集，整合1万小时人类第一视角网络视频与2000段机器人示教片段，创新利用DISR模块，机器人得以从海量视频中学习行为模式、理解交通规则与导航规则、理解人类的意图、学会社交礼仪，具身智能的拟人化程度得到提升。 技术上，这是首个基于域不变场景表征（DISR）的四足机器人导航范式。人与机器人视角分属不同域，跨具身学习的关键，是找到两个域之间通用的场景表征——DISR融合场景语义、空间定位与时空关系，让模型聚焦“有什么、在哪里、彼此如何关联”，以场景结构建立跨具身迁移接口；Mixture-of-Transformers架构让理解、预测、行动协同，兼顾部署效率。 1万小时数据支撑，收益可量化：在EgoLynx-Robot测试集评估中，导航综合评分QNS提升约5%，最终航向误差降低14.6%。在这项研究的助力下，机器人在社区与园区“最后一公里”配送等场景中，有望结合路线指令预判行人与障碍变化，更自然地融入人车混行的日常空间。 02 自研原子运动坐标大模型 行走之外，精细操作是机器人落地真正的挑战。在操作方面，当前具身模型难以突破的固有缺陷是语言监督太弱，即“听不懂语言和动作的关系”；在长程复杂操作的推理中，模型常受大规模视觉监督主导，即使人们改变语言指令，机械臂也只会原样执行或犹豫不决，难以理解语言究竟如何指挥动作；插拔、擦拭等接触丰富任务中，语言、视觉与力反馈事实上分属不同通路，缺少统一、可解释、可持续修正的运动表达，即操作可控性(manipulation steerability)不足。 云深处科技提出自研原子运动坐标大模型，首次将语言控制与力反馈纳入同一运动坐标框架，把机械臂运动拆解为13个原子坐标(atomic coordinate)，建立运动的“统一坐标语言”，通过第一阶段屏蔽视觉的训练，建立语言与原子动作真正对齐的映射，在后续阶段引入力反馈修正动作，让机器人“听得懂、看得见、感得到、改得动”，语言对运动方向的控制效果可直接检验和量化。 实验中，在单原子与双原子动作的相反指令分离率上分别达到92.5%与83.1%；在未见布局的真实双臂任务中，任务进度提升至87.8%；接入力反馈后，插头插接与花瓶擦拭等接触任务，进度进一步提升至78.5%与75.2%；在数据分布外(OOD)的语言泛化和力响应任务上的成功率，超越PI05、ForceVLA、LA4VLA等现有基线，达到当下业内领先水平。这一能力可延展至电力柜操作、连接器插接与零件对位等电力场景作业，具备重要的落地实用价值。 03 策略优化框架DR-APO: 成功率提升至89.55% 导航与操作的模型相继就位，但模型能力要持续变强，绕不开同一个问题：怎么训练？现有强化学习方法高度绑定特定策略表征——专用模型、针对性优化，一套策略往往只能覆盖单一任务。当基座模型规模扩张、动作表征日趋多元，训练范式本身成为整条链路的瓶颈。 云深处科技联合浙江大学提出DR-APO——首个表征解耦的通用生成式策略强化学习框架，将策略改进与底层策略表征彻底解耦，实现从连续控制策略的从零训练到具身导航策略后训练的统一强化学习优化。 核心机制“优势引导的目标改进”系首次提出：仅基于单次执行动作的局部优势梯度方向与优势重加权构建改进动作目标，将策略改进转化为独立于策略参数化的目标分布优化问题，彻底摆脱对策略显式似然计算以及推理阶段多候选动作Critic筛选的依赖。“表征兼容的直接动作拟合”进一步将统一动作空间优化目标映射至高斯、扩散与流策略，克服了传统原生拟合中局部改进信号在多步生成过程中被削弱的难题。 值得关注的是，云深处科技DR-APO的通用训练效果甚至超过了专模专训。在5项MuJoCo-v5连续控制基准测试中，DR-APO在扩散策略上十项指标九项第一、在流策略上十项指标全部第一，取得最佳单策略综合性能；在具身视觉导航后训练中，预训练模型NavDP的仿真成功率从70.33%提升至89.55%，提高19.22个百分点；在云深处科技山猫M20轮足机器人真实场景测试中，导航成功率从25%大幅提升至65%。 DR-APO为跨异构表征的策略学习与具身大模型后训练提供了高效、通用的技术路径，直接支撑导航与操作等模型的后训练——单一框架，驱动全链路模型统一进化。 04 具身智能体DR-Agent: 首个持续自进化的具身导航智能体 训练引擎就位，机器人能跑、能操作、能自进化——还差一块拼图：会思考。执行之外，机器人还要判断与分析，这需要记忆。 真实环境持续动态变化：家庭物品被随手挪动、酒店布局每日调整、仓库货物不断进出。传统机器人依赖固化的环境记忆，变化一旦超出先验范围，“记忆过期”即导致任务失败——记忆固化与适配不足，是具身智能体长期部署的核心难题。 本次云深处科技联合加州大学圣地亚哥分校和浙江大学发布的DR-Agent 是首个面向持续演化世界的自进化4D信念具身导航智能体。团队针对“不可见物体移位后的持久导航”提出EvolvingNav方法：搭建时间索引的预测4D信念模型，配套事件驱动的“预测-观测-重规划”完整滤波器，让机器人结合抵达时间完成时序推理、依靠视觉完成目标校验——它拥有记忆，且能根据记忆不断优化行为策略，实现人机交互场景下记忆体系的动态迭代与持续更新。 配套构建的EvoWorldBench评测基准，基于真实人类活动轨迹构建，包含54个仿真场景、超过80万条任务实例、总计约23.9万次物体动态状态变更。实验验证DR-Agent在时序预测、证据更新与故障恢复能力上显著优于主流基线方法，并在FindingDory、GOATBench等评测基准上取得领先综合性能。从居家服务的长期自主作业、共享空间的跨时段连续运行，到仓储物流与工业巡检中，以预测式动态记忆辅助物品查找与巡检路径调整——会自我更新的记忆，决定机器人能否从“演示一次”走向“长期在岗”。 05 数据闭环平台DR-Benchmark: 833.6h、3294.7km真实作业采集 无论预演、交互、训练还是记忆，这一切的起点与归宿，都是同一件事：数据。行业长期面临两块短板：其一，已有机器人数据与语言导航数据各自只覆盖一部分信息，能将环境感知、行为意图等监督信号与真实连续轨迹完整关联的数据仍然缺失；其二，感知、导航、未来预测与场景重建使用不同数据与协议，难以在同一平台和场景分布上开展一致分析。数据不通，一切模型能力的比较与迭代便无从谈起。 云深处科技联合伊利诺伊大学厄巴纳香槟分校、香港科技大学、浙江大学、清华大学、麻省理工学院发布DR-Benchmark数据闭环平台，其核心数据集LynxScenes，是首个针对轮足机器人真实户外场景的大规模数据集，弥补了真实具身导航场景的数据缺失，填补了评测基准空白。 基于云深处科技山猫M20轮足机器人，团队累计完成833.6小时、3294.7公里的真实作业采集，构建约10万段导航片段、300万个标注帧，提供三维物体、道路结构、行为指令与专家示范轨迹四类监督，覆盖27类物体、4类道路结构、3个层级、20类导航指令。LynxScenes首次将指令理解、环境感知、未来预测与场景重建四项任务统一至同一套真实数据基准，并据此对25个代表性模型完成系统性“体检”，重新定义了具身导航的评测维度。 从校园、社区与园区配送中，机器人对通行、等待与绕行的实时决策，到厂区巡检中狭窄通道与临时障碍的路径调整，再到研发团队利用真实记录回放问题和模型比较，DR-Benchmark为各行各业提供基准与模型开发基础，也让真实场景的数据持续回流，成为具身大脑不断进化的源头活水。 一块块技术拼图次第归位、紧密咬合，云深处具身大脑（DEEPRobotics-Brain）的技术骨架已然成型。本轮密集科研布局中，云深处科技持续攻坚全链路核心难题，跳出行业单点、割裂的研发惯性，直面真实物理世界下的具身智能挑战，探索一条可验证、可迭代、可迁移的前沿技术路线。从物理预测到动态记忆，从策略优化到数据基准，各项技术突破环环相扣、互为支撑。这套体系化探索，为多形态机器人落地研发筑牢根基；以统一评测基准凝聚行业共识，推动赛道告别零散试错、转向体系化攻关，为具身智能赋能产业发展、实现人机协同的长远愿景夯实前沿技术底座。