端侧具身智能新突破:MiniCPM-Robot如何以1.5B参数实现高性能推理?

0 阅读

具身智能的轻量化革命:从云端走向边缘

随着人工智能技术从纯数字空间向物理世界延伸,具身智能(Embodied AI)已成为全球科技竞争的新高地。然而,长期以来,高性能的视觉-语言-动作(VLA)模型往往依赖于庞大的参数量和昂贵的云端算力,这极大地限制了机器人在实时性要求高、网络环境复杂或隐私敏感场景下的部署能力。

2026年7月,在世界人工智能大会(WAIC)上,面壁智能联合OpenBMB正式开源了MiniCPM-Robot系列模型。这一举措不仅展示了“小钢炮”在机器人领域的最新成果,更揭示了具身智能技术发展的一个新趋势:通过极致的模型压缩与架构优化,以极小的参数规模实现接近甚至超越大型模型的性能,同时大幅降低推理成本。这不仅是技术的突破,更是推动物理智能从实验室走向千行万业的关键一步。

MiniCPM-RobotManip:小参数下的长记忆与高效率

在机器人操作领域,上下文记忆能力是衡量模型智能水平的核心指标之一。传统的VLA模型多基于单帧反应式架构,难以处理需要长期记忆和复杂逻辑推理的任务。MiniCPM-RobotManip基于面壁智能最新的MiniCPM-V 4.6多模态端侧模型训练而成,仅拥有1.5B参数,却在性能上比肩3-4B体量的主流模型。

该模型最大的亮点在于其原生支持的1分钟具身记忆能力。在RMBench基准测试中,MiniCPM-RobotManip取得了53分的高分,远超主流模型π0.5的10分。这一成绩意味着模型能够记住长达一分钟内的操作历史,例如先覆盖不同颜色的方块,再按特定顺序揭开,这种基于时间序列的复杂操作任务,对于仅依赖单帧输入的模型来说几乎是不可完成的。

为了兼顾性能与效率,MiniCPM-RobotManip引入了流式实时推理技术。在包含60帧历史观测的操作任务中,传统重新计算方式每个决策步需要125 TFLOPs的计算量,而采用流式推理后,这一数字骤降至3.3 TFLOPs。在H100 GPU上,其单决策步推理时延仅为120ms,相比π0.5的234ms降低近一半。这种“高性能、低延迟、低成本”的组合,使得机器人能够在资源受限的边缘设备上高效运行,为大规模商业化部署奠定了基础。

MiniCPM-RobotTrack:断网环境下的自主跟踪能力

如果说MiniCPM-RobotManip解决了“手”的问题,那么MiniCPM-RobotTrack则攻克了“眼”与“腿”的难题。这款由面壁智能与南京大学合作研发的0.9B端到端视觉指令跟踪模型,是业内首个支持真实本地断网部署的跟踪模型。

在单目标跟踪(STT)、动态多目标跟踪(DT)和模糊目标跟踪(AT)三项典型任务中,MiniCPM-RobotTrack在未经下游强化学习优化的情况下,分别达到了89.8%、73.4%和80.4%的追踪率,取得了开源方案的最优结果。特别是在模糊目标跟踪任务中,其成功率达到58.0%,显著优于同类闭源模型。这表明,通过高质量数据清洗和端到端训练,轻量级模型无需依赖多视角输入或复杂的强化学习,也能在真实场景中展现出强大的指令跟随能力。

更令人瞩目的是其自进化数据管线的设计。针对真机数据采集成本高、长尾场景覆盖有限的问题,该模型构建了自动检测与人工复核相结合的数据清洗机制,并引入DAgger策略,让模型在仿真与真机交互中主动暴露薄弱环节。这种闭环学习机制使得模型能够在实践中不断自我完善,特别是在快速转向、短时遮挡和多人交叉等复杂场景下,跟踪能力持续提升。

在真机实测中,MiniCPM-RobotTrack在宇树Go2 Edu机器狗的原生本地算力下,稳定达到5+ Hz的运行频率,端到端响应时延约180毫秒。即使在拔掉网卡的断网环境下,机器狗仍能依靠本地视觉画面与文本指令,持续完成目标识别、跟踪与运动控制。这一能力对于楼宇巡检、园区安防以及灾害救援等弱网或无网场景具有极高的应用价值。

PhyAI推理框架:加速物理智能落地

模型的轻量化离不开高效推理框架的支持。此次发布的两款模型均获得了PhyAI推理框架的加持。PhyAI专为Physical AI场景设计,旨在降低模型从研究原型走向高效推理的适配成本。

在NVIDIA GeForce RTX 5090上,PhyAI对π0、π0.5和GR00T等主流模型实现了显著的加速效果,分别达到2.85倍、1.82倍和2.28倍。针对MiniCPM-Robot系列,PhyAI通过CUDA Graph加速和自定义算子融合技术,将推理帧率从10.12 Hz提升至33.28 Hz,并在NVIDIA H20上进一步达到36.77 Hz。这种极致的性能优化,确保了模型在边缘设备上的实时响应能力,为具身智能的规模化应用提供了坚实的技术底座。

产业合作与未来展望

技术落地的关键在于与产业界的深度融合。目前,面壁智能已与乐聚机器人合作推出展厅导览和园区巡检Agent解决方案,并与吉利汽车在VLA模型及生产仓储应用方面展开合作。这些合作不仅验证了MiniCPM-Robot系列模型在真实场景中的可靠性,也为具身智能技术的迭代提供了宝贵的数据反馈。

随着机器人逐步进入家庭、办公和工厂,本地感知、推理与决策将成为保障实时性、稳定性和数据隐私的重要方向。MiniCPM-Robot系列的发布,标志着具身智能技术正从“云端大脑”向“边缘小脑”演进。通过开源社区的力量,面壁智能正在推动物理智能更加可靠、安全地走进现实世界,为千行万业的智能化转型注入新的活力。

未来,随着模型参数的进一步压缩和算法的持续优化,我们有理由相信,更小、更快、更聪明的具身智能模型将成为连接数字世界与物理世界的桥梁,开启物理AGI的新篇章。