智通财经APP获悉,近日,智元发布AGILE2.0 感控一体模型(AGIBOT Generative Intelligent Locomotion Engine),让机器人“边看边想边动”,轻松拿捏跟人一样自然灵活的运动状态。为了展示机器人真的能够“用眼睛看”,智元跳脱常规技术视频的枯燥乏味,以创意短片《杂技 BOT》完整呈现颠覆性的运动智能。
杂技 BOT:视觉驱动动态任务,机器人马戏团热闹开演
《杂技 BOT》开场即是杂技团的“高潮节目”——钻火圈,灵犀 X2看准火圈中心位置,轻轻一跃,便从容穿越火圈;后续的抖空竹、三人跳长绳、双人跳山羊、双人协作上高台、抛三球、协作搬箱子,所有项目都指向人形机器人行业的核心技术难点——让机器人用“眼睛”先看、再规划和行动。整个视频用多项高难度视觉驱动动态协同任务,全面验证 AGILE2.0感控一体视觉端到端模型的突破性能力。
机器人 “看见” 不难,难的是所见即所动。人眼与身体是天然同步的:眼睛实时捕捉变化,大脑预判延迟,肢体平滑调整动作,但机器人是一套分离的系统:相机采集画面、AI 计算目标位置本身就存在时间差,而机器人的电机运动是毫秒级快速响应,滞后的视觉信号如果直接用来指挥运动,机器人很容易抖动、晃动,动作不稳。
针对这一行业难题,智元AGILE 1.0率先打通感知与运动链路,移动与操作虽可并行,但难以做到全身协同、动态耦合、实时规划。行业内多数方案也停留在 “移动 + 操作” 简单叠加,未实现统一动力学表达,在极限平衡、高速交互、精细操作中易失稳、易中断。
核心突破:眼动、心动、身动,打造感控一体视觉端到端模型
AGILE2.0 在1.0 打通链路的基础上,进一步实现环境观测、地形理解、动态可通行性分析、全身运动控制、接触状态切换、末端精细操作等全链路深度耦合,构建真正端到端、无中间模块、无人工阶段拆分的一体化运行机制,彻底实现了视觉感知、环境理解、全身运动控制与上下肢协同操作的统一闭环耦合与全域一体化自主推理,构建面向开放环境的感控一体运动智能体系。
最能体现这个能力的当属《杂技 BOT》中“灵犀X2 踩球走”,灵犀 X2双脚站在大球上,滚动大球向前行进, 仿佛真正的杂技运动员一样,展现出非凡的动态平衡能力和运动能力。这是行业内首次有双足人形机器人自主实现踩球运动,是对 AGILE2.0感控能力强有力的直观表达,标志着双足人形机器人的运动智能真正达到了跟人类媲美的境界。此外,跳长绳场景中,两个灵犀 X2 负责把长绳有节奏挥动起来,另一个灵犀眼随身动,看准时机轻松跃入其中,跳起了长绳,而后又轻松跃开;“搬箱子”场景中,一个灵犀 X2搬起箱子,另一个灵犀 X2 看见了,过去把箱子打掉,意思是“兄弟你搬得不好,看我的”:它走到箱子边,搬起箱子之后,把箱子完美放置在了另一个箱子上。这些任务,不仅体现了机器人非凡的一体化感控能力,更通过全身 Locomanipulation,实现了动态移动中同步精细操作、操作中保持全身稳定与连续运动的能力。
产业价值:支持现实复杂工况,加速部署态规模化落地
AGLIE2.0 的核心技术突破,在于视觉端到端感控一体闭环。此外,针对环境剧烈变化、障碍动态演变的极限复杂场景,AGILE2.0 实现了视觉闭环实时推理与极限动态约束优化;面向双人、多人协同作业场景时,AGILE2.0建立起了跨机器人的状态感知与全身行为协同机制;当空间内有人员随机闯入、发生意外交互时,模型能够实现人机共存下的安全防护与自主恢复。
智元AGLIE2.0 感控一体模型的发布,彻底打破了机器人仅能在结构化环境下作业的局限,有效适配动态扰动、人机共存、多机协同等真实复杂场景,降低了机器人在现实物理世界中的定制化开发代价,为人形机器人落地真实物理世界筑牢了运动层面的核心能力,让“部署态”的规模化落地,有了更加强大的运动智能底座,加速推动具身智能生产力走向可落地、可规模化、可商业化的全新纪元。