位置:首页 > 产业资讯 > 蚂蚁灵波LingBot-VA 2.0具身原生世界动作模型

蚂蚁灵波LingBot-VA 2.0具身原生世界动作模型

时间:2026-07-20  |  作者:318050  |  阅读:0

LingBot-VA 2.0是什么

核心判断:LingBot-VA 2.0是蚂蚁灵波放出的一个重磅产品——行业里首个真正从零开始预训练的具身原生世界动作模型。

它的特别之处在于,采用自回归架构,让机器人具备了“边推演、边行动”的本事。说白了,就是机器人在执行任务时能像人类一样,先在心里模拟几步再动手,而不是傻等指令。

具体参数上,它用了因果DiT+稀疏MoE架构,总参数量15.3B,但推理时只激活2.5B,效率相当讲究。在RoboTwin 2.0基准测试中,双臂任务成功率达到了93.6%,而且单GPU就能跑到150Hz推理频率——这速度,够实时控制的。

蚂蚁灵波LingBot-VA 2.0具身原生世界动作模型_wishdown.com

LingBot-VA 2.0的主要功能

这模型的功能设计很接地气,基本覆盖了机器人操作的核心痛点:

  • 视觉-动作联合预测:同时生成未来世界状态和机器人下一步动作。就像下棋时预判对手两三步后的走法——这才是真正的“预判式控制”。
  • 长程任务规划:高维Planner能把复杂目标拆成结构化子任务,支持双臂并行执行,还有状态记忆。不会做着做着忘了做到哪一步。
  • 实时闭环控制:Foresight Reasoning异步推理机制,在执行当前动作的同时,就把下一步的计算并行跑完了,彻底消除了串行带来的延迟。
  • 跨域泛化:不管是干净的实验室环境,还是加了随机干扰的复杂场景,成功率都能保持在93%以上。说明它不是只会背题。
  • 精细操作:连薯片这种薄脆易碎的东西都能高精度力控抓取,手劲控制得很细腻。

LingBot-VA 2.0的技术原理

技术层面的亮点不少,关键是它没走传统路数:

  • 语义视觉-动作分词器:和传统VAE只追求像素重建不同,这个分词器在视觉压缩时强制对齐语义与动作信息。它通过逆动力学和正向动力学模型,从连续帧中隐式提取动作监督信号。这样一来,那些没有标注的网络视频也能成为训练数据,相当于白捡海量素材。
  • 因果预训练范式:很多模型先用双向注意力训练,后期再改造成单向的。但LingBot-VA 2.0从第一天起就用自回归因果架构训练,严格遵循“只能看过去”的时间线。这样做天然匹配机器人闭环控制的单向物理现实,不会出现动作精度损失或灾难性遗忘。
  • 稀疏MoE架构:视频主干用了Mixture-of-Experts,总参数约13B,但推理时只激活1.9B。再配合一致性蒸馏和低精度编译这些加速技巧,把推理延迟从965ms直接压到142ms/chunk——这速度提升,肉眼可见。
  • Foresight Reasoning异步推理:设计了一个“预测-执行-纠偏”的闭环。机器人在执行当前动作时,模型并行预测下一步;等到真实观测数据返回,再重新校准预测。这样既避免了纯脑补导致的物理漂移,又把异步控制频率提升到了225Hz

如何使用LingBot-VA 2.0

部署流程并不复杂,大体分这几步:

  • 访问官网:打开 https://technology.robbyant.com/lingbot-va-v2 ,先了解模型架构、演示视频和技术细节。
  • 获取代码:去GitHub仓库下载开源代码和技术报告,里面详细说明了因果DiT、稀疏MoE和Foresight Reasoning的实现细节。
  • 环境部署:在配备高性能GPU的服务器或工作站上配置推理环境,装好依赖,加载模型权重。
  • 硬件接入:把模型接到机器人本体上,连接相机观测流和机械臂/夹爪执行器,确保传感器数据能实时输入。
  • 配置异步管线:启用Foresight Reasoning异步推理机制,让模型在执行当前动作片段时并行预测下一条状态。
  • 闭环校准:设置真实观测反馈通道,每次新观测返回就重新校正预测,避免物理漂移积累。
  • 任务适配:如果想执行新任务,采集少量机器人操作数据,基于预训练权重做高效微调就行——不需要从头练。

LingBot-VA 2.0的核心优势

总结一下,这模型的优势相当集中:

  • 具身原生:从架构、数据到训练目标,都是为物理世界量身定制的,不是拿数字视频生成模型微调出来的半成品。
  • 实时高效:单GPU就能跑150Hz推理,满足实时闭环控制的需求,不需要堆算力。
  • 因果一致:严格单向时间建模,避免了双向注意力造成的动作精度损失和灾难性遗忘问题。
  • 数据高效:MCP多步预测目标让训练收敛速度提升了2.3倍,大大降低了对机器人标注数据的依赖。
  • 全栈协同:和LingBot-Depth、LingBot-VLA、LingBot-Video等模型形成了感知-预测-执行的完整闭环,不是孤立的点。

LingBot-VA 2.0的项目地址

想获取更多资料,可以从以下入口深入:

  • 项目官网:https://technology.robbyant.com/lingbot-va-v2
  • 技术论文:https://github.com/Robbyant/lingbot-va/blob/main/LingBot_VA2_paper.pdf

LingBot-VA 2.0的同类竞品对比

这里拿它和另一款同类模型ACE-Ego做个直观对比,看差异到底在哪:

维度LingBot-VA 2.0ACE-Ego
发布方蚂蚁灵波大晓机器人 × 港中文 MMLab
模型定位具身原生世界动作模型(VA)“一脑多型”具身操作 VLA 模型
架构路线自回归因果 DiT + 稀疏 MoEQwen3-VL-4B + Flow-Matching Diffusion Action Expert
预训练方式从零具身原生预训练,不依赖数字视频生成模型混合人类第一视角视频 + 机器人/仿真数据联合预训练
核心机制Foresight Reasoning 异步推理、语义视觉-动作分词器相机空间动作对齐、形态条件编码、时间对齐分块、可靠性感知损失
总参数 / 激活参数15.3B / 2.5B(稀疏激活)VLM 4B + Action Expert 约 600M(全激活)
推理速度单 GPU 150Hz(异步 225Hz)未公开具体频率,依赖 4 步 flow-matching 解码
RoboTwin 2.0 平均成功率93.6%(Clean 93.8% / Randomized 93.4%)Easy 91.12% / Hard 90.62%

能看出,LingBot-VA 2.0在架构设计、推理效率、泛化鲁棒性上都体现出不小优势。尤其在稀疏激活和异步推理方面,工程落地味道更浓。

LingBot-VA 2.0的应用场景

这些技术指标最终要落到实际场景里才有意义。LingBot-VA 2.0能覆盖的领域相当广:

  • 家庭服务机器人:桌面整理、物品归位、餐具摆放这类长程家务。它依靠长程记忆和双臂协调能力,能完成复杂日常操作。
  • 工业动态抓取:传送带、流水线上的移动目标实时抓取。模型预测物体未来位置并同步动作节奏,可以替代传统光电触发方案。
  • 精密装配作业:芯片、薄片、易碎零部件需要柔性力控抓取与装配。它靠细粒度视觉伺服能保护物料完整性。
  • 人机交互娱乐:冰球对战、桌面游戏这类需要实时预判玩家动作的高频交互场景。毫秒级反应和策略调整都能实现。
  • 仓储物流分拣:在动态变化的仓储环境里进行货物分拣、搬运与码垛。能适应不同尺寸形状包裹的泛化抓取需求。

来源:整理自互联网
免责声明:文中图文均来自网络,如有侵权请联系删除,心愿游戏发布此文仅为传递信息,不代表心愿游戏认同其观点或证实其描述。

相关文章

更多

精选合集

更多

大家都在玩

热门话题

大家都在看

更多