蚂蚁灵波开源 LingBot
7 月 9 日,蚂蚁蚂蚁灵波开源 LingBot-Video,灵波这是开源全球首个基于 Mixture-of-Experts(MoE)架构、面向具身智能的蚂蚁开源视频生成基础模型。该模型围绕机器人和具身智能的灵波核心需求重新设计视频预训练范式,在推理效率、开源物理合理性、蚂蚁动作理解和任务完成度等方面取得系统性提升,灵波为视频基础模型从数字内容创作走向具身智能提供了新的开源开源底座。
在北京大学联合字节跳动发布的蚂蚁基准 RBench 上,LingBot-Video 的灵波总分是 0.620,超越了 Wan2.6(0.607)、开源Seedance 1.5 Pro(0.584)、蚂蚁Cosmos3 Super(0.581)。灵波RBench 作为面向机器人操作视频的开源综合评测基准,重点考察模型能否生成符合真实物理规律的机器人行为。这一结果表明,LingBot-Video 在生成机器人相关视频时,更能保持动作过程的合理性和任务执行的完整性。

(图说:LingBot-Video 在 RBench 上性能最优)
为进一步验证 LingBot-Video 对物理世界变化的建模能力,蚂蚁灵波在内部 benchmark 中从通用质量和具身领域两个维度进行评估。结果显示,对比 NVIDIA Cosmos 3、Wan 2.2 A14B、LongCat-Video、Hunyuan Video 1.5、LTX-2.3 等五个开源模型,LingBot-Video 在具身领域表现优于主要基线模型。

(图说:综合评测显示,LingBot-Video在具身相关场景中展现出更强的物理理解和动作一致性)
过去几年,视频生成模型在画质、流畅度和创意表达上快速进步,但对于具身智能来说,一个看起来逼真、动作流畅的视频,却无法反映真实的物理规律,难以支撑机器人连续预测、规划和执行任务。与此同时,具身智能还要求模型具备更高推理效率,以适应实时交互和控制闭环。
这也让视频生成开始出现两种不同的演进方向:一条通向影院,服务于内容创作;另一条通向机器人,服务于物理世界的理解、预测与交互。LingBot-Video 正是蚂蚁灵波面向具身智能开辟视频生成新路线的重要探索。
LingBot-Video 从架构、数据和训练三方面进行了系统创新。
在架构上,LingBot-Video 采用 DiT + MoE 设计,以 MoE 替代传统 Dense 架构,在扩大模型容量的同时控制单次推理成本。其 30B 总参数模型在生成时仅激活约 3B 参数,相比同等参数规模 Dense 架构拥有约 3 倍推理效率。这一设计使模型既能获得大规模参数带来的视觉表达能力,又更适合具身智能对高效推理的要求。
在数据上,LingBot-Video 构建了数据画像引擎,在海量互联网视频的基础上进一步引入 VLA、VLN、Ego 等机器人相关数据,覆盖灵巧操作、机器人移动和第一视角交互等场景,总规模达 7 万小时的具身数据。这些数据帮助模型学习动作与环境变化之间的关系,而不只是学习视频的表面纹理和视觉风格。



在训练上,LingBot-Video 引入多维强化学习奖励系统。除美学、prompt 跟随和运动一致性等常规指标外,模型进一步围绕物理合理性和任务完成度进行对齐,使生成结果更符合真实世界规律,也更贴近机器人在真实世界完成任务的需求。
据介绍,LingBot-Video 可用于机器人动作预测、仿真数据生成、动作条件建模、世界模型研究等方向。目前,LingBot-Video 已正式开源。
(责任编辑:时尚)
-
当AI大模型有了身体,会是什么样?3月14日,人形机器人初创公司Figure AI发布其通用人形机器人Figure 01的演示短片,在OpenAI强大模型的支持下, Figure 01会说会看,理解人
...[详细]
-
发布者:质斌 浏览量:15636发布时间:2018/7/16 17:19:24 随着天气越来越热,越发觉得走在路上的我们离烧烤,只差一撮孜然的距离!这个时候一杯港柠柠檬味茶饮
...[详细]
-
房地产业回暖拉动了平板玻璃的需求,作为玻璃业的上游,目前纯碱业却仍然低迷。由于产能过剩,纯碱业低迷状况短期难有改观,行业真实转好可能要到明年上半年。从行业整体估值情况看,目前纯碱公司整体市盈率仍然偏
...[详细]
-
导读: 消费型定期寿险以其灵活性和针对性,受到了越来越多消费者的青睐。然而关于消费型定期寿险的价格问题,很多人却心存疑虑:它到底贵不贵?
...[详细]
-
导读: 百年人寿重疾险,百年人寿重疾险怎么样?百年人寿康多保重疾险支持出生满28天-60周岁投保,保障包含重大疾病保险金、中症疾病保险金、
...[详细]
-
导读: 两全保险终身保险,是一种人寿保险,旨在为被保险人提供生存和死亡双重保障。如果被保险人在保险期间内死亡,或者在保险期满时仍然生存,保
...[详细]
-
发布者:沛琦 浏览量:16337发布时间:2018/6/28 14:59:05 有专家说,每一年市场上出现的新品达到数万种,真正存活下来的不到1%。那经销商怎么挑选新产品,打
...[详细]
-
日前,第四届“和谐社区杯”北京市家庭亲子垂钓联谊赛在大兴区香海园社区休闲垂钓池进行。来自全市各社区20个家庭的40名选手齐聚一堂,同场竞技。本次比赛由北京市钓鱼协会、大兴区高米
...[详细]
-
导读: 家庭意外险是为家庭成员提供意外身故、残疾,以及意外医疗、津贴和交通意外等保障的险种,不同保险产品提供的保障范围会有区别,以条款约定
...[详细]
-
昨天8日),WNBA纽约自由人队公布了本赛季球队名单,中国球员韩旭在列。此前,自由人队队内竞争极为激烈,13名球员签了训练营合同,但只有5人能够最终签下正式合同。韩旭在到队后的比赛中打出高光表现,最终
...[详细]

速卖通618战报:品牌成交同比增长90%,多类目涌现百万美金冠军
武汉天然气有望缓解 玻璃企业起回升,行业资讯
《识质存在》全新截图 小萝莉和大叔的休息时光
主导潮流趋势,打造口味差异化!不二食代蜂蜜系列火爆市场!
美团电话会:“小美”与腾讯“元宝”的合作将于近期上线
