蚂蚁灵波开源 LingBot
7 月 9 日,蚂蚁蚂蚁灵波开源 LingBot-Video,灵波这是开源全球首个基于 Mixture-of-Experts(MoE)架构、面向具身智能的蚂蚁开源视频生成基础模型。该模型围绕机器人和具身智能的灵波核心需求重新设计视频预训练范式,在推理效率、开源物理合理性、蚂蚁动作理解和任务完成度等方面取得系统性提升,灵波为视频基础模型从数字内容创作走向具身智能提供了新的开源开源底座。
在北京大学联合字节跳动发布的蚂蚁基准 RBench 上,LingBot-Video 的灵波总分是 0.620,超越了 Wan2.6(0.607)、开源Seedance 1.5 Pro(0.584)、蚂蚁Cosmos3 Super(0.581)。灵波RBench 作为面向机器人操作视频的开源综合评测基准,重点考察模型能否生成符合真实物理规律的机器人行为。这一结果表明,LingBot-Video 在生成机器人相关视频时,更能保持动作过程的合理性和任务执行的完整性。

(图说:LingBot-Video 在 RBench 上性能最优)
为进一步验证 LingBot-Video 对物理世界变化的建模能力,蚂蚁灵波在内部 benchmark 中从通用质量和具身领域两个维度进行评估。结果显示,对比 NVIDIA Cosmos 3、Wan 2.2 A14B、LongCat-Video、Hunyuan Video 1.5、LTX-2.3 等五个开源模型,LingBot-Video 在具身领域表现优于主要基线模型。

(图说:综合评测显示,LingBot-Video在具身相关场景中展现出更强的物理理解和动作一致性)
过去几年,视频生成模型在画质、流畅度和创意表达上快速进步,但对于具身智能来说,一个看起来逼真、动作流畅的视频,却无法反映真实的物理规律,难以支撑机器人连续预测、规划和执行任务。与此同时,具身智能还要求模型具备更高推理效率,以适应实时交互和控制闭环。
这也让视频生成开始出现两种不同的演进方向:一条通向影院,服务于内容创作;另一条通向机器人,服务于物理世界的理解、预测与交互。LingBot-Video 正是蚂蚁灵波面向具身智能开辟视频生成新路线的重要探索。
LingBot-Video 从架构、数据和训练三方面进行了系统创新。
在架构上,LingBot-Video 采用 DiT + MoE 设计,以 MoE 替代传统 Dense 架构,在扩大模型容量的同时控制单次推理成本。其 30B 总参数模型在生成时仅激活约 3B 参数,相比同等参数规模 Dense 架构拥有约 3 倍推理效率。这一设计使模型既能获得大规模参数带来的视觉表达能力,又更适合具身智能对高效推理的要求。
在数据上,LingBot-Video 构建了数据画像引擎,在海量互联网视频的基础上进一步引入 VLA、VLN、Ego 等机器人相关数据,覆盖灵巧操作、机器人移动和第一视角交互等场景,总规模达 7 万小时的具身数据。这些数据帮助模型学习动作与环境变化之间的关系,而不只是学习视频的表面纹理和视觉风格。



在训练上,LingBot-Video 引入多维强化学习奖励系统。除美学、prompt 跟随和运动一致性等常规指标外,模型进一步围绕物理合理性和任务完成度进行对齐,使生成结果更符合真实世界规律,也更贴近机器人在真实世界完成任务的需求。
据介绍,LingBot-Video 可用于机器人动作预测、仿真数据生成、动作条件建模、世界模型研究等方向。目前,LingBot-Video 已正式开源。
(责任编辑:时尚)
-
导读: 人寿险和意外险的区别,意外险是寿险还是财险?人寿险是什么?意外险是什么?寿险是什么?财险是什么?意外险属于人身保险,不属于财产险,
...[详细]
-
发布者:蒙蒙 浏览量:5297发布时间:2024/5/14 15:15:48 在新版《中国居民膳食指南》第三条中明确提出「多吃蔬果、奶类」,而在学龄前和学龄儿童(2~17 岁
...[详细]
-
资料显示,粉末涂料行业的大部分国家业务量已达35亿美元,虽然目前该行业仅占据工业涂料总量的10%,但以“可持续发展”为主题的粉末涂料业,将通过提升产品耐久性、重复使用过喷粉末、减少环境污染、降低成本及
...[详细]
-
导读: 蔬菜加工工人怎么样来选择合适的雇主责任险?虽然可能从事的工作相对简单,虽然看起来可能很安全,但是,长期在机器旁边操作的时候,万一会
...[详细]
-
导读: 57岁还能买重疾险吗?57岁怎么买重疾险?57岁有必要买重疾险吗?57岁不买重疾险的话会更适合买什么保险?跟着小编走,让您不走买保
...[详细]
-
开盖有奖,壹元乐享!顶真新品2024春糖助力经销商开启超级动销!
发布者:冬冬 阅读次数:922发布时间:2024/3/9 11:31:35 春糖至,战鼓擂!不知不觉,2024年成都春糖即将举办。为了抢占这次“春糖大战”的竞争先机,食品饮料
...[详细]
-
相关人士预测,到2004年,世界涂料和油墨市场规模将增长到142亿美元。 根据较新发布的市场调查报告,亚洲市场涂料需求继续上升,廉价产品的需求较多。据统计,中国和印度的廉价涂料对市场影响很大。而且这两
...[详细]
-
中科院地质研究所在国内外初次成功地利用工业废玻璃为熔剂原料,辅以廉价的化工原料和天然陶瓷原料,研制出了适于辊道窑一次快速烧成外墙砖、彩釉砖和面釉的釉料。产品的各项理化指标均达到GBll947-89国家
...[详细]
-
目前在 Xbox 商店可以免费领取《废土:复刻版》,这款游戏平时售价为14.99美元。目前尚不清楚这是限时活动还是技术故障,所以最好抓紧时间。得益于Xbox Play Anywhere功能,该游戏支持
...[详细]
-
当国内许多企业正为“出口数量增加,出口利润减少”而发愁时,来自纽约美中商务中心的一项市场调查表明,一种技术含量和产品附加值高的新产品SMC玻璃钢门的需求正在美国市场快速增长,有关相关人士希望这一商机
...[详细]

华夏重疾险细则,华夏重疾险有哪些
喀什市年金险怎么购买,喀什人如何投保年金险
港式经典新演绎!牛小溪再添力作,杨枝甘露甜蜜升级!
火!火!火!美果林“刷品质”走红,放心代理!
45岁买重大疾病保险合适吗?45岁重大疾病保险怎么买
