大数跨境

刚刚,被李飞飞团队写进代码库的具身底座,现身乌镇峰会“上岗抓药”

刚刚,被李飞飞团队写进代码库的具身底座,现身乌镇峰会“上岗抓药” AI前线
2026-11-04
11
导读:开源9个月下载量突破220万次,斩获超3.3万颗GitHub Star
作者|四月

机器人不再局限于后空翻等表演性动作,而是开始直面物理世界的真实考验。在11月3日开幕的2026年世界互联网大会乌镇峰会现场,一家特殊的“零售药房”亮相展馆:在仅80厘米宽的狭窄通道两侧,药品密集摆放,机器人有序完成接收订单、识别目标、分拣及交付的全流程。

这并非概念演示,该方案已在上海国大药房多家门店常态化运行,有效分担了药剂师的高频重复性工作。支撑这一场景的核心技术,是蚂蚁灵波(Robbyant)开源的具身“大脑全栈 2.0”。它由视觉、深度感知、世界模型和动作决策等多款模型组成,覆盖了从高精度空间理解到环境交互及动作执行的完整链路。

自今年1月开源以来,灵波已开放LingBot系列核心模型、权重、代码及技术文档,全球开发者可基于此进行适配与二次开发。截至目前,相关项目在GitHub累计获得超3.3万颗Star,模型下载量突破220万次。

这一成果契合了乌镇峰会“开源开放,共建共享”的主题。开源的价值边界在广泛的复用、验证与协作中不断拓宽,其影响力已从代码仓库延伸至科研与工程一线。

同行用代码投票:从学术界到主流平台

在开源领域,Star数代表关注度,而代码的实际调用则是更具说服力的标准。近期多项具身智能核心成果显示,灵波的模型组件正以工程化形态被引入全球研发管线。

斯坦福李飞飞团队复用底层组件

斯坦福大学李飞飞实验室于今年10月发布具身智能统一机器人框架OpenWAM。在探索世界-动作模型(WAM)标准交互范式时,团队直接复用了灵波LingBot-VA的开源实现与核心资产,而非从零重写。

顶尖实验室对外部模块的选择极为挑剔,通常要求极高的模块化程度与干净的接口设计。李飞飞团队的选择,侧面印证了灵波代码架构的高规范度与通用性。

韩国KAIST用于知识蒸馏提升端侧性能

针对算力受限的小型机器人场景,韩国科学技术院(KAIST)团队在FastOPD研究中,选定LingBot-VLA作为“教师模型”,通过知识蒸馏将其能力迁移至参数量更小的VLA模型。

实测数据显示,在RoboTwin 2.0仿真实测中,该方案在端到端延迟仅增加1毫秒的情况下,将4.5亿参数学生模型的任务成功率从35.3%提升至51.2%,净增15.9个百分点。这验证了LingBot-VLA底层动作表征的迁移价值,为低成本硬件获得更强操作能力提供了新路径。

融入LeRobot等主流开发生态

在更广泛的开发者生态中,灵波正在成为基础设施。全球最大的开源机器人平台LeRobot已将LingBot-VA与VLA 2.0合入官方主线;主流计算机视觉库timm也将其视觉模型收录为主干。这意味着全球开发者拉取标准库时,LingBot已成为原生“出厂选项”,大幅降低了环境适配成本。

在脑内预演物理学:拆解具身控制难题

顶尖团队之所以能抽取灵波模块嵌入各自代码库,根源在于其对物理世界的拆解方式。真实作业环境中,机器人面临的挑战不仅是学会特定动作,更是在充满变数的现场稳定完成任务序列。传统控制方案难以应对反光干扰、货架遮挡及物理状态突变,正如行业智库Core Matter指出:“真实环境不会在机器人思考时暂停。”

LingBot-VA 2.0通过异步预测与执行化解控制延迟,将复杂的具身控制拆解为三层能力:

  • 高精度空间理解(LingBot-Vision / LingBot-Depth 2.0):重点学习物体的三维轮廓、空间距离及精确物理坐标,超越简单的类别识别;

  • 动态环境交互(LingBot-Video / LingBot-World 2.0):世界模型在行动前持续预演物理规律推演(如推力后的连带反应、物体打滑倾倒风险),为动作提供路径依据;

  • 可泛化灵巧操作(LingBot-VLA 2.0 / LingBot-VA 2.0):根据视觉信息和指令生成动作,VA 2.0打通预测模型与动作生成,实现“边执行、边观测、边修正”。

这种模块化拆解提供了分步推理的抓手,便于外部团队按需调用。此外,灵波自建超10万小时真机作业数据,覆盖20多种本体构型、3.6万种任务及近2亿条深度感知数据。团队将抓空、打滑等失败样本视为核心教材,依托端边云流转,半天内即可完成异常数据回流洗练,形成可用率超90%的高质量训练集。

从标星走向工作流:性能优化与生态沉淀

衡量开源底座成色的关键,在于能否低成本嵌入生产流程。灵波正推动LingBot模型与主流开发框架、推理引擎及云端服务平台的深度适配。

在机器人开发流程上,LeRobot合入主线后,动作块生成耗时从677毫秒大幅压缩至127毫秒,开发者可直接沿用现有流程开展微调与测试。

图注:在 NVIDIA 公布的性能测试中,FlashDreams 在 H100、GB200 和 GB300 上运行 LingBot-World,其 DiT 总运行时间均明显低于原始实现和 LightX2V

在世界模型推理方面,NVIDIA开源库FlashDreams正式集成LingBot-World;SGLang为LingBot-World和LingBot-Video提供原生推理管线;vLLM-Omni则将其接入统一推理框架。

第三方开发者也在进一步压榨性能边界。海外开发者Kaarel Kaarelson在单张消费级RTX 5090显卡上,将LingBot-World 2.0本地实时生成帧率从6.0 FPS提升至16.1 FPS;PandacatAI则将模型移植至Apple Silicon平台,在M4 Pro芯片Mac上实现了低内存峰值下的端侧视频生成。

极客们的尝试沉淀为活跃的技术生态。10月底的具身挑战赛中,来自13个国家的超1855支战队进场调试。开源代码在被反复调用、挑刺和二次开发中,真正变成了开发者触手可及的通用构件。

不改货架的真实工况:从演示走向量产

代码跑通只是第一步,最终需落脚于投入产出比。过去自动化改造常因迁就机器人而重构物理空间,隐性成本高昂。本轮具身浪潮的前提,是机器人能主动适应既有人类环境。

在展厅还原的药房场景中,机器人在不改动货架与动线的前提下,自主完成了80厘米过道、密集堆叠及反光环境下的取药全流程。同样的考题也摆在工业现场,灵波正与隆盛科技、德马科技等产业方协同攻关,应对汽车零部件上下料等重工业场景中工件沉重、油污反光强烈及高节拍生产的苛刻要求。

如何用同一套大脑适配异构本体,并在高强度节拍中抵抗磨损与误差,是具身模型迈向深水区的硬门槛。物理世界客观存在重力、摩擦与材料磨损,算法的精妙无法使其网开一面。

屏幕之内,开源共享的是逻辑与代码;当算法接管硬件,其深层价值在于将散落于不同工况中的碰撞、挫败与调试经验,沉淀为全行业通用的底层基座。具身领域的突破,正从少数团队的单打独斗,转向同行者合力向前的新阶段。

声明:本文为AI前线原创,不代表平台观点,也不构成投资建议,未经许可禁止转载。

【声明】内容源于网络
0
0
AI前线
面向AI爱好者、开发者和科学家,提供大模型最新资讯、AI技术分享干货、一线业界实践案例,助你全面拥抱AIGC。
内容 8773
粉丝 0
AI前线 面向AI爱好者、开发者和科学家,提供大模型最新资讯、AI技术分享干货、一线业界实践案例,助你全面拥抱AIGC。
总阅读261.9k
粉丝0
内容8.8k