鱼皮AI导航
鱼皮AI导航
  • 主页
  • 社区
  • AI工具
  • AI知识库
  • AI提示词
  • MCP
  • Skills
  • AI学习资源
  • AI资讯
  • GitHub开源
登录/注册

自变量王潜:具身智能是物理世界的独立基础模型|MEET2026

编程导航
编程导航
2025-12-21 23:50
阅读 294
编程导航
2025-12-21 23:50
阅读 294

让AI来定义硬件

过去一年,具身智能领域反复被问到一个问题:它到底只是多模态模型的一个应用,还是一种全新的基础模型?

对此,自变量机器人创始人兼CEO王潜表示:

具身智能模型是物理世界的基础模型,独立于、平行于语言模型、多模态模型等虚拟世界的模型。

这一判断背后,首先是对物理世界与虚拟世界本质差异的重新认识。

语言模型和多模态模型所面对的,是高度可复现、低随机性的符号世界;而机器人所处的物理世界,则充满连续性、随机性、不完全可观测性以及大量与力、接触和时序强相关的过程。

沿用以语言和视觉为中心建立起来的建模范式,本身就存在结构性的错位。

也正因为如此,自变量机器人在实践中选择了一条更长期的路线:不把具身智能当作应用层问题,而是从模型架构、数据范式、推理方式乃至硬件形态上,系统性地重做一套“物理世界的智能底座”。

为了完整体现王潜的思考,在不改变原意的基础上,量子位对演讲内容进行了编辑整理,希望能给你带来更多启发。

MEET2026智能未来大会是由量子位主办的行业峰会,近30位产业代表与会讨论。线下参会观众近1500人,线上直播观众350万+,获得了主流媒体的广泛关注与报道。

  • 最近具身智能领域有一个争论:具身智能究竟应被视为应用,还是应当被定位为独立的基础模型?我们非常明确地认为,具身智能模型独立或平行于虚拟世界中的语言、多模态模型,是一种专门面向物理世界的基础模型。
  • 物理世界的特性与虚拟世界差异巨大,尤其是物理事件存在高度随机性。
  • 现有的模型架构、训练方法和数据能力,很难对高度随机性的现象做出充分准确的刻画。
  • 如果以未来十年为尺度,具身智能基础模型甚至有可能反过来吞噬现有多模态模型的生存空间。
  • 要构建一个统一的基础模型,它自然应是完全端到端的。这一点在当下某种程度上已经成为行业共识。

……

以下为王潜演讲全文:

大家好,最近具身智能领域存在一个争论:究竟要把具身智能看成是一个AI应用,还是一个独立的基础模型?

很多人会疑惑,今天所有的具身智能模型仍然是在一个多模态模型的基础上加上Action的部分,做后训练的微调,少部分有预训练,也只涉及到视觉,没有涉及到语言。

这种情况下,是不是能称之为是一个独立、专门服务于物理世界的基础模型?可能有些争议。

作为一线从业者,我们还是非常明确地认为,我们在做的具身智能模型的确就是一个完全独立于或者平行于虚拟世界中的语言模型、多模态模型的另外一个专门为物理世界使用的基础模型。

这件事情真的这么重要吗?它的确非常重要。

我们在实际使用过程中,确实碰到了以往的架构所解决不了的问题。

另外,当视角转变过来,将具身智能看作是一个独立的基础模型时。我们会发现对于模型架构、数据、包括后续产品的商业化,整个视角都会发生巨大的变化。

这也是今天虽然还是使用多模态的模型去做backbone,在其上做后训练,做微调,我们仍然还是很坚定地认为在做的是一个基础模型的最核心原因。

为什么我们需要一个单独的基础模型,原因非常简单:

物理世界的特性和虚拟世界差异太大了,在物理世界中最常见的一个问题就是随机性,用相同的角度、相同的力度推一个相同的杯子,可能十次会停在十个不同的地方。

这在虚拟世界几乎是不会发生的,如果内存状态一样,跑十次代码,十次基本是相同的结果。

当然不排除有什么宇宙射线把它的比特翻转,这个情况是极少数发生的。

所有物理世界发生的事情都具有高度随机的特性。现有的模型架构、训练方法、数据,很难精确描述高度随机性的现象。

尽管今天所有的具身模型还是建立在语言和多模态模型,或者视觉模型的基础上,但语言和视觉本质上并不是特别好的一个用来描述动作、描述物理过程的工具。

一个非常明显的现象是,语言只能描述一些长序列的事情,比如发生时间在10秒钟以上的事情,如果描述一些精细的操作,如怎么炒菜还是不太现实的。

图像比语言精度好很多,但同样会面临很多问题,比如工具使用、遮挡。

大量涉及力的过程、接触的过程,没有办法靠语言和图像去做。

这就提出了一个根本性的问题:现有的模型是建立在语言和视觉模型的基础上,这样到底对不对?

很明显是不正确的。实际上我们需要某种意义上完全另起炉灶,把它重新训练成一个专门供物理世界使用的基础模型。

刚才我提到的这些,本质上都是一个问题,即物理世界的复杂性本质上不同于虚拟世界,所被压缩出来的世界的结构和虚拟世界有很大不同。

当转变这一思路后,会给模型架构带来很多不一样的视角和观点。

其中一个非常重要,在感知和决策的层面上,之前都是沿用在虚拟世界中学习的结构。

这会带来一个实质性的问题,也是在今天多模态领域存在的一个实质性问题,就是人类在物理世界中学习和感知的方式和在虚拟世界中完全不同。

在虚拟世界中学习,比如怎么样判定一只狗是一只狗,而不是一只猫,需要在一万张图片里抽取出共同的Feature,看到一个新的图片时将这个Feature去匹配,这是统计学习到今天最常用的范式。

实际上,我们在日常生活中碰到一只狗,不是这么去学的,也不需要一万张狗的图片,只需要看到一只狗,让它转一圈,在这个过程中,便获得了一个带有因果性、时序信息的连续观察流。

同时,因为有空间位置信息,大致上能够感受得到狗的三维结构。

除此之外,我们还可以主动和狗互动,比如和它握握手,进而获得了一个和观察策略相关的观察结果,叫做Interactive Perception,过程叫做Active Perception。

在这个过程中,其实和在虚拟世界的学习方式产生了大量根本性的不同,这应该是多模态模型未来重要的发展方向。

如果还是坚持之前静态的、固定的数据的学习方式,是做不到像人类一样高效率,实现节省数据和算力的学习结果。

如果以十年为周期,具身智能的基础模型很可能会反过来吞噬现有的多模态模型的生存空间。

既然要做统一的基础模型,自然是完全端到端,这在今天已经逐渐达成共识。那没有形成共识的是什么?

要做快慢系统,是因为统一模型的推理速度会变得比较慢。

我个人的看法是,这是在目前的模型架构下所采用的一种Trade off(权衡)的形式。

要根本解决模型的问题,还是需要把它当成另外一个完全不同于已有模型,专门需要考虑端侧部署和推理,在设计时就要考虑这些问题的模型,这也是自变量探索的结果。

刚才这个视频,在这种高度复杂的任务上,自变量已经很好地实现了非常快的速度,而且这个速度是要超过人类当时给它做训练,收集数据时的速度。

【此处无法插入视频,遗憾……可到量子位公众号查看~】

完全1倍速记录,比遥操作的速度快很多,同时能维持非常好的准确率和最终效果,这个任务难度也非常高。

另外一个问题就是机器人本体泛化问题,某种意义上也是因为还在沿用过往的模型架构做机器人。

这个视频是自变量实现的非常典型的跨本体泛化任务,我们从夹爪的模型上迁移到高自由度灵巧手上,15个主动自由度,一共20个自由度的高自由度灵巧手,只用了非常少量的样本,这说明模型本质上已经学会了一些基础的物理规律,物体的基本属性,一些基本的动作模式。

【此处无法插入视频,遗憾……可到量子位公众号查看~】

这一模型可能在当时的时间点上是最领先的,也可能是唯一一个用端到端的VLA模型驱动高自由度灵巧手的例子。

另外我们希望具身模型不止是生成动作去控制机器人,还期望它是一个世界模型,这样就可以用生成出来的未来世界的状态做各种各样的事情,也希望它是Spatial intelligence,这样就可以利用三维结构。

也希望它仍然延续了VLA的语言能力,实际上自变量今天做的就是把所有的能力都放在同一个模型上,让它拥有语言能力、世界模型的能力,视频生成的能力、三维重现的能力。

在这基础上,今天的一些争论点可能并不是十分合理,很多人认为VLA和世界模型是不是互相替代的关系,或者是两个不同的技术分支。

在刚才的架构里,这些只是同一个模型不同的输出而已,是在同一个物理世界基础模型的框架下所做的不同努力,这就是一定要把具身智能模型单独分离出来,作为一个新的范式最重要的原因之一。

顺便打打广告,自变量自研的WALL-OSS,也是目前领先的开源物理世界基础模型,具备VLA模型控制机器人的能力。

同时也具备非常好的泛化和智能跟随的能力,同时能够做Subtask的区分,从而构建长序列的思维链,解决非常复杂和长序列的问题。

刚才提到了改变视角对于模型架构的变化,另一方面,改变视角对于数据的看法也更本质。

过去在大模型领域,Scaling Law是核心考虑的事情,其中数据的Scaling Law普遍被称为在机器人上最困难的事。

虽然都是要做更多、更好的数据,是否需要用虚拟数据、合成数据,还是要在真实数据里挖掘一些动作等,还是可以有更好的方法实现。

受限于时间,自变量也做了大量工作,我们认为现实世界的数据应该是最主要的来源。

我们从以往的大模型的学习中获得了一个重要的insight,就是训练还是要分阶段,所以数据也是要分阶段的,需要有预训练的数据,也需要有后训练的数据。

更重要的,我们发现了第三个Scaling Law,在后训练之后还可以在推理时做拓展,在推理时用CoT的方式、用其他推理的拓展方式,让模型表现变得更加好。

刚才有其他嘉宾提到了这个范式天然非常适合于具身智能、机器人。

我们在物理世界中是一个持续学习的过程,不会把所有的数据上传到云上,形成一个完全的批次,反过来再下载到端侧上,我们还是希望端侧上每收集到的一个新数据能够实时更新,在整个生命历程里都能够有体验学习的过程。

这应该是一个本质上优于以往集中式批次式训练的方法,当然这带来了很多额外的难度。

在体系架构上,在System上,在硬件上都会有相应的调整。但如果不把具身智能看作是一个独立的基础模型,独立的发展方向,一定还是会受制于以往在其他模态的模型里面所碰到的一些问题。

一个全新的学习范式,自然需要改造在物理世界中的硬件载体,在具身智能中非常核心的一点是,一定要让AI定义硬件,而不是先去制造一个完美的硬件,然后再在上面做AI的模型。

自变量坚持软硬一体同步发展,目前已经实现了两款全自研的轮式底盘人形机器人,以及高自由度的灵巧手,现在也已经开始向市场销售。

最后想说一件事情,大家普遍意义上还是有点低估了具身智能的发展和影响,普遍还是认为在AI领域语言、数学、代码这些领域要比具身智能有本质的重要性。

但这一观点有一个隐藏的Hypothesis,以前都会说有一个所谓的奇点,超过这个奇点时,一个很聪明的AGI能够发明一个更聪明的AGI,所以人类被彻底抛在后面。

但这个假设今天是不对的,我们怎么样发明一个真正聪明的AGI,甚至超越人类的ASI,是需要更多的算力,更多的芯片,更多的电力,更多的能源,更多的数据,所有这些东西都是从物理世界中来的。

怎么样在物理世界中获取更多的资源,其实在第一次工业革命时就有一个概念:所谓的机器制造机器,一台能够制造十台,十台制造一百台。

这样有一个指数级的增长,但今天我们并没有看到指数级增长发生在现实世界,模型在物理世界中并没有带来有虚拟世界这么巨大的影响,核心的一个卡点就是人手的劳动。

一切商品,一切服务都不能脱离人手的劳动这一步,这使得没有任何一个东西可以100%的依靠机器自动的做出来,除了芯片。

如果具身智能实现的话,万事万物都可以走向类似于芯片摩尔定律的发展规律。

在这个过程中,自然而然带来了更多的芯片,更多的电力,更多的数据,我们可以做一个更加聪明的ASI,从此走向一个真正意义上通用智能的未来。

我们还是认为具身智能具有本质性的重要性,同时也应该是一个独立于、平行于已有的虚拟世界模型的另外一个物理世界基础模型。

版权所有,未经授权不得以任何形式转载及使用,违者必究。
原文链接: 自变量王潜:具身智能是物理世界的独立基础模型|MEET2026
站长:程序员鱼皮 老鱼简历 商务合作 增值电信业务经营许可证
2026 鱼皮AI导航 | 沪ICP备19026706号-6
🔥 热门文章
1
B 站上 DeepSeek 闹鱼灾了,我发起《大肥鱼清除计划》!
480
2
Vibe Coding 实战:从零构建现代专业级 AI 搜索引擎
430
3
我的第一个出海产品!7 天 2 万
370
4
又一个国产版 Codex 神器,也来卷办公了!
370
5
day3-如何写出一个高质量的 Skill(组内分享) 高质量 Skill 不是“一个调得很顺的巨型 Prompt”,而是一个可验证、可回归、可维护的能力包。 先定义“什么算好”,再实现“怎么做好”。评估体系先于 Skill 本身成型。 下面用“故障诊断 Markdown 转 YAML”作为例子,但方法是通用的。 --- 一、先想清楚:Skill 到底是什么 一个 Skill 至少包含四部分: 部分 作用 接口 输入什么、输出什么、边界在哪 流程 分几步做,每步的产物是什么 规则 硬约束、经验规则、失败模式 降级策略 不确定时怎么办,而不是硬编一个看似合理的结果 高质量 Skill 的共同点:职责单一、接口清晰、规则可定位、输出可验证。 反例:把几十条经验全塞进一个主 Prompt,改一条规则要重调整个 Prompt,评估时也不知道是哪条规则退化。 --- 二、核心方法:先建评估,再写 Skill 不要先写转换器再补测试。正确顺序是: 1. 定义输出契约:什么算合法、什么算合格; 2. 建金标准集:一小批人工认可“可放行”的样本; 3. 先写评估 Skill:让它在金标准集上跑出基线; 4. 再迭代生成 Skill:每次修改跑同一套评估,无退化且目标维度提升才算正向。 这就是评估驱动开发:评估是 Skill 的单元测试,金标准集是回归锚点。 --- 三、评估 Skill:三层门禁,逐层递进 前一层不过,后一层不跑。每层留可追溯证据。 第 1 层:确定性硬门禁 用解析器、Schema、校验器完成,不消耗模型成本。 · 输出可解析; · 必填字段齐全,类型/枚举合法; · 引用目标存在,无悬空引用、无不可达节点; · 关键路径至少有一条能到达预期出口。 不通过直接打回。 第 2 层:语义断言 用脚本 + 结构遍历检查“逻辑对不对”,仍然保持确定性。 通用检查项: · 覆盖率:源材料里的关键步骤、分支、条件,输出里是否都有对应? · 完整性:每个判断节点是否都有明确出口?有没有死胡同? · 可达性:每条路径是否都能到达预期终点?有没有无出口循环? · 顺序与依赖:有先后依赖的操作,是否保留了顺序?有没有被拍平成无序列表? 例子:故障诊断转换中,检查“每个判断项是否有是/否/异常出口”“每条路径是否能到根因”。 第 3 层:LLM-as-Judge 只处理解析器表达不了的维度:忠实度、完整性、可执行性。 但 Judge 会漂移,不能单独放行,必须建立在第 1、2 层之上。Judge 的 Prompt、rubric、模型版本都要版本化,换模型必须用金标准集重新校准。 通用 Judge 维度: 维度 问什么 忠实度 输出是否忠实源材料意图?有没有自行发明内容? 完整性 关键步骤、条件、证据是否保留?隐式知识有没有被压成空话? 收敛性 输出是否仍指向原目标,而不是发散? 可执行性 下游不依赖源材料能否直接使用? --- 四、金标准集:回归测试的锚点 不需要一开始就标注几百份。用已认可的样本当种子,扩到 15~30 份,覆盖失败模式而非随机抽样: · 完整正例:典型流程; · 边界/异常分支:异常路径、循环、前置失败回退; · 已知易错模式:实际踩过的坑; · 留出集:不参与调优,只用于最终验收,防过拟合。 金标准不需要完美,只需要当前标准下认可可放行。 回归指标:关键路径用 pass^k(k 次全过),稳定性用 pass@k。 --- 五、工程约束:让批量产出可重放 · 幂等:同输入 + 同 Skill 版本 + 同规则 → 输出一致,否则无法判断变好是 Skill 改了还是随机波动; · 隔离不阻断:单份失败进隔离队列,记录失败层和原因,不阻塞其余; · 版本绑定:规则、rubric、金标准集进 Git;每份报告绑定“源版本 + 生成 Skill 版本 + 评估 Skill 版本 + Judge 模型版本”; · 抽样人工复核:Judge 临界样本 + 易错模式,人工抽检结果反过来校准 rubric。 --- 六、Skill 本身怎么写 · SKILL.md 控制篇幅,写清:输入约定、输出契约、分步流程、硬规则、降级策略; · 经验规则放 references/ 或 rules/,按失败模式分类,不要全塞进主 Prompt; · 不确定时标 needs_review: true,不要硬编看似合理的结果; · 迭代由评估报告驱动:报告告诉你哪层挂了、哪类失败模式,你改对应规则文件,而不是漫无目的调 Prompt。 --- 七、落地顺序(不要反过来) 1. 固化输出契约:Schema + 结构约束; 2. 建金标准集:从已认可的 + 最易出错的样本开始; 3. 先写评估 Skill:跑出基线报告; 4. 再迭代生成 Skill:每次修改对比逐项通过率,无退化且目标提升才算正向; 5. 批量运行 + 隔离回放:失败进队列,结束后人工抽检; 6. 评估 Skill 自身版本化:换 Judge 模型必须重新校准。 --- 八、给组员的三条硬要求 1. 不许凭感觉说“变好了”:每次修改必须附评估报告对比,逐项通过率说话。 2. 不许跳过确定性门禁直接看 Judge 分数:前两层挂了,Judge 分数没有意义。 3. 不许把规则堆进主 Prompt:规则按失败模式分文件,评估报告要能定位到具体文件。 --- 一句话收尾 生成 Skill 决定“能不能做”,评估 Skill 决定“敢不敢用”。 先让评估体系站稳,再让生成器迭代。这样交付的不是一堆“看起来还行”的产出,而是一套可证明、可回归、可交接的 Skill 质量体系。
340
6
DeepSeek 重磅开源的超级 Agent,到底是个啥?
330
7
最近在落地 AI Native 项目,卡在团队资产协同这块,想请教下社区各位有实际落地经验的同学: 我们现在的资产分为三块:项目文档(PRD/ADR/ 运行手册)、Agent Skill(业务技能、执行 SOP、提示词包)、MCP 工具服务定义。 目标是做到:人和多 Agent 共用一套可信资料源,Skill、MCP 配置、项目文档能够版本化、同步、共享、可评审。 目前我们初步方案是用 Git 做底层版本主线: - 文档:Markdown + ADR,带元信息,支持 RAG 检索 - Skill:单技能包目录化,带版本、评估用例、依赖声明 - MCP:项目级声明文件纳入 Git 但实际协作里遇到不少疑问,想参考大家成熟的实践: 1. 大家团队里,文档、Skill、MCP 三者是怎么组织目录和版本管理的?有没有稳定的仓库结构模板? 2. 多人协作时,Skill 的变更评审、灰度升级、依赖管理怎么做?如何避免本地版本不一致、“本地能跑别人不行”? 3. MCP 是统一中心化网关模式,还是大家各自本地启动 + git 同步配置?权限白名单、调用审计这块有什么好方案? 4. 有没有成熟工具链做自动同步(类似 agentmeld /teamai-cli)、变更校验、eval 回归门禁? 5. 文档和 Agent 的打通:哪些文档放进 Git 作为可信真值,哪些放外部知识库,边界怎么划分? 如果有现成的仓库样例、目录规范、团队协作流程,非常希望能分享参考,感谢!
280
8
PHP 被曝两大致命漏洞,请所有程序员抓紧做这件事!
280
9
人工智能前沿部署工程师(FDE) · 概 览 与 方 法 论
270
10
QuireKit 编辑器的 AI-Native 是如何设计的?谈谈我对真正 AI-Native 的理解
250
11
告别“金鱼记忆”:我开发了一款能当“第二大脑”的浏览器 AI 助手
250
12
ARTS 1101: 最长回文串与子序列匹配、一次 URL 请求的来回之旅与如何验证 AI 的交付
230
🔥热门工具
朱雀AI检测朱雀AI检测
朱雀AI检测助手朱雀AI检测助手
LovartLovart
老鱼简历老鱼简历
WritePass官网WritePass官网
面多多面多多
CursorCursor
星月写作星月写作
零感AI零感AI
朱雀AI检测助手朱雀AI检测助手