罗盘 / 世界模型
暗星档案 · 未点亮的星世界模型 · 预测式学习
世界模型 · 预测式学习潜能 T6
让 AI 像婴儿一样从观察中学出物理与因果的内部模拟器——具身智能与机器人共同的缺失地基。
暗星编号DS-0304
轴E · 能量与能力前沿
领域ai-computing
状态初步评估
这是什么 · 为什么难
人类婴儿不靠标注数据就学会了重力、遮挡、物体恒存这些物理常识,靠的是不断预测下一刻会发生什么。世界模型就是要给 AI 装上这样一台可以在脑内推演的模拟器:给定当前状态和一个动作,预测世界会如何变化。攻破它,机器人不再需要在真实世界里撞几百万次才学会抓杯子,科学仿真可以直接在学出的模型里做实验,具身智能、自动驾驶、游戏生成共享同一块地基。这是 LeCun 等人判断的通向真正智能的必经之路,文明级的杠杆在于它把「与物理世界交互的学习成本」降低几个数量级。
卡在哪 · 机制级卡点
核心卡点是表征选择的两难:在像素级做视频预测,计算量爆炸且模型把算力浪费在预测无关细节(树叶怎么抖)上;在抽象空间做预测(如 JEPA 路线),又缺乏干净的训练信号来定义「什么该被预测」。此外长时程推演中误差同样复利累积,学出的模拟器跑几十步就漂移出物理合理范围。
谁在攻
Google DeepMind(Genie、Veo)、Meta FAIR(JEPA 路线,LeCun 主推)、World Labs(李飞飞)、NVIDIA(Cosmos)
怎么参与
读自监督学习、视频表征与强化学习中的 model-based RL;最好的切入子问题是「世界模型的物理一致性评测」——现在连衡量一个模型懂不懂重力的标准基准都不完善。进上述实验室的世界模型组,或从开源视频预测模型的失败案例分析做起。
谁在攻这颗暗星 · 攻关者名录8 人
这里列出正在探索这一问题的研究者、创业者与支持者。人物资料仍在核对,欢迎补充与纠正。
INDUSTRY业界 · 创业与工程8
杨立昆Yann LeCun首席 AI 科学家
Meta FAIR(纽约大学)
提出 JEPA 联合嵌入预测架构与「世界模型是通向真正智能必经之路」的路线判断,主推在抽象空间做预测式学习。
李飞飞Fei-Fei Li联合创始人 / CEO
World Labs(斯坦福大学)
创立 World Labs 攻「空间智能」,构建能理解与生成三维世界的大型世界模型。
贾斯汀·约翰逊Justin Johnson联合创始人
World Labs(密歇根大学)
World Labs 联合创始人,主攻三维生成与世界模型系统实现。
刘洺堉Ming-Yu Liu研究副总裁
NVIDIA
领导 NVIDIA Cosmos 世界基础模型,面向机器人与自动驾驶构建可仿真物理的世界模型。
范麟熙Jim Fan (Linxi Fan)GEAR 实验室负责人
NVIDIA
领衔 NVIDIA 具身智能与世界模型研究,推动机器人在学出的世界模型中训练。
丹尼贾尔·哈夫纳Danijar Hafner研究员
Google DeepMind
Dreamer 系列 model-based RL 世界模型作者,在学出的世界模型中训练智能体,攻长时程想象推演的稳定性。
大卫·哈David Ha联合创始人 / CEO
Sakana AI
2018 年开创性论文《World Models》作者,奠定用生成模型作为智能体内部模拟器的范式。
蒂姆·罗克塔谢尔Tim Rocktäschel研究科学家
Google DeepMind(伦敦大学学院 UCL)
参与 Genie 可交互世界生成模型研究,攻从视频学出可玩、可操控的世界模拟器。
去哪家 · 机构与公司名录4 家 · 其中初创/成长期 3
了解正在研究或开发相关技术的团队,寻找工作与合作机会。机构资料仍在核对。
Decart初创
实时交互世界模型(Oasis 系列),在 Amazon 芯片上跑实时可玩、可交互的生成世界
↗ 少数攻「实时」world model 的公司,Oasis 3 面向汽车实时交互——把世界模型从离线生成推向实时闭环的关键玩家
General Intuition初创
用海量游戏录像片段训练世界模型,让 agent 学到时空、物理与因果的直觉
从 Medal.tv 的游戏剪辑数据起家,估值直冲 $2B——用游戏视频喂 agent 直觉,是别家拿不到的独特数据护城河
World Labs成长期
空间智能 / 世界模型;产品 Marble 从文本、图像、视频或粗略 3D 布局生成可导航、持久的 3D 世界
↗ 李飞飞创立;2025-11 推出首个商业产品 Marble,生成稳定持久 3D 世界,区别于 AI 视频的漂移变形——世界模型商业化的领跑者
Google DeepMind(Genie)大厂
Genie 3 可实时生成 720p、24fps、动作可控的可玩 3D 环境,作为世界模型基础模型
↗ 把世界模型规模化推到实时生成前沿的最强实证之一,为像素级 vs 抽象表征路线之争提供参照