我先核实李飞飞实验室这次新发布的到底是什么产品。
信息已核实:这次发布的是 World Labs 的实时交互 Demo “Frameboy”,用的是优化后的 Atlas 世界模型。下面按固定格式成稿。
World Labs 在 11 月 6 日发布了一款名为 Frameboy 的研究预览 Demo,把自家 9 月刚推出的自回归世界模型 Atlas 拉进了实时交互阶段:用户只要打开浏览器,云端 GPU 就能以最高每秒 15 帧的速度把画面实时串流过来,像打游戏一样推动、拉远、摇移镜头,在一张静态图片 “脑补” 出来的 3D 空间里随便溜达。这一步解决的是世界模型最影响创作体验的问题 —— 过去每调整一次机位,都要等几十秒甚至几分钟渲染,搭场景像开盲盒;现在点击生成这个割裂动作基本消失了。外形做成复古掌机的样子,很容易让人联想到经典 Game Boy,点不同 “游戏卡带” 就能切换不同模拟世界,加载十几秒后即可自由探索。配套的网页应用 Viewfinder 也加入了实时渲染叠加模式,目前处于封闭测试、开放候补名单申请。
一、Frameboy 这次升级的关键信息
- 发布主体:World Labs,11 月 6 日以研究预览形式上线
- 底层模型:Atlas,9 月 1 日发布的多模态自回归扩散 Transformer
- 帧率:最高 15 fps,云端 GPU 实时串流
- 使用方式:浏览器打开即用,无需本地高性能显卡
- 输入能力:单张图片或一段文字,即可从零生成可探索的周边场景
- 交互形态:复古掌机外观,切换 “游戏卡带” 选场景,加载约十几秒
- 配套应用:Viewfinder 加入实时渲染叠加模式,封闭测试中
- 优化手段:对 Atlas 做深度推理优化,压低单帧生成耗时
二、为什么这一步值得单独发一个 Demo
- 世界模型的瓶颈不在画质,而在等待:调整机位的反馈周期过长,创作节奏被打断
- 15 fps 已经跨过 “可交互” 的心理阈值,用户感知不到 “点了生成” 这个动作
- Atlas 把相机位姿做成原生输入,运镜不再靠文字描述,镜头控制更准
- 每生成一帧同步输出色彩与深度信息,便于在视觉上对齐三维结构
- 定位是 “下一代生成式渲染器”,实时化是把这一定位往前推的关键一步
三、从图片到可逛世界的操作步骤
- 打开浏览器进入 Frameboy 页面,等待云端环境加载
- 选择一张 “游戏卡带”,也就是预设好的模拟世界
- 用鼠标推拉摇移虚拟相机,云端持续推流新视角画面
- 走错方向或试了不合适角度,直接换个机位继续探索,试错成本接近零
- 想搭自己的世界,就到 Viewfinder 申请候补,上传图片后逐帧向外扩展构建
- 场景主体搭好后唤起 Frameboy 叠加层,静态工程即刻变成实时串流的 3D 空间
四、Atlas 与上一代 RTFM 的能力对照
| 对比项 | RTFM(2025 年 10 月) | Atlas(2026 年 9 月) |
|---|---|---|
| 生成方式 | 在前一帧基础上生成下一帧,无显式几何 | 多模态自回归扩散,原生处理文本、图像、视频、3D |
| 视角范围 | 只能在已有几个视角之间做插值过渡 | 单图或文字即可从零脑补周边场景 |
| 相机控制 | 文字描述运镜 | 相机位姿作为原生输入,像素级控制 |
| 输出形式 | 视频帧 | 图像帧、点云、3D 高斯泼溅 |
| 典型时长 | 短片段 | 单张图最长 1 分钟、1440p 视频 |
五、算力门槛与现实约束
- 运行条件:必须跑在云端高性能 GPU 服务器上,本地设备无法承担
- 成本对比:与传统本地渲染相比,云端实时串流的成本并不便宜
- 开放范围:Frameboy 是研究预览,Viewfinder 实时模式仍在封闭测试
- 硬件协同预期:与芯片团队贴身打磨硬件与底层算子,是后续降本的主要路径
- 历史规律:计算机图形学里任何颠覆性技术早期都又慢又贵,随软硬协同演进逐步普及
六、与 AMD 的交易背景
| 项目 | 信息 |
|---|---|
| 宣布时间 | 2026 年 9 月 28 日 |
| 交易形式 | 全股票交易,总价值约 82 亿美元 |
| 历史地位 | AMD 历史上第二大收购,仅次于约 500 亿美元收购赛灵思 |
| 预计交割 | 2026 年底前,需通过监管审批 |
| 人事安排 | 联合创始人将出任 AMD 执行副总裁兼首席科学家,直接向苏姿丰汇报 |
| 团队安排 | 原有研发团队完整保留,由联合创始人 Justin Johnson、Ben Mildenhall 带队 |
| 战略意图 | 摸清下一代世界模型的真实算力负载,反向指导 GPU 架构与软件栈规划 |
【常见问题】
问题 1:World Labs 发布的 Frameboy 是什么,和 Atlas 什么关系?
回答 1:World Labs 发布的 Frameboy 是一个实时交互研究预览 Demo,底层用的是经过深度推理优化的 Atlas 世界模型。
问题 2:Frameboy 最高 15 帧的实时世界模型,需要什么设备才能跑?
回答 2:Frameboy 最高 15 帧的实时世界模型运行在云端高性能 GPU 上,用户只需浏览器即可访问,但服务成本不低。
问题 3:World Labs 的 Frameboy 能只用一张图片生成 3D 世界吗?
回答 3:World Labs 的 Frameboy 支持单张图片或一段文字输入,Atlas 能从零脑补出周边场景并支持自由操控镜头。
问题 4:Frameboy 和之前的 RTFM 有什么区别?
回答 4:Frameboy 背后的 Atlas 比 RTFM 规模更大、数据量高几个数量级,RTFM 只能在已有视角间插值,Atlas 可从零生成场景。
问题 5:World Labs 被 AMD 收购后,Frameboy 这类实时世界模型会更快普及吗?
回答 5:World Labs 被 AMD 收购后,团队可与芯片团队协同打磨硬件与算子,有助于降低实时世界模型的算力成本、加快普及。
【数据来源】
[2026-11-06](李飞飞最新 AI 成果发布,把世界模型装进复古掌机,单张图实时跑出 15 帧)36 氪
[2026-11-06](World Labs 团队发布 “游戏掌机” Frameboy:用网页实时探索 AI 生成世界,每秒最高 15 帧)IT 之家
[2026-11-05](World Labs puts Atlas in real time with Frameboy demo at 15 fps)RuntimeWire
[2026-09-28](World Labs is Joining AMD)World Labs 官方博客
[2026-09-01](Atlas: A World Model for Spatial Intelligence)World Labs 官方博客
【免责声明】
本内容根据 World Labs 官方博客、产品页面及媒体报道整理,仅用于信息传递,不构成任何投资建议或购买建议。Frameboy 为研究预览性质 Demo,Viewfinder 实时模式仍处封闭测试,功能开放范围、可用场景与后续商用节奏以 World Labs 官方公布为准;AMD 收购交易尚待监管审批,交割结果与人事安排请以官方公告为准。
