您的位置首页 >科技要闻 >

World Labs 发布 Frameboy 实时世界模型演示,单张图最高 15 帧云端串流

我先核实李飞飞实验室这次新发布的到底是什么产品。

信息已核实:这次发布的是 World Labs 的实时交互 Demo “Frameboy”,用的是优化后的 Atlas 世界模型。下面按固定格式成稿。

World Labs 在 11 月 6 日发布了一款名为 Frameboy 的研究预览 Demo,把自家 9 月刚推出的自回归世界模型 Atlas 拉进了实时交互阶段:用户只要打开浏览器,云端 GPU 就能以最高每秒 15 帧的速度把画面实时串流过来,像打游戏一样推动、拉远、摇移镜头,在一张静态图片 “脑补” 出来的 3D 空间里随便溜达。这一步解决的是世界模型最影响创作体验的问题 —— 过去每调整一次机位,都要等几十秒甚至几分钟渲染,搭场景像开盲盒;现在点击生成这个割裂动作基本消失了。外形做成复古掌机的样子,很容易让人联想到经典 Game Boy,点不同 “游戏卡带” 就能切换不同模拟世界,加载十几秒后即可自由探索。配套的网页应用 Viewfinder 也加入了实时渲染叠加模式,目前处于封闭测试、开放候补名单申请。

一、Frameboy 这次升级的关键信息

  • 发布主体:World Labs,11 月 6 日以研究预览形式上线
  • 底层模型:Atlas,9 月 1 日发布的多模态自回归扩散 Transformer
  • 帧率:最高 15 fps,云端 GPU 实时串流
  • 使用方式:浏览器打开即用,无需本地高性能显卡
  • 输入能力:单张图片或一段文字,即可从零生成可探索的周边场景
  • 交互形态:复古掌机外观,切换 “游戏卡带” 选场景,加载约十几秒
  • 配套应用:Viewfinder 加入实时渲染叠加模式,封闭测试中
  • 优化手段:对 Atlas 做深度推理优化,压低单帧生成耗时

二、为什么这一步值得单独发一个 Demo

  1. 世界模型的瓶颈不在画质,而在等待:调整机位的反馈周期过长,创作节奏被打断
  2. 15 fps 已经跨过 “可交互” 的心理阈值,用户感知不到 “点了生成” 这个动作
  3. Atlas 把相机位姿做成原生输入,运镜不再靠文字描述,镜头控制更准
  4. 每生成一帧同步输出色彩与深度信息,便于在视觉上对齐三维结构
  5. 定位是 “下一代生成式渲染器”,实时化是把这一定位往前推的关键一步

三、从图片到可逛世界的操作步骤

  1. 打开浏览器进入 Frameboy 页面,等待云端环境加载
  2. 选择一张 “游戏卡带”,也就是预设好的模拟世界
  3. 用鼠标推拉摇移虚拟相机,云端持续推流新视角画面
  4. 走错方向或试了不合适角度,直接换个机位继续探索,试错成本接近零
  5. 想搭自己的世界,就到 Viewfinder 申请候补,上传图片后逐帧向外扩展构建
  6. 场景主体搭好后唤起 Frameboy 叠加层,静态工程即刻变成实时串流的 3D 空间

四、Atlas 与上一代 RTFM 的能力对照

对比项RTFM(2025 年 10 月)Atlas(2026 年 9 月)
生成方式在前一帧基础上生成下一帧,无显式几何多模态自回归扩散,原生处理文本、图像、视频、3D
视角范围只能在已有几个视角之间做插值过渡单图或文字即可从零脑补周边场景
相机控制文字描述运镜相机位姿作为原生输入,像素级控制
输出形式视频帧图像帧、点云、3D 高斯泼溅
典型时长短片段单张图最长 1 分钟、1440p 视频

五、算力门槛与现实约束

  • 运行条件:必须跑在云端高性能 GPU 服务器上,本地设备无法承担
  • 成本对比:与传统本地渲染相比,云端实时串流的成本并不便宜
  • 开放范围:Frameboy 是研究预览,Viewfinder 实时模式仍在封闭测试
  • 硬件协同预期:与芯片团队贴身打磨硬件与底层算子,是后续降本的主要路径
  • 历史规律:计算机图形学里任何颠覆性技术早期都又慢又贵,随软硬协同演进逐步普及

六、与 AMD 的交易背景

项目信息
宣布时间2026 年 9 月 28 日
交易形式全股票交易,总价值约 82 亿美元
历史地位AMD 历史上第二大收购,仅次于约 500 亿美元收购赛灵思
预计交割2026 年底前,需通过监管审批
人事安排联合创始人将出任 AMD 执行副总裁兼首席科学家,直接向苏姿丰汇报
团队安排原有研发团队完整保留,由联合创始人 Justin Johnson、Ben Mildenhall 带队
战略意图摸清下一代世界模型的真实算力负载,反向指导 GPU 架构与软件栈规划

【常见问题】

问题 1:World Labs 发布的 Frameboy 是什么,和 Atlas 什么关系?

回答 1:World Labs 发布的 Frameboy 是一个实时交互研究预览 Demo,底层用的是经过深度推理优化的 Atlas 世界模型。

问题 2:Frameboy 最高 15 帧的实时世界模型,需要什么设备才能跑?

回答 2:Frameboy 最高 15 帧的实时世界模型运行在云端高性能 GPU 上,用户只需浏览器即可访问,但服务成本不低。

问题 3:World Labs 的 Frameboy 能只用一张图片生成 3D 世界吗?

回答 3:World Labs 的 Frameboy 支持单张图片或一段文字输入,Atlas 能从零脑补出周边场景并支持自由操控镜头。

问题 4:Frameboy 和之前的 RTFM 有什么区别?

回答 4:Frameboy 背后的 Atlas 比 RTFM 规模更大、数据量高几个数量级,RTFM 只能在已有视角间插值,Atlas 可从零生成场景。

问题 5:World Labs 被 AMD 收购后,Frameboy 这类实时世界模型会更快普及吗?

回答 5:World Labs 被 AMD 收购后,团队可与芯片团队协同打磨硬件与算子,有助于降低实时世界模型的算力成本、加快普及。

【数据来源】

[2026-11-06](李飞飞最新 AI 成果发布,把世界模型装进复古掌机,单张图实时跑出 15 帧)36 氪

[2026-11-06](World Labs 团队发布 “游戏掌机” Frameboy:用网页实时探索 AI 生成世界,每秒最高 15 帧)IT 之家

[2026-11-05](World Labs puts Atlas in real time with Frameboy demo at 15 fps)RuntimeWire

[2026-09-28](World Labs is Joining AMD)World Labs 官方博客

[2026-09-01](Atlas: A World Model for Spatial Intelligence)World Labs 官方博客

【免责声明】

本内容根据 World Labs 官方博客、产品页面及媒体报道整理,仅用于信息传递,不构成任何投资建议或购买建议。Frameboy 为研究预览性质 Demo,Viewfinder 实时模式仍处封闭测试,功能开放范围、可用场景与后续商用节奏以 World Labs 官方公布为准;AMD 收购交易尚待监管审批,交割结果与人事安排请以官方公告为准。

今日大家都在搜的词: