新闻极客公园今天
李飞飞World Labs发布Frameboy:Atlas世界模型网页端15帧实时交互
本文由 AI 根据公开内容整理,可能有误,请以原文为准:马斯克官宣 Cybertruck 停产:销量不足预期一成;李飞飞团队推出世界模型「模拟掌机」;小米汽车成立国际事业部|极客早知道(极客公园)
核心内容
World Labs于9月发布全球首个多模态世界模型Atlas后,近日推出名为Frameboy的网页端演示项目。该项目允许用户通过触屏或键盘摇杆,在浏览器中实时探索由Atlas生成的模拟世界。系统采用云端GPU流媒体传输,最高支持15 FPS渲染帧率,加载时间约十余秒,标志着高保真世界模型从静态生成迈向可交互仿真验证阶段。
Frameboy底层运行高度优化的Atlas模型,具备像素级精确相机控制与3D空间重建能力,支持通过选择不同「游戏卡带」切换模拟场景。尽管当前受限于云端算力成本与15 FPS帧率瓶颈,操作存在轻微延迟,但其架构验证了世界模型作为具身智能训练环境的潜力。若未来实现本地化部署与帧率提升,有望大幅降低物理仿真数据获取门槛。
关键看点
- 实时交互:Frameboy支持网页端以最高15 FPS云流媒体传输,通过虚拟摇杆与十字键实现对AI生成3D世界的低延迟探索与视角调整
- 模型能力:基于优化版Atlas多模态世界模型,具备像素级精确相机控制与3D重建能力,可通过切换「游戏卡带」加载不同模拟环境
- 工程现状:当前依赖云端高性能GPU服务器渲染,相比本地推理成本较高且操作略有卡顿,但验证了世界模型作为具身仿真器的技术可行性
工程与产业观察
Frameboy将世界模型从视频生成推进至可交互仿真阶段,为具身智能提供了潜在的低成本合成数据源。尽管15 FPS与云端依赖限制了直接用于Sim-to-Real训练,但其验证了Atlas模型在3D一致性与相机可控性上的突破。对于算法工程师而言,这预示着未来可能通过提示词快速构建定制化仿真环境,缓解真实数据采集瓶颈。
来源
本页事实对应的公开页面,以原文为准。