世界模型能实时玩了!Frameboy浏览器免装,15fps探索3D场景
Labs推出Frameboy研究预览版,展示旗下世界模型Atlas的实时交互能力。该系统可通过云端GPU生成画面,并以最高15fps的帧率串流至浏览器,用户能够实时控制虚拟摄像机,在AI生成的三维场景中自由探索。场景构建方面,Atlas可根据单张图像或现实场景的多视角照片生成可探索的虚拟环境。
编译这个动作, 是由VR陀螺来做。
在11月5日这个时间点上, AI空间智能公司World Labs推出了一份研究预览版的东西。这份东西主要是用来展示旗下那个世界模型Atlas的实时交互能力的。这个系统可以通过云端那边的GPU来生成画面。
生成的画面会以最高15fps这样的帧率, 进行串流传输发送到浏览器那里去。在这个情况下, 用户能够实时地控制住虚拟摄像机。用户可以在由人工智能生成出来的三维场景当中, 进行自由的探索活动。

据悉, 它是通过优化推理过程的方式建立起来的, 而建立的对象就是Atlas模型。在刚刚过去的本月九号, 也就是今年的九月, 这个模型被首次公之于众。
该模型支持对多种内容进行输入操作, 这些内容包括但不限于文本资料、图像文件、视频素材以及三维模型的输入。凭借这样的输入机制, 它可以针对摄像机视角方面所发生的变化, 生成那种具备空间一致性特征的视觉画面。
相比起以前必须预先设置好摄像机的运行路线, 然后被动地等待视频内容被制作完成, 现在的模式支持用户不停地、持续地对视角进行调整, 随着用户的动作, 模型能够即时生成对应的画面效果, 这一变化使得从传统的先预生成视频这种固定方式, 转变为可以进行交互式的场景探索。
在场景构建这个方面, Atlas可以根据单个的图片或者是现实场景里的多视角照片来生成可以随便探索的虚拟环境。World Labs还把手头的相关能力给整合到了场景创作工具里面, 这样就能够支持生成那些包含了颜色信息和深度信息在内的画面。
World Labs说, 目前的阶段还依赖高性能的云端GPU, 运行成本要比传统的本地渲染方案更高一些, 以后有望用到开发游戏的领域还有影视预演的方面以及建筑可视化的这些场合。
进行投稿或者是提供线索。
关于稿件的商务合作事宜, 请联络林南, 联系方式为其微信。
请加入行业交流群, 具体方式是通过微信联系林南。