芯片分工让清晰显示和多任务成为可能

PICO为Swan设计了一颗专门用于处理传感器融合、空间计算以及追踪的自研芯片PICO, 另外还有一颗旗舰SoC负责应用计算与图形渲染。这样的分工避免了不同任务争抢资源, 并且控制了因高分辨率显示所带来的发热及功耗问题。要是用户有长时间开启透视、眼手追踪且同时运行多个应用的需求, 这套架构的价值可不只是峰值性能得到提升。

坐在实体电脑前的用户, 空中同时运行着视频, 运行着浏览器, 还运行着其他2D应用, 朋友能以3D虚拟形象进入同一空间。PICO希望Swan的显示效果接近高端物理显示器, 为多窗口办公提供基础, 为浏览器提供基础, 为文档提供基础, 为3D内容并行提供基础。清晰显示小字号文字成为关键, 这直接影响设备能否长时间替代实体显示器。

操作系统不再让应用独占视野和资源

大多传统 VR/MR 平台是围绕着单一沉浸式应用来进行设计的, 在应用启动之后会独占渲染方面的资源以及用户的视野。当用户从 VR 游戏转而切换到浏览器或者视频时, 就得先退出目前的体验, 然后再进入到另一个封闭环境当中。在生产力场景之下, 用户有可能需要同时去打开浏览器、文档、视频以及 3D 模型, 传统应用级的独立渲染会快速地增加系统的负担。

PICO OS 6的核心改变之处在于, 把渲染管线从应用层往操作系统层转移, 应用不再把控完整的渲染流程, 而是把内容提交给系统, 由操作系统对场景、光照以及画面开展统一管理，在动态方面分配CPU与GPU资源, 现实环境、2D窗口、3D内容还有虚拟背景由系统进行统一组合, 应用之间用不着反复退出并切换。

两种空间模式适应不同使用场景

Full Space贴近常见的VR游戏模式, 单个应用占据完整的沉浸空间, Space更趋近于桌面操作系统的多窗口模式, 不同应用能够共同存在于同一个混合现实空间, 用户能够依据需求自由切换, 游戏的时候采用Full Space, 办公或是社交的时候采用Space。

演讲里进行了一个典型场景的展示, 用户坐在实体电脑跟前, 空中同时有着视频、浏览器以及其他2D应用在运行, 朋友以3D虚拟形象进入到同一个空间, 系统从事识别和切换输入设备的工作, 开发者不需要针对每种输入方式去重新进行完整应用逻辑的设计, 统一渲染还给操作系统级AI Agent提供了基础。

AI Agent将帮助开发者快速创建应用

在操作系统能够理解且调度各异的应用、窗口以及空间对象之后, 未来的AI Agent才具备跨应用整理信息、移动内容或者执行连续任务的可能性, 并非局限于停留在单个应用的内部。PICO着手把AI Agent引入到XR开发流程之中, 以此让AI去完成项目创建、应用迁移、性能分析以及3D场景搭建。

能持续运用Web、Unity等现有技术栈的开发者, 不用去从头学习一整套全新的XR开发体系。PICO所给出的方案是尽力把Web和游戏引擎开发者引领到空间计算领域, 降低开发的门槛, 加速Swan在上市初期的内容供给。

开发者无需抛弃现有技术栈

原来有的应用能够持续运行, 从事开发的人员也能够一步步把平常普通的2D界面提升成为空间方面的窗口, 在该窗口的旁边增添可以进行交互的3D商品、模型或者视频之类的内容。PICO给出了像PICO、PICO以及PICO UI这样的工具, 去协助从事开发的人员加入3D场景、物理效果、混合 reality、空间音频以及粒子系统。

依据PICO规划, 同一套应用能够在桌面运行, 还能在移动设备运行, 也可在PICO OS运行, 又准许在其他空间计算平台运行, 以此降低开发者针对不同设备重复开发所产生的成本。开发者能够制作沉浸式游戏, 也能够把桌游、轻量游戏放进Space, 使其与浏览器、视频以及其他应用一同运行。

模拟器让开发者提前测试应用

处于缩短开发周期的目的, PICO给出了能于PC以及Mac之上运行的PICO模拟器, 就算开发者还没拿到Swan, 也能够对系统环境、空间场景以及输入方式予以模拟, 进而提前构建并测试应用, 这使得开发门槛有所降低, 促使更多团队能够在设备正式上市以前准备好内容。

不用开发者完全丢弃已有的技术线路, 能够持续运用熟悉的开发用具以及语言。原来的应用能够逐渐升级成支撑空间多任务的版本, 达成2D界面、3D模型还有视频内容的混合搭配。PICO期望凭借这种途径, 在Swan上市开始的时候迅速构建出规模化的内容生态环境。

对于名为PICO Swan的这款设备, 你所怀有的最大的期待究竟是什么呢? 欢迎于评论区展开交流讨论, 通过点赞以及分享使得更多的人能够瞧见这一篇文章！