天天看点

赛道Hyper | 对标AVP:玩出梦想科技推出国产空间计算机

作者:华尔街见闻

作者:周源/华尔街见闻

6月28日,苹果Vision Pro(以下简称AVP)国行版上市,售价人民币29999元。

就实际体验来说,AVP称不上完美。比如,初次登录,因无手柄,故需以视线焦点实现相应的数字“点击”动作,若对焦不准,则无法完成点击;整个登录过程操作步骤繁琐,有一定门槛,不具备“傻瓜式”特点;垂坠感过强,佩戴舒适度不高,等等问题,诸如此类,不一而足。

如以上这些体验弱项不甚要紧,那么戴着AVP走路或乘坐交通工具,运动震感会影响这款设备的系统应用窗口显示。因为窗口会短暂消失(或出现视觉模糊,无法调取应用),应用也随之有同样变化。这种特点,不但影响用户体验,还会稀释商业价值。

华尔街见闻获悉,上海有家XR公司——玩出梦想科技,推出了与AVP类似的产品——玩出梦想MR。这款产品被定义为全球首款安卓系统空间计算机,可支持空间观影、MR游戏、3D空间拍看和轻办公等功能。

玩出梦想MR搭载8K Micro-OLED屏幕,实现双目2700万像素,3882PPI,中心区域PPD高达45,在光学指标上实现了对AVP的单点超越。

同时,这款设备搭载高通骁龙第二代骁龙XR2+芯片,采用精密摄像头传感器阵列:11个高性能摄像头、7类传感器和22个红外补光灯,成功实现卓越的眼手手柄多模态交互,达成更高清低延的虚实融合体验。

此外,玩出梦想MR避免了AVP的一些体验弱项,比如除了支持手眼交互和语音交互,还保留了手柄交互这一用户更熟悉的交互方式,3:2的平衡配重,佩戴时也会更舒适。

由于玩出梦想科技的各项技术均超越了行业一般技术水准,因此玩出梦想MR拥有了可比肩AVP的整体体验。

玩出梦想MR具备哪些技术优势?

任何智能终端的C端体验,除了本身的技术能力,影响体验和市场普及广度的因素也包括场景可玩性和生态丰富性。玩出梦想科技作为一家成立仅4年的XR新玩家,其空间计算机的场景和生态构建程度又如何?

核心技术优势包括哪些?

玩出梦想科技,2020年成立,前身叫做“YVR”。这家公司的核心技术团队成员,均有超过10年的XR行业深耕经验。

成立4年以来,玩出梦想科技已发布两款VR产品。于今年6月25日在新加坡推出的全新空间计算产品,是这家公司的第三款智能终端设备。

之所以拥有如此之高的研发效率,据玩出梦想科技CMO朱然透露,这是因为玩出梦想科技团队拥有三个要素:专业、专心、专注。

玩出梦想科技首席技术工程师张腾博士进一步表示,玩出梦想MR主要是在玩出梦想科技构建的三重技术能力的基础上诞生的。

首先,玩出梦想科技研发了“追踪模块”,包括头部6DoF追踪、手柄6DoF追踪、手部26DoF追踪和眼动追踪。靠着这些技术,因此设备能通过人的动作感知人的意图。为了达成超高精度、超高鲁棒性和超低延迟的追踪效果,玩出梦想MR配备了11个摄像头、7类传感器和22个红外补光灯。

其次,达成虚拟世界与现实世界的无缝融合,需要具备将现实世界实现数字化的能力。玩出梦想科技为此研发了的“地图模块”,可以构建由点云、网格和语义标签组成的地图,保存地图数据并实现在设备之间共享。

第三,通过持续的技术研发投入,玩出梦想科技提升了玩出梦想MR的视觉体验。

张腾表示,空间计算机视觉体验的基础是屏幕和光学。这两种硬件对性能的高要求,促使玩出梦想科技采用了当前业界最前沿的解决手段:双目8K Micro-OLED屏幕和自研超轻树脂Pancake光学方案的配置。

其中,Pancake光学方案的作用,就是通过折叠光路的设计大幅压缩屏幕与透镜的距离,以缩小光学模组总长度;相对传统的菲涅尔方案,采用Pancake光学方案的光学模组,厚度大幅减少,同时克服了边缘模糊、菲涅尔光环等问题,由此提高了佩戴头显设备的舒适度和视觉清晰度。

基于以上配置,玩出梦想MR达到了双目2700万超高像素、3882 PPI、92% DCI-P3、103°FOV,中心区域PPD更高达45,多项光学参数单点均实现了对AVP的超越或追平。

同时,玩出梦想科技也研发了1:1还原的超低延迟VST。张腾说,“通过我们的VST技术,我们希望能让佩戴者看到人眼真实看到的物理世界,而非看到摄像头播放的物理世界的数字化结果。”

这两者有何差异?要回答这个问题,首先要清楚,VST技术,对空间计算机的作用是什么?

这项技术在空间计算机中扮演着至关重要的角色。VST允许设备通过摄像头捕捉现实世界的场景,并将这些场景与虚拟信息(数字世界)相结合,从而在用户的视场中创造出一个融合了现实(物理)与虚拟(数字)的交互环境。

因此,VST技术的作用,就是增强用户的沉浸感和交互体验,同时为虚拟与现实之间的无缝连接提供技术桥梁。

比如玩出梦想MR,通过机身的MR旋钮,用户能从0到100%调节虚拟环境与现实环境的交融度(也称沉浸度),但用户看到的“现实环境”,在屏幕前呈现的实际上是“数字化的物理空间”。

玩出梦想MR的双目8K Micro-OLED显示屏,其实是两块屏幕:通过光学摄像头、传感器和主控芯片的强悍算力,玩出梦想MR实现了14ms的超低延迟,将用户眼前的真实世界,以1:1还原的形式,呈现在屏幕上,从而达到虚实融合的效果。

虚实无界:强性能+低延迟

要实现人眼通过空间计算机的屏幕,看到1:1真实还原的物理世界,就需要空间计算机的主芯片提供超强算力;此外,设备还需要有强悍的软件性能,以便精确调配这些可贵的算力。

玩出梦想MR的主芯片是高通第二代骁龙XR2+芯片,也是全球首批搭载该芯片的空间计算机。

第二代骁龙XR2+芯片的性能提升(以骁龙XR2 Gen 1芯片的性能为对比基准)主要体现在:GPU性能提升150%,GPU能耗比提升50%,AI性能提升至800% ,并支持多个摄像头。

这些性能,搭载第二代骁龙XR2+芯片的终端在理论上都能具备,区别是不同的终端公司,对这些性能的应用,存在能力方面的差异,而应用能力,主要由软件性能决定。

在此基础上,玩出梦想科技的技术优势,主要集中在软件层面,核心优势是算法,包括算法的精度与工程化。其中,算法的主要作用,是对第二代骁龙XR2+芯片算力的精确调度。

要做到精确调度,必须先有效节省算力。玩出梦想MR有精准有效的视线焦点(眼动)追踪能力,其低延迟体验,来自其对算力的有效分配。

张腾说,“首先,眼动追踪中的注视点渲染能力的优化,这方面我们下了大功夫。其次,类似于ATW(Asynchronous Timewarp)、ASW(Asynchronous Spacewarp)这种能够极大节约GPU算力的画面补帧插帧技术,我们也实现了有效突破(比如补帧预测)。第三,我们用软件技术最大限度地利用了骁龙芯片的异构算力。”

其中,ATW主要解决延迟和补帧问题。

延迟在这里是什么意思呢?就是人体发生肢体动作时,再到图像显示到屏幕上的时间,存在的时间差。

ATW的技术原理:用软件输出图像后,紧接着渲染管线接上,在上屏时负责用人的新姿态数据做重投影计算,避免出现可感知的延迟,从而避免出现眩晕;同时,在应用掉帧时,ATW将前一帧的图像做重新投影,这就是补帧。

有了ATW就够了?其实不够,只有迭加ASW,才能纵享MR的丝滑视觉体验。ATW弥补场景相机的运动画面,ASW则弥补场景物体运动带来的变化。

除了这些技术之外,玩出梦想MR还具备仅14ms低延迟的VST ,让用户能够体验到与真实世界几乎无法区分的数字世界。

用户价值永远最大

玩出梦想科技的这些软件技术方案(能力),源自立足于长期主义的自研努力。

据张腾透露,在启动研发玩出梦想MR时,也曾考虑过直接使用市面上的光学解决方案,但后来发现,当前供应商能提供的现成的4K光机方案,在边缘清晰程度和边缘畸变程度等技术维度上,都无法满足玩出梦想科技对空间计算机的性能追求,而这会影响最终的用户体验。

自成立起,“为用户带来美好体验”就始终是玩出梦想科技的商业价值取向。玩出梦想科技CMO朱然说,“我们有持续深耕空间计算赛道的准备和决心,故而当我们发现市场现有方案达不到期许时,就下决心构建自己的技术优势壁垒。”

这种技术护城河,对一个有长期主义站位意识的初创公司而言,具有相对于其它准备转型的传统手机大厂的核心竞争优势。

朱然认为,“未来,行业现有的这些智能手机公司,都会参与角逐这个赛道。玩出梦想科技创始人黄锋在内部常说,要抓住历史机遇和时间窗口,增厚我们的技术实力储备,同时做好量产的产品体验打磨和性能迭代。国内的传统手机大厂,善于后发制人,就是等市场成熟了再大规模投入资源。但到那时,我们已有足够的技术和竞争优势,无惧冲击。”

在技术优势之外,玩出梦想MR的竞争优势还体现在丰富的应用场景和内容生态上。

目前,玩出梦想MR支持空间观影、MR游戏、3D空间拍看等功能。空间观影方面,玩出梦想科技已成为IMAX和DTS在空间计算和混合现实领域的首个战略合作伙伴,超千英寸巨幕再加上DTS定制音效,将玩出梦想MR的观影沉浸感拉满。

同时,低延迟彩色VST搭配音频提示精确定位和6DoF无光环振动手柄,带来游戏视听触体验的全面升级;双3200万像素超高清3D相机支持3D空间视频拍摄,其显示效果与交互体验更是2D影像所不能匹敌的。

此外,玩出梦想MR也兼容主流办公应用和多屏串流,因而这款设备也可以在轻办公场景中使用。

在内容生态上,玩出梦想科技累计与全球多个国家与地区的近百个CP达成了深度合作。目前,商店在架应用数量已超过300个,并在持续拓展中。

朱然表示,玩出梦想科技当下发布全球首款安卓系统空间计算机玩出梦想MR,在空间计算赛道做到产品占先,再结合自身的产研优势以及用户积累,确保让自己在空间计算行业大爆发之前,继续留场,找到差异化竞争优势就有可能在这个赛道上,实现弯道超车。

本文来自华尔街见闻,欢迎下载APP查看更多

继续阅读