高通在 9 月 28 日正式推出了两款面向 XR 设备的平台,分别是第二代骁龙 XR2 平台和第一代骁龙 AR1 平台。其中,第二代骁龙 XR2 平台为赋能更出色的 VR 和 MR 体验打造,而第一代骁龙 AR1 平台专门为下一代智能眼镜而打造。
如今,VR 和 MR 的发展势头十分强劲,游戏、健身、娱乐等消费级应用正在不断发展,企业市场也出现了培训、教育、医疗等应用。而在 AR 领域,面向消费者的沉浸式体验也正在起风,已经有大量的企业正在使用丰富的 AR 应用,包括远程协助、说明 / 指导、以及通过 AR 智能眼镜赋能的生产力工具等。
而高通本次发布的两款 XR 平台产品,将可以赋能 XR 的各个领域,包括实现完全沉浸的数字化虚拟现实、物理世界和数字世界无缝融合的混合现实以及能够在物理空间中叠加虚拟内容的增强现实。
下面就让我们具体来看看这两款产品。
第二代骁龙 XR2 平台与上一代产品相比,性能大幅提升,搭载能效和性能双优化的单芯片架构,无需外置电池组,能够助力 OEM 厂商打造高性能且价格合理的设备。
总体来说,它的优势主要包含以下三个方面:
面向视觉、图形和多媒体带来突破性的沉浸式体验;
流畅交互,更加沉浸的交互体验能够让虚拟世界和物理世界完美融合;
通过提升视频透视能力,赋能混合现实。
首先是沉浸式体验方面,第二代骁龙 XR2 的 GPU 相比前代性能提升 2.5 倍,能够呈现惊艳的图形效果和出色的色彩和细节。并且在同样的视觉效果下还能节省 50% 的功耗。
第二代骁龙 XR2 还对 3K×3K 显示做了优化支持,这对目前的 VR 和 MR 设备来说是最理想的方案。同时该平台支持众多最新的先进特性,例如空间扭曲、游戏超级分辨率和视觉聚焦渲染。
当然,可能有朋友注意到市面上已经有不少主打单眼 4K 分辨率的 Micro OLED 微显示器出现,
对于这一点,高通认为其关键在于技术成熟度,目前 4K 显示仍然是很昂贵的解决方案,也并不具备足以实现规模化扩展的供应能力。而 3K×3K 分辨率已经能够带来出色的视觉效果,相比市场上已有的解决方案有着很大的优势,并且能够在用户负担的起的价位上打造满意的用户体验。
而在流畅交互方面,第二代骁龙 XR2 支持绝佳的并发感知技术,从而实现对环境和用户的理解。
这是什么意思呢?简单来说,就是 XR 要实现真正的数字空间和物理空间的融合,就必须对用户所在的环境有精准的理解,比如地板和墙壁的位置,房间里有哪些物品等。同时,还需要对用户本身也有充分的理解,来进行头部追踪、眼球追踪、手势追踪、以及对全身的动作追踪等。
而这些技术在运行过程中需要非常大的算力,因此,第二代骁龙 XR2 大大增强了 AI 运算的能力,它在终端侧 AI 能力上相比第一代骁龙 XR2 平台提升高达 8 倍。支持 INT8,并优化了不同 AI 模块之间的连接,以实现紧密的协同处理,同时扩展了终端侧的内存。
此外,第二代骁龙 XR2 平台还大幅升级了计算机视觉模块,将针对 6DoF 中的特征探测和追踪(Feature detection and tracking)功能放在了芯片层面上的硬件视觉分析引擎中,从而实现了性能的提升,并降低功耗和时延。
在无缝且流畅的交互中,连接技术也是至关重要的,第二代骁龙 XR2 支持 Wi-Fi 7 和 Wi-Fi 6E 连接,以及面向 XR 的高通 FastConnect 软件套件,能够实现 25% 的功耗降低,峰值速度达到 5.8Gbps,并且时延降低 80%。
接着是第二代骁龙 XR2 对混合现实的赋能。在混合现实中,显示世界会通过外置摄像头实时传输到头显屏幕上,并且需要视频透视时保持极低的水平,从而实现出色的用户体验。
第二代骁龙 XR2 对整个视频透视线程进行了全面优化,可以实现低至 12ms 的视频透视时延。同时,高通还通过几何校正、降噪、动态亮度调整等技术,提升视频透视的图像质量。
总体来说,第二代骁龙 XR2 平台将为 XR 市场带来全新水平的体验,目前首发搭载第二代骁龙 XR2 平台的 Meta Quest 3 已经同步发布,很快大家就能感受到由这款超强平台驱动的 XR 体验。
全新的第一代骁龙 AR1 平台专门为下一代智能眼镜而打造。而高通在推进沉浸式 AR 智能眼镜的发展已有一段时间,并且取得了不错的成果。之前他们已经推出了面向沉浸式 AR 眼镜的专用平台第一代骁龙 AR2,支持 6DoF、分布式处理等诸多特性。
而这次推出的第一代骁龙 AR1 平台关键特性在于拍摄,该平台采用 14-bit 双 ISP,支持顶级即时拍摄体验,同时还结合了智能手机上的诸多顶级特性,比如自动曝光、自动人脸检测、计算 HDR 和人像模式。如此,未来由第一代骁龙 AR1 赋能的智能眼镜将变革拍摄照片和视频的方式,人们可以解放双手进行拍摄。
为了深度优化拍摄的效果,第一代骁龙 AR1 平台还增强了 AI 能力,AI 能力对于智能眼镜至关重要,它能够帮助增强照片和视频的拍摄质量,通过降噪实现更清晰的通话,并通过计算机视觉实现更清晰的视频拍摄。
并且,这些操作都可以在眼镜端完成,不需要借助手机。没错,高通表示,第一代骁龙 AR1 支持的功能相对简单,因此所有的处理都可以在眼镜端完成,仅仅在用户需要把信息从眼镜上传到智能手机或云端时,才需要更加复杂的链接,但这不涉及到用手机操作智能眼镜,只需要进行简单的 Wi-Fi 连接,使智能眼镜和智能手机相连即可。
同时,第一代骁龙 AR1 平台加入了视觉搜索功能,以及面向健康和运动的健康传感器,让智能眼镜可以为用户带来 AR 体验,提供实用的情境信息和指令。另外,使用语音指令来与智能眼镜交互可以解放双手,这一功能在滑板、骑自行车、做饭等场景下会非常实用。
第一代骁龙 AR1 更是一款可扩展平台,可以通过支持多种不同配置,为 OEM 厂商提供灵活性,其中包括:
具备出色摄像头和音乐功能、以图像拍摄为核心的智能眼镜;
支持单目显示、完美支持提醒通知和导航应用的智能眼镜;
以及支持双目显示、具备更丰富视觉效果的更强大的智能眼镜。
智能眼镜中的虚拟助手可以回应用户的指令,并在用户眼前提供情境信息。此外第一代骁龙 AR1 还能够支持更多的用例,比如能够在街上或者购物中心通过视觉搜索为用户提供更为丰富的信息、进行实时翻译、货物拣选以及导航等。
在连接方面,第一代骁龙 AR1 平台配备了基于面向 XR 的高通 FastConnect 软件套件,第一代骁龙 AR1 能够实现实时视频直播以及音乐串流,并且解放双手。
总体来说,第一代骁龙 AR1 平台支持顶级照片和视频拍摄功能,具备强大的眼镜侧 AI 能力,可以增强照片和视频拍摄体验、支持虚拟助手从而解放双手,并且支持多种智能眼镜类型。高通表示,Ray-Ban Meta 系列将首发第一代骁龙 AR1 平台。而基于骁龙 AR1 平台打造的这款 Ray-Ban 眼镜设计的非常轻巧时尚,看起来就和普通的太阳镜差不多。
高通对 XR 前沿技术的研发有超过十年的积淀,而第二代骁龙 XR2 平台和第一代骁龙 AR1 平台集高通领先的移动处理技术于一身,相信随着这两款平台的发布以及后续在终端产品中的应用,大家会获得更具沉浸式的 XR 体验,同时推动空间计算的进一步变革,为现实世界和数字世界的深度融合打下坚实的基础。
而除了持续推出为 XR 市场量身定制的专用芯片平台,高通也在不断壮大和发展 XR 的生态,比如在软件和算法方面为 XR 生态提供底层的核心交互技术的支持、并通过 XR 生态系统为 XR 产业的初创企业和开发者提供服务。
并且,高通还面向不同类型的终端提供搭载基于 XR 平台的参考设计,通过提供软硬件的整体解决方案,帮助终端厂商加速将技术转化为产品。基于骁龙的 XR 和 AR 平台,高通的合作伙伴已经发布了超过 80 款设备。骁龙支持的技术不仅赋能了 Meta、联想、PICO 等行业中的领军企业,也为初创企业,包括很多国内的企业提供了支持,有力地推动了整个 XR 产业链的创新和发展。
XR 和 5G、AI 一起,是构成未来元宇宙愿景的三大基础技术,而基于骁龙 XR 平台,高通正在推动计算方式从二维显示向空间计算的转变,再加上他们在 5G 和终端侧的人工智能的强大的技术优势,高通的移动科技正成为通向元宇宙的钥匙,而新时代的大门也终将会打开。
广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,IT之家所有文章均包含本声明。