从2016年起,VR/AR一直被预言“即将爆发”,却始终没有摆脱小众技术的身份。最主要的原因是体验不佳、价格昂贵、应用面窄。可以说,5G是VR等待已久的契机,大带宽低时延能大幅提升画质和刷新率。云和终端的实时联动将解决大体量渲染问题,为XR终端减少计算单元、实现轻量化和高性价比打下基础。北京时间12月6日凌晨,高通在骁龙年度技术峰会的XR主题日发布了全球首个5G XR平台骁龙XR2,通过集成XR、5G、AI能力,赋能5G时代的XR终端。有了5G专属平台的加持,VR能否打响期待已久的翻身仗?
高通对XR的发展前景信心满满
在为期三天的骁龙年度技术峰会,高通专门留出一天会期介绍XR产品和方案,体现了高通对XR技术的信心和重视。高通产品管理副总裁及XR业务负责人Hugo Swart表示,包含VR、AR、MR的XR是下一代移动计算平台,高通对VR/AR的研究已有十年之久,目前搭载骁龙芯片的XR终端已有三十多款。他表示,XR已经走进了我们的生活,在制造、娱乐、游戏、健康、教育、工业、零售、旅行等多个领域发挥作用。
XR的应用不止于电影、游戏,它正在走进B端。本次峰会,高通携Unity、 Mitchell汽车理赔、埃森哲、德国电信等企业合作伙伴,展示了骁龙平台对企业级XR应用的支持。
如,Mitchell公司现场指出,AR正在汽车的安全驾驶和维修中发挥作用。例如丰田通过AR让拖车司机看到车斗后面的路段,奔驰用AR情境感知检测车辆转弯时的路况环境。而AR技术已经应用于汽车巡检,员工戴上AR眼镜,用摄像头扫描车体发现问题,再根据问题自动将检修步骤投射到AR眼镜,提升了维修效率。德国电信开发了AR Advisor,让员工从“低头做事”变成“抬头平视”,提升了企业运行效率。
“我们想强调的是,XR在B端C端市场都有很多机会,高通提供的是横向的平台技术支持,在两个领域都有良好的客户群,但是在企业领域可能有很多好的应用是我们还没有注意到的,所以我们今天做了重点的展示。”Hugo Swart说。
XR2兼具5G、AI能力
2018年,高通推出了第一款VR/AR专用芯片平台XR1,时隔一年发布的骁龙XR2相比XR1进步不小。现场公布的数据显示,对比XR1,XR2带来了2倍的CPU和GPU性能提升、4倍视频带宽提升、6倍分辨率提升和11倍AI性能提升。
值得注意的是,骁龙XR2平台支持七路并行摄像头,实现对用户的头部、眼部、手部、表情、身体、环境、控制器的追踪。此外,该平台还是首个通过支持低时延摄像头透视的XR平台,让用户可以在佩戴VR设备时,在虚拟与现实融合的世界进行观察、交互和创作。为了满足沉浸式XR体验的需求,在基础的AI和可选的5G连接支持之上,XR2对视觉、交互和音频技术方面进行了定制优化。
在视觉方面,XR2的GPU实现了1.5倍像素填充率和3倍纹理速率,具备眼球追踪的视觉聚焦渲染和支持更流畅刷新率的增强可变速率着色等XR专属特性,可以在渲染重负载工作的同时保持低功耗。骁龙XR2的显示单元可支持90fps的3Kx3K单眼分辨率,也是首个在流传输和本地播放中支持60fps的8K 360度视频。针对AR显示特别开发的定制芯片可帮助减少整体系统时延,以实现沉浸式的AR体验。
在交互方面,XR2基于七路摄像头对用户的头部、嘴唇和眼球进行追踪,并且支持26点手部骨骼追踪,提供高效的场景理解和3D重建。
在音频方面,XR2提供语音交互以深化沉浸感。该平台包含一个定制的始终开启的、低功耗的DSP,支持诸如语音激活和情境侦测等硬件加速特性,帮助用户进入数字世界的同时,也能听到真实世界的声音。
基于AI和5G能力,XR2能够通过支持终端和边缘云之间的分离式处理营造更加逼真的高品质体验,从而摆脱线缆或空间对XR设备的束缚。
XR2将继续支持中国厂商
虽然高通在2018年推出了XR1平台,但除了大朋、3Glasses,大多数VR设备厂商并没有搭载XR1,而是基于骁龙835、845打造芯片。XR2是否会重复XR1的局面,无法与自家的手机芯片抗衡呢?
对此,Hugo Swart在接受《中国电子报》记者采访时表示 ,高通将XR分为两个细分市场,一个是高端市场,也就是XR1的主攻市场;一个是顶级市场,也就是选择骁龙835、845打造VR设备的市场。中国厂商爱奇艺、Nreal、Pico、影创等厂商,都是基于835、845开发VR设备的高阶玩家。他预期,原先使用骁龙835、845的玩家都会迁移到XR2平台。但是,高通也会继续提供XR1芯片,因为中国仍有厂商在基于XR1开发设计他们的产品。
“高通做XR的出发点首先是把XR市场做起来。XR平台给整个生态系统都带来丰富的机会,希望除了硬件厂商,致力于空间计算等领域的互联网公司也能参与进来,一起搭建生态系统,一起推进XR平台建设,抓住XR平台的机会。”Hugo Swart说。