4月6日,备受关注的“虚拟现实‘国际合作·开放共赢’高峰论坛暨行业标准发布大会”在北京举办。在论坛的主题分享环节,作为虚拟现实产业最上游的芯片设计制造商,高通无线(中国)有限公司VR负责人郭鹏和与会嘉宾分享了如何从视觉、听觉和用户交互三方面入手打造移动VR的沉浸式体验。

郭鹏认为,如果说过去三十年致力于发展连接人和人,那么未来三十年将会致力于发展万物、人和人、人和物以及物和物的连接,虚拟现实会是未来行业发展的主流方向之一。到目前为止,大力发展虚拟现实的能力已经具备,首先从生态驱动因素来讲,视频游戏等虚拟现实的内容越来越丰富,互联网经济也越来越发达。从硬件角度来讲,技术已逐渐成熟,这包括CPU处理能力、屏幕能力以及其他一些能力。“VR技术已经达到成熟,成为可以进入老百姓家庭使用的消费级设备。”

他进一步指出,移动行业的蓬勃发展,大大加快了移动VR的发展速度,移动VR行业可以借用目前手机行业的规模化效应优势;而手机在快速设计周期上的经验,也能够帮助虚拟现实行业快速推出移动产品。

郭鹏指出,在移动VR上打造一种沉浸式的体验,需要从视觉、听觉和用户交互三方面入手,三者缺一不可。

首先是视觉质量,在VR设备上,用户需要处于一个非常狭小的显示空间之内,达到非常大的视野,所以设备的显示能力尤其重要。伴随着显示能力,光学矫正措施也非常重要,这样才能给人眼带来真实的观感。打造具备这样功能的设备和应用,需要能够同时结合硬件和软件的技术。

其次是声音。在玩VR游戏或看VR视频时,我们的头部甚至身体是不断运动的,声源会根据用户的运动轨迹发生变化。如何根据头部的运动和声源的运动,实时确定声音的大小和频率的变化,这是音频模块需要完成的工作。

另外,一些高级声学的应用中,比如游戏、全景视频可能处于不同的空间,比如在一个封闭的空间和一个开阔的空间切换,用户听到的声音是完全不同的,这需要后期根据空间定位进行混响或其他措施的处理。

第三是直观的交互。对于虚拟现实而言,互动是至关重要的。首当其冲需要解决的问题是延迟。为什么很多人用VR时很快会头晕?一个很重要的原因就是延迟太大了,当用户的头部运动时,图像跟着变化的速度太慢。超过40毫秒的延迟,就会给人很不舒服的感觉。一般情况下,延迟需要小于20毫秒,15毫秒甚至12毫秒,则会给用户更好的体验。达到这一效果,需要我们做很多工作。

除此之外,用户在玩VR游戏时,可能希望解放双手,因此手势识别显得非常重要。高通与业界知名的手势识别技术公司达成了深度合作。用户在玩VR应用时,系统可以看到用户双手十指的变化,可以解放双手,扔掉游戏手柄。

郭鹏表示,VR时代已经来临。高通会选择紧密的合作伙伴,共同将符合上述理念的VR设备或原型机开发出来,再将其推广至整个产业,最后达到商业化,同时在芯片的上游、VR产业源头推动虚拟现实产业的持续发展。