虚拟现实,以及真正的增强现实,是一种非常个人的经验,意思是说,只有头戴显示器的人才能身临其境地欣赏正在发生的一切。事实上,只有佩戴头显的人才能真正看到正在进行的游戏,而观众只能想象。利用好莱坞古老的“绿幕”魔术、一些3D建模和人眼追踪技术,谷歌已经设计出一种方法,让观众更好地了解虚拟世界,在某种程度上也使得人们更容易接受虚拟现实(VR)理念。
谷歌定义“混合现实”的方式相当古怪。对于像微软和Magic Leap之类的公司,混合现实(MR)是增强现实的分支,或者至少是一种重新命名,利用这种技术,虚拟物体被投射到现实世界,用户可以把它当做现实世界中的物体,与之互动。
然而在这种特殊的背景下,谷歌找到一种实用的方法,不是从头显佩戴者的角度出发,而是通过将物体投射到虚拟世界,使之与存在于现实世界的事物相结合,将混合现实改头换面,让“观众”看到虚拟世界正在发生的一切”。简而言之,谷歌正在尝试以VR世界为背景(或前景),让观众亲眼目睹头衔佩戴者所看到的虚拟世界。
从这个意义上说,虚拟现实的问题立即浮出水面。首先,你无法向佩戴头显的人那样,从第三者的视角,身临其境地观看VR世界。至少可以说你会看到一个戴着超大护目镜的人挥舞着双臂。最多你只能从佩戴者的第一人称视角看到VR世界。凭借一些绿幕魔法、照相机和合成手段,谷歌的确能够追踪佩戴者的运动,从观众的视角将它与绘制的VR世界结合起来,但还有另一个问题:头戴式显示器。
与微软MR头显HoloLens不同,HTC Vive之类的VR头显是完全不透明的。它可以防止用户看到佩戴者的眼睛,以便错过表情等微小事物,或者更重要的是,错过佩戴者正在观看的场景。毕竟,一个人的脸可以朝一个方向看,而眼睛却能朝不同的方向看。为了解决这个问题,谷歌采用了更先进的科技和技术,例如为人脸3D建模,覆盖在头显上,达到“无形”的效果。但更重要的是,谷歌跟踪佩戴者的眼睛,并根据需要调整3D渲染的脸部。其结果是让佩戴者的脸得到更真实的表现。
上述这一切都会以接近实时的速度发生,而且只在另一块屏幕上显示,如同电视或显示器的原理,使用后处理和组合技术把所有这些合成在一起。因此,当VR用户站在你面前时,它可能并不完全有用,但谷歌设想,这项技术可用于VR会议。或者当你试图向其他人展示虚拟现实并不那么疯狂时,可以露一手。当然,它也适合展示虚拟现实疯狂的一面。