VR协作的未来
沉浸式技术领域即将实现的改进将使协作更加丰富多样
Anthony Rowe,卡内基梅隆大学电气与计算机工程教授
在看到虚拟现实时,我就想,哇,未来的协作就是这个样子。但目前而言,这样的协作距离日常使用还很遥远。现在您能看到每天有人在使用VR的主要场所是在类似于我们这样的研究实验室。
这项技术还有很多问题有待解决, 其中之一就是虚拟化身的“恐怖谷”问题。如果虚拟化身的外表比卡通形象更加逼真,然而距离完全逼真还差一点的话, 就会让人觉得毛骨悚然。正因为如此,以用户实时视频源作为虚拟化身目前效果并不好。既然视频源还达不到要求,为了避免令人毛骨悚然的效果,就必须使用滤镜使其卡通化。我们这里 [卡内基梅隆大学] 有一个名为Panoptic Studio的项目,它可以从不同角度捕捉运动中的人像,并创建逼真的虚拟化身(图1)。我不敢打包票说他们已经完全解决了恐怖谷问题,但这样的虚拟化身看起来确实没那么恐怖了。
经常有人会抱怨在平面屏幕上与人互动产生的“Zoom疲劳”问题, 而VR则会带来不同类型的疲劳,目前这种疲劳更甚于Zoom疲劳。VR导致疲劳的原因有“动显延迟”(即身体移动和VR中可见移动之间的延迟),也有“纱门效应”(图像像素之间的空白导致)。有些人会因为延迟的问题而“晕VR”。这一切都可以通过更高的分辨率、可变焦图像、更快的帧速率和更强大的处理能力来解决,但现在所有这些都成本高昂。
另一个重大改进将是创建高保真VR环境,让VR体验看起来就像是走在真实世界中一样。要做到这一点,一种方法是将高质量传感器嵌入现实世界并将它们链接到图像,这样您就可以在一个部分实物、部分数字的现实中成为虚拟的存在。
这些改进有很多将会走GPS那样的“先军用再民用”路线, 毕竟军方对于通过更好、更新的方式来开展协作、获得态势感知这件事是非常感兴趣的。他们不差研发资金,最终成果也终究会运用到其他各种领域。
图1:卡内基梅隆大学用于生成逼真VR虚拟化身的“Panoptic Studio”。(图源:Spatial)
VR最终会吸引大多数人——也许会让人不能自拔
Jacob Loewenstein,沉浸式现实软件公司Spatial Systems副总裁兼业务主管
VR协作一度是一个高度细分的市场,只能工作在很少有人买得起的硬件上。后来,Oculus Quest(一款VR头显)使其不再高不可攀。现在,VR用户数正迅速增长。
但我们最终意识到,大多数人都还没做好在VR中工作的准备, 毕竟VR硬件依然只是少数人拥有的东西。因此,我们并不会像大多数VR应用程序那样,开会时要么全员VR,要么干脆全都不用;我们会让没有条件的人可以通过网络浏览器来加入会议。现在,使用我们的软件参加VR会议的人中有一半以上是通过浏览器加入的。
最终,大多数人将可以使用某种设备,让他们参与到VR中(图2)。但一个不容忽视的问题是,今天大多数人长时间使用VR都会感到不舒服。大多数使用我们的软件进行VR会议的人在VR中保持创造力和效率的时间大约只有30分钟左右。事实上,即便是大多数硬核VR游戏玩家,也不会在VR中停留超过一个小时。
随着硬件的改进,以及人们越来越习惯于使用VR,这种情况将会有所改观。伴随VR长大的年轻一代肯定会发生改变,就像伴着个人电脑长大的孩子长大成人,然后是陪着智能手机长大的一代。我们可以在教育领域看到更多VR应用,包括麻省理工学院、亚利桑那大学和哥伦比亚大学社会工作学院在内的几所大学都举办了VR研讨会。
从长远来看,VR存在的问题并不在于推广普及,而在于人是会上瘾的。现在,已经有每天在VR中停留长达八小时的超级用户了。这在当下仍然还是个案,但我认为会有越来越多这样的人。用户有责任养成使用VR的良好习惯,而VR公司则有责任鼓励合理使用而不是沉溺其中。我们已经要求用户至少要年满18岁,但我们看到其他公司的VR应用更倾向于年轻受众,这可能会成为一个大问题。
当VR的使用开始变得越来越密集时,我们可能会希望设计一些功能来督促用户经常性地离开VR,到户外进行一些体育活动。尽管如此,使用VR并不意味着要一直坐在沙发上。 人们即使身处虚拟现实,也完全可以通过一定的方式来保持身体活跃, 例如就有特殊的鞋子和平台可以让人们通过实际迈腿来穿过VR空间,尽管他们在现实世界依然原地不动。我们会看到更多类似的产品。
工作领域向我们提出的最大要求,就是要让人们的化身看起来更像真实的自我,而非卡通人物。现在,我们还无法用流媒体视频来做到这一点,但通过可以从照片中生成逼真虚拟化身的机器学习程序,这会成为可能。但是关于虚拟化身在VR中的交互方式还有很多事情需要厘清。
图2:人们通过虚拟化身参与VR会议,身边展示了他们分享的各种内容。(图源:Spatial)
作为协作工具,增强现实将超越虚拟现实
Nikhil Balram,增强现实技术公司EyeWay Vision首席执行官,前加州大学伯克利分校视觉科学客座教授
我们梦想中的虚拟会议,将是能够结合现实人类与数字人类的会议,所有的人都在协作。数字人类将参于到虚拟现实中,而现实人类将通过AR眼镜以3D形式看到他们的实时扫描。这其中最大的挑战,是让会议室里的现实人类看到彼此的眼睛,因为AR眼镜往往会遮挡眼睛。眼神交流和跟随他人的目光是沟通的重要组成部分。
目前,市面上还没有足以用于协作的AR眼镜。以现在的技术,这样的眼镜已经可以开发出来,但购买和维护成本会高得离谱。解决这个问题的方法就是借鉴有线电视公司的商业模式。您无需购买有线电视设备,而是按月付费租用,有线电视公司会解决您遇到的任何问题。
对于希望在看到虚拟图像的同时看到自己所处环境的人而言,AR是非常有用的(图3)。在许多情况下,人们会更喜欢完整的虚拟现实,并不需要看到自己所处的环境。比如,当您想体验一把月球行走时,肯定不希望看到自己身边的真实场景。但是,如果您是坐在咖啡馆里,并且希望在这时参与到虚拟现实协作中,就可能需要留心周围发生的事情。您肯定不想在从虚拟现实中走出来时,发现自己的笔记本电脑不见了。
VR和AR都会有现实当中的最佳切入点,您很容易就能发现哪种情况下更需要哪一个。它们是互补的技术,而不是竞争的技术。
图3:在混合现实中,真人和通过化身参与的人都能够互相看到,就好像他们身处同一个房间里一样。(图源:Gorodenkoff/Shutterstock)