苹果的愿景专业虚拟现实和增强现实耳机,解释说
2013年,当谷歌发布一段视频展示一个激动人心的概念时,科技界兴奋不已。视频中展示了一个人在曼哈顿漫步,发短信、跟随地图指示、进行视频通话等等。这一切都很正常,除了他没有从口袋里拿出手机,而是文字、地图和视频似乎漂浮在他的眼前。
使这一切成为可能的设备被称为Google Glass,一个价格为1500美元的装在眼镜上的设备,一个小小的显示屏放在一个眼睛前面,还有一个能够看到(并记录)你所看到的一切的摄像头。理论上,你可以在日常生活中,给互联网连接的耳机发出语音命令,让明亮的分散注意力的屏幕成为过去的事情。
这是科技行业仍在追求的梦想。这个概念有几个名称,混合现实和增强现实是通用的名称。Metaverse,由Mark Zuckerberg在重命名他的公司Meta时推广,可能是你听说最多的一个。Spatial computing是苹果最近用其售价3500美元的Vision Pro耳机创造的名称,该耳机将于2月2日开始销售。
无论成功与否,就像Google Glass最终失败一样,Apple Vision Pro将引起混合现实概念的新关注。这种关注如何塑造技术的发展可能决定了我们未来如何使用计算机。据报道,Apple在Vision Pro预售中销售了多达20万台,这表明至少有一些人有兴趣花大笔钱看看Apple认为我们最终应该做什么。我们是否都会在城里戴着耳机四处走动,接视频电话,看夕阳?还是我们中的一小部分人最终会在一个完全不同寻常的虚拟世界中玩视频游戏,而且可能会很孤独?
目前尚不清楚Apple认为你应该如何使用其混合现实耳机。公司的营销材料似乎暗示你应该像一台高级电视一样在客厅里使用它,还可以进行未来式的视频通话。该设备前面不仅有12个摄像头,还有一个LiDAR传感器、六个麦克风和一个能够扫描脸部的TrueDepth摄像头。与Meta Quest一样,新的Apple耳机可以实现完全沉浸式的虚拟现实,但它还能够将虚拟元素与真实世界的图像相结合,有点类似Google Glass的概念。
但与Google Glass不同,Apple Vision Pro耳机基本上将世界变成了一个巨大的屏幕。在耳机内部,有两个4K的微型OLED屏幕,拥有惊人的2300万像素,可以重现佩戴者外面的真实世界作为虚拟世界。所有这些摄像头、传感器和屏幕结合在一起,创建了耳机的招牌功能,这个功能真正使它与过去的智能眼镜不同:实时的透视视频。
透视视频也存在于Meta Quest 3上,允许佩戴者在佩戴护目镜的同时看到真实世界。简而言之,你的眼睛似乎可以穿过耳机的不透明前面,所以你可以看到自己所在的房间,甚至与其他人互动。这也是体验Google Glass幻想的一种方式,你可以戴着面部电脑四处走动,看着一个有用的数字层叠加在世界上。当然,最大的问题是没有人知道通过屏幕看世界,而只是屏幕会如何影响你的大脑和你与社会的关系。
斯坦福大学虚拟人类互动实验室的一组研究人员一直在试图找到答案。研究人员测试了Apple Vision Pro和一系列其他具有透视视频功能的耳机,包括Meta Quest 3。研究人员穿戴这些耳机数小时,甚至在公共场合尝试骑自行车或进食等事情,以探索通过计算机看世界对心理的影响。他们在一份新的论文中分享了他们的研究结果,这听起来像是一个告诫性故事,对于任何考虑在Vision Pro以外的地方佩戴耳机的人来说。
透视视频技术的一个大问题是摄像头,即使是Vision Pro中高科技的摄像头,也不像人眼看得那样。摄像头引入了扭曲,并且没有我们大脑能够看到的世界的出色高分辨率。这意味着一切看起来大致真实,但不完全真实。
斯坦福的研究人员解释说,接近你的脸的物体在透视中看起来异常大,所以用叉子吃饭真是一场噩梦。佩戴耳机的人也倾向于低估距离,这使得按电梯按钮成为一个有趣的猜谜游戏。而且因为一切看起来都不太对劲,佩戴耳机的人“倾向于在行走时行动迟缓和缓慢”。你几乎可以想象到他们一直感到迷失和不知所措。
通过耳机观察世界所花的时间并不是实验最令人担忧的部分。真正让研究人员的大脑开始玩花样的是他们摘下耳机后。人类大脑通常可以适应视觉变化,并有效地纠正任何扭曲,而且苹果可能会推出解决扭曲问题的软件更新。但是当耳机摘下后,研究人员的大脑需要一些时间才能恢复正常,所以他们会再次误判距离。许多人还报告了模拟器病的症状,如恶心、头晕和头痛,这对于那些使用VR头戴式耳机的人来说都不陌生。
然后还有社交影响。十年前,戴着Google Glass在公共场合会招来嘲笑,但像Meta Quest和不久后的Apple Vision Pro这样的头戴设备对于当今的观察者来说更加熟悉。你不会经常看到人们在公共场合佩戴它们,但这也不是不可能的。试图佩戴具有透视视频功能的头戴设备的研究人员表示,他们没有经历太多负面反应。相反,他们感到非常自我意识,因为通过护目镜导航世界,一些人体验到了一种被称为“社交缺席”的感觉。研究人员在论文中描述了这种感觉:“现实世界的人们似乎变得不太真实……在公共场合,有时候更像是看电视而不是面对面交流。戴着耳机与陌生人互动通常是令人尴尬的。”
领导这项研究的Jeremy Bailenson是斯坦福大学虚拟人类互动实验室的创始主任,他已经花了25年的时间研究虚拟和混合现实的心理影响。他认为这项技术不应该全天候或每天都使用,部分原因是它会让人社交隔离。他的实验室开发了一个叫做DICE的框架,这是“危险、不可能、低效或昂贵”的缩写,这是最适合使用VR和混合现实技术的用例。
“培训消防员、康复中风患者、通过雕塑博物馆了解艺术史、时间旅行以理解气候变化,这些都是完全适合DICE的例子,”Bailenson告诉Vox。“查看电子邮件、看电影和一般的办公工作则不适用。让我们在使用这种媒体时充分利用它。”
Apple Vision Pro可能是现代工业设计的奇迹,适合其四位数的价格,但它仍然看起来像一副华而不实的滑雪护目镜。Apple甚至试图通过一项名为EyeSight的功能来让那些没有戴耳机的人感觉不那么尴尬,该功能显示佩戴者的眼睛在耳机前面内置的显示器上,但人们仍然认为这很诡异。与此同时,为了使耳机更加轻巧,Apple为其配备了一个外接电池,人们必须将它放在口袋里,确保佩戴者的装备有点像机器人。
卡内基梅隆大学的增强感知实验室主任David Lindlbauer怀疑我们在不久的将来会看到人们戴着Vision Pro耳机在咖啡店与朋友通话。与一个人无法完全看到的脸谈话似乎太奇怪了。
Lindlbauer说:“社交上,我们不习惯这样做。我认为我们甚至不知道自己是否想要适应这种沟通的不对称性,我可以看到自己是我,意识到设备,可以看到你的脸,可以看到所有的表情,你的动作,而你只能看到一部分。”
但这种情况可能是暂时的。我们不要忘记,不久前,无线耳机,包括Apple AirPods,意味着人们站在街角似乎在与无人通话,实际上他们正在接电话。如果硬件继续变得更好、更小,那么我们可能会看到人们站在街角戴着看起来普通的眼镜,凝视着虚空,用手指在空中敲打,因为他们的眼镜正在物理世界上投射数字图层。他们可以在寻找街头的朋友的同时观看TikTok视频并与语音助手交谈。第一次看到这种情况肯定会很不寻常。
这仍然是计算机的大梦想。Google Glass最终没有成为改变世界的混合现实设备,但你必须假设Apple正在投资数十亿美元用于混合现实。Vision Pro及其后继产品可能需要多年才能像iPhone或iPad一样火爆,但有一天,Apple想要看看人们如何使用一个可以将整个世界变成计算机的耳机。实际上,Apple Vision Pro承诺要做到这一点。苹果首席执行官蒂姆·库克在今年年初说:“空间计算时代已经到来。”他说,Vision Pro“将重新定义我们如何连接、创造和探索”。但目前,问题是在你在家里的时候它可能只会做这些事情。
混合现实,或者空间计算,或者你想怎么称呼它,仍然是一个实验。从多个层面来看,我们还没有准备好。硬件还不够好,否则我们不必戴着笨重的滑雪护目镜状的耳机,还要把电池放在口袋里。也许如果显示技术能够复制人眼视力的分辨率,没有扭曲或限制,我们就可以避免透视视频的所有负面影响。世界还需要逐渐接受面部电脑的概念,就像我们曾经适应个人电脑的概念一样,就像我们仍然在适应智能手机的普及一样。我们的大脑还需要一些时间来适应虚拟世界和真实世界的分界线在哪里。
所以,不要指望在公共场合会遇到太多佩戴Vision Pro耳机的人。甚至连Apple似乎也在轻轻地劝阻这个想法。Vision Pro的大部分宣传材料都将其定位为一种生产工具(一种让你的电子表格看起来像在你的客厅里的工具)或一种娱乐系统(一种观看3D电影的方式,屏幕大小占据了你的整个视野,尽管Netflix、YouTube等公司在耳机上市时不会推出应用)。所以它主要是一种室内玩具。技术分析师Benedict Evans在去年夏天看到Apple向开发者发布的Vision Pro的视频时注意到了一些有趣的事情:“尽管有看起来完美的透视功能,但Apple根本不展示这款产品在户外使用,尽管有一段苹果的视频片段以某人放下耳机走出去结束。”
在我们得到那个神奇的头戴设备之前,还需要一段时间,这种轻便的眼镜可以在你的世界上放置一个计算机屏幕。卡内基梅隆大学的教授Lindlbauer认为,15年后我们可能不再使用智能手机。我们将使用更令人兴奋的东西,这种技术将取决于人们如何使用Apple Vision Pro等设备。如果购买这款耳机的人不喜欢通过屏幕看世界,看到自己生活中的瞬间像洞穴墙上的影子一样飞逝,那么必定会有人会构建更好、更便宜的东西。希望如此。