苹果Vision Pro: 优点、缺点和隐私问题


image_large2.jpg

我们苹果公司终于发布并公开展示了传闻已久的混合现实(MR)眼镜,苹果打造出了一款视听设备,相信它不仅能改变我们使用智能设备的方式,还能改变我们与世界互动的方式。 从我个人的角度来看,VisionPro可能标志着家庭影院和沉浸式音频的一个颠覆性的分水岭,就像当年iPod对音乐产业的影响一样。想想看,大型电视、投影仪和身临其境的音频设备被集成到一个单一的便携式设备中。

 

Vision Pro(及其新操作系统VisionOS)中,我们还可以看到人机交互的变革,这些几乎与最早的iPhone推出一样引人关注。而持反对意见的人可能会说,Vision Pro可能是一个高价的失败案例,总有一天会与苹果Newton(苹果90年代的一款销售不佳的掌上电脑)一起被写进黑历史。也许5年后我们再回头看这篇文章,看看它的实际市场表现,肯定很有意思。然而,无论未来如何发展,几乎所有试用过Vision Pro的人都认为这是MR眼镜技术的一次突破,而Vision Pro只是运行VisionOS的第一代设备。

 

按照苹果的一贯作风,Vision Pro并不是完全创新的产品。它是一类技术的进化和完善,创造了一种全新的体验。苹果公司首席执行官蒂姆-库克(Tim Cook)将这种新体验称为 "空间计算"--这是其空间音频格式的一种拓展,也是对该设备的全新VisionOS的合理描述。由于苹果认为Vision Pro是一个新类别,因此在全球开发者大会(WWDC23)上,苹果避免使用与Vision Pro底层技术相关的更广义的术语。它不仅仅是一款增强现实(AR)设备,也不是虚拟现实(VR)眼镜。大多数科技媒体称其为混合现实(MR)设备,在这里我也是跟随主流的叫法。

 

请别搞错了:Vision Pro不是一个周边配件,相反,它是一个戴在头上的全功能可穿戴智能设备(综合了电脑、显示器、键盘、音频设备)。这当然是苹果对于Vision Pro发挥其最大价值一种主张,也是消费者存疑的地方。

 

优点:一个无缝衔接各种各种使用场景的设备,有望颠覆我们今天对家庭影院的认知。

 image_preview.png

Galaxy Class Starship Vision Pro佩戴起来就像一个传统的VR眼镜,你的眼睛会被密封在面罩内的隔离环境中。Vision Pro在界面上的出色突破在于其对周围环境的高性能再现。之所以能够做到这一点,是因为Vision Pro拥有足以与科幻片里相媲美的对外传感器。这传感器包括一系列摄像头、用于弱光环境的红外照明器、用于实时3D绘图的TrueDepth摄像头和LiDAR扫描以及麦克风,它们一起共同作用,生成了你所在环境的3D视听影像。苹果设计这款设备的目的是让你能够看到最精细的细节。

 

据说Vision Pro的体验非常出色,这是典型的苹果做事风格。试用过它的人说,它能以优于4K分辨率提供流畅的运动效果。这款眼镜的刷新率为90Hz,支持广色域和HDR。你将在两个独立的屏幕上看到前所未有的2300万像素,也就是说每只眼睛各有一个屏幕。Vision Pro的传感器到显示屏的延迟时间仅为12毫秒。这实际上是瞬间完成的--大约是眨眼速度的8分之一倍。而且你看到画面的是12毫秒的传感器和VisionOS叠加,苹果没有在WWDC23上使用完全渲染的3D虚拟环境演示这一部分性能。

 

VisionOS

 

VisionOS覆盖在你所处环境的前景中,包围你的视野,你可以用最轻松的方式控制Vision Pro体验: 用手和手势进行控制。护目镜外侧的摄像头可跟踪你的双手,并识别简单的手势操作。比如,你可以坐在房间里,将手伸向传感器,同时将拇指和食指捏在一起,就像禅宗冥想的乐队指挥那样。 同时,在其内部,红外摄像头和一圈红外照明器可以精确地追踪每只眼球,一个UP主称其为 "魔法"。测试者的亲身体验表明,VisionOS的图形、控制和环境显示都非常流畅、反应灵敏。一些人称它是第一款将ARVR真正高性能地融合到一个设备中的头戴式设备。

 

视觉操作系统.jpg 

VisionOS 空间计算

顺畅的VisionOS体验


我承认,我之前经常批评苹果公司一直在强迫其忠实用户,进入到一个严格管控的生态系统,并为此支付高昂的费用,如1000美元的Apple Pro支架。但我也从未怀疑过该公司为成熟的技术带来新方向或开辟新领域的能力。今天,我不得不承认--Vision Pro是设计、工程、用户体验等方面的巨大成就,是向MR迈出的大胆一步--而这仅仅是VisionOS的第一代产品。


 苹果公司在开发新产品时有着一贯的设计风格。它通过引入新的人机交互方式来提升现有技术。早在 1983 年,苹果就为 Lisa 引入了鼠标,从而为电脑带来了全新的体验。随后,鼠标成为电脑的标准配件。当苹果推出iPhone触摸屏时,它又将鼠标引入了移动设备的迷你键盘。现在,触摸屏几乎成为智能手机的必备配件。当然,这些其实都不是苹果发明的,苹果只是让它们变得更好用更人性化。ARVRMR头显已经在市面上出现很久了,但苹果公司再次推出了无需手持控制器即可使用的头显,使它们变得更加直观。取而代之的是,苹果利用我们人类自有的身体结构--眼睛、手和声音--来控制设备。使用VisionOS时,你只需注视你想控制的部分,眼球跟踪就会突出显示该物体,然后只需用手指捏选或用手指捏住并轻弹来滚动。通过这些简单的控制,你就可以掌控虚拟环境中的三维内容。你甚至可以通过语音控制快速找到你想要的内容。


Vision专业音频

Vision Pro 声波.jpg

关于Vision Pro的音质,我们从苹果公司的演示中无法得知,但肯定有很多可以去猜测的地方。在现有的宣发图中,我们可以看到该设备的音频系统由苹果所谓的双驱动单元音频吊舱组成。我们知道它们能够实现苹果的已有的3D空间音频回放和头部追踪功能。可以肯定的是,Vision Pro的声音将是对苹果AirPods Pro系列耳机当之无愧的继承者。但这可能不会让大多数发烧友感到兴奋。

 从宣传视频中我们可以看到,Vision Pro的喇叭并没有完全盖住耳朵,动画显示喇叭向下向用户的耳朵发送声音。也许这将带来更宽广的空间音频效果。但在我看来,这对音质来说是不利的,除非苹果已经开发出自家的类似Focusonics的声束技术。它们不可能提供隔音或主动降噪功能,而且肯定会将一些声音泄露到你所处的环境里,也许这是设计使然。
飞机上的 AirPods.jpg

 飞机上的AirPods


Vision Pro设计为不入耳可能是一个不错的点子,前提是我们可以将自用的蓝牙耳机与Vision Pro一起使用。如果我们能用自己的耳机与Vision Pro实现完美贴合,那将是最理想不过的了。演示视频中拍摄的飞机上的美女使用蓝牙音频功能,因为她显然使用了一副AirPods Pro。这很可能是为了降噪和防止声音外溢。如果它可以与非苹果蓝牙设备配对,我们应该可以使用蓝牙连接AV功放或DAC观看电影,作为Vision Pro音频吊舱的替代。但是,无论是通过音频舱还是通过蓝牙,它的这种家庭影院音频体验都无法与我们发烧友玩的配备低音炮的家庭影院系统相提并论。

音频光线追踪


在承诺提供身临其境的空间音频的同时,Vision Pro并没有忽视环境音效。该公司开发了一种称为音频光线追踪的新技术,利用设备的综合房间扫描数据来再现环境声学特性。Audio Ray Tracing这个名称似乎借用了一种图形渲染算法,用于在给定的三维环境中建立光线模型。Nvidia通过其RTX系列GPU将家用级光线追踪技术带入了游戏领域。我还想知道苹果的音频光线追踪研究是否可应用于家庭音频房间校正。也许苹果已经在对其HomePod系列产品进行重大升级。

室内声学.jpg

房间声学

三维室内声学数据映射

个人娱乐


颠覆个人娱乐方式也许是Vision Pro最吸引人的地方之一。即便不是发烧友,也能看出VisionPro的定位是沉浸式音频、家庭影院的替代品。通过VisionPro,你可以从几乎无限大的屏幕上体验娱乐;在模拟的沉浸式音频环境中体验360度和三维的娱乐内容。 换句话说,你之前可能要花费巨大的成本来购买显示屏、投影机、前级、后级、扬声器、声学装修、灯光控制和其他设备。现在只需花3500美元就可以在一个耳机中实现这些。此外,如果你住在纽约市的一个小公寓里,想象一下像Vision Pro这样的产品它所代表的潜力。只需一个眼镜,你就可以克服空间的所有物理限制--没有比纽约的公寓或飞机座位更狭窄的空间了!当我们真正思考大多数发烧友所面临的物理限制时,这是一个可以改变游戏规则的概念。

 不受空间限制的全方位娱乐体验可能是Vision Pro不为人知的优势。我甚至迫不及待地想尝试将它能不能作为家庭影院的替代品。

苹果在推进这一概念方面所做的一切都是没有问题的。例如,迪斯尼已经同意建立一个全新的VisionOS Disney+应用程序,其中装载了非特定的互动体验和3D效果,也许会吸引用一些户。来自Vision Pro试用者的报告显示,苹果还将为用户带来令人惊叹的现场体育赛事体验。用户看到的演示包括棒球比赛的 "击球 "视角和NBA比赛的场边视角,这两种视角的设计都能让你沉浸在比赛中,身临其境。当NHL最终登陆VisionOS时,这很容易成为我观看冰球比赛的首选方式。虽然这些都是一大卖点,但它们最终可能会像蓝光中的多角度一样,成为一个没人启用的功能。


迪士尼_ Apple Vision Pro.jpg苹果Vision Pro上的迪斯尼+

 虽然它在眼前创建定制大小的虚拟屏幕的能力似乎令人惊叹,但大多数电影仍将在平面2D屏幕上播放。Vision Pro会成为让消费者重新爱上3D电影的催化剂吗? Vision Pro可能会成为有史以来最好的3D电影平台,因为它克服了让许多人对3D电影望而却步的障碍。忘记那些3D电视吧,Vision Pro将为你提供无需实体显示设备的3D观看!在3D电影的新鲜感过去之后,Vision Pro对环境光线、亮度和对比度的固有控制肯定会在平面2D虚拟屏幕上创造出一场视觉盛宴。我知道3D电影是有一些固定用户的,他们有他们喜欢的理由。但是,如果有2D电影可供选择的话,我总是避免在影院观看3D电影。事实上,每当我听说3D电影又要卷土重来时,我就会想起唐博士的3D煎饼屋(90年代的一部恐怖喜剧,讽刺3D效果低劣)。


3D卷土重来?也许吧

缺点


无法替代家庭影院。至少现在是这样


Vision Pro上观看电影和节目会受到很大限制。首先是它只有2小时的电池续航时间。但是,由于你可以将Vision Pro接入外部电源,让它持续运行,因此静态电影体验可以通过这样解决。但最大的问题是,这只能是一种单打独斗的体验。我也经常一个人看电影,当家里其他人都在的时候,我可以和家人一起观看,那种另一种独特的、不可思议的体验。所以一个问题是:"Vision Pro将对公共娱乐体验产生什么影响?尽管苹果公司也在努力促进我们与其他用户进行互动,但这仍然是一种单打独斗的体验。我不认为它能取代真正的家庭影院系统带来的公共体验。这就是为什么我只能对它的家庭影院功能半信半疑的原因。

办公效率?


我几乎整天都在电脑前工作,做一些标准的文档编辑任务。在多个虚拟屏幕上编辑文档、电子表格和演示文稿的功能无疑将是一种有趣的工作方式。也许只是因为我从未亲身体验过,但我并不认为空间计算能让我的办公效率比笔记本电脑更高。至少对我来说,它既不能解决任何具体问题,也不能提高任何效率。VisionOS中的虚拟键盘只能看不能摸,难免会带来更差的输入体验。我倾向于通过实体键盘打字,可以实现盲打。幸运的是,通过Vision Pro,你可以坐在办公桌前使用传统键盘和鼠标。但是,不是非必要的话,我们真的愿意戴着一个眼睛坐在办公桌前使用键盘和鼠标吗?如果几个小时后你还不觉得热和不适,那么Vision Pro2小时电池寿命也会让你受不了。不过,这只是它的初代样貌,所以未来的迭代也许会改变情况。毕竟,与看电影和运动不同,那些事我更喜欢与家人和朋友一起,而我的工作经常是独自一人。如果它能切实改善我的办公体验,我还是很期待的。


VisionOS键盘.jpg

VisionOS虚拟键盘

 一方面,我其实并不指望Vision Pro在电子表格方面表现能有多出色,但像Vision Pro这样的高性能AR头显几乎肯定会为3D CAD工程和设计带来新的可能性。在许多行业中,有大量的工作场所已经使用或可以受益于AR。有了适合VisionOS的应用程序,Vision Pro可能会给微软的Hololens等设备带来一些激烈的竞争。也许这足以让Vision Pro进入一些工作场所的大门。

 苹果的确对Vision Pro的视频会议功能一笔带过。我猜测,向与会者显示你的头像的这一功能仍在开发中。

移动游戏.jpg Vision Pro还不能用于真正的大型游戏


就目前它的性能来说,Vision Pro并不是游戏平台或VR玩家期望的产品。Oculus似乎在这方面更有优势。在Vision Pro的演示中,有一个镜头是有人在一个平面的2D虚拟屏幕上用一个看起来像PS5的手柄玩手机版的《NBA 2K'23》,画外音是这样说的:

画外音说:"Vision Pro是玩您喜爱的游戏的绝佳方式,只需连接手柄,就能在大屏幕上玩游戏,而且音效令人难以置信"

这句话气势主要针对的是休闲玩家,而不是核心玩家。对于用户,Apple Arcade承诺其100多款游戏将在Vision Pro发布时就绪。但核心游戏玩家应该很难在其中找到他们最喜欢的游戏。不要指望像《Elden Ring》或《Hogwarts Legacy》这样的游戏可以在Vision Pro虚拟屏幕上玩,也不要指望任何完全渲染的3D VR游戏。一些Apple Arcade游戏可能会包含一些较小的虚拟3D元素,但大多数可能是Apple Arcade上的游戏类型,包括在2D虚拟屏幕上玩的大量移植手机游戏。虽然全景3D图像和视频CG将用户包裹在虚拟环境中,Vision Pro一定会带来令人惊叹的效果,但这些与今天主流的3D VR游戏体验不同,其对象是完全渲染过的。最接近3D VR游戏的可能是像即将登陆Vision ProRec Room这样的游戏。Rec Room "是一款轻量级VR游戏,其图形看起来就像是从Roblox扒来来的。也许Vision ProM2 CPU/GPU和散热系统并不像专用VR头显那样可以处理大型3D VR游戏。



Vision Pro,终极移动游戏平台!

苹果在历史上从未真正涉足过游戏市场,Vision Pro的演示甚至都没有使用VR这个词。大型游戏并不是苹果Vision Pro的定位。但在不久的将来,苹果也许会改变策略,变得更适合硬核游戏玩家。

WWDC23上的另一场发布会透露了针对运行新Apple Silicon芯片的Mac的游戏计划,Vision Pro使用了去年Macbook上的Apple Silicon M2芯片。新的游戏移植工具包(Game Porting Toolkit)将允许开发者把Windows DirectX游戏移植到Mac上,新的MacOS Sonoma包括一个游戏模式(Game Mode)功能,可以优化资源,让你玩得更爽。我们不难相信,未来的VisionOS设备或Vision Pro本身的更新可能会为该平台带来一些可在虚拟2D屏幕上玩的DirectX游戏,但目前还没有任何详细的信息。


令人毛骨悚然


我在想2024年人们第一次在户外看到有人戴着Vision Pro时会作何反应?我们会怎么看待这个事,我们看到那个人,他朝前看时,他是在拍视频吗?公众对谷歌眼镜的反感就像都市传说一样,像麻省理工学院这样的学术机构也在努力应对,对于明年的Vision Pro佩戴者来说,情况可能更糟。在谷歌眼镜火的时候,我们还没有 "抖音博主"这个词。现在我们可能要提防他们。不过,值得称赞的是,苹果公司在演示中并没有将公开佩戴Vision Pro作为使用案例--尽管在Vision Pro演示过程中,一位父亲和他的两个孩子之间的互动镜头,被网友指出有些不对劲。

image_large.jpg


苹果的Vision Pro研究估计涉及5000项新专利。然而,对于一款具有如此多高科技潜力的产品而言,WWDC23可能是苹果公司首次发布新产品,而在发布会上,CEO并未展示实际使用该产品的情况。在随后的媒体采访中,我发现库克也总是避免亲自戴上头盔。为什么蒂姆-库克要回避戴上这款设备呢? 我们已经知道苹果的眼球追踪技术具有开创性,我期待着即将推出的验光师检查应用。除非美国验光协会禁止任何此类应用。我相信Vision Pro可以在几秒钟内发现视网膜撕裂或散光。但俗话说,眼睛是心灵的窗户,也许还能看到你的情绪状态和意图。而这正是无节制的技术进步令人望而生畏的地方。

 前苹果软件开发人员斯特林-克里斯平(Stirling Crispin)说,他作为一名神经技术原型研究教师,完成了Vision Pro的大部分基础工作。据克里斯平称,当他参与该项目时,苹果公司正在探索 "读心术"

 Vision Pro通过这些内向式传感器关注的不仅仅是你的眼睛。克里斯平说,他们正在研究一系列其他测量方法,包括脑电活动、心率和心律、肌肉活动和脑部血液密度、血压和皮肤传导。进行这些测量是为了让苹果公司能够实时读取你的情绪,并预测你下一步将如何使用该设备。他们的研究在预测课程中得到了回报,例如,在你点击之前,瞳孔是如何反应的。苹果公司从这些心灵探测器中获得的反馈信息可以让设备实时调整以适应您的认知状态。据Cripin称,他们甚至还进行了探索:

"其他推断认知状态的技术[包括]以用户可能无法感知的方式向其快速闪现视觉或声音,然后测量他们的反应"-斯特林-克里斯平的苹果开发人员的推特

这里面有很多东西需要解读。而这仅仅是克里斯平可以公开透露的研究。虽然苹果最终可能会也可能不会收集这些数据,但我们都很清楚,这种技术的广泛、不受控制的可用性可能会产生意想不到的后果。太多的公司(比如谷歌和Meta)将收集和出售用户数据作为其盈利的核心。无论是企业滥用数据还是黑客窃取数据,我们都应警惕并坚决反对这种前所未有的数据收集行为。

结论


Vision Pro确实是一项突破性技术。它是性能最好的磁共振耳机。苹果显然领先竞争对手太多。与Vision Pro交互的基本手势和界面都非常出色和精致。这种自然、直观的界面有可能实现几乎无限的实用计算功能。其3500美元的售价将使我们大多数人望而却步。然而,从家庭影院的角度来看,用3500美元来替代120寸显示屏、AVR7.1.6扬声器阵列的成本突然变得非常实惠。而且,正如我们在最初的AppleTViPhoneiPadApple Watch上看到的那样,随着技术的改进和行业模仿者(谷歌 等等)进入市场,价格将会下降。有传言称,苹果已经在开发廉价版的Vision Pro,但没有Pro这个尾缀。

但是,即使是苹果公司也无法解决一个问题,那就是如何将一台能够在你眼前呈现虚拟和增强世界的电脑带到你的面前。面部可穿戴技术的问题。尽管做出了很多努力,但没有一家科技公司能够打破 "穿戴计算机 "的接受程度。它们仍然是小众技术爱好者的设备。


可穿戴技术有其局限性,我们更乐意佩戴手表,甚至戴上耳机。

2024年可穿戴设备的接受程度?


G 教授谈 Vision Pro.jpg可穿戴技术是有局限性的,我们乐意戴手表,甚至戴耳机。不久前,耳机还被认为是过犹不及,但苹果公司的AirPods已经找到了一个广阔的市场,尽管它是一种我们塞在耳孔里的侵入性可穿戴技术。但是,普通人会把设备戴在脸上吗?答案肯定是 "不会",除非电池寿命、物理尺寸和可穿戴是适度甚至美观度得到改善。此外,在公共场合佩戴头显的社会反应也是一个未知数。

我很乐意为它竖起大拇指,我会亲自使用它。即使它出于不可告人的目的要读取我的想法,我也会很高兴他们能在其中找到有用的东西。但这只是我作为一个技术狂的想法,而不是对市场接受度的预测。在这一点上,我要向比我更有智慧的人请教。

纽约大学教授斯科特-加洛韦(Scott Galloway)是最好的市场营销老师之一,同时也是一位文化和技术评论家。加洛韦认为苹果的设备不会有大规模的受众。他认为,个人技术的一个重要社会功能是增进人与人之间的沟通度,这与我们的进化生物学原理不谋而合。但在他看来,在脸上戴一副苹果头显给出的信号不是这样的,它在别搭理我,我这人可能是个怪癖。斯科特-加洛韦(Scott Galloway)教授在Medium上发表文章说:

"
斯科特-加洛韦教授在Medium上发表的一篇文章中说:"我们对自己脸上的东西有着很高的辨别力,因为它应该需要增强而不是削弱我和他人之间的联系。- 斯科特-加洛韦教授

 
他说得对吗?苹果Vision Pro或后续的VisionOS设备是否会颠覆和改变家庭影院和沉浸式发烧音响?如果苹果能克服量产和成本的问题,像Vision Pro这样的产品能否大面积普及?请在回复中告诉我们你的看法。