Apple Vision Pro迎来了Apple Intelligence等多项新功能。Numi Prasarn/Viva Tung/CNET
Apple的未来主义头显设备Vision Pro迎来了一周年纪念,但在这一年中,它仍显不足,缺乏一些关键功能。如今,随着VisionOS 2.4的发布,Apple至少在小步前进地解决了一些这些问题。Apple Intelligence终于登陆Vision Pro,同时带来了一系列连接应用和针对iPhone及iPad的访客模式功能。
新的操作系统更新已可在今日推出的开发者测试版中体验,但正式更新还需等到4月。我已期盼这些新功能多时。
Apple Intelligence无疑是最引人注目的新功能,但可能并非最具意义——此次推出的AI附加功能并未包括任何由相机支持的Visual Intelligence多模态功能,如Google Gemini将在Android XR上展示的。但至少,这是朝着未来逐步增加更多AI功能迈出的第一步。我更为兴奋的是Vision Pro将与iPhone和iPad实现更好的协作。虽然这不一定完全满足我的所有期望,但新的应用和访客模式功能应该能让这款头显具备远程访问功能,这是Meta的Quest头显多年来一直具备的特性。
GenMoji(以及其他Apple Intelligence工具)即将登陆Vision Pro,但尚未包括Visual Intelligence。Apple
即将登陆Vision Pro的Apple Intelligence功能颇为熟悉;它们大多反映了Mac、iPhone和iPad上已经存在的功能。然而,它们的到来却显得有些迟缓:我早在去年就对此满怀期待。写作工具,这一集成到多个应用中的模式,再次回归,以总结或生成文本。有消息摘要功能,还可以调用ChatGPT以获得额外帮助。此外,还有Apple的生成式AI GenMoji,它可以按需生成表情符号,以及Image Playground,它可以生成2D图像。但遗憾的是,这些功能目前都不会在Vision Pro上生成任何3D内容……至少现在不会。而且,Apple的AI驱动的记忆电影功能,可以按需生成照片和视频画廊,但同样不会展示任何3D“空间”电影或照片,这多少让人感到有些失望。
不过,最大的缺失功能是Visual Intelligence。Apple在iPhone上的由相机支持的AI功能,通过相机按钮召唤,可以扫描世界并搜索或识别视野中的物体。对于Vision Pro而言,Visual Intelligence无疑是有意义的,因为Vision Pro实际上是一个巨大的可穿戴显示设备,周身镶嵌着可观看世界的相机。然而,目前这个功能还未被加入。同样缺失的还有新版Siri。Apple重新设计的Siri应该是iOS 18.4的一部分,但不会在这个操作系统更新中登陆Vision Pro。
与此同时,Google已经将多模态相机辅助的Gemini AI集成到Android XR中,似乎在该操作系统发布的第一天就可以使用。
Apple今年晚些时候仍可能推出Visual Intelligence。它可能是VisionOS 3的候选功能之一,该版本预计将在Apple通常于6月举行的WWDC开发者大会上宣布。但至少,Apple Intelligence登陆Vision Pro(正如Apple之前所暗示的)表明,当前的硬件已经具备更多潜力,只是Apple尚未全部释放。
通过与iPhone和iPad的更好协作,引导人们体验Vision Pro将变得更加容易。Josh Goldman/CNET
让我颇感沮丧的是,Vision Pro从未与iPhone建立良好的工作关系,甚至都没有实现基本的连接功能。Meta的Quest头显多年来一直拥有手机应用,可以浏览和远程下载应用到头显,同步手机通知,并远程控制Quest头显,以帮助人们在您通过手机屏幕观看他们的体验时演示应用。
Apple通过VisionOS 2.4和iOS 18.4增加了很多这样的功能。一个期待已久的Vision Pro iPhone应用可以让您远程下载应用并发现即将登陆VisionOS的新体验。该应用还将存储有关头显和处方镜片插入物的详细信息。据Apple称,如果您拥有Vision Pro,该应用将自动出现在运行iOS 18.4的iPhone上,但也可以从App Store下载。
此外,还有一个新的访客模式体验,用于分享头显。Apple当前的过程既奇怪又笨拙,而且它不允许您远程观察头显内发生的事情以提供帮助。新模式在其他人戴上头显时启动,而您附近的iPhone或iPad上会有一个按钮来启动连接。它配备了一个应用选择器,只会让特定的电影或应用出现在头显上,并且会启动AirPlay流来观看您的访客正在做什么,以便您可以引导他们。
稍显奇怪的是,新的访客体验并非从Vision Pro应用启动,而且目前,该应用不会让您远程启动或暂停应用;它只是一个被动的AirPlay流。但再次强调,这是一个开始——而且听起来比Vision Pro之前的功能要好得多。
Apple还推出了一款名为Spatial Gallery的新应用,它被描述为一个策划的展示平台,展示了使用基于iPhone的“空间”捕捉格式拍摄的3D照片和视频。该应用听起来像是一种在Vision Pro上查找其他3D内容来观看的方式,这多少有些令人费解,因为Apple已经在头显中大胆但缓慢地展示了其180度3D沉浸式视频格式。
这很可能表明沉浸式视频内容制作正面临瓶颈。这是一种昂贵的拍摄和编辑格式,需要非常特定的高端相机。与此同时,使用iPhone或其他相机拍摄更基本的3D视频,并使用少数支持空间视频编辑的应用(如Final Cut Pro、DaVinci Resolve)进行编辑,似乎Apple正在寻求折中方案,以尽快提供更多适合Vision Pro的体验。
在理想的世界中,未来可能涉及iPhone相机开发更好的沉浸式3D捕捉格式,以制作更令人印象深刻的VR就绪内容。然而,目前的情况是,手机拥有尚可的3D捕捉功能,而高端专业相机则开发了一个不同的层级。我更希望看到Apple在有用的沉浸式应用上进一步投资,但看起来短期内空间视频将是Apple最可能实现的内容举措。