预计苹果将在明天的 WWDC25 上发布 visionOS 的下一个主要版本。
自去年 2 月推出 Vision Pro 和 visionOS 以来,苹果一直在定期更新操作系统,以增加新功能和改进。visionOS 1.1 于 4 月首次更新,带来了具有突破性远程呈现功能的 Spatial Personas。 然后,在 9 月,苹果发布了 visionOS 2,这是第一个包含数十项更改和改进的主要更新。 12 月的 visionOS 2.2 带来了 Mac 虚拟显示的宽和超宽模式,而 3 月的 visionOS 2.4 则带来了 Apple Intelligence、空间画廊应用程序、用于远程安装的 iPhone 应用程序和新的 iPhone/iPad 驱动的访客流程。
虽然苹果传统的版本命名方案表明下一个主要版本将被命名为 visionOS 3,但彭博社的马克·古尔曼 (Mark Gurman) 报道称,苹果计划更改为年份指示器,声称它因此将被命名为 visionOS 26。
无论苹果最终如何称呼它,我们都对 visionOS 的未来发展充满期待,因为苹果正在继续奠定平台的未来基础,该平台将支持今天的 Vision Pro 以及未来更便宜、更轻的 Vision 头显。
官方消息
在我们深入了解我们希望下一个 visionOS 带来什么之前,让我们先明确苹果官方已经说了什么。
近年来,在 WWDC 前大约一个月左右,苹果都会公布其操作系统即将推出的辅助功能。 例如,去年苹果宣布了 Vision Pro 的实时字幕功能,该功能后来被证明是 visionOS 2 的一部分。
今年,该公司透露,Apple Vision Pro 将获得放大透视图像的功能,以及使用设备上的 AI 描述、查找或读取您视图中的任何内容的功能。 我们预计这些功能,或者至少其中的一些功能,将成为下一个主要版本的 visionOS 的一部分。
该公司还宣布 visionOS 将在今年晚些时候获得对脑机接口 (BCI) 输入设备的支持。
既然我们已经介绍了苹果官方已经透露的内容,那么接下来就是我们希望看到的内容。 请注意,这纯粹是我们希望在 visionOS 中看到的内容,苹果尚未确认任何这些内容。
1:手柄追踪
Apple Vision Pro 的眼动追踪和捏合输入系统是 XR 交互方面的一项突破,非常适合许多用例。 它的手部追踪也适用于休闲游戏。
但是,其他平台上的许多 VR 和混合现实游戏以及互动体验都是围绕物理手柄设计的,并且依赖于它们提供的按钮、拇指杆和扳机。 此外,仅凭手部追踪,您根本无法获得真正抓取、握住和使用虚拟物体的感觉,而食指和握柄扳机的触感至少可以部分地模仿这一点,触觉反馈进一步增强了这种感觉。
有强烈的迹象表明 visionOS 实际上将获得手柄追踪支持。
早在 12 月,彭博社的马克·古尔曼 (Mark Gurman) 报道称,苹果和索尼正在努力将 PlayStation VR2 的手柄支持引入 Vision Pro。 今年 2 月,他说这个项目仍在进行中,并且 昨天 他重申了他的报道,并将其描述为“所谓的魔杖支持”。
本周早些时候,9to5Mac 声称 苹果将把手柄追踪品牌化为“空间控制器”,并将允许 App Store 应用程序需要它们,并在购买应用程序时警告买家。
从技术角度上讲,引入手柄支持将极大地扩展 Vision Pro 的应用场景,使其能够运行更多依赖传统控制器的 VR 游戏和专业应用。 考虑到目前缺乏原生 VR 游戏,这对于吸引开发者和用户来说至关重要。 苹果与索尼的合作,也预示着可能建立一个更开放的 XR 生态系统,这对行业整体发展将产生积极影响。
2:沉浸式应用中的窗口
九个月前,Meta 将无缝多任务处理推广到其 Quest 头显的 Horizon OS。 这意味着 Quest 用户在使用沉浸式应用程序(例如 VR 游戏)时,可以保持 2D 窗口(如网络浏览器和其他面板应用程序)处于打开状态。
这意味着您可以例如在玩 VR 游戏时观看 Netflix 或 YouTube,或者在 VRChat 世界中进行远程桌面工作。
具有讽刺意味的是,尽管 visionOS 在使用共享空间中运行的体积 visionOS 应用程序时具有许多多任务处理优势,但 Apple 的平台不允许您在沉浸式应用程序中执行此操作 – 但有一个例外。 注册的开发人员可以保持 Mac 虚拟显示处于打开状态,但不能打开其他窗口,普通用户根本无法打开。
允许在沉浸式应用中使用 2D 窗口,将大大提高 Vision Pro 的实用性和便利性。 用户无需退出沉浸式体验,即可快速访问其他信息或应用。 这种无缝衔接的多任务处理体验,对于提高工作效率和娱乐性都至关重要。目前,开发者可以通过技术手段实现类似功能,但系统层面的原生支持将带来更好的性能和更流畅的用户体验。
3:运行 macOS 的能力
在首次发布时,苹果将 Vision Pro 称为“空间计算机”。 但正如我们在评论中解释的那样,visionOS 基于 iPadOS,因此 iPad Pro 周围关于“计算机”真正含义的争论也延伸到了 Vision Pro。
与 iPad Pro 一样,您在 Vision Pro 上找不到 XCode、Visual Studio 或 Unity,因此您无法使用它来制作应用程序。 您也找不到 Adobe Premiere、After Effects、Photoshop 或 Illustrator。 实际上,真正将“计算机”与其他设备区分开来的能力是专业创作,而不仅仅是消费。 从计算的角度来看,Vision Pro 就像拥有一台带有大量外部监视器的 iPad Pro。
值得庆幸的是,visionOS 的 Mac 虚拟显示功能非常出色,可让您用巨大的虚拟显示器替换 Mac 的物理屏幕。 visionOS 2.2 中添加的宽模式和超宽模式使该功能更加出色,为您提供了尽可能多的水平屏幕空间。
借助 Mac 虚拟显示,您可以进行严肃的计算,但仍然需要拥有并携带物理 Mac。 然而,XR 在生产力方面的梦想是完全取代您的计算机,而不仅仅是扩展它。 Apple Vision Pro 具有与 Mac 相同的 M2 芯片组,那么为什么我们不能简单地在 visionOS 中运行 macOS 或其应用程序呢?
本质上,我们要求的是一个虚拟 Mac 虚拟显示。 在 visionOS 窗口中运行的 macOS 的虚拟机。 与今天的 Mac 虚拟显示相同的用户体验,但没有 Mac。
这无疑将会是Vision Pro 走向“空间计算”的关键一步。 如果能够直接运行 macOS 应用, Vision Pro 的生产力将会得到质的提升,同时也能够避免应用生态方面的短板。 然而,这也会带来硬件功耗和性能方面的挑战,需要苹果在系统优化和散热方面下功夫。 此外,如何让 macOS 应用在空间计算环境中更好地适配,也是一个需要考虑的问题。
4:沉浸式 Apple 地图
Google Earth VR 是该公司近十年前在 PC 上推出的一款游戏,是有史以来最伟大的虚拟现实体验之一。 从上帝的视角在 VR 中探索我们美丽的星球简直令人难以置信。
谷歌正在将这种体验作为 Google Maps 的一部分引入其即将推出的 Android XR 平台,我们在使用三星的头显时对此印象非常深刻。 还有几个 Quest 和 visionOS 应用程序可以模拟 Quest 和 Vision Pro 独立运行的 Google Earth VR,例如 Fly,以及一个名为 Spatial Earth 的出色的 visionOS 体积浮动地图应用程序。 但这些第三方选项不是免费的,并且没有在系统级别集成,例如当您点击地址时。
虽然 Apple Maps 在 2012 年发布时受到了极差的评价,但在过去十年中,该公司已在该平台上进行了大量投资,包括通过卫星图像、LiDAR 数据和机器学习来添加世界上大部分地区的 3D 尺寸表示,就像 Google Earth 一样。
虽然您今天可以在 Vision Pro 上访问 iPad 版本的 Apple Maps,但目前还没有专门的 visionOS 应用程序。 对我们来说,这强烈暗示 Apple 计划推出 Google Earth VR 的等效产品,我们迫不及待地想看到它。
苹果地图在空间计算环境下的应用,将不仅仅是一个简单的地图应用,它可以与 Vision Pro 的 AR 功能相结合,为用户提供更丰富的现实增强体验,例如在现实世界中叠加导航信息、景点介绍等。 此外,结合苹果的 LiDAR 技术,地图还可以提供更精确的空间定位和场景识别能力,为用户提供更具沉浸感的探索体验。
明天的 WWDC25
苹果的 WWDC25 主题演讲将于周一太平洋时间上午 10 点直播。