苹果视觉专业版


有传言称苹果公司正在开发某种苹果虚拟现实多年来的耳机,终于来了。尽管 Apple Vision Pro 并不完全是 VR,但它是 AR 和 VR 应用程序的混合现实。

耳机及其操作系统视觉操作系统苹果公司将其称为空间计算。他们通过视频直通将软件与用户周围的世界融合在一起。

Apple Vision Pro 是一款遮挡用户视线的耳机,而不是一副透明的护目镜或眼镜。但高质量摄像机通过一对像素密集显示器将环境的 3D 视频传递给用户。

它被视为迈向全新计算类型的第一步,可能会导致传闻已久的苹果玻璃— AR 眼镜。即使是这款有着“专业”绰号的耳机,也可能只是未来更经济实惠的 Apple Vision 型号的垫脚石。

下一个苹果愿景

关于未来车型的传言已经开始流传。苹果可能会准备四款新的 Apple Vision 耳机,其中一些专注于降低价格,但可能要到 2025 年末或 2026 年才会发布。

苹果可能会降低未来型号的成本和重量

Apple Vision Pro 2 将迭代现有硬件,而一些人猜测“Air”或“SE”型号可以在不牺牲太多技术的情况下降低价格。一些人希望推出一款没有玻璃前显示屏的更轻量的型号。

苹果宣布视觉操作系统2期间全球开发者大会2024 年,它进行了适度的更新,重点关注生活质量的变化,例如召唤主视图和控制中心的新手势。其他变化包括为平台带来更多生态系统功能,例如 Safari 配置文件,并将手部追踪频率提高到 90Hz。

Meta Orion 是一副 AR 眼镜,希望能达到常规规格

泄密事件表明,苹果正在开发下一代 Apple Vision 以及我们称之为 Apple Glass 的智能 AR 眼镜。尚未共享任何版本。

Meta Orion(如上图所示)是一副 2024 年的原型眼镜,它使用投影仪在透明镜片上显示现实世界中的 UI。 Apple Glass 很可能是透明 OLED 或类似产品,而不是投影仪。

Apple Vision Pro 设计

自 2021 年初以来一直传闻的类似滑雪护目镜的设计最终成为了最终产品。一块弯曲的玻璃充当多个摄像头的镜头,而外壳是铝制的。

顶部的数字表冠控制 AR/VR 沉浸感

Solo 针织带采用 3D 针织一体式设计,可通过贴合表盘轻松调节,并使用拉环固定,方便拆卸。它提供了紧密的贴合感,但将耳机的大部分重量留在了佩戴者的脸上。

与 PlayStation VR 2 不同,这款耳机的形状非常贴合,用户无法佩戴眼镜。Apple 与 Zeiss 合作提供处方镜片或阅读器镜片,可单独购买,价格为 150 美元或 100 美元。

Apple Vision Pro 的侧面装有名为 Audio Pod 的小型扬声器,可将空间音频传入用户的耳朵。顶部有一个按钮,用于控制 3D 相机等某些功能,右侧的数码表冠则充当主页按钮并控制沉浸感。

头带可调节,可更换以适应不同的佩戴需求

电源线通过专有机制连接到侧面。它连接到外部电池组,可实现约 2 小时的便携式使用,但用户可以根据需要将电池连接到电源。

如果电池耗尽,整个耳机就会关闭,因为没有备用电源可用。当 Apple Vision Pro 关闭时,窗口位置会被忘记,必须重置。

前玻璃充当“eyeSight”功能的外部显示器。它使用户能够通过公认的奇怪效果来表明他们是否在注意。

EyeSight 在外部显示器上显示用户的眼睛

当用户完全沉浸并且看不到外界时,就会出现彩色波形。如果直通处于活动状态,则可以通过光栅显示器看到用户的眼睛。如果人们不看外部显示器,则外部显示器上不会显示任何内容。

EyeSight 旨在确保用户在任何环境下都能自信地使用耳机。然而,在这种技术在社交互动中普及之前,似乎必须克服一些社会障碍。

由于 eyeSight 依赖于用户的角色,因此它具有同样的恐怖谷效应。角色仍处于测试阶段,因此会出现奇怪的错误,使用户的眼睛看起来闭着或扭曲。

Apple Vision Pro 技术

苹果的耳机是一个独立的设备,运行在M2处理器和 R1 协处理器。双芯片设计可实现空间体验——M2 处理 VisionOS 和图形,而 R1 专用于处理摄像头输入、传感器和麦克风。

M2 和 R1 协同工作

找到的参考Xcode表明 Apple Vision Pro 拥有 16GB RAM,与开发者套件中的 RAM 容量相同。客户可以为其设备配置 256GB、512GB 或 1TB 的存储空间。

从摄像头到显示屏有 12 毫秒的延迟,用户不会注意到这一点。直通在明亮的环境中效果最好,但它做得足够好,深度感知不是问题。

LED 和红外摄像头组成的眼球追踪系统只需观察即可实现精确控制。用户可以浏览文本输入字段,然后通过语音进行填写。

相机使用玻璃盖作为镜头

铝和玻璃外壳中有 12 个摄像头、5 个传感器和 6 个麦克风。与竞争对手的 VR 耳机相比,所有这些加起来使产品重于平均水平。

两个高分辨率摄像头每秒向显示器传输超过十亿像素。每个显示器的分辨率为 3,660 像素 x 3,200 像素,即每英寸约 3,380 像素。

该显示系统使用像素宽度为 7.5 微米的微型 OLED 背板,使其能够在与单个 iPhone 像素相同的空间内容纳约 50 个像素。定制的三元件镜头旨在放大屏幕并使其尽可能宽地环绕用户的视野。

LiDAR 和 TrueDepth 摄像头协同工作,创建环境的融合 3D 地图。红外泛光照明器与其他传感器配合使用,可增强弱光下的手部跟踪。

耳机中没有任何电池来降低尺寸、重量和热量

耳机顶部和底部有一个风扇,可保持处理器冷却,并设有通风孔。虽然 Apple Vision Pro 外部的某些位置在使用过程中可能会感觉温暖,但由于 Light Seal 的隔离,用户的脸上永远不会发热。

由于 Apple Vision Pro 拥有多个摄像头,因此它可以捕捉“空间”3D 内容。录制的空间视频可以在 Apple Vision Pro 耳机上的照片应用程序中查看。超过 150 部 3D 电影可供观看苹果电视应用程序在启动时。

Apple 添加了基本的 3D 视频录制功能iPhone 15 专业版iOS 17。它可以捕获 1080p 30Hz 空间视频,并可以在耳机中本地播放。

Apple Vision Pro 拍摄的空间视频更有深度,但 iPhone 拍摄的空间视频更清晰。不管怎样,未来的硬件将使今天的视频相比起来显得很糟糕。

空间角色

Apple Vision Pro 中添加的首批发布后功能之一称为“空间角色”。在 FaceTime 通话和 SharePlay 期间,用户的角色不再被锁定在 3D 窗口内,从而实现更身临其境的交互。

由于 Apple Vision Pro 不知道人的背部是什么样子,因此空间角色呈现出幽灵般的一致性。只有使用者的脸、一点头发和上胸部是可见的,双手漂浮在周围。

这种效果一开始是不可思议的,但随着设计奇怪的人物角色发挥一种心理技巧来让你相信你正在与这个人共享一个空间,效果变得更加自然。 3D、空间音频和直视对方眼睛的能力的结合创造了相当令人信服的效果。

光学 ID、隐私和安全

为了安全起见,Apple 推出了 Optic ID 作为虹膜扫描系统。很像人脸识别或者触摸 ID,它将用于验证用户身份,启用苹果支付采购以及其他与安全相关的要素。

虹膜扫描是 Apple 最新的生物识别技术,称为 Optic ID

苹果解释说,Optic ID 使用不可见的 LED 光源来分析虹膜,然后将其与存储在 Secure Enclave 上的注册数据进行比较,这类似于 Face ID 和 Touch ID 所使用的过程。 Optic ID 数据完全加密,不会提供给应用程序,也不会离开设备本身。

继续隐私主题,用户在显示屏上查看的区域和眼动追踪数据不会与苹果或网站共享。相反,来自传感器和摄像头的数据在系统级别进行处理,因此应用程序不一定需要“看到”用户或其周围环境来提供空间体验。

Apple VR、AR 或 MR

苹果避免将 Apple Vision Pro 提供的任何体验称为“Apple VR”等传统名称。相反,它坚持自己的营销术语,如空间计算。

Apple VR 和 AR 的结合

关于如何称呼这款耳机存在一些争论。有些人将其称为 Apple VR,因为用户戴上耳机即可看到内容。其他人将其称为 Apple AR,借助数字表冠提供完全沉浸式体验。

甚至混合现实(MR)这个术语也不太合适。即使只是营销,空间计算也很好地描述了这种体验。

可以这样想——Oculus 和 PlayStation VR 很容易被归类为 VR 耳机,因为虚拟现实体验是它们的主要功能。对于 Apple Vision Pro 来说,VR 只是一个功能,而不是全部目的。

在主题演讲和开发者会议期间,苹果使用内部营销术语来指代每种体验。它将 2D 应用程序称为“窗口”,将 3D 对象称为“体积”,将完全沉浸式 VR 称为“空间”。

视觉操作系统

该软件通过visionOS运行,应用程序来自iPhoneiPad能够在很少或没有开发人员干预的情况下进行操作。 3D 空间中显示的兼容应用程序仍然是限制该空间内内容的 2D 窗口。

本机应用程序具有 3D 效果,开发人员可以在窗口周围添加称为装饰品的 3D 对象,以增强交互。菜单和控件似乎弹出在应用程序的前面或旁边。

VisionOS 在 3D 空间中运行应用程序

以 USDZ 格式创建的对象可以被拉入一个空间,但开发人员似乎需要使用特定框架为 VisionOS 提供独特的体验。以前构建的应用程序ARKit将显示为 2D 窗口。

完整的 Apple VR 体验并不是主题演讲的焦点,但它们确实存在。苹果计划拍摄多个 360 度视频供用户沉浸其中,更不用说第三方 VR 应用程序了。

VisionOS SDK 于 2023 年 6 月下旬向开发人员提供。它包括一个在测试环境中与软件交互的模拟器,但在 7 月份硬件套件和会话到达之前,无法进行全面的设备测试。

许多开发者选择在 VisionOS 应用商店发布时不将其现有的 iPad 应用纳入其中。由于无法访问硬件来测试应用程序,因此很难知道这些应用程序是否可用或导致客户投诉。

2024 年 2 月 2 日发布时,只有约 600 个本机应用程序可用。随着开发人员最终掌握硬件,这个数字正在迅速增加。

Apple 在 WWDC 2024 期间发布了 VisionOS 2,其中包含一些生活质量更新。用户可以将任何照片转换为 3D,新的手势使导航更容易,并且开发人员拥有更多的 API。

空间计算竞赛

苹果可能刚刚发布了其空间计算平台,但这并不意味着它是市场上唯一的平台。十多年来,竞争对手一直在探索 AR 和其他扩展现实解决方案。

谷歌已经放弃了 Glass,微软也放弃了 Hololens,但其他选择仍然存在。尽管消费者层面的技术有限,但 Xreal Air 是当今少数尝试提供 AR 的产品之一。

Apple Vision Pro 评测

Apple Vision Pro 是苹果的第一款空间计算机,因此对其进行审查成为一项重大挑战。虽然该设备已经存在了一段时间,但还没有发生足够的变化来重新审视我们最初的观点早期审查一个月审查。

设计

关于 Apple Vision Pro,首先要了解的是,市场上几乎没有什么东西可以直接与它进行比较(如果有的话)。它运行一个名为visionOS的空间操作系统,它是一款可穿戴计算机,不仅仅用于游戏,而且它没有物理控制器。

Apple Vision Pro 是一款小而重的耳机

与其他耳机相比,Apple Vision Pro 处于较重的一端。铝和玻璃外壳的外观和感觉比 Oculus 或 PSVR 等依赖塑料结构的产品更优质。

有两种表带可供选择:单圈针织表带和双环表带。哪一种更舒适完全取决于用户,但许多人似乎更喜欢双环带。

Light Seal、垫子和带子的尺寸均在订购过程中确定。 Apple Vision Pro 精确贴合用户,尺寸错误的组件可能会导致不适。

外部电池组提供 2 小时的电池续航时间

有一个外部电池组,可提供 2 小时的电池续航时间。可以将电缆连接到电池上,以无限期地为 Vision Pro 供电。

Apple Vision Pro 的重量在 21.2 至 22.9 盎司之间,具体取决于配对的配件。电池组重 12.45 盎司。

展示

也许 Apple Vision Pro 最令人印象深刻的部分是双微型 OLED 显示屏。它们提供 3,660 像素 x 3,200 像素的分辨率,每只眼睛接近 4K。

每个像素密度显示屏每只眼睛提供接近 4K 的分辨率

显示屏可以在 90Hz、96Hz 和 100Hz 之间刷新。以 30 fps 和 24 fps 播放的视频能够以其原始帧速率播放以防止抖动。

蔡司光学镜片适用于需要矫正视力的人士。无论是否有附加插入,在观看高对比度内容时都会出现轻微眩光。

外部摄像头与 R1 处理器配合,打造无缝直通体验

外部摄像头和传感器与 R1 配合使用,将物理世界重新创建为耳机内几乎无延迟的 3D 渲染。生成的图像是现实世界的稍微暗淡的表示,但它做得足够好,直通效果相当令人信服。

与市场上其他虚拟现实耳机选项不同,苹果在使用直通时优先考虑视觉保真度。然而,它还提供了高密度显示屏,能够在 3D 空间中生成令人难以置信的沉浸式内容。

特征

Apple Vision Pro 具有类似于 iPad 或 Mac 的多种功能集。它可以执行工作和生产力任务,可以是娱乐设备,也可以是通信工具。这里最明显的区别是完成这些任务背后的界面。

3D 元素构成了visionOS,包括主页视图

应用程序窗口漂浮在虚拟空间中,可以代表您所在的房间,也可以代表空间环境。本机应用程序具有 3D UI 元素,并且通过查看和点击手势更易于使用,而 iPad 的兼容应用程序尚未优化,但与 Magic Trackpad 配合良好。

即使只是一个基本的 2D YouTube 频道,观看视频也是身临其境的。 3D 电影可增强沉浸感,Apple 沉浸式视频可提供最令人难以置信的体验。

Apple Vision Pro 自推出以来的几个月内最大的问题是缺乏沉浸式内容。这种特殊的视频类型是新的,苹果似乎是目前唯一一家能够制作它的公司,而且推出的速度即使不存在也很缓慢。

沉浸式内容和 3D 视频可以在 Apple TV 应用、Disney+ 和其他应用中找到。 Apple Arcade 甚至还提供一系列空间游戏。

与 AirPods Pro 2 配对,在 Apple Vision Pro 上实现无损音频播放

Apple Vision Pro 的音频播放与双驱动器 Audio Pod 配合得很好。然而,为了获得更好的音频和低音,配备 USB-C 的 AirPods Pro 2 是最佳选择。

Apple Vision Pro 的另一个强大功能是 Mac 虚拟显示器。它允许用户从 Mac 引入 4K 显示器并在虚拟窗口中使用应用程序。

空间计算的开始

Apple Vision Pro 还处于起步阶段,在其全球发布之前,本地 App Store 中可能会缺少许多流行的应用程序。它并不是一款适合所有人的设备,仅价格就说明了这一点。

第一代空间计算

这并不是说它是失败的。它是一款出色的第一代产品,足够好,代表了空间计算令人兴奋的未来。

苹果预计将在 6 月份的 WWDC 期间发布 VisionOS 2.0。该更新可能会消除这个新生平台中的一些粗糙边缘。

使用 Apple Vision Pro(预发布)

Apple 正在提供开发人员实验室和套件,以帮助空间计算平台的应用程序的预发布开发。这使得苹果公司最初在 WWDC 上宣布的一些第一手经验得以向公众展示。

总的来说,那些与耳机互动过的人都会有类似的想法和感受。这是第一代产品,它正在进入一个拥挤的领域,但也因为将 AR 和 VR 与高端技术相结合而脱颖而出,让一切变得毫不费力。

Apple Vision Pro 直到 2024 年才会推出

熟悉竞争对手耳机的用户表示,Apple Vision Pro 的视野更宽、更高。某些照明环境(例如超亮房间或昏暗区域)会显示视频输入的局限性,但不会分散注意力。

即使在预发布的演示中,眼动追踪和手势控制似乎也非常出色。这些系统感觉经过深思熟虑和执行,并且缺少新交互范式往往具有的一些常见的成长烦恼。

专用应用程序似乎运行良好并且与环境融为一体,为企业开发人员提供了工作或维护培训的绝佳选择。尽管苹果表示 iPad 应用程序可以轻松移植,但开发人员需要对其应用程序给予一些关注,以确保易读性和控件能够移植到平台上。

重量不是问题,但在连续使用一个多小时后,疲劳确实开始出现。考虑到显示器的质量,眼睛疲劳似乎不是问题。

Apple Vision Pro 发布日期和价格

苹果倾向于在产品发布前不久就宣布产品,但由于 Apple Vision Pro 是一个新平台,因此给自己留出了足够的空间。开发人员有大约一年的时间来开发他们的visionOS体验,并且可以通过请求应用程序使用严格的保密协议来获取开发人员套件。

Apple Store 零售店的 Apple Vision Pro

据估计,第一年的出货量在 40 万至 100 万台之间。高昂的价格可能令人望而却步,但雄心勃勃的供应链数据表明三年内出货量将达到 1000 万件。

Apple Vision Pro 于 1 月 19 日开始接受预订,起价 3,499 美元,配备 256GB 存储空间,并于 2024 年 2 月 2 日发货。它配有两条头带、遮光罩和电池。光学镜片仅在线购买,阅读器强度镜片的价格为 99 美元,处方强度镜片的价格为 149 美元。