Visionos


苹果宣布Apple Vision Pro期间WWDC2023年,还有一个操作系统 - Visionos。这是苹果公司第一个用于空间计算的平台。

苹果没有构建将用户转移到其他世界或一组有限的AR眼镜上的隔离VR耳机,而是在现实世界中覆盖了应用程序,而是选择了两者的混合物。首先,Visionos是一种混合现实操作系统,可以适应用户的需求,无论是完全隔离还是社交友好的增强计算。

Home View通过充当应用程序启动器和环境采摘器充当操作系统的中心。浮动图标和应用程序窗口反射房间的光线并铸造阴影。

Apple Vision Pro是Apple运行Visionos的第一个产品,但这并不是最后一个。谣言预计最终将为一套被称为配音的AR眼镜供电苹果玻璃

Visionos 3

没有关于苹果可以做什么的谣言Visionos 3在6月9日的WWDC上。它可能会看到一些微小的设计和互动变化,但更新可能会集中在使Apple的应用程序本机上。

Visionos 3

苹果智能由于上下文特征被延迟,因此可能是演示文稿的重要组成部分。 Apple Vision Pro仅具有AI功能为Visionos 2.4。

有传言说,每个其他操作系统都将重新设计,以使它们更接近Visionos。虽然更改可能受到诸如此类的平台的限制TVOS 19Watchos 12由于这些平台的工作方式,iOS 19,,,,iPados 19, 和MacOS 16可以重新设计与iOS 7一样广泛。

预计重新设计的元素将具有玻璃表面,随着iPhone的移动而反映光线。其他更改包括针对按钮和菜单的新样式,以及主屏幕上Apple经典的Squircle图标的可能更改。

Visionos 2

Visionos 2在WWDC 2024期间揭示了它。它包含了一些新的寿命改进,例如新导航手势和更好的野生动物园视频播放器。

苹果也透露了苹果的情报,但在发布时并没有参加Apple Vision Pro。它已作为Visionos 2.4的一部分介绍,其中具有从写作工具到Notificaiton摘要的所有功能。

开发人员拥有更多用于创建空间体验和3D应用程序的API。用户可以将2D照片转换为具有立体效果的空间3D照片,并且可以重新组织家庭视图。

新手势有助于解决第一个OS版本的投诉。用户可以看一下自己的手背,以获取一个打开房屋视图的按钮,或者将手翻转,以查看打开控制中心的状态栏。

Visionos:空间

Visionos为用户提供无限画布,以将应用程序放置在3D空间中。应用可以以2D窗口出现,包括称为装饰品的3D对象,或扩展以填充带有沉浸式视图的空间。

设计

现有的应用程序野生动物园将出现在空中漂浮的2D窗口中,但它具有扩展的菜单和一个漂浮在窗户外部的地址栏。 iPad和iPhone应用程序被限制在其窗口边界上,类似于在显示屏上查看应用程序。

家庭视图将图标放置在您的空间或沉浸式视图中

家庭视图看起来像是TVOS手表。排列在网格中的圆形图标具有2.5D效果,在交互或查看它们时会出现。

相机捕获用户周围的房间,并将其传递到内部显示器。借助Apple Vision Pro,用户可以深入了解现实世界的几乎完美的表示。

对象和窗户似乎具有物理存在,带有放置锚,阴影和透明度。arkit在发展体验中起着作用,但必须与3D场景一起构建斯威夫特和RealityKit。

手势和控制

手势,眼动跟踪和语音控件可以无需其他硬件即可操纵软件。有一个虚拟键盘,但是用户可以利用Mac的蓝牙键盘,魔术触控板或通用控件进行输入。

简单的手势控制应用程序和经验

眼睛跟踪使用户可以查看他们希望与之互动的对象。选择或抓取对象是通过手指插的运动来完成的。

查看文本字段,捏,然后说话或键入以填写。默认启用了麦克风图标时,将语音激活到文本的设置。

对象将了解用户在哪里以及他们的手在进一步互动中所做的事情。例如,放手可能会使虚拟蝴蝶降落在手指上。

通过按下数字冠和顶部按钮几秒钟,可以戒除应用程序。或者,如果似乎关闭了跟踪,请连续按下顶部按钮进行重新校准。

双击Apple Watch

苹果似乎通过引入类似的手势来为用户准备双击Apple Vision ProApple Watch系列9Apple Watch Ultra 2。当用户用拇指和另一根手指进行两次捏合运动时,它会激活该活动的活动按钮Apple Watch

由于高级算法和S9 SIP处理多个传感器信号,因此可以双击Apple Watch。 Apple Vision Pro能够使用摄像头解释手势,但是Apple Watch可能会在将来的更新中为该控件功能添加另一个元素。

FaceTime

即使用户将用耳机遮盖脸,但FaceTimeApple Vision Pro仍然可以使用。您将通过浮动窗户看到其他参与者,而您将通过角色来展示自己,这是您自己的数字代表。

FaceTime是Visionos中的功能

用户的角色是通过使用Apple Vision Pro摄像头扫描脸部来创建的。 3D模型看起来像用户,但由于它是完全计算机生成的,因此有一个不可思议的山谷元素。

在FaceTime通话中,可以查看多达9个浮动窗口。 32名参与者的通常限制仍然存在,但他们不会全部可见。

空间视频

所有者iPhone 15 Pro或iPhone 15 Pro Max跑步iOS 17.2可以录制可以在Apple Vision Pro上观看的空间视频。这是一个3D视频,记录在1080p和30Hz。

在iPhone上捕获空间视频

穿着Apple Vision Pro时,还可以录制空间视频。但是,这可能有点尴尬,尤其是在社交环境中。

尽管分辨率和帧速率并不理想,但他们不应该在耳机上创造出色的体验。未来的iPhone应该能够记录更高质量的3D视频,但是今天捕获的内容足以在Apple Vision Pro中查看。

通过使用主摄像头和超宽摄像头捕获光学分离的视频,可以使用3D效果。当每个视频都在耳机中的单独显示器上播放时,只要正确捕获,用户的眼睛就可以看到3D视频。

Apple TV应用程序还提供3D电影。苹果说,发射时有150多个3D标题以及少数8K全身性视频。

安全

Apple Vision Pro具有一种新型的生物识别安全性 - 光学ID。它扫描用户的虹膜以身份验证登录,购买等。

光学ID扫描用户的虹膜

一个人会使用的地方触摸ID或者面对ID是光学ID可以正常工作的地方。像其他生物识别系统一样,虹膜数据被加密并存储在安全的飞地中,因此它永远不会离开设备。

苹果还防止应用程序从设备的摄像机和传感器中获取有价值的数据。在应用程序使用期间发生眼睛跟踪和视频传递时,它发生在一个单独的层中,该层无法访问第三方数据收集。

就像在iPhone或iPad上一样,是时候使用OptiC ID对某些内容进行身份验证,用户可以通过双重按钮确认。这仅通过查看付款字段来防止意外授权。

发展

苹果在为Visionos创建应用程序和内容时,已经为开发人员铺平了一条清晰的途径。但是,仅通过有限的面对面会话或Xcode中的模拟器工具访问,开发人员在启动时受到限制。

启动时,Vision Pro上只有大约600个本机应用程序。借助适合客户和开发人员的硬件,将在合理的情况下为该平台发布更多的应用程序。

Swiftui是编码空间计算的基岩。它具有3D能力的工具,并支持深度,手势,效果和场景。

RealityKit为开发人员提供了生成3D内容,动画和视觉效果的能力。它能够适应物理照明条件并铸造阴影。

浮动窗户可以放置在任何地方

Arkit可以通过诸如平面估算和场景重建之类的内容来帮助应用程序了解一个人的周围环境。这使应用程序能够了解物理墙壁或地板在哪里。

但是,使用ARKIT构建的应用不会自动以3D渲染。实际上,如果在Visionos中运行了为iPhone构建的AR应用程序,它将显示为2D平面,显示内容,就好像它在iPhone上一样。

甚至图标都可以在Visionos中获得2.5D处理

开发人员将不得不从3D内容的ResealyKit开始。因此,不,您将不会在客厅里捕捉口袋妖怪,至少在任天堂和Niantic专门为此开发应用程序之前,至少直到为此开发一个应用。

请注意,苹果已避免在其空间计算平台上使用整个行业术语。 2D应用程序称为“ Windows”,3D对象称为“卷”,完整的环境称为“空间”,代替诸如AR对象或VR经验之类的术语。

苹果智能

Apple Vision Pro可以使用Visionos 2.4访问Apple Intelligence。 iPhone,iPad和Mac上可用的每个公共功能都在单个版本中登上了耳机。

Apple Vision Pro获得苹果智能

访问写作工具在任何地方都有文本输入,使用图像播放图像制作图像,用genmoji制作新的表情符号,汇总消息并获得优先级通知。截至Beta运行时,唯一似乎无法使用的功能是通过Siri访问Chatgpt。

Apple的AI模型在设备上运行,从不使用用户数据进行训练。如果需要将某些东西发送到Apple的私有云计算服务器,则它将获得与设备请求相同的隐私和安全保护。

一个新的应用程序意图系统将使Apple Intelligence变得更加个人化和上下文已延迟到2025年晚些时候。直到Visionos 3版本发布,它可能不会出现。

Visionos发布及其未来

空间计算是Apple的新领域,产品和软件需要花费时间才能成熟。 Apple Vision Pro只是2024年的开始,其标准的Apple Vision模式预计在2026年以较低的价格和最终的AR眼镜。

苹果于2024年2月2日与操作系统Visionos一起发布了Apple Vision Pro。