发布时间:2023-06-06 16:01 原文链接: “进入空间计算时代”:苹果发布MR头显靠手眼操控

“你可以在虚拟空间与数字内容互动,就像在物理空间里一样。你可以用最自然、最直观的工具来控制Vision Pro,即眼睛、手和声音。操控和观看不再受显示屏的限制,周围的环境变成了一个无限的画布,你可以在任何地方使用应用程序。”

“该头显首先是将苹果生态曾经有的内容用虚拟现实的方式实现一遍。”

当地时间6月5日,苹果2023年全球开发者大会(WWDC)“码出新宇宙”正式拉开帷幕,外界期待已久的混合现实(MR)头显首次亮相,这是苹果的第一款头显设备,也是苹果公司首次涉足该领域。这还是苹果时隔多年后发布的首个新品类产品。

直到大会后半段,苹果公司首席执行官蒂姆·库克(Tim Cook)才提到“还有一件事(One More Thing)”,带来了让业界振奋的内容:MR头显的发布。与此前披露的名称“Reality Pro”不同,该款头显被命名为“Apple Vision Pro”,采用双芯片设计,并搭载了全新的VisionOS操作系统。售价为3499美元。

Vision Pro售价为3499美元,折合人民币25000元左右。

“你可以在虚拟空间与数字内容互动,就像在物理空间里一样。你可以用最自然、最直观的工具来控制Vision Pro,即眼睛、手和声音。操控和观看不再受显示屏的限制,周围的环境变成了一个无限的画布,你可以在任何地方使用应用程序。”库克在发布会上表示,Vision Pro将开启“从未见过的全新体验”。

头显的一大亮点是没有配备任何操控器,用户可根据视线选择App,使用不同的手势实现滑动、选择、切换等操作,并使用语音通过Siri控制设备。大会上以“好似意念控制”来描述一系列的操控功能。

对于相关App,苹果也为自身的“全家桶”软件进行了新的设计,以适配虚拟空间的操作方式。Unity中国XR产品技术总监李鹏鹏向澎湃科技(www.thepaper.cn)表示:“该头显首先是将苹果生态曾经有的内容用虚拟现实的方式实现一遍。”Unity也成为本次大会上苹果公布的登录VisionOS的原生合作方。

YVR首席执行官陈明此前告诉澎湃科技:“若苹果入场MR领域,将是一个振奋人心的消息。”多年以来,VR(虚拟现实)、AR(增强现实)和XR(扩展现实)圈一直在等待一个“改变游戏”的玩家入场,使其应用走入大众生活。苹果曾变革了各种类别的数码产品,包括个人电脑、数字播放器、手机、平板电脑、手表和耳机,因此被寄予了再一次改变世界的厚望。

至少库克希望如此:“正如Mac将我们带入个人计算时代,iPhone将我们带入移动计算时代,Apple Vision Pro将我们带入空间计算时代。”

无缝衔接虚拟与现实

这款头显将虚拟空间和现实空间的融合作为重点,苹果在头显的内外部都进行了新的设计。外部,产品搭载有“Eyesight”功能,在Vision Pro外部配备一块OLED屏幕,以保证使用者在佩戴后,头显可以实时映射出使用者的眼部,以呈现“透视感”。而从使用者视角出发,头显的内部环境在多个摄像头的帮助下,可以实时显示外部情况,从演示来看,各类App可以悬浮在用户的房间内以便随时操控。

头显的各类新功能都像是在为模糊现实与虚拟而服务,“Eyesight”功能在用户进行沉浸体验时会关闭,虚拟空间内部也会一定程度上屏蔽外部的环境信息,而一旦附近有人靠近,则会在虚拟空间内立刻显示现实情景,方便使用者与现实世界中的人互动。

“Eyesight”功能可透过头显显示用户的眼睛。

Vision Pro在“让App以物理世界的方式般移动”上也进行了设计。“App可以自由地填充你周围的空间。以任何位置、任何尺寸显示在你的房间里。”会上介绍,“你可以把应用放在你想放的任何地方。这感觉很自然,就像移动真实的物体,启动新的应用程序不会占用现有应用程序的空间,只会占据周围的一个新空间。看到你最喜欢的应用程序和体验就在你身边,这真的是一件非同寻常的事情。”在展示私人影院相关功能时,这一体验相当突出,100寸巨幕配合模拟显示的影院,极大拓展了空间感。

用户可以用手势操作虚拟空间的App,并放置在空间中的任意位置。

使用者可以随时观测外部环境这一点,在使用各类Vision Pro功能时也有所体现。发布会的演示中,用户可以一边用手势操作虚拟空间的App,一边操作现实空间里的Mac电脑。有业内人士表示,该功能或更接近增强现实(AR)的概念。

用户还可以在App中接收3D文件,只需用手指轻轻一“拉”,就可以将3D模型拖拽至新的空间;在沉浸式体验时,头显还可以同时降低现实环境的亮度,增加沉浸感。此外,本产品也是苹果首款3D相机,不仅可以观看3D内容,也可以进行拍摄。

功能强大但续航堪忧

为了配套头显,苹果还公布了全新的操作系统“VisionOS”,苹果称其为“专为空间计算设计的操作系统”,可以与IPhone、iPad等设备实时同步。从发布演示来看,VisionOS依旧保持苹果一贯的设计语言,苹果称该系统“与MaOS和iPadOS类似,且建立在几十年的工程创新的基础上”。

操作系统“VisionOS”与苹果此前的操作系统风格类似。

硬件方面,Vision Pro采用双芯片设计,苹果开发了全新的R1芯片,为专用图像信号处理器芯片,用于处理来自12个摄像头、5个传感器、6个麦克风捕捉到的图像,还原周围环境。另一个则是此前已搭载多款苹果产品的M2芯片,负责计算。凭借这两枚芯片以及独立的操作系统,该设备可独立完成运算,不需要搭配iPhone使用,还可直接下载用户所需内容,包括iCloud数据。李鹏鹏表示,从搭载M2芯片来看,本产品的算力相当够用。

Vision Pro采用双芯片设计,搭载苹果自研的R1芯片和M2芯片。

外观上,Vision Pro正面是一整块曲面玻璃,服务于多个传感器。苹果还为Vision Pro设计了一个类似Apple Watch的实体旋钮,并搭配铝合金外框和织物头带。头带采用磁吸式设计方便随时拆卸,适配不同用户的头部尺寸。还考虑到了近视人士,近视镜片也可以磁吸的方式搭载。

苹果称该产品的显示功能同样强大,搭载两块2300万像素的Micro OLED屏幕,单眼像素超过4K,支持完全的4K渲染。但各类强大功能的代价或许正是续航问题。与市面上其他头显产品不同的是,Vision Pro采用外接电池供电减轻头部重量,虽然电池体积较小,可轻松放入口袋,但续航仅为两个小时。

Vision Pro搭载两块2300万像素的Micro OLED屏幕。

此外,该设备的解锁方式采用虹膜扫描,基于被称作“Optic ID”的安全系统,可与苹果商店购买和密码自动填写等功能无缝配合,此系统中,用户的输入将被隔离到一个单独的后台进程中,应用程序和网站无法获知相关信息。搭载了多个传感器的Vision Pro还可通过神经网络技术为用户扫描建成虚拟化身,通过动态匹配来进行面部增强模拟用户的各种表情、动作,以实现实时会议、聊天等功能。

内容生态或是未来

大会上,苹果表示与迪士尼就头显设备内容构建合作伙伴关系。迪士尼首席执行官鲍勃·艾格(Bob Iger)还分享了自己使用该设备的体验:“我们认为不可能的事,突然变得可能了。”并表示迪士尼将基于该MR头显打造深度个人体验,拉近粉丝与角色的距离。“Disney+”服务也将同步上线。

迪士尼首席执行官鲍勃·艾格(Bob Iger)出席Vision Pro发布现场。

除拓展内容生态外,苹果也为开发者带来了MR设备的相关开发服务:“我们的开发工具是在视觉专业的基础上构建的。开发人员可以使用熟悉的工具和框架,如X Code、Swift UI、Reality Kit,它们是为Vision Pro制作的新的应用程序工具包。为了简化空间应用的3D内容准备工作,我们还开发了Reality Composer Pro,它可以轻松地将复杂的场景与逼真的物体组合在一起。”

苹果表示,这意味着成千上万的iPad和iPhone应用程序将在VisionPro上发布,“用户可以在MR的虚拟大屏幕上使用Adobe等应用程序,且只需眼睛和手就可以轻松控制。”苹果还宣布与Unity进行合作,将更多App带入至其全新的“MR应用商店”,且基于Unity的游戏和应用程序可以完美适配VisionOS的功能,如高分辨率渲染和原生手势等。

对此,李鹏鹏向澎湃科技表示,从发布会来看,无论是从硬件本身的设计、算力、分辨率等,还是如发布会视频中所展示的一样与Vision Pro与工作场景的结合,苹果的Vision Pro都很惊艳。


相关文章

专家学者研讨人工智能如何赋能新型工业化

9月24日,由湘江实验室、湖南工商大学共同承办的2024世界计算大会“人工智能赋能新型工业化”主题研讨会在长沙举行。中国工程院院士陈晓红、刘永坚、杨长风,中国科学院院士王怀民等学者专家与会。活动现场。......

开创“寒武纪”

回忆起和弟弟陈天石——如今的中科寒武纪科技股份有限公司(以下简称寒武纪公司)董事长兼总经理一起钻研深度学习处理器芯片的岁月,中国科学院计算技术研究所(以下简称计算所)副所长、处理器芯片全国重点实验室主......

主权级大模型创新联合体入驻“中关村壹号”

近日,“2024中国算力生态研讨会暨中关村壹号——主权级大模型创新联合体入驻启动仪式主权级大模型生态1.0发布会”在中关村壹号实验室召开。会议期间,中国智能计算产业联盟与中关村壹号实验室达成战略合作,......

新技术实现全方位DNA数据存储和计算功能

美国科学家展示了一种利用DNA全方位实现数据存储和计算的技术,即重复存储、检索、计算、擦除或重写数据,而以前的DNA技术只能完成其中部分任务。相关论文22日发表于《自然·纳米技术》杂志。虽然DNA数据......

“罗盘”复杂网络计算平台完成计算任务超1000个

中新网合肥7月15日电(张俊宁珊伊浩涵)记者15日从合肥综合性国家科学中心数据空间研究院(以下简称“数空院”)获悉,“罗盘”复杂网络计算平台自发布以来,已吸引近千名科研人员注册使用,累计完成超过100......

我国科学家首次实现超越经典计算机的超冷原子量子模拟器

探明高温超导的机理,进而研制出性能强大的新材料,是现代物理学的重大课题。近期,中国科学技术大学潘建伟、陈宇翱、姚星灿、邓友金等人成功构建求解费米子哈伯德模型的超冷原子量子模拟器,以超越经典计算机的模拟......

英特尔推出光学计算互连芯粒,提高带宽降低功耗

·英特尔OCI芯粒可在最长100米的光纤上单向支持64个32Gbps通道,有助于实现可扩展的CPU和GPU集群连接。不过,由于传输延迟,实际应用中距离或仅限几十米。该芯粒尚处于技术原型阶段。英特尔OC......

中国空间站第六批空间科学实验样品交付科学家

2024年4月30日17时46分,中国空间站第六批空间科学实验样品随神舟十七号飞船顺利返回。本次下行返回的科学实验样品涉及23项科学实验项目,包括人成骨细胞、骨髓间充质干细胞、蛋白质晶体、生命有机分子......

“大模型时代的创业生态“研讨会在深举办

人工智能技术的突飞猛进,不仅对产业、经济和社会产生重大影响,更影响国际关系的竞争格局,甚至对社会治理提出新的挑战。4月12日,“大模型时代的创业生态”研讨会在深圳前海举办。腾讯集团副总裁、腾讯研究院院......

构建新质生产力!中科曙光提出“立体计算”

4月2日,中科曙光“立体计算湖南行”活动在长沙举办。面对“加快发展新质生产力”的新要求,中科曙光提出“立体计算”新思路,旨在打造一种全新的计算体系构建与运营模式。中科曙光“立体计算湖南行”活动在长沙举......