Orion上手体验
(中国AI网 2024年09月26日)Meta已经展示了备受期待的AR眼镜Orion,而The Verge的亚历克斯·希斯(Alex Heath)刚刚分享了自己的上手体验:
它们看起来几乎就像一副普通的眼镜。
当我走进Meta位于加州门洛帕克总部的会议室时,首先注意到的就是这一点。摆在我面前桌子的这副黑色镜框代表了首席执行官马克·扎克伯格对智能手机之后的计算平台所押下的数十亿美元赌注。
这款眼镜名为Orion,是Meta的第一副AR眼镜。他们本来打算对外出售,但由于它们太复杂,成本太高,目前无法生产,所以决定不予出售。
当我把眼镜戴上时,我能感觉到房间里员工的紧张。多年来,扎克伯格一直在宣传能够将数字信息叠加在现实世界的眼镜,并称其为有朝一日将取代智能手机的“圣杯”设备。
现在,是时候看看他所承诺的未来了。
从最基本的层面而言,Orion是一款你戴在脸上的计算机。长期以来,所有面部电脑的挑战都在于它们的显示器:笨重、发热、分辨率低,或者提供的视场非常小。
Orion在这方面是向前迈进了一步。这款眼镜由Meta定制设计,镜框内有微型LED投影仪,通过镜片的波导将图像投射到你的眼睛前面。镜片是由碳化硅制成,不是塑料或玻璃。Meta之所以选择碳化硅,是因为碳化硅的耐用性、重量轻和超高折射率,这使得从投影仪射进来的光可以填满更多的视场。
扎克伯格认为,人们希望使用Orion这样的AR眼镜有两个主要目的:通过叠加在现实世界的数字信息相互交流,以及与人工智能互动。
他告诉我:“我曾认为,全息图会在人工智能出现之前成为可能。这是一次有趣的转折,在全息图真正能够以可承受的价格大规模生产之前,人工智能这部分已经成为可能。”
Orion采用了已经存在于Ray-Ban Meta智能眼镜中的生成式人工智能功能,并在你所看到的内容之上添加视觉元素。在上演示中,我使用Orion中的Meta AI来识别摆在桌面的配料并创造出奶昔配方。它能够在数秒钟内正确地将标签放在配料之上,并在配料上方的浮动窗口中生成配方说明。
为了演示两个人一起佩戴Orion是如何与相同的全息图交互,我和扎克伯格玩了一个3D版乒乓球游戏。我们扫描二维码来配对眼镜,然后用手部追踪来控制球拍。过程非常顺利,我注意到游戏中几乎没有延迟。
遗憾的是,扎克伯格打败了我。
我同时使用了专为这款眼镜开发的Messenger,用iPhone与The Verge的尼莱·帕特尔(Nilay Patel)进行了第一次视频通话。他看不到我(Meta计划最终展示一个可以追踪佩戴者面部动作的Avatar),但我可以通过漂浮在我面前的2D窗口清楚地看到和听到他的声音。为了说明有一天Avatar聊天是如何工作的,Meta的一名员工给我打了电话,并以卡通形象的全身化身出现在房间的另一头。
这里我要说明一下:房间里的员工大多引导我完成他们想让我尝试的内容,但我确实设法偏离了指示,以确保我所看到的不是完全操控模拟。
Orion不是海市蜃楼的远景,但它不是产品,而介于两者之间。
Orion的硬件由三部分组成:眼镜本身;用于控制它们的“神经腕带”;以及一个无线计算包,类似于手机的大型电池组。这种眼镜不需要手机或笔记本电脑就能工作,但如果与无线计算包的距离超过12英尺左右,它们就会变得毫无用处。
Orion拥有70度的视场,比我迄今为止尝试过的任何一副AR眼镜都要宽。根据我的经验,较窄的视场会让AR感觉很小,没那么身临其境。在Orion中,我必须在虚拟对象的边缘开始消失之前非常接近它们。
这款眼镜重98克,比普通眼镜重得多,但远低于Meta Quest或Apple Vision Pro等混合现实头显。框架是由镁制成的,镁比铝轻,用于均匀分配热量。
框架中嵌入了7个摄像头,用于将虚拟对象固定在真实空间中,辅助眼和手追踪,并允许Meta的人工智能助手理解你在看什么。你可以打开一扇虚拟窗户,转过头走开,只要你戴着眼镜,当你回来的时候,它依然会在那里。
考虑到形状参数,Orion的显示质量出奇地好。视频通话看起来足够清晰,我阅读在几英尺外的网页文本没有问题。不过,我可不想戴着它们看《阿凡达》,反正我看不完,因为电池只能维持两个小时左右。
你可以通过眼动追踪、手部追踪、声音和神经腕带的组合来控制这款眼镜。神经腕带有点像没有屏幕的Fitbit。它由高性能纺织材料制成,并使用肌电图EMG来解释与手势相关的神经信号。在几毫秒内,信号会转换成输入。它不是在阅读你的思维,但感觉有点像。
腕带可以识别几种手势:拇指捏食指以进行选择;捏中指和拇指会调用或隐藏应用启动器;用拇指做类似抛硬币的手势,这样你就可以向上或向下滚动。手环的触觉反馈让你知道什么时候系统识别了一个手势。
在Orion的界面中,你的眼睛充当指针,而你的手指捏在一起充当点击。总的来说,使用Orion比用手控制Quest或Apple Vision Pro更加精确。我轻松地完成了一款类似于《太空入侵者》的游戏。其中,我通过倾斜头部移动飞船,把我的手指捏在一起以发射激光。由于手环不必对眼镜的传感器和摄像头可见,所以我可以用手放在背后或夹克口袋里来控制它们。
这款神经腕带感觉比Orion本身更精致,这可能是因为Meta很快就会开始销售这款腕带。尽管这家公司不愿发表评论,但我的消息人士告诉我,Meta计划最早在明年推出一款带有更小抬头显示器的眼镜,并配以腕带。设备代号为Hypernova。
Orion本应是一款可以买到的产品。早在2018年,Meta的目标是到今天开始出货几万副。但在2022年,在整个集团都在勒紧裤腰带的时候,扎克伯格呼吁搁置它的发布。
这个决定非常明显,因为Orion的硬件中有很多部分都没有使用,从可以捕获视频但实际没有启用的前置摄像头到计算包中禁用的GPS。它同时有一个内置的调制解调器。Meta可穿戴设备副总裁亚历克斯·希梅尔打趣道:“我们每个月可以节省20美元。”
正如Meta的高管所述,搁置Orion的决定主要是由于设备的制造成本太高,每台设备的成本约为1万美元。大部分的成本是由于可靠地制造碳化硅透镜的难度和成本。在开始设计Orion时,Meta希望这种材料能在整个行业中得到更广泛的应用,从而降低成本,但这并没有发生。
所以,Meta转而生产了大约1000副Orion眼镜,并将其用于内部开发和外部演示。
扎克伯格在谈到这款设备时说道:“结果可能比我们预期要好得多,但我们并没有做到我们想要的一切。在我们把它作为产品推出市场之前,我们希望它能更小一点,更亮一点,分辨率更高一点,价格更便宜。”
现在,扎克伯格表示希望第二代Orion能在几年内成为第一代消费者版本。高管们对第二代设备的成本守口如瓶,但预计价格将与今天的手机和笔记本电脑相当。
Orion的产品主管拉胡尔·普拉萨德告诉我:“获得更大的视场是一个科学问题。下一阶段则是实现更高分辨率、更高亮度和更低成本的工程问题。”
如果这种透镜不是由碳化硅制成,视场不会这么大,尽管分辨率会更高。如果一切按计划进行,框架的厚度将是现在Orion眼镜的一半。
扎克伯格表示:“我认为我们渴望做出看起来非常好的产品。它必须足够好,这样你才会想把它戴在脸上。”
在Meta看来,实现成熟的AR眼镜将是一个渐进的过程,而不是突然之间。在光谱的一端,将会有人工智能驱动的无屏智能眼镜,比如Ray-Ban Meta。然后,将出现带有小型显示屏的眼镜,比如即将推出的Hypernova。Orion则代表了终极状态:功能齐全的AR眼镜,拥有足够的计算能力,可以让你把智能手机留在家里。
长期以来,扎克伯格一直尝试摆脱对智能手机的依赖。他表示:“这在很大程度上要追溯到我们在移动时代的关系。手机和智能手机与Facebook和早期社交媒体几乎同时出现,所以我们没有真正在平台转型中发挥任何作用。”
实际上,这意味着在谷歌和苹果的掌控之下,这两家公司共同控制着人们访问Meta应用的移动应用商店。尤其是苹果,长期以来一直是扎克伯格的眼中钉。
但对于未来,Meta希望重新掌握自己的命运。