Meta AR眼镜Orion上手体验:佩戴舒适,手势追踪如 “读心术”
发布时间:2024-09-27 19:47 浏览量:18
作者 | Vendii、杨蕊伃
编辑 | 漠影
智东西9月26日消息,年度“MR圈春晚”Meta Connect 2024大会于今日凌晨1点15分拉开帷幕。在Quest 3S头显、Llama 3.2大模型、雷朋智能眼镜等新品介绍完之后,Meta CEO马克·扎克伯格现场开箱,拿出被Meta称作有史以来最先进的增强现实(AR)眼镜——Orion。
Orion拥有迄今为止最小AR眼镜中最大的视野,支持从多任务窗口、大屏幕娱乐到真人大小的人物全息图,所有数字内容都能与物理世界视野无缝融合。此外,Orion支持手势追踪、眼动追踪,基于手腕的神经接口可理解用户与设备交互的手势。
海外媒体第一时间在现场体验了Orion,他们表示,从使用的结果来看,Orion的视野不错,神经腕带的手势追踪非常灵活。
Orion的硬件由三部分组成:眼镜,一个用于控制眼镜的神经腕带(neural wristband),以及一个无线计算模块(compute puck)。
▲Orion的硬件由眼镜、神经腕带和无线计算模块三部分组成(图源:The Verge)
由于AR眼镜本身尺寸和功耗的限制,无法集成所有的高性能计算组件。因此,计算模块承担了大部分的计算工作,包括图形渲染、AI运算以及其他额外的机器感知计算等。计算模块负责为眼镜提供应用程序和图形用户界面的运行支持。
这款眼镜不需要手机或笔记本电脑就能工作,但如果它们与计算模块的距离超过约12英尺(约等于3.66米),就会变得毫无用处。
Orion眼镜机身配备了一整套传感器,这些传感器通常出现在体积更大的混合现实(MR)头显上。尽管配备了这些传感器,但Orion眼镜仅重98克,远轻于Meta的Quest和苹果的Vision Pro之类的MR头显。
此外,Orion眼镜机身总共配备了7个嵌入镜框的摄像头。眼镜机身内置了完备的眼动追踪摄像头,隐藏在镜片两侧。外部摄像头藏在框架顶部边缘。用于手部和房间追踪的侧摄像头则分布在眼镜的镜腿周围。
▲眼动追踪摄像头,隐藏在镜片两侧(图源:CNET)
眼镜机身还配备了扬声器、麦克风和Wi-Fi 6,它们通过专用协议连接到无线计算模块。
CNET的高级编辑Scott Stein分享道:“我看到过一个透明模型,展示了眼镜内部密布的技术组件,Meta巧妙地展示了它们是如何被紧密设计的。尽管眼镜体积较大,但它的重量仅为98克。我戴着它在脸上感觉很舒服。”
Orion的视场角是70度,这对于任何虚拟现实(VR)头显用户来说可能听起来比较小(VR设备的视场角通常在90度及以上)。
但实际上,大多数AR头显的视场角甚至比70度更窄。例如,Snap的新款Spectacles仅为46度。
Meta的眼镜将用户视野范围进一步扩大,尤其是在水平方向上。
“在我的视野中,显示屏是能看到截断处的,但它们在非常靠边的位置,以至于在我体验的过程中基本上看不见。”Scott Stein说,“这么大的视场角,我只在AR眼镜公司Lumus的镜片上见过一次,那是在今年早些时候的一个会议上体验的。”
Meta通过使用碳化硅镜片和微型LED投影仪,在较小的镜框中实现了较大的视野。根据Meta高级产品经理Rahul Prasad的说法,这些技术可以在较近的距离内提供更宽的视角。并且,通过衍射光波导将光线弯曲并分散到用户的视野中,就不会在镜片上产生过多的彩虹效应。
▲Orion透镜由碳化硅制成(图源:The Verge)
Scott Stein分享他的感受:“虽然这些眼镜看起来绝对不像日常用品,但有人戴上街的时候你也不会觉得太奇怪。对我来说,它们有点像超厚的艺术风格镜框。镜片看起来有更深的色调,但透过它们看外界的时候,视野非常清晰明亮。和Snap的Spectacles一样,我被告知它们可以自动调暗以获得更好的观看体验,但我没有机会亲自演示这一功能。”
Scott Stein谈道,这些AR眼镜在显示性能上的一个待改进之处是它们的分辨率。Meta眼镜普遍的PPD值为13。(PPD,Pixels Per Degree,每一度能看到的像素。)
Orion虽然没有Quest 3头显那么清晰(Quest 3的PPD值为25),但在应用程序、视频和游戏的视觉给用户的体验仍然不错。
“我还快速体验了另一个版本的Orion。它配备了更高分辨率的显示器,PPD值达到了26。我在上面我观看了一小段《侏罗纪公园》电影片段。”Scott Stein分享道。
Orion配上了一款别出心裁的神经腕带,它就像是一个迷你版的智能手环,只是少了显示屏。这个腕带使用肌电图(EMG)技术来检测用户的手势,从而实现对眼镜的控制。
▲神经腕带非常小巧(图源:CNET)
腕带内部的EMG传感器能够捕捉到皮肤表面的电脉冲,这些电脉冲是由大脑发出并通过神经传递到手腕和手部的肌肉信号,这种信号在几毫秒内就能被转换成眼镜的输入指令。虽然它并不是直接读取你的思想,但使用起来却给人一种它会读心术的感觉。
这种EMG传感器的处理完全在腕带内部完成,这意味着它不需要依赖外部的计算设备。并且,它能够提供全天候的电池续航。
Scott Stein在试戴过程中发现,与苹果的Vision Pro和Meta的Quest这些已经具备手势追踪功能的设备相比,Orion的腕带可以识别的手势更多。
▲Orion需要配合神经腕带使用(图源:CNET)
拇指捏食指是进行选择;捏中指和拇指会调用或隐藏应用启动器;用拇指做类似抛硬币的手势,这样你就可以向上或向下滚动。
Scott Stein说:“在实际使用中,我发现Orion的手势追踪要比苹果的Vision Pro更加灵活,我的手放在两侧就能完成操作。不过,在手势识别上有时候会出现一些小问题,比如我的捏合手势有时会被误解,这就需要我重新尝试。但是,其眼动追踪的效果非常出色,它允许我仅通过目光来浏览和导航。”
▲手腕上戴着神经腕带可以捕捉用户动作(图源:CNET)
The Verge的副主编Alex Heath也分享了他的体验感受:“在Orion的界面中,你的眼睛充当指针,而你的手指捏在一起充当点击。总的来说,使用Orion比用手控制Quest或Vision Pro更加精确。我轻松地完成了一款类似于《太空入侵者》的游戏。我通过倾斜头部移动飞船,把我的手指捏在一起以发射激光。”
“由于手环不必对眼镜的传感器和摄像头可见,我可以把手臂放在背后或者口袋里。”Alex Heath说道。
这个手势感应手环还能做什么呢?目前尚不清楚。但Meta的可穿戴技术主管Alex Himel已经向Scott Stein透露,EMG技术将被集成到Meta未来更多产品线中。
Orion通过在现实世界中显示全息图,让人感觉身临其境。这种技术不仅让数字内容看起来和现实世界融为一体,还带来了一种全新的交流和互动体验。
Scott Stein分享了他的使用感受:“我举起手,用拇指和中指捏住眼镜,打开应用程序菜单,就像Vision Pro一样,我可以用眼睛查看应用程序,然后用食指和拇指点击打开。我播放了一段YouTube视频,内容是Aaron Rodgers在对阵新英格兰爱国者队的比赛中的精彩一投。视频以窗口形式出现在我的视野中,我可以轻松地将其拖动至更接近眼睛的位置,这种视觉体验非常沉浸。”
除了看视频以外,Scott Stein还佩戴着Orion玩了星际战斗机游戏,“我用头控制飞船,用眼睛和手指抓住目标。”这种体验虽然在视觉上可能与之前的技术相似,但在Orion上玩起来更加流畅和直观。
▲Scott Stein佩戴Orion看视频、玩游戏(图源:CNET)
Scott Stein说,Orion允许用户与他人共同参与虚拟活动,例如一起打AR乒乓球。这种协作不仅限于游戏,也可以扩展到工作和学习等其他领域,让人们即使身处不同地点也能一起工作和学习。
扎克伯格在接受The Verge的采访时也谈道,Orion能让用户感觉与朋友们在一起,无论他们实际上在哪里,都像陪伴在身旁一样。
扎克伯格对Orion的期望远不止作为一款消费电子产品,他希望它能够代表一种全新的生活方式,成为人们日常中不可或缺的一部分。他说:“10年后的某一天,你醒来的时候,你甚至不需要带手机。”
不过,由于Orion重达98克,重量远超一般眼镜,再加上目前续航仅有2小时,同时,还需单独携带计算模块,这些都将限制用户把Orion作为一款可长期佩戴的产品使用。