Orion真AR眼镜来了:重量轻,外观小,功能全,性能强,缺一不可!

  • 今天Connect 大会上,马克·扎克伯格推出了Orion——第一副真正 AR 眼镜(代号为 Project Nazare)。
  • Orion 拥有行业领先的视野、碳化硅透镜、复杂的波导、uLED 投影仪等,是我们迄今为止最先进、最精致的产品原型。
  • 现在,正在继续优化产品并降低成本,以推动可扩展的消费设备,这将彻底改变人们与世界互动的方式。

Meta推出了 Orion AR眼镜原型机,将这个梦想更接近现实,毋庸置疑这是有史以来最先进的 AR 眼镜。事实上,它可能是自智能手机以来生产的最具挑战性的消费电子设备。Orion 是现代计算几乎每个领域突破性发明的成果,这是过去十年在 Reality Labs 所做的工作的成果。它采用了全新的技术,包括有史以来组装的最先进的 AR 显示器和定制芯片,只需 MR头显的一小部分功率和重量,即可在一副眼镜上运行强大的 AR 体验。

Orion 的输入系统将语音、眼睛凝视和手部追踪与 EMG 腕带无缝结合,让您滑动、点击和滚动,同时将手臂舒适地放在身边,让您在与丰富的数字内容互动时,始终存在于世界上并与周围的人在一起。

Orion真AR眼镜来了:重量轻,外观小,功能全,性能强,缺一不可!

从今天开始,将向 Meta 员工和选定的外部受众开放 Orion 产品原型,以便我们的开发团队能够学习、迭代和构建我们的消费类 AR 眼镜产品线,我们计划在不久的将来开始发货。

Orion真AR眼镜来了:重量轻,外观小,功能全,性能强,缺一不可!

为什么选择 AR 眼镜?

AR 眼镜是下一代计算平台,主要有三个原因。

  1. 它们实现了不受智能手机屏幕限制的数字体验。借助大型全息显示器,您可以将物理世界用作画布,将 2D 和 3D 内容和体验放置在您想要的任何位置。
  2. 它们无缝集成情境化 AI,这些 AI 可以感知和理解您周围的世界,以便预测并主动满足您的需求。
  3. 它们重量轻,非常适合室内和室外使用,它们让人们可以看到彼此的真实面孔、真实眼睛和真实表情。

这就是我们行业一直在努力的方向:将可穿戴设备的便利性和即时性与大显示屏、多种输入和情境化 AI 相结合,以人们在日常生活中舒适佩戴的外形尺寸。

Orion真AR眼镜来了:重量轻,外观小,功能全,性能强,缺一不可!

紧凑的外形,复杂的挑战

多年来,我们一直面临着一个错误的选择——要么是虚拟和混合现实头戴式设备,以笨重的外形实现深度、身临其境的体验,要么是适合全天使用的眼镜,但由于缺乏大显示屏和相应的计算能力,因此无法提供丰富的视觉应用程序和体验。

但我们想要这一切,毫不妥协。多年来,我们一直在努力实现 VR 和 MR 头戴式设备提供的令人难以置信的空间体验,并将将这些体验所需的技术微型化,以将这些体验融入一副轻便时尚的眼镜中。确定外形规格、提供全息显示器、开发引人注目的 AR 体验以及创建新的人机交互 (HCI) 范式,并在一个有凝聚力的产品中完成所有这些工作,是我们行业面临的最困难的挑战之一。这太具有挑战性了,我们认为成功成功的机会不到 10%。

具有无与伦比的外形尺寸的开创性显示器

Orion 的视场约为 70 度,是迄今为止最小的 AR 眼镜尺寸中拥有最大的视野。该视野为 Orion 解锁了真正身临其境的用例,从多任务窗口和大屏幕娱乐到真人大小的人物全息图,所有数字内容都可以与您的物理世界视图无缝融合。

对于 Orion 来说,宽视野是确定目标。我们遇到了物理定律,必须以它们不会自然弯曲的方式弯曲光束,而且我们必须在以毫瓦为单位的功率包络中进行弯曲。

我们用碳化硅代替了玻璃制造镜片——这是 AR 眼镜的一种新应用。碳化硅非常轻,不会导致光学伪影或杂散光,并且具有高折射率——所有这些光学特性都是大视场的关键。波导本身具有非常错综复杂的纳米级 3D 结构,可以以必要的方式衍射或传播光线,以实现这种视野。投影仪是 uLED,这是一种新型显示技术,具有超小巧且极其节能的特点。

Orion 无疑是一副外观和触感俱佳的眼镜,配有透明镜片。与今天的 MR 头显或其他 AR 眼镜不同,您仍然可以看到彼此的真实眼睛和表情,因此您可以在场并与周围的人分享体验。需要数十项创新才能将工业设计简化为您每天佩戴舒适的现代眼镜外形。Orion 是小型化的壮举 — 组件封装到几分之一毫米。我们设法在框架边缘嵌入了 7 个微型摄像头和传感器。

我们必须将光学精度保持在人类头发粗细的十分之一。该系统可以检测到微小的运动(例如框架在各种室温下膨胀或收缩),然后以数字方式校正必要的光学对准,所有这些都在几毫秒内完成。我们用镁制成框架——与 F1 赛车和宇宙飞船中使用的材料相同——因为它重量轻但坚固,因此它可以保持光学元件对齐并有效地传导热量。

加热和冷却

一旦我们破解了显示器(没有双关语)并克服了物理问题,我们就必须应对真正强大的计算能力以及真正低功耗和散热需求的挑战。与今天的 MR 头显不同,您不能将风扇塞进一副眼镜中。所以我们必须发挥创意。许多用于冷却 Orion 的材料类似于 NASA 用于冷却外太空卫星的材料。

我们构建了高度专业化的定制芯片,该芯片非常节能,并针对我们的 AI、机器感知和图形算法进行了优化。我们在这些芯片中构建了多个定制芯片和数十个高度定制的硅 IP 模块。这让我们能够采用手部和眼动追踪以及同步定位和地图构建 (SLAM) 技术所需的算法,这些技术通常需要数百毫瓦的功率,从而产生相应的热量,并将其缩小到只有几十毫瓦。

是的,定制芯片在 Reality Labs 的产品开发中继续发挥着关键作用,尽管您可能已经在其他地方读到过。😎

轻松的肌电图

每个新的计算平台都会带来我们与设备交互方式的范式转变。鼠标的发明为当今主导我们世界的图形用户界面 (GUI) 铺平了道路,直到触摸屏的出现,智能手机才开始真正受到关注。同样的规则也适用于可穿戴设备。

多年来,我们一直在谈论我们在肌电图 (EMG) 方面的工作,因为我们相信 AR 眼镜的输入需要快速、方便、可靠、微妙且社会可接受。现在,这项工作已经准备好进入黄金时段。

Orion 的输入和交互系统将语音、眼睛凝视和手部追踪与 EMG 腕带无缝结合,让您轻松滑动、点击和滚动。

它的工作原理和感觉就像魔术一样。想象一下,只需用指尖轻按一下,就可以在晨跑时拍照,或者用几乎察觉不到的手部动作浏览菜单。我们的腕带将高性能织物与嵌入式 EMG 传感器相结合,可检测即使是最微小的肌肉运动产生的电信号。然后,设备上的 ML 处理器会解释这些 EMG 信号,以产生以无线方式传输到眼镜的输入事件。系统会适应您,因此随着时间的推移,它会变得更好、更有能力识别最微妙的手势。今天,我们将分享更多关于我们对外部研究的支持,这些研究的重点是扩大 EMG 腕带的公平性和可及性潜力

无线计算单元

真正的 AR 眼镜必须是无线的,而且它们也必须是小巧的。因此,我们为 Orion 构建了一个无线计算圆盘。它减轻了眼镜的一些负担,实现了更长的电池寿命和更好的外形尺寸和低延迟。

Orion真AR眼镜来了:重量轻,外观小,功能全,性能强,缺一不可!

眼镜运行所有手部追踪、眼动追踪、SLAM 和专门的 AR 世界锁定图形算法,而应用程序逻辑在冰球上运行,以保持眼镜尽可能轻巧紧凑。

该 Puck 具有双处理器,包括一个在 Meta 定制设计的处理器,它为低延迟图形渲染、AI 和一些额外的机器感知提供了必要的计算能力。

由于它小巧时尚,您可以舒适地将冰球扔进包或口袋里,然后去做自己的事情——没有任何附加条件。

AR 体验

当然,与任何硬件一样,它的好坏取决于你能用它做的事情。虽然现在还处于早期阶段,但 Orion 提供的体验让我们对未来的发展有了激动人心的一瞥。

Orion真AR眼镜来了:重量轻,外观小,功能全,性能强,缺一不可!

我们的智能助手 Meta AI 在 Orion 上运行。它了解您在物理世界中查看的内容,并可以帮助您进行有用的可视化。Orion 使用相同的 Llama 模型,该模型为当今在 Ray-Ban Meta 智能眼镜上运行的 AI 体验提供支持,并采用定制研究模型来展示未来可穿戴设备开发的潜在用例。

您可以随时随地进行免提视频通话,与朋友和家人实时联系,还可以在 WhatsApp 和 Messenger 上保持联系以查看和发送消息。无需拿出手机、解锁、找到合适的应用程序,并让您的朋友知道您晚饭要迟到了——您可以通过眼镜完成这一切。

Orion真AR眼镜来了:重量轻,外观小,功能全,性能强,缺一不可!

您可以与该国另一端的家人或沙发另一端的朋友一起玩共享的 AR 游戏。Orion 的大显示屏可让您通过多个窗口进行多任务处理,而无需随身携带笔记本电脑即可完成工作。

Orion 目前提供的体验将有助于我们未来消费类 AR 眼镜系列制定路线图。我们的团队将与开发者合作伙伴一起继续迭代和构建新的沉浸式社交体验,我们迫不及待地想分享接下来的内容。

有目的的产品原型

虽然 Orion 不会进入消费者手中,但不要误会:这不是一个研究原型。这是我们开发过的最精致的产品原型,它真正代表了可以运送给消费者的产品。我们决定首先专注于内部开发,而不是急于将其上架,这意味着我们可以继续快速构建并继续突破技术和体验的界限。

这意味着我们将更快地生产出更好的消费产品。

接下来会发生什么

长期以来,主流消费级 AR 眼镜一直存在两个主要障碍:以紧凑的眼镜外形提供大显示屏所需的技术突破,以及可以在这些眼镜上运行的有用且引人注目的 AR 体验的必要性。Orion 是一个巨大的里程碑,它首次在相当时尚的硬件上运行了真正的 AR 体验。

现在我们已经与全世界分享了 Orion,我们专注于以下几点:

  • 调整 AR 显示质量,使视觉效果更加清晰
  • 尽可能进行优化,使外形尺寸更小
  • 大规模建造,使其更实惠

在接下来的几年里,您可以期待看到我们的新设备,这些设备都是基于我们的研发努力。Orion 的许多创新已扩展到我们当前的消费产品以及我们未来的产品路线图。我们优化了一些空间感知算法,这些算法在 Meta Quest 3S 和 Orion 上运行。虽然眼睛凝视和微妙的手势输入系统最初是为 Orion 设计的,但我们计划在未来的产品中使用它。我们也在探索 EMG 腕带在未来消费产品中的应用。

Orion 不仅仅是一扇通往未来的窗口,它还展示了当今触手可及的非常真实的可能性。我们建立它是为了追求我们最擅长的事情:帮助人们建立联系。从 Ray-Ban Meta 眼镜到 Orion,我们已经看到了让人们在现实世界中保持更多存在和赋权所带来的好处,即使同时利用数字世界所提供的所有额外丰富性。

来源:meta

(0)
上一篇 2024年9月26日 下午12:40
下一篇 2024年9月27日 上午7:47

相关推荐

发表回复

登录后才能评论