vrcoast 
Meta 的 XR 部门 Reality Labs 研究人员的一个项目展示了一种通过增强现实与现实世界交互的方法。
在 XR 领域，我和他们一样经验丰富。我一直看到有趣的研究论文，但最终沿着可预测的道路又迈出了一步。我很少遇到一些我从未在概念上考虑过的事情。但现实实验室的这个新研究项目正是如此。
Meta Reality Labs Research 和杜伊斯堡-埃森大学的研究人员设计了一种使真实物体虚拟化的方法，以便可以与它们实时交互。该方法不仅将物体数字化，而且还无缝地擦除其真实的对应物，在现实世界和虚拟世界之间创造了一种令人费解的融合。下面的视频和示例比我单独使用文本更好地解释了这一点：
研究人员 Mohamed Kari、Reinhard Schütte 和 Raj Sodhi 将这一概念称为“场景响应”，并于去年年底在 ACM 用户界面软件和技术研讨会上发表了他们的研究成果。
正如作者所说，这种方法创造了一种“虚拟动作影响物理场景的视觉错觉”。
是什么让这如此有趣？我们都看过 AR 演示，其中虚拟物体似乎漂浮在您的房间中、附着在墙壁上，甚至走在物体“后面”。我们已经看到虚拟物体似乎遵循房间的物理原理，在桌子上滚动，然后在到达边缘时正确地掉落。
但是，将空间中的真实物体数字化，让用户对它们进行虚拟控制，同时将真实物体从原来所在的位置擦除，这是一个非常有趣的技巧。也许更强大的是场景中的虚拟角色似乎直接与现实世界中的物体交互。
我非常感谢作者甚至采取了下一步并展示了如何防止幻觉被打破。
让用户控制（显然是“真实的”）虚拟对象，但不允许他们足够接近以实际触摸该对象，意味着触觉反馈的期望不能被打破。另一个巧妙的细节是，只有当用户离得太近时，它们才会重新出现，从而防止用户撞到已从场景中删除的东西 。
作品中所展示的内容在视觉上并不完美，并且很大程度上是一个概念验证，需要依赖大量手动、特定于场景的工作才能实现。但随着计算机视觉和人工智能的快速进步，不难想象如何以自动且与场景无关的方式构建这样的系统，并且可能 非常 令人信服。
作者对这种 AR 错觉的实际应用有一些令人惊讶的创意，包括“为了健康，我们想象当用户伸手去接触一块不健康的巧克力棒时，它会变成一些不太吸引人的东西，比如蜘蛛。或者，巧克力棒长出腿，逃跑，在奔跑时变成香蕉，并在实体香蕉的位置重新实体化。”
因此，如果将来我们发现自己在寻找一块神奇的巧克力棒，结果发现当我们到达它时它变成了一根香蕉——我们就会知道该怪谁了。
