MR混合现实需要哪些变化才能真正令人惊叹？

您认为 Meta Quest 缺少哪些混合现实功能，并且这些功能非常有用？

Meta Quest 3是第一款让大众能够负担得起混合现实的头戴设备，而随着更便宜的Meta Quest 3S 的推出，更多的人将能够首次体验混合现实。

请记住，这两款设备都是第一代混合现实耳机，因此从技术上讲它们仍然非常有限。一些混合现实功能将随着时间的推移通过软件更新得到改进，而其他功能则需要更好的硬件。

目前关于Meta Quest 4在改进混合现实功能方面可能带来什么的信息很少，但以下段落将让您大致了解这一旅程的发展方向。适用于 Meta Quest 和混合现实耳机。

混合现实 2.0 的发展之路比你想象的更加缓慢
混合现实的成功取决于其映射物理现实以及查看和分类其中对象的能力。它对世界的理解越深入，就越能以有意义的方式增强世界或将其与数字元素混合。

Meta Quest 3 对房间的了解非常有限。使用空间设置功能时，传感器会非常粗略地扫描环境，并且只拍摄快照。如果移动了一件家具，就必须再次扫描房间，这非常麻烦。

除了不完善的地形知识外，Meta Quest 还缺少很多语义知识。它可以区分门、窗户和桌子，但无法进行更深入的分析。

将混合现实提升到一个新的水平需要结合更强大的传感器、后台实时 3D 扫描和更出色的物体识别。换句话说，这需要硬件和软件共同进步。

混合现实将在许多方面受益于这些技术进步。人们将不再需要划定边界和扫描房间，在玩完全沉浸式的游戏时甚至会感到更安全。模拟和数字现实将更加紧密地融合，而数字对象将真实地被物理对象遮挡。而且，日常生活中将出现更多实用的混合现实应用。

下一步
在此背景下，混合现实应用的直通摄像头访问被认为是混合现实的真正游戏规则改变者。目前，混合现实应用只能访问抽象的环境数据，例如房间的 3D 网格和代表单个对象的边界框。这是出于隐私方面的考虑。通过访问直通摄像头，混合现实应用可以更好地识别环境和单个对象并将它们集成到体验中，从而实现更具沉浸感和实用性的应用程序。

左图：透过透视摄像头看到的客厅图像。右图：混合现实应用可用的同一环境的 3D 网格。

在最近的 Meta Connect 上，Meta首次宣布了一项允许应用程序访问相机的新 API，尽管目前尚不清楚这项权限将发挥多大作用。预计 Meta 将谨慎行事。

另一个值得期待的进步领域当然是直通质量。分辨率、失真校正、光敏性和延迟方面还有很大的改进空间。

正如您所见，混合现实仍处于起步阶段，未来几年该技术的发展将会令人兴奋。