Meta将在下周的GDC上展示其强大的新型混合现实API

2025-03-11

在即将于下周举行的GDC（游戏开发者大会）上，VR工作室将首次展示Meta全新Passthrough API的可能性。

游戏开发者大会（GDC）将于3月17日至25日在旧金山举行。Meta将在此次大会上设立超过十二场会议和活动。

在一个名为“融合现实，倍增奇迹：混合现实开发专家指导”的活动中，Meta将向开发者介绍Passthrough API。这个新的API支持通过passthrough相机馈送来“实时使用定制化的计算机视觉技术”在游戏中部署。

Meta承诺展示“已经利用最新Passthrough Camera API将其应用程序提升到新水平的开发者的真实案例。看看他们如何使用这一强大工具创建模糊现实与幻想之间界限的无缝且互动的MR体验。”

此外，Meta还将提供“一些即将推出的激动人心的功能路线图的独家预览，这些新功能将彻底改变MR开发。探索这些新特性如何使创建令人惊叹且引人入胜的MR体验变得更加容易。”

该活动定于2025年3月18日举行，希望它能与Passthrough API的全面可用性公告同步发布。

目前，混合现实应用只能访问关于物理环境的抽象数据，包括房间的粗略3D网格和代表单个家具的方块。

于2024年9月宣布的Passthrough API，将首次允许混合现实应用访问passthrough相机馈送。这将使应用能够更好地识别、分析并响应其环境和单个物体——这是高级混合现实的关键。

在一篇提前发布的支持文章中（由Luna首先发现），Meta举例说明了应用如何从相机访问中受益：

物体识别：开发者可以创建识别并使用真实环境中特定物体的应用程序。例如，一个结合实体棋盘或棋子的数字棋类游戏。
位置识别：开发者可以创建根据相机馈送显示的位置不同而有所响应的体验。例如，室内或室外，著名地标处，或特定类型的房间内。
其他机器学习功能：开发者能够在实时相机馈送的数据上运行自定义的机器学习模型。这可用于重新纹理/着色、不戴头显参与的游戏、人物/动物检测或任何数量的定制工业/培训用例。

Passthrough API计划于2025年初推出。Reality Labs负责人Andrew Bosworth一个月前表示，这一时间表仍然有效，并且一些开发者已经获得了API的访问权限并正在对其进行实验。因此，我们有望在下周看到这些实验的成果。