技术

Meta和慕尼黑工业大学开发了一种新方法,仅需四张智能手机照片就能创建一个可动画化的3D虚拟形象。

  • 2025-03-04
  • Meta和慕尼黑工业大学开发了一种新方法,仅需四张智能手机照片就能创建一个可动画化的3D虚拟形象。

    这个名为Avat3r的系统可以在几分钟内将这些快照转化为高质量的3D头部模型。以往,制作高精度的数字替身需要昂贵的专业设备、多台摄像机以及强大的计算能力。Avat3r通过大幅减少硬件需求和处理时间,让这一过程变得更加普及和便捷。

    关键技术在于使大型重建模型(LRMs)变得可动画化。这些模型通过大量的多视角视频数据集学习人类头部的全面3D表示。为了提高重建质量,Avat3r结合了DUSt3R的位置图与专门为人类表示设计的基础模型Sapiens的通用特征图。

    该系统具有很高的稳定性,能够应对常见的用户操作失误。由于训练涵盖了各种面部表情,它能够很好地处理拍摄过程中可能出现的轻微移动或从视频中提取帧等不一致输入情况,从而确保生成的3D虚拟形象依然高质量且准确。

    编解码虚拟形象是否越来越近?

    这项发展符合Meta对于逼真编解码虚拟形象的更广泛愿景,这项技术他们已经研究多年。最近的招聘信息表明,他们在显著加快这方面的努力。

    公司目前正在招募具备用户界面设计专长的iOS开发者,为iPhone和iPad应用提供工具支持。这暗示着可能会开发一款消费者应用程序,引导用户完成虚拟形象扫描流程,并通过未来的Quest头显实现XR通信。

    VR爱好者Luna在Quest固件中发现了关于编解码虚拟形象实现的字符串,进一步增加了这一理论的可信度。然而,具体的时间表和兼容设备仍不清楚。目前,只有Meta Quest Pro支持面部和眼部追踪——其他设备如Quest 3则需要使用语音等替代输入方式来近似模拟面部表情。

    发展前景

    Avat3r的发展代表着迈向让普通用户也能使用逼真的数字虚拟形象的又一步,尽管我们还需拭目以待Meta如何将这项技术整合到他们的消费产品中。

    共 0 条评分
  • 热度
  • 最新
  • 最早
  • 没有更多啦

    VR52

    VR52网成立于2015年,平台提供VR头显、AR眼镜、配件外设、厂商、测评、行业资讯、游戏与应用、展会活动等。

    热门VR眼镜

    热门资讯

    标签

    头显眼镜对比
    清除所有