Audio2Face-3D：面向数字化身的音频驱动逼真面部动画
Audio2Face-3D: Audio-driven Realistic Facial Animation For Digital Avatars
AI总结：
本文介绍NVIDIA Audio2Face-3D系统，涵盖数据采集、网络架构、重定向与评估等关键技术，并通过开源网络、SDK和数据集支持游戏角色及数字化身的实时逼真面部动画创作。
摘要：
音频驱动的面部动画为数字化身动画提供了一种有效的解决方案。在本文中，我们详细介绍了NVIDIA Audio2Face-3D的技术方面，包括数据采集、网络架构、重定向方法、评估指标以及应用案例。Audio2Face-3D系统支持人类用户与交互式化身之间的实时交互，从而促进游戏角色的面部动画创作。为了帮助数字化身创作者和游戏开发者生成逼真的面部动画，我们已将Audio2Face-3D网络、SDK、训练框架和示例数据集开源。
英文摘要：
Audio-driven facial animation presents an effective solution for animating digital avatars. In this paper, we detail the technical aspects of NVIDIA Audio2Face-3D, including data acquisition, network architecture, retargeting methodology, evaluation metrics, and use cases. Audio2Face-3D system enables real-time interaction between human users and interactive avatars, facilitating facial animation authoring for game characters. To assist digital avatar creators and game developers in generating realistic facial animations, we have open-sourced Audio2Face-3D networks, SDK, training framework, and example dataset.
机构、总结、中文摘要均由AI分析而来，可能存在错误，请以论文正文为准。
