arXiv ID:
2606.30145
arXiv 提交日期: 2026-06-29
FacePlex:面向全双工对话式虚拟人的语音与面部动作联合生成 / FacePlex: Full-Duplex Joint Speech-Facial Motion Generation for Conversational Avatars
1️⃣ 一句话总结
本文提出了FacePlex,一种能在实时对话中同步生成语音和面部动作的流式框架,通过滚动流匹配和滚动交叉注意力机制,首次实现了全双工模式下语音与面部动画的联合生成,且唇形同步效果和动作逼真度优于传统仅依赖音频驱动的方法。