DyaDiT: A Multi-Modal Diffusion Transformer for Socially Favorable Dyadic Gesture Generation
DyaDiT:一种多模态扩散变换器,用于生成社会有利的双人手势
机构 * Institute of Science Tokyo(东京科学大学) ; UNIST(蔚山科学技术院) ; Shanda AI Research Tokyo(盛大人工智能研究院东京) ; The University of Tokyo(东京大学)
专题命中 扩散模型 :diffusion(title,abstract);分类 cs.CV
AI总结 DyaDiT通过多模态扩散变换器生成适合社会互动的双人手势,利用双人音频信号和社交上下文令牌,融合双方信息并编码运动先验,实现更自然的交互。
Comments 13 pages, 9 figures