2604.15086
2026-08-14
cs.MM
cs.CV
cs.SD
版本更新
ControlFoley: Unified and Controllable Video-to-Audio Generation with Cross-Modal Conflict Handling
ControlFoley: 一种统一且可控的视频到音频生成方法,具有跨模态冲突处理
Jianxuan Yang, Xinyue Guo, Zhi Cheng, Kai Wang, Lipan Zhang, Jinjie Hu, Qiang Ji, Yihua Cao, Yihao Meng, Zhaoyue Cui, Mengmei Liu, Meng Meng, Jian Luan
机构
*
MiLM Plus, Xiaomi Inc.(小米MiLM Plus)
;
MiLM Plus, Xiaomi Inc. Wuhan University(小米MiLM Plus 武汉大学)
;
Wuhan University(武汉大学)
AI总结
ControlFoley通过联合视觉编码和时域-音域解耦提升视频到音频生成的可控性与同步性,在多种任务中表现优异。