Whisfusion: Parallel ASR Decoding with Masked Diffusion
Whisfusion: 基于掩码扩散的并行ASR解码
机构 * Seoul National University(首尔国立大学) ; Soongsil University(顺天大学) ; NVIDIA Corporation(英伟达公司)
专题命中 扩散模型 :diffusion(title,abstract)
AI总结 提出Whisfusion,在冻结的Whisper音频嵌入上训练专用掩码扩散解码器,通过并行扩散解码实现非自回归ASR,在多种语言基准上超越Whisper-large-v3,速度提升4-5倍。
Comments 16 pages, 3 figures