arXivDaily arXiv每日学术速递 周一至周五更新
arXiv 2406.10205eess.AS
收藏

AlignNet:学习数据集分数对齐函数以更好地训练语音质量估计器

AlignNet: Learning dataset score alignment functions to enable better training of speech quality estimators

Jaden Pieper, Stephen D. Voran

AI总结:

提出多数据集微调(MDF)和AlignNet两种互补方法,通过消除数据集分数不对齐问题,显著提升了无参考语音质量估计器在多数据集上的训练效果。

摘要:

我们开发了两个互补的进展,用于使用独立数据集训练无参考(NR)语音质量估计器。多数据集微调(MDF)先在单个数据集上预训练NR估计器,然后在多个数据集上同时进行微调,包括用于预训练的数据集。AlignNet使用AudioNet生成中间分数估计,然后使用Aligner将中间估计映射到适当的分数范围。AlignNet与AudioNet的选择无关,因此任何成功的NR语音质量估计器都可以受益于其Aligner。这两种方法可以串联使用,我们用两项研究证明它们优于当前解决方案:一项研究使用九个较小的数据集,另一项使用四个较大的数据集。AlignNet结合MDF优于其他解决方案,因为它高效且有效地消除了损害学习过程的不对齐问题,从而能够使用更多样化的大量数据进行成功训练。

英文摘要:

We develop two complementary advances for training no-reference (NR) speech quality estimators with independent datasets. Multi-dataset finetuning (MDF) pretrains an NR estimator on a single dataset and then finetunes it on multiple datasets at once, including the dataset used for pretraining. AlignNet uses an AudioNet to generate intermediate score estimates before using the Aligner to map intermediate estimates to the appropriate score range. AlignNet is agnostic to the choice of AudioNet so any successful NR speech quality estimator can benefit from its Aligner. The methods can be used in tandem, and we use two studies to show that they improve on current solutions: one study uses nine smaller datasets and the other uses four larger datasets. AlignNet with MDF improves on other solutions because it efficiently and effectively removes misalignments that impair the learning process, and thus enables successful training with larger amounts of more diverse data.

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑