arXivDaily arXiv每日学术速递 周一至周五更新
arXiv 2503.20007cs.CLcs.LG
收藏

低资源哈萨克语-俄语代码切换语言对的机器翻译

Low-resource Machine Translation for Code-switched Kazakh-Russian Language Pair

ITMO University(ITMO大学);Nazarbayev University(纳扎尔巴耶夫大学)

Maksim Borisov, Zhanibek Kozhirbayev, Valentin Malykh

AI总结:

针对低资源哈萨克语-俄语代码切换语言对,提出基于合成数据生成的无标注机器翻译方法,构建了首个平行语料库,模型BLEU达16.48,接近并人工评估超越商业系统。

摘要:

低资源语言对的机器翻译是一项具有挑战性的任务。当说话者使用代码切换时,这一任务可能变得极其困难。我们提出了一种在无标注数据情况下为代码切换的哈萨克语-俄语语言对构建机器翻译模型的方法。我们的方法基于合成数据的生成。此外,我们展示了首个哈萨克语-俄语代码切换平行语料库及评估结果,其中包括一个达到16.48 BLEU的模型,几乎接近现有商业系统,并在人工评估中超越该系统。

英文摘要:

Machine translation for low resource language pairs is a challenging task. This task could become extremely difficult once a speaker uses code switching. We propose a method to build a machine translation model for code-switched Kazakh-Russian language pair with no labeled data. Our method is basing on generation of synthetic data. Additionally, we present the first codeswitching Kazakh-Russian parallel corpus and the evaluation results, which include a model achieving 16.48 BLEU almost reaching an existing commercial system and beating it by human evaluation.

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑