arXivDaily arXiv每日学术速递 周一至周五更新
arXiv 2204.13638cs.CLcs.LG
收藏

用Levenshtein编辑法对俄文文本进行去重

Russian Texts Detoxification with Levenshtein Editing

Moscow Institute of Physics and Technology(莫斯科物理技术学院)

Ilya Gusev

摘要:

文本解毒是一项风格转换任务,即创建有毒文本的中性版本。在本文中,我们使用文本编辑的概念,建立了一个两步标记的解毒模型,使用俄语文本的平行语料库。通过这个模型,我们在RUSSE Detox共享任务中实现了所有模型中最好的风格转换准确性,超过了更大的序列到序列模型。

英文摘要:

Text detoxification is a style transfer task of creating neutral versions of toxic texts. In this paper, we use the concept of text editing to build a two-step tagging-based detoxification model using a parallel corpus of Russian texts. With this model, we achieved the best style transfer accuracy among all models in the RUSSE Detox shared task, surpassing larger sequence-to-sequence models.

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑