GCDT: A Chinese RST Treebank for Multigenre and Multilingual Discourse Parsing
Georgetown University(乔治城大学)
由于缺乏大规模人工标注数据,汉语层次语篇分析受到了限制。本文在修辞结构理论的框架下,提出了最大的汉语层次语篇树库GCDT。GCDT涵盖了五种类型的免费文本中超过6万个标记,使用与当代英语树库相同的关系库存。我们还报告了这个数据集的解析实验,包括最先进的(SOTA)得分为中文的GUM数据集和中文的GUM数据集,使用跨语言的训练,在中文和英文的多语言嵌入。
2022-10-19 cs.CL
Semantic Prosody in Machine Translation: the English-Chinese Case of Passive Structures
Centre de Llenguatge i Computacio (CLiC), Universitat de Barcelona(巴塞罗那大学语言与计算中心);Institut de Recerca en Sistemes Complesos (UBICS), Universitat de Barcelona(巴塞罗那大学复杂系统研究所)
针对机器翻译忽视语义韵律的问题,本文构建英汉“被”字句数据集并微调多个模型,使其在翻译中正确使用被动结构,且知识可跨语言迁移。
2025-10-16 cs.CL
The University of Edinburgh's Submissions to the WMT19 News Translation Task
University of Edinburgh(爱丁堡大学)
爱丁堡大学参加了WMT 19新闻翻译共享任务,涉及六种语言:英语到古吉拉特语,古吉拉特语到英语,英语到汉语,汉语到英语,德语到英语和英语到捷克语。对于所有翻译方向,我们创建或使用目标语言的单语数据的反向翻译作为附加的合成训练数据。对于英语-古吉拉特语,我们还探索了具有跨语言语言模型预训练的半监督MT,以及通过印地语的翻译旋转。对于中文翻译,我们研究了基于字符的分词与中文文本的子分词。对于德语到英语,我们研究了大量反向翻译的训练数据对翻译质量的影响,获得了一些额外的见解。对于英语到捷克语,我们比较了不同的预处理和标记化制度。
2019-07-12 cs.CL
Fine Grained Human Evaluation for English-to-Chinese Machine Translation: A Case Study on Scientific Text
Deakin University(迪肯大学);Zhongtukexin Co. Ltd.(中图科信有限公司)
最近的研究表明,神经机器翻译(MT)在新闻领域已经达到了人类水平的性能,但对于其他专业领域,它远远低于人类水平。本文对四种广泛使用的汉英自然语言翻译系统进行了细粒度的系统化人工评价。我们的人工评估结果表明,所有的系统返回平均超过10\%的出错率,这需要大量的后期编辑工作,真正的学术用途。此外,我们还将六种主要的错误类型进行了分类,并提供了一些真实的例子。我们的研究结果强调,在机器翻译界的研究重点应该从短文本的一般翻译转向专业的机器翻译,并建立大规模的双语语料库,这些特定的领域。
2021-09-13 cs.CL
Fine-grained Human Evaluation of Transformer and Recurrent Approaches to Neural Machine Translation for English-to-Chinese
University of Groningen(格罗宁根大学)
本研究提出了一个细粒度的人的评价比较Transformer和递归的方法神经机器翻译(MT),翻译方向上的英语到汉语。为此,我们开发了一个符合多维质量管理(MQM)框架的错误分类,该框架是定制的翻译方向的相关现象。然后,我们在WMT2019新闻测试集的一个子集上,使用这种自定义的错误分类法对最先进的基于递归和基于transformer的MT系统的输出进行错误注释。由此产生的注释表明,与最佳递归系统相比,最佳Transformer系统导致错误总数减少31%,并且在22个错误类别中的10个中产生的错误显著减少。我们还注意到,两个系统的评估不产生任何错误的一个类别,这是相关的翻译方向之前出现的NMT系统:中国的分类。
2020-06-15 cs.CL
Achieving Human Parity on Automatic Chinese to English News Translation
Microsoft AI & Research(微软人工智能与研究部)
近年来,机器翻译取得了飞速的发展。如今,数百万人在在线翻译系统和移动应用程序中使用它,以便跨越语言障碍进行交流。自然会产生这样的问题,即这种系统是否可以接近或实现与人类翻译的平等。在本文中,我们首先解决的问题,如何定义和准确衡量翻译中的人类平等。然后,我们描述了微软的机器翻译系统,并在广泛使用的WMT 2017新闻翻译任务中测量其翻译质量。我们发现,我们最新的神经机器翻译系统已经达到了最先进的水平,与专业的人工翻译相比,翻译质量与人类不相上下。我们还发现,它大大超过了众包非专业翻译的质量。
2018-06-29 cs.CL
Discourse Representation Structure Parsing for Chinese
University of Groningen(格罗宁根大学)
该研究探索无标注数据下中文话语表征结构语义解析的可行性,构建数据收集流水线与专用测试集,发现副词是主要难点,且机器翻译加英语解析器的效果略低于直接用中文数据训练。
2023-06-16 cs.CL
Evaluation of Chinese-English Machine Translation of Emotion-Loaded Microblog Texts: A Human Annotated Dataset for the Quality Assessment of Emotion Translation
University of Surrey(萨里大学);Xi’an International Studies University(西安外国语大学)
本文提出基于多维质量指标(MQM)的评估框架,分析谷歌翻译对情感负载微博文本的翻译质量,发现约50%的输出丢失原始情感,并识别出情感词、多义词、否定和缩写等主要错误来源。
2023-06-20 cs.CL
PETCI: A Parallel English Translation Dataset of Chinese Idioms
The University of Chicago(芝加哥大学)
成语是汉语中一种重要的语言现象,但成语翻译是出了名的难。现有的机器翻译模型在习语翻译上表现不佳,而习语在许多翻译数据集中是稀疏的。我们提出了PETCI,一个平行的英语翻译数据集的中国成语,旨在提高成语翻译的人力和机器。数据集是通过利用人类和机器的努力来构建的。基线生成模型在提高翻译质量方面表现不佳,而结构感知分类模型在区分好的翻译方面表现出良好的性能。此外,PETCI的规模可以很容易地增加,而无需专业知识。总的来说,PETCI可以帮助语言学习者和机器翻译系统。
2022-02-19 cs.CL cs.LG
Optimising ChatGPT for creativity in literary translation: A case study from English into Dutch, Chinese, Catalan and Spanish
Centre for Language and Cognition, University of Groningen(语言与认知中心,格罗宁根大学);Departament de Llenguatges i Sistemes Informàtics, Universitat d’Alacant(语言与信息系统部门,阿尔阿罕特大学);Departament de Traducció i Comunicació, Universitat Jaume I(翻译与传播部门, Jaime I 大学)
本研究通过六种配置在四种语言中评估ChatGPT文学翻译的创造力,发现温度为1.0时最小指令提示效果最佳,但仍不及人工翻译。
2025-04-25 cs.CL
The Helsinki Neural Machine Translation System
Stockholm University(斯德哥尔摩大学);University of Helsinki(赫尔辛基大学);Uppsala University(乌普萨拉大学)
我们将介绍赫尔辛基神经机器翻译系统(HNMT)及其在WMT 2017新闻翻译任务中的应用,该系统在英语-芬兰语的人工和自动评估中均排名第一。我们讨论了英语-芬兰语翻译的成功和NMT在强大的SMT基线上的整体优势。我们还讨论我们提交的英文-拉脱维亚文、英文-中文和中文-英文。
2017-08-20 cs.CL
The Role of Handling Attributive Nouns in Improving Chinese-To-English Machine Translation
Carnegie Mellon University(卡内基梅隆大学);New York University(纽约大学);Northeastern University(东北大学);Barcelona Supercomputing Center(巴塞罗那超级计算中心)
本文针对中文定语名词导致的中译英歧义问题,通过手动插入被省略的“的”构建数据集并微调 Hugging Face 模型,从而改进关键功能词处理并提升翻译质量。
2025-01-02 cs.AI cs.CL
Bidirectional Chinese and English Passive Sentences Dataset for Machine Translation
Centre de Llenguatge i Computacio (CLiC), Universitat de Barcelona, Spain(巴塞罗那大学语言与计算中心,西班牙);Institut de Recerca en Sistemes Complexos (UBICS), Universitat de Barcelona, Spain(巴塞罗那大学复杂系统研究中心,西班牙)
本文提出一个双向多领域被动语句语料库,用于评估机器翻译中被动语句的处理能力,发现模型更受源文本语气影响,且LLMs在翻译多样性上表现更优。
2026-03-16 cs.CL cs.DB
A Discriminative Neural Model for Cross-Lingual Word Alignment
Johns Hopkins University(约翰斯·霍普金斯大学)
我们引入了一种新的判别词对齐模型,我们集成到基于transformer的机器翻译模型。在基于少量标记示例(约1.7K-5 K句子)的实验中,我们从本质上评估了其在英语-中文和英语-阿拉伯语对齐方面的性能,在无监督基线(11-27 F1)上实现了重大改进。我们评估的模型外的数据投影为中国的NER,显示我们的比对导致更高的性能时,用于投影NER标签从英语到中文。最后,我们进行了消融分析和注释实验,共同支持未来手动对齐启发的实用性和可行性。
2019-09-01 cs.CL
Neural Cross-Lingual Coreference Resolution and its Application to Entity Linking
IBM Research(IBM研究院)
我们提出了一个以实体为中心的神经跨语言共指模型,该模型建立在多语言嵌入和语言无关特征的基础上。我们对我们的模型进行内在和外在的评估。在内在评价中,我们表明,我们的模型,当在英语上训练和在中文和西班牙语上测试时,分别达到了直接在中文和西班牙语上训练的模型的竞争结果。在外部评估中,我们表明,我们的英语模型有助于在中文和西班牙语测试集上实现优于2015年顶级TAC系统的实体链接准确性,而无需使用中文或西班牙语的任何注释数据。
2018-06-26 cs.CL
Blur the Linguistic Boundary: Interpreting Chinese Buddhist Sutra in English via Neural Machine Translation
Ping An Technology (Shenzhen) Co., Ltd.(平安科技(深圳)有限公司);University of Electronic Science and Technology of China(电子科技大学)
佛教是一个有着悠久历史和深刻哲理的有影响的宗教。当今世界,越来越多的人渴望学习佛教的精髓,重视佛教的传播。然而,用文言文写的佛经对大多数人和机器翻译应用来说都是晦涩难懂的。例如,一般的汉英神经机器翻译(NMT)在这一领域失败了。在本文中,我们提出了一种新的方法来建立一个实用的NMT模型的佛经。我们的翻译管道的性能在三个标准下的烧蚀实验中获得了非常有希望的结果。
2022-09-30 cs.AI cs.CL
Beyond English: Evaluating Automated Measurement of Moral Foundations in Non-English Discourse with a Chinese Case Study
本研究以中文为案例,评估四类方法在非英语语篇道德基础测量中的效果,发现多语言模型与大语言模型(LLMs)表现更优,LLMs数据效率突出,同时强调需人在环路验证以兼顾文化细节,为跨语言道德计算研究提供参考。
2025-07-22 cs.CL cs.SI
Incorporating Chinese Radicals Into Neural Machine Translation: Deeper Than Character Level
ADAPT Centre(ADAPT中心);Dublin City University(都柏林城市大学);Soochow University(苏州大学)
在神经机器翻译(NMT)中,研究人员面临着不可见(或词汇表外的OOV)单词翻译的挑战。为了解决这个问题,一些研究人员提出将西方语言如英语和德语分成子词或复合词。在本文中,我们试图解决这个OOV问题,并提高NMT充分性与更难的语言中文,其字符是更复杂的组成。我们将汉语偏旁部首与NMT模型结合,通过不同的设置来解决汉英翻译中的未见词问题。另一方面,这也可以被认为是机器翻译系统的语义部分,因为汉语偏旁通常承载着它们所构成的词的本质意义。有意义的偏旁部首和新的汉字可以通过我们的模型被整合到NMT系统中。我们使用基于注意力的NMT系统作为强基线系统。在2006年和2008年NIST标准汉英翻译共享任务数据上的实验表明,我们设计的模型在LEPOR、BEER和BLEU和NIST评分等一系列最新的评价指标上都优于基线模型,尤其是在适当性水平的翻译上。在不同的实验环境下,我们也发现了一些有趣的结果,这些结果与其他语言不同。例如,研究人员最近证明,全字符级NMT在其他一些语言中可能表现良好或处于最先进的状态,然而,在中文NMT模型中,词边界知识对于模型学习很重要。
2019-06-24 cs.CL
Rare but Severe Neural Machine Translation Errors Induced by Minimal Deletion: An Empirical Study on Chinese and English
Haverford College(哈弗福德学院)
该实证研究发现在中英神经机器翻译中,仅删除源文本单个字符即可诱发严重错误,并比较了删字与删词的影响及训练数据规模的作用。
2022-09-17 cs.AI cs.CL cs.LG
Breaking the Representation Bottleneck of Chinese Characters: Neural Machine Translation with Stroke Sequence Modeling
Harbin Institute of Technology(哈尔滨工业大学)
现有的研究一般将汉字作为最小的表征单位。然而,这样的汉字表示将遭受两个瓶颈:1)学习瓶颈,学习不能受益于其丰富的内部特征(例如,偏旁部首和笔画);以及2)参数瓶颈,每个单独的字符必须由唯一的向量表示。本文介绍了一种新的汉字表示方法,即StrokeNet,它通过拉丁化的笔画序列(例如,“ao 1(凹)”到“ajaie”和“tu 1(凸)”到“aeaqe”)。具体来说,StrokeNet将每个笔画映射到特定的拉丁字符,从而允许类似的中文字符具有类似的拉丁表示。随着StrokeNet引入神经机器翻译(NMT),许多强大但不适用于非拉丁语言的技术(例如,共享子字词汇学习和基于密文的数据增强)现在可以被完美地实现。在广泛使用的NIST中文-英语、WMT 17中文-英语和IWSLT 17日文-英语NMT任务上的实验表明,StrokeNet可以在更少的模型参数下提供比强基线更显著的性能提升,在WMT 17中文-英语任务上实现26.5 BLEU,这比任何先前报道的结果都要好,而不使用单语数据。代码和脚本可以在https://github.com/zjwang21/StrokeNet上免费获得。
2022-11-23 cs.AI cs.CL
Multi-agent Learning for Neural Machine Translation
Baidu Inc.(百度公司)
传统的神经机器翻译(NMT)模型受益于使用附加代理的训练,例如,双学习和双向解码,其中一个代理从左到右解码,而另一个代理在相反方向上解码。在本文中,我们通过引入不同的代理在一个交互式的更新过程中的多代理场景的培训框架。在训练时,每个代理从其他代理学习先进的知识,他们一起工作,以提高翻译质量。在NIST中文-英文、IWITH 2014德文-英文、WMT 2014英文-德文和大规模中文-英文翻译任务上的实验结果表明,该方法在强基线系统上取得了绝对的改进,并在所有任务上表现出竞争力。
2019-09-03 cs.CL
WeChat Neural Machine Translation Systems for WMT21
Tencent Inc(腾讯公司);Beijing Jiaotong University(北京交通大学)
本文介绍了微信AI参与WMT 2021共享新闻翻译任务,内容为英语->中文,英语->日语,日语->英语和英语->德语。我们的系统基于Transformer(Vaswani等人,2017)与几个新的和有效的变种。在我们的实验中,我们采用数据过滤、大规模合成数据生成(即,反向翻译、知识蒸馏、正向翻译、迭代的领域内知识转移)、高级微调方法以及增强的基于Self-BLEU的模型集成。我们的约束系统分别在英语->中文,英语->日语,日语->英语和英语->德语上实现了36.9,46.9,27.8和31.3的大小写敏感BLEU分数。英语->中文、英语->日语和日语->英语的BLEU得分在所有提交中最高,英语->德语的BLEU得分在所有受约束的提交中最高。
2021-09-13 cs.AI cs.CL
Summer: WeChat Neural Machine Translation Systems for the WMT22 Biomedical Translation Task
Tencent Inc(腾讯公司)
本文介绍了微信参与WMT 2022共享的生物医学翻译任务中到英。我们的系统是基于Transformer,并使用几种不同的Transformer结构,以提高翻译质量。在我们的实验中,我们采用数据过滤,数据生成,几个变种的Transformer,微调和模型集成。我们的中文$\to$英文系统Summer在所有提交的作品中获得了最高的BLEU分数。
2022-11-28 cs.CL
Linguistically-driven Multi-task Pre-training for Low-resource Neural Machine Translation
Graduate School of Informatics, Kyoto University(京都大学信息学研究科)
在本研究中,我们提出了新的序列到序列预训练目标低资源机器翻译(NMT):日语特定序列到序列(JASS)的语言对涉及日语作为源或目标语言,英语特定序列到序列(ENSS)的语言对涉及英语。JASS侧重于掩蔽和重新排序日语语言单位称为文组,而ENSS是基于短语结构掩蔽和重新排序任务。在ASPEC日语-英语和日语-汉语,维基百科日语-汉语,新闻英语-韩语语料库上的实验表明,JASS和ENSS优于MASS和其他现有的语言无关的预训练方法,对于日语-英语任务,最高可达+2.9 BLEU点,对于日语-汉语任务,最高可达+7.0 BLEU点,对于英语-韩语任务,最高可达+1.3 BLEU点。实证分析侧重于JASS和ENSS中各个部分之间的关系,揭示了JASS和ENSS子任务的互补性。使用LASER,人类评估和案例研究的准确性评估表明,我们提出的方法在没有注入语言知识的情况下显着优于预训练方法,并且与流畅性相比,它们对充分性有更大的积极影响。我们在这里发布代码:https://github.com/Mao-KU/JASS/tree/master/linguistically-driven-pretraining.
2022-01-20 cs.CL
CUTE: A Multilingual Dataset for Enhancing Cross-Lingual Knowledge Transfer in Low-Resource Languages
Minzu University of China(中国民族大学);National Language Resource Monitoring & Research Center Minority Languages Branch(国家语言资源监测与研究中心少数民族语言分中心)
本文构建并开源了包含中、英、维吾尔、藏四语的大规模语料库CUTE,验证了其机器翻译质量,并证明该数据集能有效提升大语言模型对低资源语言的处理能力。
2025-09-21 cs.CL
Multi-Task Learning for Cross-Lingual Abstractive Summarization
Tokyo Institute of Technology(东京工业大学)
我们提出了一个多任务的跨语言抽象摘要的学习框架,以增加训练数据。最近的研究构建了伪跨语言摘要数据训练他们的神经编码器-解码器。同时,我们引入现有的真实数据,如翻译对和单语摘要数据进行训练。我们提出的方法,Transum,附加一个特殊的令牌的输入句子的开头,以指示目标任务。特殊的令牌使我们能够将真实数据轻松地合并到训练数据中。实验结果表明,与仅使用伪跨语言摘要数据训练的模型相比,Transum模型具有更好的性能。此外,我们在中文-英文和阿拉伯文-英文摘要摘要方面取得了最高的ROUGE分数。此外,Transum还对机器翻译产生了积极的影响。实验结果表明,在中文-英文、阿拉伯文-英文和英文-日文翻译数据集上,Transsum提高了强基线Transformer的性能。
2020-10-15 cs.CL
Evaluating Indirect Strategies for Chinese-Spanish Statistical Machine Translation
Institute for Infocomm Research(信息通信研究所)
尽管汉语和西班牙语是世界上使用最多的两种语言,但对这两种语言的机器翻译研究并不多。统计机器翻译是当今最流行的机器翻译方法之一。为了这个目的,我们报告的细节,可用的平行语料库是基本的旅行者表达语料库(BTEC),圣经和联合国(UN)。此外,我们进行了实验工作,这三个语料库中最大的探索替代SMT策略,通过使用枢轴语言。三种替代方案被认为是枢:级联,伪语料库和三角测量。作为枢纽语言,我们使用英语,阿拉伯语或法语。结果表明,对于一个基于短语的SMT系统,英语是最好的枢纽语言之间的中文和西班牙语。我们提出了一个系统的输出组合使用枢轴策略,这是能够优于直接翻译策略。这项工作的主要目标是激励和参与研究界在这对重要的语言工作,因为它们的人口影响。
2014-02-04 cs.CL
CIBuzzBench: A Benchmark for Cross-Lingual Understanding of Chinese Internet Buzzwords
Dalian University of Technology(大连理工大学);Meta AI;Beijing University of Posts and Telecommunications(北京邮电大学);Meituan(美团);Beijing Police College(北京警察学院)
针对大语言模型跨语言理解中文网络流行语能力不足的问题,构建首个中译英基准CIBuzzBench,包含3001个流行语及多维度标注,设计含义解释、对应匹配和危害检测三项任务,实验表明现有模型在非字面解释、稳健匹配和危害检测上仍存在显著困难。
2026-09-21 cs.AI cs.CL
Neural Machine Translation with Joint Representation
Northeastern University(东北大学);NiuTrans Co., Ltd.(小牛翻译股份有限公司);Institute of Psychology, CAS(中国科学院心理研究所)
尽管统计机器翻译(SMT)系统的早期成功部分归功于任何两个源单元和目标单元之间交互的显式建模,例如,对齐,最近的神经机器翻译(NMT)系统诉诸的注意,部分编码的互动效率。在本文中,我们采用联合表示,充分考虑到每个可能的相互作用。我们回避了效率低下的问题,通过改进表示与建议的有效注意力操作。由此产生的Reformer模型提供了一种新的序列到序列建模范式,除了编码器-解码器框架之外,并且在小规模IWSLT 14德语-英语,英语-德语和IWSLT 15越南语-英语或大规模NIST 12中文-英语翻译任务中优于Transformer基线约1 BLEU点。允许Reformer模型在IWSLT 14德-英和NIST 12中-英中以大约少50%的参数击败最先进的Transformer。该代码可在https://github.com/lyy1994/reformer上公开获取。
2020-02-18 cs.CL
BCWS: Bilingual Contextual Word Similarity
National Taiwan University(国立台湾大学)
本文介绍了第一个用于评估英汉双语上下文词相似度的数据集,即BCWS(https://github.com/MiuLab/BCWS)。该数据集由2,091个英汉单词对组成,具有相应的上下文和人类注释的相似性得分。与其他类似的数据集相比,我们的注释数据集具有更高的一致性。我们为双语嵌入任务建立了几个基线来衡量实验。对该数据集中提供的跨语言意义表示进行建模,有可能使人工智能从单语理解转向多语言理解。
2018-10-21 cs.CL
Cross-lingual Inference with A Chinese Entailment Graph
University of Edinburgh(爱丁堡大学);Google Research(谷歌研究院)
谓词蕴涵检测是文本问答系统中的一个重要任务,已有的工作探索了从类型化开放关系三元组中提取蕴涵图的无监督学习。在本文中,我们提出了第一个流水线构建中国蕴涵图,其中包括一个新的高召回率开放关系抽取(ORE)方法和第一个中国细粒度实体分类数据集下的FIGER类型的本体。通过在Levy-Holt数据集上的实验,我们验证了我们的中文蕴涵图的强度,并揭示了跨语言的互补性:在并行Levy-Holt数据集上,中文和英文蕴涵图的集成优于两个单语图,并将无监督SOTA提高了4.7个AUC点。
2022-03-11 cs.CL
Efficient Cross-Lingual Transfer for Chinese Stable Diffusion with Images as Pivots
Tsinghua University(清华大学);Beijing National Research Center for Information Science and Technology(北京国家信息科学与技术研究中心);Microsoft Research Asia(微软亚洲研究院)
提出IAP方法,通过固定参数并仅优化中文文本编码器,以图像为枢纽最小化交叉注意力特征距离,将英文Stable Diffusion高效迁移至中文,仅用5%~10%训练数据即超越多个强基线。
2023-05-19 cs.CL cs.CV
CLM-Bench: Benchmarking and Analyzing Cross-lingual Misalignment of LLMs in Knowledge Editing
Tianjin University, School of Future Technology(天津大学,未来技术学院);Tianjin University, College of Intelligence and Computing(天津大学,智能计算学院)
CLM-Bench通过构建文化意识的基准,揭示了LLMs在知识编辑中的跨语言不对齐问题,挑战了现有跨语言转移方法的有效性。
2026-01-24 cs.CL
Adpositional Supersenses for Mandarin Chinese
Georgetown University(乔治城大学)
本研究采用语义网络的形容词和格的超义项(SNACS)的注释,并证明了相同的超义项类别是适用于汉语形容词语义。我们对《小王子》的15章进行了注释,注释者之间的一致性很高。平行语料库揭示了两种语言的形容词在连接上的差异,即一些汉语中常见而英语语料库中罕见或未被证实的连接词。标注语料库可以进一步支持汉语中介词的自动消歧,并且两种语言之间的共同超义项清单可以潜在地服务于诸如机器翻译的跨语言任务。
2018-12-06 cs.CL
Generating Bilingual Pragmatic Color References
Stanford University(斯坦福大学);Harvard University(哈佛大学);San Jose State University(圣何塞州立大学)
语境对语言的影响经常表现出实质性的跨语言差异;例如,在需要更精细区分的情况下,我们会更罗嗦。然而,这些术语有时会被语义和句法上的差异所掩盖。使用一个新收集的数据集的颜色参考游戏在普通话中(我们向公众发布),我们证实,各种结构显示出相同的敏感性上下文难度在汉语和英语。然后,我们表明,一个神经扬声器代理训练的双语数据与一个简单的多任务学习方法显示更多的类似人类的模式的上下文依赖,更实用的信息比单语中文对应。此外,这并不是以语言特定的语义理解为代价的:所产生的说话者模型学习英语和汉语的不同基本颜色术语系统(具有显著的跨语言影响),并且它可以在其输出层上使用向量类比操作来识别两种语言之间的同义词,尽管没有暴露于并行数据。
2018-05-19 cs.CL
Automated evaluation of LLMs for effective machine translation of Mandarin Chinese to English
本文通过自动化框架评估LLMs在中文到英文翻译中的表现,发现其在新闻翻译中表现良好,但在文学文本中存在性能差异,且文化细节和修辞表达仍需改进。
2026-02-15 cs.AI cs.CL
Detecting dementia in Mandarin Chinese using transfer learning from a parallel corpus
University of Toronto(多伦多大学);Vector Institute(矢量研究所);Academia Sinica(中央研究院);Toronto Rehabilitation Institute(多伦多康复研究所)
机器学习已经显示出通过语音自动检测阿尔茨海默病(AD)的前景;然而,数据的稀缺阻碍了这一努力,特别是英语以外的语言。我们提出了一种方法来学习两种语言中独立设计的词汇句法特征之间的对应关系,使用大型并行语料库的域外电影对话数据。我们将其应用于普通话中的痴呆检测,并证明我们的方法优于单语和基于机器翻译的基线。这似乎是第一项在检测认知能力下降时转移特征域的研究。
2019-06-01 cs.CL
Machine Translation between Vietnamese and English: an Empirical Study
Hanoi University of Science and Technology(河内理工大学);FPT Technology Research Institute, FPT University(FPT大学FPT技术研究院)
机器翻译正在转向基于深度神经网络的端到端方法。最先进的技术在英法或英中等流行语言对上取得了令人印象深刻的结果。然而,对于英语-越南语,平行语料库的短缺和昂贵的超参数搜索对基于神经的方法提出了实际挑战。本文重点介绍了我们在两个方向上改进英语-越南语翻译的努力:(1)建立迄今为止最大的开放式越南语-英语语料库,(2)使用最新的神经模型进行广泛的实验,以获得最高的BLEU分数。我们的实验提供了实际的例子,有效地采用不同的神经机器翻译模型与低资源的语言对。
2018-10-30 cs.CL
Extending the Pre-Training of BLOOM for Improved Support of Traditional Chinese: Models, Methods and Results
MediaTek Research(联发科研究院);Academia Sinica(中央研究院)
本文提出BLOOM-zh,通过额外74亿token的预训练扩展BLOOM,增强繁体中文支持,在多数繁体中文基准上优于原模型且保持英文能力。
2023-06-23 cs.AI cs.CL
DiDi's Machine Translation System for WMT2020
AI Labs, DidiChuxing(滴滴出行人工智能实验室)
本文介绍了滴滴AI Labs提交的WMT 2020新闻翻译共享任务。我们参与中文->英文的翻译方向。在这个方向上,我们使用Transformer作为我们的基线模型,并集成了几种模型增强技术,包括数据过滤,数据选择,回译,微调,模型集成和重新排名。因此,我们提交的作品在中文->英文中获得了$36.6$的BLEU分数。
2020-10-16 cs.AI cs.CL
Logographic Subword Model for Neural Machine Translation
McMaster University(麦克马斯特大学);Queen’s University(女王大学)
提出了一种新的语标子词模型,将语标重新解释为神经机器翻译的抽象子词。我们的方法大大减小了人工神经网络的大小,同时保持了与基线RNN和CNN seq 2seq模型相当的BLEU分数。较小的模型大小也会导致更短的训练和推理时间。实验表明,在英汉/汉英翻译任务中,这些方面的减少可以从$11\%$到高达$77\%$。与以前的子词模型相比,抽象子词可以应用于各种语标语言。考虑到大多数的语标语言是古老的和非常低的资源语言,这些优势是非常可取的考古计算语言学应用,如资源有限的离线手持人口英语翻译。
2018-09-07 cs.CL cs.LG
Resolution Thresholds in VLM Detection of Harmful ASCII Art Across Construction Modes and Languages
Department of Computer Science(计算机科学系);The University of British Columbia(不列颠哥伦比亚大学)
研究图像分辨率如何影响VLM检测有害ASCII艺术,发现检测率在特定分辨率阈值以上急剧下降,且基于单词的模式最难检测,揭示了VLM内容审核系统的系统性漏洞。
2026-06-28 cs.CL
Multi-lingual Geoparsing based on Machine Translation
Wuhan University(武汉大学);Carnegie Mellon University(卡内基梅隆大学)
我们的多语言地理解析方法使用单语言工具和资源以及机器翻译和对齐来返回多种语言的位置词。我们的方法不仅节省了为每种语言单独开发地理解析器的时间和成本,而且它允许在单个接口中实现各种语言功能的可能性。我们评估了我们的方法在我们的命名实体的位置上使用新闻通讯社,广播新闻和电话交谈,英语,阿拉伯语和中文数据的语言数据联盟(LDC)的BidageBridge原型。我们的结果地理分析中文和阿拉伯语文本使用我们的多语言地理分析方法是我们的结果地理分析英语文本与我们的英语工具。此外,使用我们的机器翻译方法的实验结果与手动翻译的相同数据的结果相比具有准确性。
2015-11-06 cs.CL cs.IR
Bilingual Dictionary-based Language Model Pretraining for Neural Machine Translation
Univ. of Maryland(马里兰大学)
最近的研究表明,通过应用跨语言语言模型预训练(Lample和Conneau,2019),特别是翻译语言模型(TLM),神经机器翻译的性能得到了明显的改善。为了减轻TLM对昂贵的并行语料库的需求,在这项工作中,我们将词典中的翻译信息纳入预训练过程,并提出了一种新的基于双语词典的语言模型(BDLM)。我们评估我们的BDLM中文,英语和罗马尼亚语。对于中文-英文,我们在WMT-News 19(Tiedemann,2012)上获得了55.0 BLEU,在WMT 20新闻评论上获得了24.3 BLEU,优于Vanilla Transformer(Vaswani et al.,2017年)分别超过8.4 BLEU和2.3 BLEU。根据我们的实验结果,BDLM在收敛速度和预测生僻字方面也有优势。WMT 16罗马尼亚语-英语BLEU的增加也表明了其在低资源语言翻译中的有效性。
2021-03-12 cs.AI cs.CL cs.LG
Is China Entering WTO or shijie maoyi zuzhi--a Corpus Study of English Acronyms in Chinese Newspapers
Indiana University Bloomington(印第安纳大学伯明顿分校)
这是第一个定量研究英文缩略语(如WTO)在中文文本中的使用情况的研究。利用报纸语料库,我试图回答:1)对于所有有英文缩写的概念(如World Trade Organization),有多少百分比是用英文缩写(WTO)表达的,有多少百分比是用中文翻译(世界贸易组织)表达的; 2)语言使用者在英文和中文形式之间的选择中起作用的因素是什么?结果表明,不同的概念在英语缩略词中所占的比例不同,从2%到98%不等。线性模型显示,语言经济性(中文翻译的长度)、概念频率以及概念在中文报纸上首次出现是英文缩写还是其中文翻译(均p < .05)可以预测单个概念的英文缩写。
2017-11-18 cs.CL
Chinese Learners' Phonetic Transfer of /i/ from Mandarin Chinese to General American English: A Case Study of a Chinese Learner with Advanced English
Teachers College, Columbia University(哥伦比亚大学教师学院)
本文从语音层面探讨语言迁移现象,着重探讨高级英语学习者在英语元音/i/及其对应元音习得中的迁移现象。本文通过对中国英语学习者Vanya在普通美国英语中是否能准确区分/i/和其lax对应词,并准确发音的研究,为进一步研究中国英语学习者之间的语言迁移提供参考。有两个目标:首先,研究学习者区分元音/i/和其宽松对应物的感知能力; 2其次,确定语音迁移的效果。两个感知测试和生产测试被用来实现这两个目标。两次感知测试的结果证明了Vanya区分/i/和其宽松对应物的感知能力,为后续生产测试的有效性奠定了坚实的基础。考虑到Vanya的/i/的F1和F2值在他的第一语言(汉语普通话)和第二语言(GAE)中高度相似,并且这两个值都低于GAE中常见/i/的典型值,F2值之间的差异特别突出,可以合理地得出发生语音迁移的结论。参与者的高知觉能力作为一个先进的水平ELL并没有显着缓和语音迁移的效果。
2022-10-20 cs.CL
Contrastive Analysis of Constituent Order Preferences Within Adverbial Roles in English and Chinese News: A Large-Language-Model-Driven Approach
School of Humanities, Beijing University of Posts and Telecommunications(北京邮电大学人文学院)
本文以LLM标注的可比英汉语新闻语料为基础,从状语角色功能块视角对比英汉语新闻语序偏好,揭示了两者在核心信息叙事顺序、SVO结构中功能块分布及共现时灵活性的差异,为英汉语信息结构对比研究提供新实证支持。
2025-08-08 cs.CL
OC16-CE80: A Chinese-English Mixlingual Database and A Speech Recognition Baseline
Tsinghua University(清华大学);Chinese Academy of Sciences(中国科学院);SpeechOcean(海天瑞声)
OC 16-CE 80中英混合语言语音数据库是O-COCOSDA 2016上发布的中英混合语言语音识别(MixASR-CHEN)挑战赛的主要训练、开发和测试资源。该数据库由1,400多人80小时的语音信号组成,这些语音信号是汉语的,但每个语音信号都包含一个或几个英语单词。基于该数据库和另外两个免费数据源(THCHS 30和CMU词典),采用深度神经网络-隐马尔可夫模型(DNN-HMM)混合系统构建了语音识别(ASR)基线。然后,我们根据MixASR-CHEN评估规则报告了基线结果,并证明OC 16-CE 80是混合语言研究的合理数据源。
2016-09-27 cs.CL
Comparative Study on the Discourse Meaning of Chinese and English Media in the Paris Olympics Based on LDA Topic Modeling Technology and LLM Prompt Engineering
Communication University of China(中国传媒大学)
本研究通过LDA主题建模、LLM提示工程和语料库短语学方法,比较中英文媒体对巴黎奥运会的报道,揭示两者在话语主题和态度意义(如语义韵)上的异同。
2025-04-25 cs.CL
ASCEND: A Spontaneous Chinese-English Dataset for Code-switching in Multi-turn Conversation
The Hong Kong University of Science and Technology(香港科技大学)
语码转换是说话人在会话过程中转换语言时出现的一种言语现象。尽管语码转换在会话口语中具有自发性,但现有的研究大多从朗读中收集语码转换数据,而不是从自发性话语中收集。ASCEND(A Spontaneous Chinese-English Dataset)是一个高质量的汉语-英语语码转换语料库,建立在香港地区的多轮会话语料基础上。我们报告ASCEND的设计和程序收集的语音数据,包括注释。ASCEND由10.62小时的干净的讲话,收集了23个双语者的中文和英文。此外,我们使用预训练的wav 2 vec 2.0模型进行基线实验,实现了22.69%的字符出错率和27.05%的混合出错率的最佳性能。
2022-05-03 cs.CL
Underutilization of Syntactic Processing by Chinese Learners of English in Comprehending English Sentences, Evidenced from Adapted Garden-Path Ambiguity Experiment
本研究通过改编花园路径实验,发现中国英语学习者在理解英语句子时存在句法加工利用不足,并识别出部分与完全两种类型,为提升其句子理解水平的新型解析方法奠定基础。
2024-12-21 cs.CL
BSTC: A Large-Scale Chinese-English Speech Translation Dataset
Baidu Inc.(百度公司)
本文介绍了一个大规模的汉英语音翻译数据集BSTC(Baidu Speech Translation Corpus)。该数据集是基于一系列许可的演讲或讲座视频构建的,包括约68小时的普通话数据,其手动转录和翻译成英语,以及通过自动语音识别(ASR)模型进行的自动转录。我们还邀请了三名经验丰富的口译员在模拟会议环境中同时为测试会谈进行口译。该语料库对自动同声翻译的研究和实用系统的开发具有一定的促进作用。我们已经组织了同声翻译任务,并使用该语料库来评估自动同声翻译系统。
2021-04-27 cs.CL
Building a Non-native Speech Corpus Featuring Chinese-English Bilingual Children: Compilation and Rationale
FAU
本文介绍了一个包含50名5至6岁中英双语儿童、总计6.5小时的非母语语音语料库,采用自研远程方法采集音视频以缓解低可懂度转写挑战,并附带人工评分与错误标注,为二语教学及提升ASR性能提供宝贵资源。
2024-01-07 cs.CL
ChLogic: Evaluating Robustness of Logical Reasoning in Chinese Expressions
College of Mathematics, Sichuan University(四川大学数学学院);Theory Lab, 2012 Labs, Huawei Technologies Co., Ltd(华为技术有限公司2012实验室理论实验室)
提出英中对照基准ChLogic,通过形式逻辑模板构建数据集,测试模型在英文和多种中文表达下逻辑推理的鲁棒性,发现英中性能差距,回译效果因数据集和模型而异。
2026-06-17 cs.CL