arXivDaily arXiv每日学术速递 周一至周五更新
arXiv周末暂无论文更新,休息一下吧,周末愉快~~
arXiv 2607.17466cs.CLcs.AI

用于语言集成可靠性审计的多语言句子嵌入

Multilingual Sentence Embeddings for Linguistic-Integrated Reliability Audit

Ummugul Bezirhan, Ji Yoon Jung, Matthias von Davier

首次发表
浏览论文内容

中文总结 AI 辅助

研究多语言句子嵌入能否用于语言集成可靠性审计,通过11个PIRLS项目和三个嵌入模型评估,结果显示母语嵌入可紧密再现可靠性估计,恢复被排除回答,可靠性无明显变化。

中文摘要 AI 辅助

多语言评估系统通常依靠翻译进行评分和质量控制。我们评估了多语言句子嵌入能否在11个PIRLS建构反应项目和三个嵌入模型中替代翻译后的英语输入,用于语言集成可靠性审计(LiRA)。母语嵌入能紧密再现基于翻译的可靠性估计,同时恢复翻译失败后被排除的回答,且可靠性无显著变化。

英文摘要

Multilingual assessment systems commonly rely on translation for scoring and quality-control processes. We evaluate whether multilingual sentence embeddings can replace translated English input for Linguistic-Integrated Reliability Auditing (LiRA) across 11 PIRLS constructed-response items and three embedding models. Native-language embeddings reproduced translation-based reliability estimates closely while recovering responses excluded after translation failure, with no meaningful change in reliability.

发表机构

  • Boston College(波士顿学院)

机构由 AI 辅助整理,请以论文原文为准。

↑