arXivDaily arXiv每日学术速递 周一至周五更新
arXiv 2202.03119cs.CL
收藏

另一种方式移动:探索Word Mover距离扩展

Moving Other Way: Exploring Word Mover Distance Extensions

Yandex(俄罗斯搜索引擎公司雅虎(注:Yandex是俄罗斯的搜索引擎公司,常见中文名是“俄罗斯搜索引擎公司雅虎”));Higher School of Economics(高等经济学院)

Ilya Smirnov, Ivan P. Yamshchikov

摘要:

词移动距离(WMD)是一种流行的两个文本的语义相似性度量。这份立场文件研究了大规模毁灭性武器的几种可能扩展。我们的实验与语料库中的词的频率作为加权因子和词向量空间的几何形状。我们验证可能的扩展大规模杀伤性武器的六个文件分类数据集。一些建议的扩展表现出更好的结果,在k-最近邻分类错误比WMD。

英文摘要:

The word mover's distance (WMD) is a popular semantic similarity metric for two texts. This position paper studies several possible extensions of WMD. We experiment with the frequency of words in the corpus as a weighting factor and the geometry of the word vector space. We validate possible extensions of WMD on six document classification datasets. Some proposed extensions show better results in terms of the k-nearest neighbor classification error than WMD.

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑