arXivDaily arXiv每日学术速递 周一至周五更新
arXiv周末暂无论文更新,休息一下吧,周末愉快~~
arXiv 2412.03592cs.CLcs.AIcs.CV
收藏

利用图像在向量空间中寻找与上下文无关的词表示

Using Images to Find Context-Independent Word Representations in Vector Space

Indian Institute of Science(印度科学学院)

Harsh Kumar

AI总结:

本文提出结合词典释义与词图像、利用自动编码器学习上下文无关词向量的方法,在词相似度、概念分类和离群点检测任务上达到与基于上下文方法相当的性能,且训练时间显著更短。

摘要:

人们已经提出了许多寻找词的向量表示的方法,但大多数方法依赖于从文本中捕获上下文来寻找这些向量之间的语义关系。我们提出了一种利用词典释义和图像描绘来寻找独立于任何上下文的词向量的新方法。我们对词图像使用自动编码器(auto-encoder)来寻找有意义的表示,并用它们来计算词向量。我们最终在词相似度、概念分类和离群点检测任务上评估了我们的方法。我们的方法在性能上与基于上下文的方法相当,同时所需的训练时间要少得多。

英文摘要:

Many methods have been proposed to find vector representation for words, but most rely on capturing context from the text to find semantic relationships between these vectors. We propose a novel method of using dictionary meanings and image depictions to find word vectors independent of any context. We use auto-encoder on the word images to find meaningful representations and use them to calculate the word vectors. We finally evaluate our method on word similarity, concept categorization and outlier detection tasks. Our method performs comparably to context-based methods while taking much less training time.

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑