Semantic Anchors in In-Context Learning: Why Small LLMs Cannot Flip Their Labels
语义锚点在上下文学习中的作用:为何小规模大语言模型无法翻转其标签
机构 * Department of Computer Science, Boston University(计算机科学系,波士顿大学)
专题命中 其他LLM :prompting(abstract);分类 cs.CL、cs.AI、cs.LG
AI总结 研究探讨了上下文学习中语义锚点的作用,发现小规模LLM在翻转标签时无法有效覆盖语义,主要调整输入投射到预训练语义方向的方式。
Comments 13 pages total (7 pages main text, 3 pages references, 3 pages appendix), 2 figures, 14 tables. Code available at https://github.com/AnanthaPadmanaban-KrishnaKumar/semantic-anchors-icl