KA2L: A Knowledge-Aware Active Learning Framework for LLMs
KA2L:一种面向大语言模型的基于知识的主动学习框架
机构 * Faculty of Computing, Harbin Institute of Technology(哈尔滨工业大学计算机学院) ; Institute for Advanced Algorithms Research(先进算法研究所) ; National Key Laboratory of Smart Farm Technologies(智能农业技术与系统国家重点实验室)
专题命中 指令微调 :LLM(summary_cn,abstract);large language model(abstract);language model(abstract);分类 cs.CL
AI总结 本文提出KA2L框架,通过分析潜在空间评估LLM对特定知识的掌握程度,生成未知问题以提升模型能力,实验表明该方法能有效降低标注和计算成本,并在多个数据集上取得更好性能。
Comments 17 pages, 3 figures. Published in Expert Systems with Applications 333 (2027) 133951
Journal ref Expert Systems with Applications 333 (2027) 133951