A Fuzzy Logic Prompting Framework for Large Language Models in Adaptive and Uncertain Tasks
专题命中 指令微调 :large language model(title,abstract);language model(title,abstract);prompting(title,abstract);LLM(abstract)
AI 大模型
大语言模型、预训练、指令微调、后训练和语言模型应用。
专题命中 指令微调 :large language model(title,abstract);language model(title,abstract);prompting(title,abstract);LLM(abstract)
机构 * CSIRO’s Data61(CSIRO的数据61)
专题命中 指令微调 :LLM(title,abstract);large language model(title,abstract);language model(title,abstract);prompting(abstract)
专题命中 指令微调 :large language model(title,abstract);language model(title,abstract);prompting(title,abstract);LLM(abstract)
Comments 17 pages
专题命中 指令微调 :large language model(title,abstract);language model(title,abstract);prompting(title,abstract);LLM(abstract)
Comments Accepted by main EMNLP 2024
专题命中 指令微调 :large language model(title,abstract);language model(title,abstract);preference optimization(title,abstract);LLM(abstract)
专题命中 指令微调 :large language model(title,abstract);language model(title,abstract);instruction tuning(title,abstract);prompting(abstract)
Comments To be appeared at COLING 2025
专题命中 指令微调 :large language model(title,abstract);language model(title,abstract);instruction tuning(title,abstract);LLM(abstract)
Comments 11 pages, 7 figures
专题命中 指令微调 :LLM(title,abstract);large language model(title,abstract);language model(title,abstract);SFT(abstract)
专题命中 指令微调 :LLM(title,abstract);large language model(title,abstract);language model(title,abstract);instruction tuning(abstract)
Comments Accepted for publication in AAAI 2024, Planning for Cyber Physical Systems
专题命中 指令微调 :large language model(title,abstract);language model(title,abstract);instruction tuning(title,abstract);LLM(abstract)
Comments CVPR 2024
多语言OCR感知微调和提示引导的链式思维推理用于多模态大语言模型
机构 * Meta AI ; UT Austin(德克萨斯大学奥斯汀分校)
专题命中 指令微调 :large language model(title,abstract);language model(title,abstract);SFT(abstract,abstract_cn);post-training(abstract)
AI总结 提出一种多语言OCR感知的多模态训练框架,通过合成数据生成、OCR感知微调和结构化视觉链式思维提示,提升多模态大语言模型在复杂视觉条件下的OCR完整性和多语言翻译准确性。
可本地部署的小型语言模型用于急诊科决策支持:微调策略的系统基准测试
专题命中 指令微调 :language model(title,abstract);small language model(title,abstract);LLM(abstract_cn);large language model(abstract)
AI总结 该研究针对急诊科决策支持的隐私风险,通过基准测试发现经LoRA微调的开源小型语言模型在分诊和转诊任务上优于商业模型,可本地部署且具备临床竞争力。
Comments Accepted to AMIA 2026 Annual Symposium
LoRAScan:通过下投影激活尖峰检测大语言模型低秩适配器中的后门提示
专题命中 指令微调 :LLM(summary_cn,abstract);large language model(title,abstract);language model(title,abstract);分类 cs.CL、cs.AI
AI总结 LoRAScan是首个无需修改适配器参数、在推理时检测并拒绝含触发词输入的适配器感知防御方法,在LLM后门基准测试中拒98.49%恶意输入,性能优于现有方法。
价值漂移:在大语言模型训练后追踪价值对齐
机构 * Mila - Quebec AI Institute(魁北克人工智能研究所) ; McGill University(麦吉尔大学) ; Université de Montréal(蒙特利尔大学) ; ETH Zurich(苏黎世联邦理工学院) ; University of British Columbia(不列颠哥伦比亚大学) ; Vector Institute(向量研究所) ; Canada CIFAR AI Chair(加拿大CIFAR人工智能主席)
专题命中 指令微调 :SFT(summary_cn,abstract);post-training(title,abstract);LLM(title);preference optimization(abstract)
AI总结 研究大语言模型训练后价值对齐问题,通过实验区分训练后算法和数据集影响,测量价值漂移,发现SFT阶段确立模型价值,后续偏好优化难重对齐,不同算法在偏好数据不变时也有不同结果,为相关选择提供见解。
Comments TACL 2026
超越一刀切:基于大语言模型的零样本图学习中的自适应子图去噪
机构 * JIUTIAN Research(JIUTIAN研究) ; The Hong Kong University of Science and Technology (Guangzhou)(香港科技大学(广州)) ; MIIT Key Laboratory of Data and Decision Intelligence(信息与决策智能重点实验室) ; Beihang University(北航)
专题命中 指令微调 :large language model(title,abstract);language model(title,abstract);LLM(abstract,abstract_cn);SFT(abstract,abstract_cn)
AI总结 本文提出GraphSSR框架,通过自适应子图提取和去噪方法,解决传统图神经网络在零样本学习中泛化能力不足的问题,提升大语言模型在图推理任务中的表现。
峰值检测器:通过指令调优的大语言模型实现可解释的多模态峰值检测
机构 * University of Georgia(佐治亚大学) ; Yixing People’s Hospital(宜兴人民医院) ; University of Washington(华盛顿大学) ; University of North Carolina at Charlotte(北卡罗来纳大学夏洛特分校)
专题命中 指令微调 :large language model(title,abstract);language model(title,abstract);LLM(abstract,abstract_cn);SFT(abstract,abstract_cn)
AI总结 本文提出Peak-Detector框架,利用指令调优的大语言模型实现跨模态、可解释的峰值检测,通过峰表示技术压缩时间序列数据并提升检测准确性,同时生成解释性内容以支持验证与错误分析。
DebiasRAG: 通过检索增强生成实现大型语言模型中公平生成的无调优路径
机构 * Huawei(华为)
专题命中 指令微调 :LLM(summary_cn,abstract);large language model(title,abstract);language model(title,abstract);分类 cs.CL、cs.AI
AI总结 本文提出DebiasRAG,一种基于检索增强生成的无调优动态查询特定去偏框架,通过生成查询特定去偏候选、构建上下文候选池和梯度更新去偏引导上下文重排序三阶段,提升生成公平性并保留LLM固有属性。
分解大型语言模型的基本能力:在多任务指令微调中缓解跨任务干扰
机构 * College of Computer Science and Technology, Jilin University(吉林大学计算机科学与技术学院) ; Key Laboratory of Symbolic Computation and Knowledge Engineering, Ministry of Education, Jilin University(吉林大学符号计算与知识工程重点实验室) ; RIKEN Center for Advanced Intelligence Project(RIKEN高级智能项目中心) ; Graduate School of Frontier Sciences, University of Tokyo(东京大学前沿科学研究生院)
专题命中 指令微调 :LLM(summary_cn,abstract);large language model(title,abstract);language model(title,abstract);分类 cs.CL、cs.AI
AI总结 本文通过实验揭示现有方法仍存在跨任务干扰问题,提出BADIT方法将LLM参数分解为正交的高奇异值LoRA专家,通过球形聚类保持正交性,实验证明其在多任务指令微调中优于现有方法。
Comments Accepted by ICML 2026. 25 pages, 13 figures. Code: https://github.com/wangbing1416/BADIT
面向组合优化的可行性感知大语言模型
机构 * Lehigh University(莱荷大学) ; University of Pittsburgh(匹兹堡大学) ; Johnson & Johnson(强生公司)
专题命中 指令微调 :LLM(summary_cn,abstract);large language model(title,abstract);language model(title,abstract);分类 cs.AI、cs.LG
AI总结 本文提出一种结合可验证数据集构建、监督微调和LLM辅助下游搜索的框架,用于解决组合优化问题中的可行性检测,实验显示模型在准确率和搜索速度上有显著提升。
专题命中 指令微调 :large language model(title,abstract);language model(title,abstract);LLM(abstract);pretraining(abstract)
专题命中 指令微调 :large language model(title,abstract);language model(title,abstract);LLM(abstract);small language model(abstract)
Comments Accepted to ACL-24 Main
用于第二届MLC-SLM挑战赛的基于全语言自动语音识别的语音语言模型系统
专题命中 指令微调 :SLM(title,title_cn);LLM(title,abstract);分类 cs.AI
AI总结 该研究针对第二届MLC-SLM挑战赛任务1,提出级联分帧识别系统,结合多种技术,测试无先验信息。分析工程选择影响,如基于嵌入的聚类更优,重叠感知分割虽提召回率但增加tcpMER,在开发集和评估集有相应表现。
Comments Accepted to INTERSPEECH 2026. 4 pages + references. Technical description of our 2nd MLC-SLM Challenge Task 1 submission
视觉语言模型后训练中推理与感知的非对称优化研究
机构 * University of California, Los Angeles(加州大学洛杉矶分校)
专题命中 指令微调 :SFT(summary_cn,abstract);post-training(title,abstract);language model(title,abstract);分类 cs.CL
AI总结 通过合成任务诊断发现,后训练中推理提升显著优于感知,SFT源于感知token少导致训练信号弱,RL源于奖励耦合,提出动态重加权损失和感知奖励可缓解不平衡并提升端到端性能。
Comments Project: https://asymmetric-vlm-post-training.github.io/
基于大语言模型的生成式检索用于Snapchat内容推荐
专题命中 指令微调 :LLM(title,summary_cn);SFT(abstract,abstract_cn);large language model(abstract);language model(abstract)
AI总结 该研究针对将预训练LLM转化为生成式检索器的挑战,设计了SnapLGR系统,通过三项核心优化实现了Snapchat短视频推荐效果的提升。
LLM导师院长:AI生成反馈的自动质量审查框架
专题命中 指令微调 :LLM(title,title_cn);large language model(abstract);language model(abstract);prompting(abstract)
AI总结 提出DeanLLM框架,通过16维度评估LLM导师反馈的内容、教育效果和幻觉风险,并利用微调GPT-4.1实现与人类专家高度一致的自动审查。
好的SFT优化SFT,更好的SFT为强化学习做准备
机构 * University of Illinois Urbana-Champaign(伊利诺伊大学厄巴纳-香槟分校) ; New York University (Shanghai)(纽约大学(上海))
专题命中 指令微调 :SFT(title,title_cn);LLM(abstract);post-training(abstract);分类 cs.CL、cs.AI、cs.LG
AI总结 针对当前SFT-RL流程中离线SFT数据分布与在线RL策略分布不匹配的问题,提出基于策略评估的离线学习损失重加权方法PEAR,通过重要性采样重加权SFT损失,提升后续RL训练效果。
LAD-VF:LLM自动微分实现基于形式化方法反馈的无微调机器人规划
机构 * The University of Texas at Austin(德克萨斯大学奥斯汀分校) ; University of São Paulo(圣保罗大学) ; Texas A&M University(德克萨斯A&M大学) ; SylphAI
专题命中 指令微调 :LLM(title,title_cn);large language model(abstract);language model(abstract);preference optimization(abstract)
AI总结 提出LAD-VF框架,利用形式化验证反馈和LLM自动微分自动优化提示词,无需微调即可提升机器人规划任务中规范符合率,成功率从60%提升至90%以上。
Comments Presented at ICRA 2026
Prompt2Fingerprint: 通过文本到权重生成实现即插即用的LLM指纹生成
机构 * Shenzhen International Graduate School, Tsinghua University, Shenzhen, China(清华大学深圳国际研究生院,中国深圳) ; South China University of Technology, Guangzhou, China(华南理工大学,中国广州) ; Harbin Institute of Technology, Shenzhen, Shenzhen, China(哈尔滨工业大学深圳校区,中国深圳)
专题命中 指令微调 :LLM(title,title_cn);large language model(abstract);language model(abstract);分类 cs.CL、cs.AI、cs.LG
AI总结 本文提出Prompt2Fingerprint框架,将LLM指纹生成重新定义为条件参数生成任务,通过专用生成器将文本描述直接映射到低秩参数增量,实现无需进一步模型微调的即插即用LLM指纹注入,显著降低计算开销,提供可扩展且即时的LLM所有权管理解决方案。
LLM-AutoDP: 通过LLM代理实现模型微调的自动数据处理
机构 * Ant Group(蚂蚁集团)
专题命中 指令微调 :LLM(title,title_cn);large language model(abstract);language model(abstract);分类 cs.CL、cs.AI、cs.LG
AI总结 本文提出LLM-AutoDP框架,利用LLM代理自动生成和优化数据处理策略,通过迭代学习机制提升处理质量,同时减少隐私风险和人工成本。
Comments Accepted by VLDB2026
LASA:语言无关的语义对齐在语义瓶颈处用于LLM安全性
机构 * The Conversational AI (CoAI) group, DCST, Tsinghua University(清华大学对话人工智能(CoAI)组,DCST,清华大学) ; Alibaba Group(阿里巴巴集团) ; Tsinghua University(清华大学)
专题命中 指令微调 :LLM(title,title_cn);large language model(abstract);language model(abstract);分类 cs.CL、cs.AI、cs.LG
AI总结 本文提出LASA方法,通过在语义瓶颈层对齐安全理解,提升LLM在所有语言中的安全性,实验显示攻击成功率显著降低。