arXivDaily arXiv每日学术速递 周一至周五更新

AI 大模型

语言大模型 / LLM

大语言模型、预训练、指令微调、后训练和语言模型应用。

2026-08-24 至 2026-08-24 共收录 18 信号源:cs.CL, cs.AI, cs.LG

1. 预训练与数据 18 篇

2608.20371 2026-08-24 cs.CL cs.AI 新提交 90%

When Do LLMs Replace Fine-Tuned NLU? A Decision Framework for Intent Detection in Production Conversational Systems

当大语言模型(LLM)取代微调的自然语言理解(NLU)模型?面向生产型对话系统意图检测的决策框架

Carson Rodrigues, Oysturn Vas

机构 * Celabe University of Waterloo(滑铁卢大学)

专题命中 预训练与数据 :LLM(title_cn,summary_cn);large language model(abstract);language model(abstract);分类 cs.CL、cs.AI

AI总结 该研究验证LLM能否取代微调NLU模型用于意图检测,对比多方法后得出结论并提炼出生产型对话系统意图检测的决策框架。

Comments 6 pages

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.12764 2026-08-24 cs.LG cs.CL cs.CR 版本更新 88%

Detecting Functional Memorization in Code Language Models

检测代码语言模型中的功能记忆

Matthieu Meeus, Anil Ramakrishna, Shengyuan Hu, Matthew Grange, Zheng Xu, Luca Melis

机构 * Meta Imperial College London(伦敦帝国学院)

专题命中 预训练与数据 :language model(title,abstract);LLM(abstract,abstract_cn);large language model(abstract);分类 cs.CL、cs.LG

AI总结 研究代码语言模型的功能记忆现象,通过反事实设置对比暴露目标代码的模型与未暴露的参考模型,使用文本和功能相似性度量,发现功能记忆超出文本重叠的检测范围。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.13517 2026-08-24 cs.CL cs.AI 版本更新 86%

DFM Mimir v1: An Open HRM Delivering Frontier Performance at 1B Parameters Using Only Permissible Post-Training Data

DFM Mimir v1:仅使用许可的后训练数据,在10亿参数规模下实现前沿性能的开放HRM模型

Peter Schneider-Kamp, Jacob Nielsen, Gianluca Barmina, Kenneth Enevoldsen, Lukas Galke Poech

专题命中 预训练与数据 :post-training(title,abstract);large language model(abstract);language model(abstract);分类 cs.CL、cs.AI

AI总结 研究人员因大模型开发依赖非许可数据受阻,本文提出仅用许可后训练数据训练的10亿参数HRM模型Mimir v1,其在多基准测试中性能优于同规模HRM-Text 1B,可与更大前沿模型媲美,且在丹麦语任务达新SOTA,已发布于Hugging Face Hub

Comments Technical Report, 20 Pages, 1 Model, Hierarchical Reasoning Model, v2: added memorization audits

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.11911 2026-08-24 quant-ph cond-mat.dis-nn cond-mat.str-el cs.AI 版本更新 85%

Hamilton-Zero: A Neural Tensor-Network Foundation Model for Ground States of Arbitrary Quadratic Qubit Hamiltonians

Hamilton-Zero:适用于任意二次量子比特哈密顿量基态的神经张量网络基础模型

Timothy Heightman, Elena Orlova, Philip Mantrov, Aleksei Ustimenko

专题命中 预训练与数据 :foundation model(title,abstract);large language model(abstract);language model(abstract);分类 cs.AI

AI总结 该研究提出Hamilton-Zero基础模型,将二次量子比特哈密顿量基态学习转化为流形变分优化,经预训练、微调后可在8100量子比特系统上评估,突破经典模拟局限,实现量子基态的高效计算。

Comments 26 pages main text

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.20617 2026-08-24 cs.AI cs.LG 新提交 84%

Dual-Cache Latent Space Communication between Heterogeneous Language Models

异构语言模型间的双缓存隐空间通信

Jiyao Liu, Qi Zhang, Yaoyi Jia, Ziwen Kan, Song Wang

机构 * Amazon(亚马逊)

专题命中 预训练与数据 :language model(title);LLM(abstract,abstract_cn);分类 cs.AI、cs.LG

AI总结 本文提出XKV协议,解决异构语言模型隐空间通信的三个限制,仅训练转换器,在45个数据集-模型对设置中,其性能、速度均优于现有方法,参数效率更高。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.20365 2026-08-24 cs.CL cs.AI 新提交 82%

Trilingual Topic Modeling of Sri Lankan Parliamentary Debates

斯里兰卡议会辩论的三语主题建模

Himath Dhanapala, Haren Daishika, Himandhi Kuruppu, Sithija Seneviratne, Ashini Kavindya, Patalee Narasinghe, Sandeepa Weerasekara, Nisansa de Silva, Sandareka Wickramanayake

专题命中 预训练与数据 :LLM(summary_cn,abstract);分类 cs.CL、cs.AI

AI总结 针对斯里兰卡议会三语辩论语料库因多语言特性难以处理的问题,提出基于LLM的文本提取结合多语言嵌入与密度聚类的端到端框架,辅以BiTopic方法,成功识别三种语言的30个宏观主题,其时间轨迹与重大国家事件吻合,且性能优于传统LDA。

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.15765 2026-08-24 cs.CV 版本更新 82%

Learning to Orchestrate Vision Foundation Models for Multi-Task Dense Prediction

任务指令引导的视觉基础模型因果路由用于多任务学习

Donghyun Han, Yuseok Bae, Jung Uk Kim, Hyung-Il Kim

机构 * Electronics and Telecommunications Research Institute (ETRI)(韩国电子通信研究院(ETRI)) Kyung Hee University(庆熙大学) Chonnam National University(全南大学)

专题命中 预训练与数据 :foundation model(title,abstract);pretraining(abstract)

AI总结 提出TIGER框架,通过自然语言任务指令引导路由网络,结合反事实因果对齐,协调多个异构视觉基础模型实现多任务密集预测,在NYUD-v2和Pascal Context上超越现有方法。

Comments 9 pages, 4 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.20963 2026-08-24 cs.CR cs.AI 新提交 81%

Vibe Coding and Web Application Security: A Twin-Prompt Study

Vibe编码与Web应用安全:一项双提示研究

Darko Andročec

专题命中 预训练与数据 :LLM(summary_cn);large language model(abstract);language model(abstract);分类 cs.AI

AI总结 本研究通过双提示实验对比发现,明确要求安全最佳实践的Web应用生成结果,其安全问题数量更少且无高危问题,是关于LLM生成Web应用安全的初步研究。

Comments Accepted for presentation at the 37th Central European Conference on Information and Intelligent Systems (CECIIS 2026), September 16-18, 2026, Varazdin, Croatia. Author's accepted manuscript

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.16205 2026-08-24 cond-mat.mtrl-sci cs.AI physics.chem-ph 版本更新 81%

ChemGraph-XANES: An Agentic Framework for XANES Simulation and Curation

ChemGraph-XANES:用于XANES模拟与分析的代理框架

Vitor F. Grizzi, Thang Duc Pham, Luke N. Pretzie, Jiayi Xu, Murat Keceli, Cong Liu

机构 * Chemical Sciences and Engineering Division Argonne National Laboratory(阿贡国家实验室化学科学与工程部) Computational Science Division Argonne National Laboratory(阿贡国家实验室计算科学部)

专题命中 预训练与数据 :LLM(abstract,abstract_cn);large language model(abstract);language model(abstract);分类 cs.AI

AI总结 本文提出ChemGraph-XANES框架,结合自然语言任务描述与结构获取,实现XANES模拟与分析的自动化,支持高通量计算与机器学习应用。

详情

展开后加载摘要…

URL PDF HTML 收藏
2508.12536 2026-08-24 cs.DB cs.DS cs.IR 版本更新 80%

jXBW: A Compressed Index Enabling Structure-Aware JSONL Retrieval for Structured RAG

jXBW: 面向结构化RAG中结构感知JSONL检索的压缩索引

Yasuo Tabei

专题命中 预训练与数据 :LLM(abstract,abstract_cn);large language model(abstract);language model(abstract)

AI总结 提出jXBW压缩索引,通过合并树表示、基于扩展Burrows-Wheeler变换的简洁树索引和三阶段子结构搜索算法,实现查询依赖的复杂度,在百万级JSONL数据集上比最强基线快16倍至2800倍。

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.27268 2026-08-24 cs.CL cs.AI 版本更新 79%

Lost in Sampling: Assessing Lexical Reachability in LLMs via the Word Coverage Score (WCS)

迷失在采样中:通过词覆盖率评估大语言模型中的词汇可达性

Samer Awad, Javier Conde, Carlos Arriaga, Tairan Fu, Javier Coronado-Blázquez, Pedro Reviriego

机构 * Information and Processing Telecommunications Center(信息与处理电信中心) Universidad Politécnica de Madrid(马德里理工大学) Politecnico di Milano(米兰理工大学) Banco de España(西班牙银行)

专题命中 预训练与数据 :LLM(abstract_cn);large language model(abstract);language model(abstract);分类 cs.CL、cs.AI

AI总结 提出词覆盖率(WCS)指标,量化标准采样过滤器(如Top-p、Top-k、Min-p)如何抑制低频率高信息词汇的生存率,揭示解码机制对语言多样性的影响。

Comments 15 pages, 6 figures. Accepted to Findings of EMNLP 2026

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.21252 2026-08-24 cs.CL cs.AI cs.DB cs.IR 新提交 73%

EnSI-RAG: Entity-Structure-Indexed Retrieval-Augmented Generation for Long-Document Question Answering

EnSI-RAG:面向长文档问答的实体结构索引增强检索生成框架

Xuanyu Meng, Jiashuo Sun, Jash Rajesh Parekh, Jiawei Han

专题命中 预训练与数据 :LLM(abstract,abstract_cn);分类 cs.CL、cs.AI

AI总结 该研究针对长文档问答的RAG方法缺陷,提出EnSI-RAG框架,构建以实体为中心的索引,在Loong和Oolong数据集上平均准确率达78.24,较基准提升6.62个百分点,验证了其有效性。

Comments 21 pages, preprint

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.13629 2026-08-24 stat.ME cs.AI cs.LG stat.ML 版本更新 73%

Valid Inference with Synthetic Data via Task Exchangeability

通过任务可交换性实现基于合成数据的有效推断

Lezhi Tan, Tijana Zrnic

机构 * Department of Management Science & Engineering(管理科学与工程系) Department of Statistics(统计学系)

专题命中 预训练与数据 :LLM(abstract,abstract_cn);分类 cs.AI、cs.LG

AI总结 提出任务可交换性条件,确保在科学研究中使用合成数据进行统计推断的有效性,并给出在民意调查和AI评估中的应用。

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.05121 2026-08-24 cs.SD cs.AI cs.CL cs.MM eess.AS 版本更新 62%

Audio Interaction Model

音频交互模型

Zhifei Xie, Zihang Liu, Ze An, Xiaobin Hu, Yue Liao, Ziyang Ma, Dongchao Yang, Mingbao Lin, Deheng Ye, Shuicheng Yan, Chunyan Miao

机构 * NTU(国立新加坡大学) NUS(新加坡国立大学) CUHK(香港大学)

专题命中 预训练与数据 :language model(abstract);分类 cs.CL、cs.AI

AI总结 提出一种统一的在线大型音频语言模型Audio-Interaction,通过始终在线的感知-决策-响应循环实现实时音频交互,并构建了StreamAudio-2M数据集和Proactive-Sound-Bench基准,在保持主流音频任务性能的同时解锁了实时ASR、流式音频指令跟随和主动帮助等能力。

Comments Next generation of LALMs

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.21254 2026-08-24 cs.CV cs.LG 新提交 57%

On the Transferability of Agricultural Weed Detection Under Cross-Field Distribution Shift

跨田间分布偏移下的农业杂草检测可迁移性研究

Nikhilesh Prabhakar, Pranuthi Tenali, Wilfredo Abudeye Fernandez, Shekhar Borah, Athresh Karanam, Erik Blasch, Prabha Sundaravadivel, Sriraam Natarajan

机构 * The University of Texas at Dallas(德克萨斯大学达拉斯分校) The University of Texas at Tyler(德克萨斯大学泰勒分校) Air Force Research Lab(空军研究实验室)

专题命中 预训练与数据 :pretraining(abstract);分类 cs.LG

AI总结 本研究针对跨田间分布偏移下的农业杂草检测可迁移性问题,构建棉花与大豆无人机杂草数据集,对比少样本微调与无监督域自适应目标检测,发现少样本微调仅需25个标注样本即可实现更优跨作物检测性能。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.20845 2026-08-24 cs.AI cs.DB cs.IR 新提交 57%

RAG Deserves an Index: Why Ingest-Time Compilation Beats Query-Time Interpretation

检索增强生成(RAG)值得一个索引:为什么摄入时编译优于查询时解释

Kyle Wild, Yusuke Takahashi, Asako Uraki

机构 * Endgame Labs, Inc.(终局实验室公司) Asia AI Institute(亚洲人工智能研究院) Musashino University(武藏野大学) Faculty of Data Science, Musashino University(武藏野大学数据科学学院) AIx, Inc.(AIx公司)

专题命中 预训练与数据 :language model(abstract);分类 cs.AI

AI总结 该研究提出摄入时语义编译(ISC)范式,将语料编译为可查询数据库对象,实验显示其检索效果优于传统RAG方法,增量更新成本更低,为RAG提供了索引化解决方案。

Comments Position paper. 6 pages, 2 figures, 2 tables

详情

展开后加载摘要…

URL PDF HTML 收藏
2603.20004 2026-08-24 cs.DB cs.CL 版本更新 57%

Human-Level Text-to-SQL via Reinforcement Learning on Verified Data, Without Pipeline Engineering

ReViSQL:实现人水平的文本到SQL

Yuxuan Zhu, Tengjun Jin, Yoojin Choi, Daniel Kang

机构 * UIUC(伊利诺伊大学厄巴纳-香槟分校)

专题命中 预训练与数据 :LLM(abstract);分类 cs.CL

AI总结 本文提出ReViSQL框架,通过高质量训练数据提升SQL推理能力,首次在BIRD基准上达到人水平准确率,且在不同模型规模下均表现优异。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.20467 2026-08-24 eess.SY cs.RO 新提交 50%

Learning-Based Measurement-Robust Control Barrier Functions for Obstacle Avoidance under State Estimation Error

面向状态估计误差下避障的基于学习的测量鲁棒控制障碍函数

Nicholas Rober, Yixuan Jia, Jonathan P. How

专题命中 预训练与数据 :pretraining(abstract)

AI总结 本文针对状态估计误差下避障的安全控制问题,提出DMR-CBF与NMR-CBF两种新型CBF,经理论分析、数值实验与Unitree Go2部署验证,其在保障安全性的同时降低了保守性与计算成本。

Comments 8 Pages, 6 figures

详情

展开后加载摘要…

URL PDF HTML 收藏