arXivDaily arXiv每日学术速递 周一至周五更新

AI 大模型

语言大模型 / LLM

大语言模型、预训练、指令微调、后训练和语言模型应用。

2026-01-19 至 2026-01-19 共收录 156 信号源:cs.CL, cs.AI, cs.LG

1. 预训练与数据 12 篇

2601.10719 2026-01-19 cs.AI cs.CL 90%

Do You Trust Me? Cognitive-Affective Signatures of Trustworthiness in Large Language Models

你信任我吗?大型语言模型中信任worthiness的认知-情感特征

Gerard Yeo, Svetlana Churina, Kokil Jaidka

专题命中 预训练与数据 :large language model(title,abstract);language model(title,abstract);pretraining(abstract);分类 cs.CL、cs.AI

AI总结 研究揭示大型语言模型通过认知-情感特征隐式编码信任worthiness,为构建可信AI系统提供基础。

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.10986 2026-01-19 cs.CL 88%

ZPD Detector: Data Selection via Capability-Difficulty Alignment for Large Language Models

ZPD检测器:基于能力-难度对齐的数据选择用于大语言模型

Bo Yang, Yunkui Chen, Lanfei Feng, Yu Zhang, Shijian Li

机构 * State Key Laboratory of Brain–Machine Intelligence(脑机智能国家重点实验室) College of Computer Science and Technology, Zhejiang University(计算机科学与技术学院,浙江大学)

专题命中 预训练与数据 :large language model(title,abstract);language model(title,abstract);分类 cs.CL

AI总结 ZPD检测器通过能力-难度对齐动态选择高价值样本,提升大语言模型的数据利用效率。

详情

展开后加载摘要…

URL PDF HTML 收藏
2506.12537 2026-01-19 cs.CL cs.AI eess.AS 86%

What Makes a Good Speech Tokenizer for LLM-Centric Speech Generation? A Systematic Study

什么使LLM为中心的语音生成中的良好语音分词器?系统研究

Xiaoran Fan, Zhichao Sun, Yangfan Gao, Jingfei Xiong, Hang Yan, Yifei Cao, Jiajun Sun, Shuo Li, Zhihao Zhang, Zhiheng Xi, Yuhao Zhou, Senjie Jin, Changhao Jiang, Junjie Ye, Ming Zhang, Rui Zheng, Zhenhua Han, Yunke Zhang, Demei Yan, Shaokang Dong, Tao Ji, Tao Gui

专题命中 预训练与数据 :LLM(title,abstract);language model(abstract);SLM(abstract);分类 cs.CL、cs.AI

AI总结 本文研究了LLM为中心的语音生成中语音分词器设计的影响,通过引入多令牌预测和说话人感知生成,提升了语音生成的质量和准确性。

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.09105 2026-01-19 cs.AI cs.CL cs.CV 84%

AviationLMM: A Large Multimodal Foundation Model for Civil Aviation

AviationLMM:民用航空的大规模多模态基础模型

Wenbin Li, Jingling Wu, Xiaoyong Lin. Jing Chen, Cong Chen

专题命中 预训练与数据 :foundation model(title,abstract);pretraining(abstract);分类 cs.CL、cs.AI

AI总结 AviationLMM旨在通过统一民用航空的异构数据流,提升航空安全与效率,推动可信且隐私保护的航空人工智能生态系统发展。

Comments Accepted by 2025 7th International Conference on Interdisciplinary Computer Science and Engineering (ICICSE 2025), Chongqing, China; 9 pages,1 figure,5 tables

详情

展开后加载摘要…

URL PDF HTML 收藏
2502.13137 2026-01-19 cs.AI 81%

Theorem Prover as a Judge for Synthetic Data Generation

定理推理解释器作为合成数据生成的裁判

Joshua Ong Jun Leang, Giwon Hong, Wenda Li, Shay B. Cohen

机构 * School of Informatics, The University of Edinburgh(信息学院,爱丁堡大学)

专题命中 预训练与数据 :LLM(abstract);large language model(abstract);language model(abstract);RLHF(abstract)

AI总结 本研究提出TP-as-a-Judge和RLTPF方法,通过定理推理解释器提升LLM的合成数据生成与推理准确性。

Journal ref Proc. ACL 2025, pp. 29941-29977

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.10804 2026-01-19 cs.CL 81%

BYOL: Bring Your Own Language Into LLMs

BYOL: 将你的语言带入大语言模型

Syed Waqas Zamir, Wassim Hamidouche, Boulbaba Ben Amor, Luana Marotti, Inbal Becker-Reshef, Juan Lavista Ferres

机构 * Microsoft AI for Good Research Lab(微软人工智能造福人类研究实验室)

专题命中 预训练与数据 :LLM(abstract);large language model(abstract);language model(abstract);pretraining(abstract)

AI总结 BYOL提出了一种统一框架,通过数据精炼、翻译介导等方法,提升低资源语言的LLM性能,并公开了相关模型和代码。

详情

展开后加载摘要…

URL PDF HTML 收藏
2510.24992 2026-01-19 cs.CL eess.AS 74%

POWSM: A Phonetic Open Whisper-Style Speech Foundation Model

POWSM:一种基于语音的开放式耳语风格语音基础模型

Chin-Jou Li, Kalvin Chang, Shikhar Bharadwaj, Eunjung Yeo, Kwanghee Choi, Jian Zhu, David Mortensen, Shinji Watanabe

机构 * Carnegie Mellon University(卡内基梅隆大学) University of California, Berkeley(加州大学伯克利分校) University of Texas, Austin(德克萨斯大学奥斯汀分校) University of British Columbia(不列颠哥伦比亚大学)

专题命中 预训练与数据 :foundation model(title);分类 cs.CL

AI总结 POWSM是一种能够联合执行多种语音任务的统一框架,实现了音频、文本和音素之间的无缝转换,并在低资源条件下提升了语音处理性能。

Comments 18 pages, under review. Model available at https://huggingface.co/espnet/powsm

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.10781 2026-01-19 cs.CV 67%

Future Optical Flow Prediction Improves Robot Control & Video Generation

未来光流预测改进机器人控制与视频生成

Kanchana Ranasinghe, Honglu Zhou, Yu Fang, Luyu Yang, Le Xue, Ran Xu, Caiming Xiong, Silvio Savarese, Michael S Ryoo, Juan Carlos Niebles

机构 * Salesforce AI Research(Salesforce AI研究院) Stony Brook University(石溪大学)

专题命中 预训练与数据 :language model(abstract);pretraining(abstract)

AI总结 FOFPred通过统一的视觉-语言模型和扩散架构,实现高效的未来光流预测,提升机器人控制与视频生成的性能。

Comments Project Site (Code, Models, Demo): https://fofpred.github.io

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.11006 2026-01-19 cs.LG 57%

Backdoor Attacks on Multi-modal Contrastive Learning

多模态对比学习中的后门攻击

Simi D Kuniyilh, Rita Machacy

专题命中 预训练与数据 :pretraining(abstract);分类 cs.LG

AI总结 本文研究了多模态对比学习中的后门攻击问题,分析了攻击方法、威胁模型及防御措施,并探讨了该领域的发展挑战与未来方向。

详情

展开后加载摘要…

URL PDF HTML 收藏
2511.19566 2026-01-19 cs.LG stat.ML 57%

ModHiFi: Identifying High Fidelity predictive components for Model Modification

ModHiFi:识别模型修改的高保真预测组件

Dhruva Kashyap, Chaitanya Murti, Pranav K Nayak, Tanay Narshana, Chiranjib Bhattacharyya

机构 * CSA, IISc(计算机科学与工程系,印度理工学院)

专题命中 预训练与数据 :language model(abstract);分类 cs.LG

AI总结 ModHiFi通过子集保真度度量,在无梯度和损失函数访问的情况下,实现模型剪枝和去学习的高效修改。

Comments NeurIPS 2025 (Spotlight). Our code is available at https://github.com/DhruvaKashyap/modhifi

详情

展开后加载摘要…

URL PDF HTML 收藏
2502.11866 2026-01-19 cs.CL 57%

Southern Newswires: A Large-Scale Study of Mid-Century Wire Content Beyond the Front Page

南方新闻电讯:关于20世纪中叶电讯内容的大型研究(超越首页内容)

Michael McRae

机构 * Trinity College Dublin(都柏林三一学院)

专题命中 预训练与数据 :LLM(abstract);分类 cs.CL

AI总结 本文通过构建1960-1975年间南方报纸的电讯语料库,研究20世纪中叶南方新闻报道的广泛内容及编辑差异。

详情

展开后加载摘要…

URL PDF HTML 收藏
2407.20114 2026-01-19 cs.IR cs.AI cs.CV 57%

FiCo-ITR: bridging fine-grained and coarse-grained image-text retrieval for comparative performance analysis

FiCo-ITR:弥合细粒度与粗粒度图像-文本检索以进行性能比较分析

Mikel Williams-Lekuona, Georgina Cosma

专题命中 预训练与数据 :pretraining(abstract);分类 cs.AI

AI总结 FiCo-ITR通过标准化评估方法,对比细粒度与粗粒度图像-文本检索模型的性能与效率权衡,为模型选择和混合系统研究提供依据。

Comments Published at the International Journal of Multimedia Information Retrieval

详情

展开后加载摘要…

URL PDF HTML 收藏

2. 指令微调 16 篇

2601.11113 2026-01-19 cs.LG cs.CR 89%

Differentially Private Subspace Fine-Tuning for Large Language Models

针对大语言模型的差分隐私子空间微调

Lele Zheng, Xiang Wang, Tao Zhang, Yang Cao, Ke Cheng, Yulong Shen

专题命中 指令微调 :large language model(title,abstract);language model(title,abstract);SFT(abstract);分类 cs.LG

AI总结 DP-SFT通过子空间微调方法在保持差分隐私保障的同时,有效降低噪声影响,提升大语言模型在下游任务中的准确性和稳定性。

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.11344 2026-01-19 cs.CL cs.AI 89%

How Much Would a Clinician Edit This Draft? Evaluating LLM Alignment for Patient Message Response Drafting

临床医生会修改这个草稿多少?评估LLM对患者信息回复草稿的对齐情况

Parker Seegmiller, Joseph Gatto, Sarah E. Greer, Ganza Belise Isingizwe, Rohan Ray, Timothy E. Burdick, Sarah Masud Preum

机构 * Department of Computer Science, Dartmouth College(计算机科学系,达特茅斯学院) Department of Community and Family Medicine, Dartmouth Health(社区与家庭医学系,达特茅斯健康) The Dartmouth Institute, Dartmouth College(达特茅斯研究所,达特茅斯学院)

专题命中 指令微调 :LLM(title,abstract);large language model(abstract);language model(abstract);preference optimization(abstract)

AI总结 本研究评估了LLM在患者信息回复起草任务中的对齐情况,提出了一种新的评估框架,并发现需要根据临床医生的偏好进行适应以提高可靠性。

详情

展开后加载摘要…

URL PDF HTML 收藏
2510.06534 2026-01-19 cs.AI cs.LG 88%

Beneficial Reasoning Behaviors in Agentic Search and Effective Post-training to Obtain Them

代理搜索中的有益推理行为及有效训练以获得这些行为

Jiahe Jin, Abhijay Paladugu, Chenyan Xiong

专题命中 指令微调 :post-training(title);LLM(abstract);large language model(abstract);language model(abstract)

AI总结 本文提出行为引导方法,通过预训练使代理搜索模型具备信息验证、权威评估等有益推理行为,从而在强化学习前提升任务性能。

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.11293 2026-01-19 cs.CL 85%

One LLM to Train Them All: Multi-Task Learning Framework for Fact-Checking

一个模型训练所有:事实核查的多任务学习框架

Malin Astrid Larsson, Harald Fosen Grunnaleite, Vinay Setty

机构 * University of Stavanger(斯塔万格大学)

专题命中 指令微调 :LLM(title,abstract);large language model(abstract);language model(abstract);分类 cs.CL

AI总结 本文提出多任务学习框架,通过微调单一模型提升事实核查任务的性能,实现声明检测、证据排名和立场检测的联合优化。

Comments Accepted version in ECIR 2026

详情

展开后加载摘要…

URL PDF HTML 收藏
2501.18100 2026-01-19 cs.CL cs.AI 85%

Panacea: Mitigating Harmful Fine-tuning for Large Language Models via Post-fine-tuning Perturbation

Panacea: 通过微调后扰动缓解大语言模型的有害微调

Yibo Wang, Tiansheng Huang, Li Shen, Huanjin Yao, Haotian Luo, Rui Liu, Naiqiang Tan, Jiaxing Huang, Dacheng Tao

机构 * Tsinghua University(清华大学) Shenzhen Campus of Sun Yat-sen University(中山大学深圳校区) Didichuxing Co. Ltd(滴滴出行有限公司) Nanyang Technological University(南洋理工大学)

专题命中 指令微调 :large language model(title);language model(title);分类 cs.CL、cs.AI

AI总结 Panacea通过自适应扰动优化,在保持微调性能的同时缓解大语言模型的有害微调问题

Comments Accepted by NeruIPS 2025

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.01452 2026-01-19 cs.LG cs.AI 84%

Robust and Efficient Zeroth-Order LLM Fine-Tuning via Adaptive Bayesian Subspace Optimizer

鲁棒且高效的零阶LLM微调方法:自适应贝叶斯子空间优化器

Jian Feng, Zhihong Huang

机构 * School of Mathematics, Sun Yat-sen University, Guangzhou, China(中山大学数学学院)

专题命中 指令微调 :LLM(title);large language model(abstract);language model(abstract);分类 cs.AI、cs.LG

AI总结 本文提出BSZO方法,通过自适应贝叶斯子空间优化提升零阶LLM微调的鲁棒性和效率,实验显示在多种任务中性能优于基线方法。

Comments 23 pages, 2 figures, 5 tables

详情

展开后加载摘要…

URL PDF HTML 收藏
2507.10986 2026-01-19 cs.LG 77%

StellarF: A Physics-Informed LoRA Framework for Stellar Flare Forecasting with Historical & Statistical Data

StellarF:一种结合物理知识的LoRA框架,用于利用历史和统计数据进行恒星耀斑预测

Tianyu Su, Zhiqiang Zou, Qingyu Lu, Feng Zhang, Ali Luo, Xiao Kong, Min Li

机构 * School of Computer Science, Nanjing University of Posts and Telecommunications(南京邮电大学计算机科学学院) Jiangsu Key Laboratory of Big Data Security and Intelligent Processing(江苏大数据安全与智能处理重点实验室) University of Chinese Academy of Sciences(中国科学院大学) CAS Key Laboratory of Optical Astronomy, National Astronomical Observatories(中国科学院国家天文台光学天文重点实验室) School of Astronomy and Space Science, University of Chinese Academy of Sciences(中国科学院大学天文与空间科学学院)

专题命中 指令微调 :LLM(abstract);large language model(abstract);language model(abstract);分类 cs.LG

AI总结 StellarF通过结合物理知识和LoRA框架,利用历史和统计数据提升恒星耀斑预测的准确性与物理可解释性。

Comments 12 pages, 8 figures (5 main, 3 appendix), 7 tables (2 main, 5 appendix)

详情

展开后加载摘要…

URL PDF HTML 收藏
2510.23746 2026-01-19 cs.AI cs.LG 76%

Test-Time Tuned Language Models Enable End-to-end De Novo Molecular Structure Generation from MS/MS Spectra

测试时调优的语言模型实现从MS/MS光谱到分子结构的端到端从头生成

Laura Mismetti, Marvin Alberts, Andreas Krause, Mara Graziani

机构 * IBM Research(IBM研究院) ETH Zürich(苏黎世联邦理工学院) University of Zürich(苏黎世大学)

专题命中 指令微调 :language model(title);分类 cs.AI、cs.LG

AI总结 本研究提出了一种基于Transformer模型的端到端框架,通过测试时调优策略从MS/MS光谱直接生成分子结构,显著提升了分子结构推断的准确率和适应性。

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.11398 2026-01-19 cs.CR 75%

Understanding Help Seeking for Digital Privacy, Safety, and Security

理解数字隐私、安全和安全性的求助行为

Kurt Thomas, Sai Teja Peddinti, Sarah Meiklejohn, Tara Matthews, Amelia Hassoun, Animesh Srivastava, Jessica McClearn, Patrick Gage Kelley, Sunny Consolvo, Nina Taft

专题命中 指令微调 :LLM(abstract);large language model(abstract);language model(abstract)

AI总结 研究通过分析Reddit帖子了解用户在数字隐私、安全和安全问题上的求助行为,并为开发更好的用户资源提供依据。

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.11199 2026-01-19 cs.CR cs.AI 70%

SD-RAG: A Prompt-Injection-Resilient Framework for Selective Disclosure in Retrieval-Augmented Generation

SD-RAG:一种抗提示注入的框架,用于检索增强生成中的选择性披露

Aiman Al Masoud, Marco Arazzi, Antonino Nocera

机构 * Department of Electrical, Computer and Biomedical Engineering(电气、计算机与生物医学工程系) University of Pavia(帕维亚大学)

专题命中 指令微调 :large language model(abstract);language model(abstract);分类 cs.AI

AI总结 SD-RAG通过在检索阶段应用净化和披露控制,提升检索增强生成中的隐私保护和抗提示注入能力。

详情

展开后加载摘要…

URL PDF HTML 收藏
2504.02367 2026-01-19 cond-mat.mtrl-sci cs.LG physics.comp-ph 70%

Reinforcement Fine-Tuning for Materials Design

用于材料设计的强化微调

Zhendong Cao, Lei Wang

机构 * Beijing National Laboratory for Condensed Matter Physics(北京凝聚态物理国家实验室) School of Physical Sciences, University of Chinese Academy of Sciences, Beijing 100190, China(中国科学院大学物理科学学院) Songshan Lake Materials Laboratory, Dongguan, Guangdong 523808, China(松山湖材料实验室)

专题命中 指令微调 :large language model(abstract);language model(abstract);分类 cs.LG

AI总结 本研究通过强化微调提升材料生成模型的性能,实现基于属性的材料设计与检索,发现具有矛盾材料属性的新型晶体。

Comments 10 pages, 7 figures

Journal ref Phys. Rev. B 113, 024106 (2026)

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.10931 2026-01-19 cs.CV cs.AI 57%

Sparse Data Tree Canopy Segmentation: Fine-Tuning Leading Pretrained Models on Only 150 Images

稀疏数据树冠分割:仅在150张图像上微调预训练模型

David Szczecina, Hudson Sun, Anthony Bertnyk, Niloofar Azad, Kyle Gao, Lincoln Linlin Xu

机构 * University of Waterloo(滑铁卢大学) University of Calgary(卡尔加里大学)

专题命中 指令微调 :pretraining(abstract);分类 cs.AI

AI总结 本文评估了五种模型在低数据下的树冠分割表现,发现卷积模型在小数据情况下表现更优,而Transformer模型因数据需求高和任务差异表现欠佳。

Comments 4 pages, 2 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.11087 2026-01-19 cs.CV 50%

PhysRVG: Physics-Aware Unified Reinforcement Learning for Video Generative Models

PhysRVG: 基于物理的视频生成模型统一强化学习

Qiyuan Zhang, Biao Gong, Shuai Tan, Zheng Zhang, Yujun Shen, Xing Zhu, Yuyuan Li, Kelu Yao, Chunhua Shen, Changqing Zou

机构 * Zhejiang University(浙江大学) Ant Group(蚂蚁集团) Zhejiang Lab(浙江实验室)

专题命中 指令微调 :post-training(abstract)

AI总结 PhysRVG通过引入基于物理的强化学习范式,统一视频生成模型,直接在高维空间中强制物理碰撞规则,提升生成视频的物理真实性。

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.10936 2026-01-19 cs.IR cs.HC 50%

Can Instructed Retrieval Models Really Support Exploration?

指导检索模型真的能支持探索吗?

Piyush Maheshwari, Sheshera Mysore, Hamed Zamani

专题命中 指令微调 :prompting(abstract)

AI总结 本文评估了指导检索模型在探索性搜索中的表现,发现其在排名相关性上优于传统方法,但对指示的敏感性不足,不适合长期探索任务。

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.08982 2026-01-19 cs.CV 50%

SAM-pose2seg: Pose-Guided Human Instance Segmentation in Crowds

SAM-pose2seg: 在人群中的姿态引导人类实例分割

Constantin Kolomiiets, Miroslav Purkrabek, Jiri Matas

机构 * Visual Recognition Group(视觉识别组) Department of Cybernetics(cybernetics系) Faculty of Electrical Engineering(电气工程系) Czech Technical University in Prague(布拉格捷克技术大学)

专题命中 指令微调 :prompting(abstract)

AI总结 SAM-pose2seg通过姿态引导微调提升遮挡下的人类实例分割性能,保留模型泛化能力。

Comments GitHub: https://github.com/MiraPurkrabek/BBoxMaskPose/

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.02358 2026-01-19 cs.CV 50%

VINO: A Unified Visual Generator with Interleaved OmniModal Context

VINO:一个具有交错多模态上下文的统一视觉生成器

Junyi Chen, Tong He, Zhoujie Fu, Pengfei Wan, Kun Gai, Weicai Ye

专题命中 指令微调 :language model(abstract)

AI总结 VINO通过统一的视觉生成框架实现图像和视频的生成与编辑,利用交错多模态上下文条件处理,提升多任务视觉创作能力。

Comments Project page: https://sotamak1r.github.io/VINO-web/

详情

展开后加载摘要…

URL PDF HTML 收藏

3. 后训练与偏好优化 5 篇

2601.10532 2026-01-19 cs.CL 88%

PERM: Psychology-grounded Empathetic Reward Modeling for Large Language Models

PERM:基于心理学的共情奖励建模用于大语言模型

Chengbing Wang, Wuqiang Zheng, Yang Zhang, Fengbin Zhu, Junyi Cheng, Yi Xie, Wenjie Wang, Fuli Feng

机构 * University of Science and Technology of China(中国科学技术大学) National University of Singapore(新加坡国立大学) Huawei Technologies(华为技术)

专题命中 后训练与偏好优化 :large language model(title,abstract);language model(title,abstract);分类 cs.CL

AI总结 PERM通过双向分解和旁观者视角提升大语言模型的共情能力,实验显示其在同理心基准和对话数据集上表现优异,用户偏好率达70%。

详情

展开后加载摘要…

URL PDF HTML 收藏
2505.16995 2026-01-19 cs.CL 87%

DecoupledESC: Enhancing Emotional Support Generation via Strategy-Response Decoupled Preference Optimization

解耦ESC:通过策略-回应解耦的偏好优化增强情感支持生成

Chao Zhang, Xin Shi, Xueqiao Zhang, Yifan Zhu, Yi Yang, Yawei Luo

机构 * Zhejiang University(浙江大学)

专题命中 后训练与偏好优化 :preference optimization(title,abstract);large language model(abstract);language model(abstract);SFT(abstract)

AI总结 本文提出了解耦ESC框架,通过策略-回应解耦的偏好优化方法,提升情感支持生成的质量与准确性。

详情

展开后加载摘要…

URL PDF HTML 收藏