语言大模型 / LLM

Training Matryoshka Mixture-of-Experts for Elastic Inference-Time Expert Utilization

Yaoxiang Wang, Qingguo Hu, Yucheng Ding, Ruizhe Wang, Yeyun Gong, Jian Jiao, Yelong Shen, Peng Cheng, Jinsong Su

机构 * Xiamen University（厦门大学） ； Shanghai Jiao Tong University（上海交通大学） ； University of Science and Technology of China（中国科学技术大学） ； Microsoft（微软） 纠错

专题命中 效率与部署 ：large language model(abstract)；language model(abstract)；分类 cs.CL

dParallel: Learnable Parallel Decoding for dLLMs

Zigeng Chen, Gongfan Fang, Xinyin Ma, Ruonan Yu, Xinchao Wang

机构 * National University of Singapore（新加坡国立大学） 纠错

专题命中 效率与部署 ：large language model(abstract)；language model(abstract)；分类 cs.CL

Comments Working in progress, code base: https://github.com/czg1225/dParallel

Norm-Q: Effective Compression Method for Hidden Markov Models in Neuro-Symbolic Applications

Hanyuan Gao, Xiaoxuan Yang

机构 * Department of Electrical and Computer Engineering（电气与计算机工程系） 纠错

专题命中 效率与部署 ：large language model(abstract)；language model(abstract)；分类 cs.LG

Comments Accepted by Asilomar 2025

Reinforcement Learning-Guided Chain-of-Draft for Token-Efficient Code Generation

Xunzhu Tang, Iyiola Emmanuel Olatunji, Tiezhu Sun, Jacques Klein, Tegawende F. Bissyande

机构 * University of Luxembourg（卢森堡大学） 纠错

专题命中 效率与部署 ：LLM(abstract)；prompting(abstract)；分类 cs.AI

Metis: Training LLMs with FP4 Quantization

Hengjie Cao, Mengyi Chen, Yifeng Yang, Ruijun Huang, Fang Dong, Jixian Zhou, Anrui Chen, Mingzhi Dong, Yujiang Wang, Jinlong Hou, Yuan Cheng, Fan Wu, Fan Yang, Tun Lu, Ning Gu, Li Shang

机构 * Fudan University（复旦大学） ； University of Bath（巴斯大学） ； Oxford Suzhou Centre for Advanced Research（牛津苏浙研究中心） ； Shanghai Innovation Institute（上海创新研究院） ； Huawei（华为公司） 纠错

专题命中 效率与部署 ：large language model(abstract)；language model(abstract)；分类 cs.LG

FedGCS: A Generative Framework for Efficient Client Selection in Federated Learning via Gradient-based Optimization

Zhiyuan Ning, Chunlin Tian, Meng Xiao, Wei Fan, Pengyang Wang, Li Li, Pengfei Wang, Yuanchun Zhou

机构 * Computer Network Information Center, Chinese Academy of Sciences（中国科学院计算机网络信息中心） ； University of Chinese Academy of Sciences（中国科学院大学） ； Hangzhou Institute for Advanced Study, UCAS（UCAS杭州先进研究院） ； Department of Computer and Information Science, IOTSC, University of Macau（澳门科技大学计算机与信息科学系） ； University of Oxford（牛津大学） 纠错

专题命中 效率与部署 ：large language model(abstract)；language model(abstract)；分类 cs.LG

Comments Accepted by IJCAI-2024; Add an appendix

SQUARE: Semantic Query-Augmented Fusion and Efficient Batch Reranking for Training-free Zero-Shot Composed Image Retrieval

Ren-Di Wu, Yu-Yen Lin, Huei-Fang Yang

机构 * National Sun Yat-sen University（国立中山大学） 纠错

专题命中 效率与部署 ：large language model(abstract)；language model(abstract)

Comments 20 pages, 9 figures

MeanFlowSE: One-Step Generative Speech Enhancement via MeanFlow

Yike Zhu, Boyi Kang, Ziqian Wang, Xingchen Li, Zihan Zhang, Wenjie Li, Longshuai Xiao, Wei Xue, Lei Xie

机构 * The Hong Kong University of Science and Technology, Hong Kong, China（香港科学与技术大学，香港，中国） ； Huawei Technologies, China（华为技术有限公司，中国） 纠错

专题命中 效率与部署 ：large language model(abstract)；language model(abstract)

Comments Submitted to ICASSP 2026

Knowledge distillation through geometry-aware representational alignment

Prajjwal Bhattarai, Mohammad Amjad, Dmytro Zhylko, Tuka Alhanai

机构 * New York University Abu Dhabi（纽约大学阿布扎赫德分校） ； New York University（纽约大学） ； Tandon School of Engineering（Tandon工程学院） 纠错

专题命中 效率与部署 ：language model(abstract)；分类 cs.AI、cs.LG

Using Knowledge Graphs to harvest datasets for efficient CLIP model training

Simon Ging, Sebastian Walter, Jelena Bratulić, Johannes Dienert, Hannah Bast, Thomas Brox

机构 * University of Freiburg（弗赖堡大学） 纠错

专题命中 效率与部署 ：foundation model(abstract)；分类 cs.CL、cs.LG

Comments Accepted for oral presentation at GCPR 2025 (German Conference on Pattern Recognition). This is the version submitted to the conference, not the official conference proceedings

CODA: Repurposing Continuous VAEs for Discrete Tokenization

Zeyu Liu, Zanlin Ni, Yeguo Hua, Xin Deng, Xiao Ma, Cheng Zhong, Gao Huang

机构 * Tsinghua University（清华大学） ； Renmin University（中国人民大学） ； Lenovo Research, AI Lab（联想研究院人工智能实验室） 纠错

专题命中 效率与部署 ：language model(abstract)；分类 cs.AI

Comments Project page: https://lzy-tony.github.io/coda

FastCoder: Accelerating Repository-level Code Generation via Efficient Retrieval and Verification

Qianhui Zhao, Li Zhang, Fang Liu, Xiaoli Lian, Qiaoyuanhe Meng, Ziqian Jiao, Zetong Zhou, Jia Li, Lin Shi

机构 * 1 State Key Laboratory of Complex \& Critical Software Environment, School of Computer Science ； Engineering Beihang University, China ； 2 School of Software, Beihang University, China ； 3 Peking University, China 纠错

专题命中 效率与部署 ：LLM(abstract)；分类 cs.AI

Comments Accepted by ASE 2025

Interpret, prune and distill Donut : towards lightweight VLMs for VQA on document

Adnan Ben Mansour, Ayoub Karine, David Naccache

机构 * DIENS, École Normale Supérieure of Paris, Paris, France（巴黎高等师范学院DIENS） ； Université Paris Cité, LIPADE, F-75006 Paris, France（巴黎大学） ； Be-ys Research, Paris, France（Be-ys研究所） 纠错

专题命中 效率与部署 ：language model(abstract)

Comments Accepted at Workshop on Machine Learning in Document Analysis and Recognition (ICDAR WML 2025), Wuhan, China

Adapting SAM with Dynamic Similarity Graphs for Few-Shot Parameter-Efficient Small Dense Object Detection: A Case Study of Chickpea Pods in Field Conditions

Xintong Jiang, Yixue Liu, Mohamed Debbagh, Yu Tian, Valerio Hoyos-Villegas, Viacheslav Adamchuk, Shangpeng Sun

机构 * McGill University（麦吉尔大学） ； Michigan State University（密歇根州立大学） 纠错

专题命中 效率与部署 ：foundation model(abstract)

Comments 23 pages, 11 figures, 4 tables

CHROMA: Consistent Harmonization of Multi-View Appearance via Bilateral Grid Prediction

Jisu Shin, Richard Shaw, Seunghyun Shin, Zhensong Zhang, Hae-Gon Jeon, Eduardo Perez-Pellitero

机构 * Huawei Noah’s Ark Lab（华为诺亚实验室） ； GIST AI Graduate School（GIST人工智能研究生院） ； Yonsei University（延世大学） 纠错

专题命中 效率与部署 ：foundation model(abstract)

FishNet++: Analyzing the capabilities of Multimodal Large Language Models in marine biology

Faizan Farooq Khan, Yousef Radwan, Eslam Abdelrahman, Abdulwahab Felemban, Aymen Mir, Nico K. Michiels, Andrew J. Temple, Michael L. Berumen, Mohamed Elhoseiny

机构 * King Abdullah University of Science and Technology（国王阿卜杜勒-阿齐兹大学科学与技术学院） ； Red Sea Research Center, KAUST（红海研究中心，KAUST） ； Tübingen University（图宾根大学） 纠错

专题命中 领域大模型 ：large language model(title,abstract)；language model(title,abstract)

Comments 3 figures 8 tables

VietBinoculars: A Zero-Shot Approach for Detecting Vietnamese LLM-Generated Text

Trieu Hai Nguyen, Sivaswamy Akilesh

机构 * Faculty of Information Technology, Nha Trang University（信息科技学院，纳享大学） ； Faculty of Business Administration, Swiss School of Business and Management Geneva（商业管理学院，瑞士商业与管理学校日内瓦） 纠错

专题命中 领域大模型 ：LLM(title,abstract)；large language model(abstract)；language model(abstract)；prompting(abstract)

Comments 27 pages

Detecting and Fixing API Misuses of Data Science Libraries Using Large Language Models

Akalanka Galappaththi, Francisco Ribeiro, Sarah Nadi

专题命中 领域大模型 ：large language model(title)；language model(title)；LLM(abstract)

Comments 10 pages, 3 figures, accepted in CASCON 25

MHINDR -- a DSM5 based mental health diagnosis and recommendation framework using LLM

Vaishali Agarwal, Sachin Thukral, Arnab Chatterjee

机构 * TCS Research（塔塔咨询服务研究） 纠错

专题命中 领域大模型 ：LLM(title,abstract)；large language model(abstract)；language model(abstract)；分类 cs.AI

Comments 7 pages, 1 figure, 4 tables

Building the EHR Foundation Model via Next Event Prediction

Zekai Chen, Arda Pekis, Kevin Brown

机构 * Standard Model Biomedicine（标准模型生物医学） 纠错

专题命中 领域大模型 ：foundation model(title)；large language model(abstract)；language model(abstract)；分类 cs.CL、cs.AI

A Meta-Analysis of LLM Effects on Students across Qualification, Socialisation, and Subjectification

Jiayu Huang, Ruoxin Ritter Wang, Jen-Hao Liu, Boming Xia, Yue Huang, Ruoxi Sun, Jason Minhui Xue, Jinan Zou

机构 * Australian Institute for Machine Learning, The University of Adelaide（澳大利亚机器学习研究所，阿德莱德大学） ； Centre for Research in Educational and Social Inclusion, Education Futures, University of South Australia（教育与社会包容研究中心，教育未来，南澳大利亚大学） ； Responsible AI Research (RAIR) Centre, The University of Adelaide（负责任的人工智能研究（RAIR）中心，阿德莱德大学） ； CSIRO’s Data61（澳大利亚联邦科学工业研究组织（CSIRO）的数据61） 纠错

专题命中 领域大模型 ：LLM(title)；large language model(abstract)；language model(abstract)；分类 cs.AI

Optimizing Speech Language Models for Acoustic Consistency

Morteza Rohanian, Michael Krauthammer

专题命中 领域大模型 ：language model(title,abstract)；分类 cs.CL

MASLegalBench: Benchmarking Multi-Agent Systems in Deductive Legal Reasoning

Huihao Jing, Wenbin Hu, Hongyu Luo, Jianhui Yang, Wei Fan, Haoran Li, Yangqiu Song

机构 * Hong Kong University of Science and Technology（香港理工大学） ； Tsinghua University（清华大学） 纠错

专题命中 领域大模型 ：LLM(abstract)；large language model(abstract)；language model(abstract)；分类 cs.CL、cs.AI

QUARTZ : QA-based Unsupervised Abstractive Refinement for Task-oriented Dialogue Summarization

Mohamed Imed Eddine Ghebriout, Gaël Guibon, Ivan Lerner, Emmanuel Vincent

机构 * Université de Lorraine, CNRS, Inria, LORIA（法国洛林大学、法国国家科学研究中心、法国国家信息与自动化研究所、LORIA研究所） ； Université Sorbonne Paris Nord, CNRS, Laboratoire d’Informatique de Paris Nord, LIPN（法国巴黎北大学、法国国家科学研究中心、巴黎北信息学实验室、LIPN研究所） ； Inserm, Centre de Recherche des Cordeliers, Université Paris Cité, Sorbonne Université（法国国家医学研究院、cordeliers研究中心、巴黎城市大学、索邦大学） ； HeKA, Inria Paris（HeKA、法国国家信息与自动化研究所巴黎分所） ； Department of Medical Informatics, Assistance Publique Hôpitaux de Paris, Georges Pompidou European Hospital（医学信息学系、巴黎公共医院、乔治·蓬皮杜欧洲医院） 纠错

专题命中 领域大模型 ：LLM(abstract)；large language model(abstract)；language model(abstract)；分类 cs.CL、cs.AI

Comments Accepted to Empirical Methods in Natural Language Processing (EMNLP 2025)

K-Dense Analyst: Towards Fully Automated Scientific Analysis

Orion Li, Vinayak Agarwal, Summer Zhou, Ashwin Gopinath, Timothy Kassis

机构 * Biostate AI ； Bayosthiti AI 纠错

专题命中 领域大模型 ：LLM(abstract)；large language model(abstract)；language model(abstract)；分类 cs.AI

Experience-Guided Reflective Co-Evolution of Prompts and Heuristics for Automatic Algorithm Design

Yihong Liu, Junyi Li, Wayne Xin Zhao, Hongyu Lu, Ji-Rong Wen

机构 * Gaoling School of Artificial Intelligence, Renmin University of China（中国人民大学北京校区人工智能学院） ； Department of Data Science, City University of Hong Kong（香港城市大学数据科学系） ； School of Information, Renmin University of China（中国人民大学信息学院） ； WeChat, Tencent（微信，腾讯） 纠错

专题命中 领域大模型 ：large language model(abstract)；language model(abstract)；分类 cs.CL、cs.AI

Automated Quality Assessment for LLM-Based Complex Qualitative Coding: A Confidence-Diversity Framework

Zhilong Zhao, Yindi Liu

专题命中 领域大模型 ：LLM(title)

Comments 21 pages, 2 figures, 5 tables. v2: revised abstract and JCSS-aligned prose; unified table formatting and naming; clean compile

HiStyle: Hierarchical Style Embedding Predictor for Text-Prompt-Guided Controllable Speech Synthesis

Ziyu Zhang, Hanzhao Li, Jingbin Hu, Wenhao Li, Lei Xie

机构 * School of Computer Science, Northwestern Polytechnical University（计算机科学学院，西北工业大学） 纠错

专题命中 领域大模型 ：large language model(abstract)；language model(abstract)；分类 cs.AI

Personalized Scientific Figure Caption Generation: An Empirical Study on Author-Specific Writing Style Transfer

Jaeyoung Kim, Jongho Lee, Hongjun Choi, Sion Jang

机构 * Teamreboott Inc.（Teamreboott公司） ； MIRI D.I.H Inc.（MIRI D.I.H公司） 纠错

专题命中 领域大模型 ：large language model(abstract)；language model(abstract)；分类 cs.CL

FinCap: Topic-Aligned Captions for Short-Form Financial YouTube Videos

Siddhant Sukhani, Yash Bhardwaj, Riya Bhadani, Veer Kejriwal, Michael Galarnyk, Sudheer Chava

机构 * Stanford University（斯坦福大学） ； Georgia Institute of Technology（佐治亚理工学院） 纠错

专题命中 领域大模型 ：large language model(abstract)；language model(abstract)；分类 cs.CL

Comments ICCV Short Video Understanding Workshop Paper