Toward Sustainable GenAI using Generation Directives for Carbon-Friendly Large Language Model Inference
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract);分类 cs.CL、cs.AI、cs.LG
AI 大模型
大语言模型、预训练、指令微调、后训练和语言模型应用。
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract);分类 cs.CL、cs.AI、cs.LG
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract);分类 cs.CL、cs.AI、cs.LG
Comments 21 papers analysed and synthesized in detail from a total search result size of 594 (raw results) / 61 (scanned) / 28 (selected)
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);pretraining(abstract);分类 cs.CL、cs.AI、cs.LG
Comments code at: https://github.com/WANGXinyiLinda/concept-based-demonstration-selection Accepted to NeurIPS 2023
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract);分类 cs.CL、cs.AI、cs.LG
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract);分类 cs.CL、cs.AI、cs.LG
Comments Accepted to ICLR 2024, Spotlight top 5%, 24 pages. This work will be open sourced at: https://github.com/YUCHEN005/RobustGER under MIT license
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract);分类 cs.CL、cs.AI、cs.LG
Comments 15 pages, 8 figures
Journal ref published in ICLR2024
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract);分类 cs.CL、cs.AI、cs.LG
Comments Include wrong information in comment. Should be 7 pages and not published yet
专题命中 效率与部署 :language model(title,abstract);small language model(title,abstract);large language model(abstract);分类 cs.CL、cs.AI、cs.LG
Comments NeurIPS 2023
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract);分类 cs.CL、cs.AI、cs.LG
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract);分类 cs.CL、cs.AI、cs.LG
Comments Submitted to Nature - Machine Intelligence (Revised and Extended)
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract);分类 cs.CL、cs.AI、cs.LG
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract);分类 cs.CL、cs.AI、cs.LG
面向大语言模型量化鲁棒性的雅可比引导噪声注入
机构 * Amazon(亚马逊)
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract);分类 cs.AI、cs.LG
AI总结 该研究针对大语言模型量化时自注意力机制对离散化误差敏感的问题,提出雅可比引导噪声注入训练策略,在低比特量化下显著提升了模型在图像分类与语言建模任务中的性能。
Comments Accepted at AdaptFM: Resource-Adaptive Foundation Model Inference, ICML 2026
SMARTER: 一种数据高效框架,通过自增强大语言模型提升毒性检测与解释
机构 * University of Maryland(马里兰大学)
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);preference optimization(abstract);分类 cs.CL、cs.AI
AI总结 SMARTER通过两阶段框架利用大语言模型自身输出生成解释,提升内容审核的可解释性,实验表明在三个基准任务中实现13%的宏F1提升,且数据使用量仅为全训练数据的分数。
Comments ACL 2026. NLP, Hate speech detection, explanation, LLM. Version 3
视觉-语言与大语言模型在胃肠病学中的表现:GPT、Claude、Llama、Phi、Mistral、Gemma及量化模型
机构 * Icahn School of Medicine at Mount Sinai(西奈山伊坎医学院) ; University of Texas Health(德克萨斯大学健康科学中心) ; Virginia Hospital Center(弗吉尼亚医院中心) ; Shahid Beheshti University of Medical Sciences(沙希德·贝赫什提医科大学) ; Stanford University(斯坦福大学) ; Cedars-Sinai Medical Center(西达赛奈医疗中心) ; Inova Fairfax Medical Campus(伊诺瓦费尔法克斯医疗中心) ; University of California–Los Angeles(加州大学洛杉矶分校) ; NYU Grossman School of Medicine(纽约大学格罗斯曼医学院) ; Columbia University(哥伦比亚大学)
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract,comments);分类 cs.CL、cs.AI
AI总结 本研究评估了大语言模型和视觉-语言模型在胃肠病学中的医学推理性能,比较了不同模型配置、参数及提示工程策略对性能的影响,发现专有模型在准确性上优于开源模型,且图像描述对视觉-语言模型性能有显著影响。
Comments Manuscript Pages: 34, Figures: 7, Tables: 2, Supplementary File Pages: 35, Data Transparency Statement: Code is available at: https://github.com/Sdamirsa/LLM-VLM-in-Gastroenterology . Study data from American College of Gastroenterology (ACG) are restricted and available upon request with ACG permission. Correction: updated abstract considering Llama3.1 results
Journal ref npj Digital Medicine 8, 797 (2025)
机构 * Northeastern University, Boston, MA(东北大学) ; Northwestern University, Evanston, IL(西北大学)
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract);分类 cs.CL、cs.LG
Journal ref Proceedings of the 3rd Workshop on Efficient Systems for Foundation Models (ES-FoMo III) at ICML 2025
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract);分类 cs.AI、cs.LG
Comments Accepted to International Conference on Learning Representations (ICLR) Workshop on Scalable Optimization for Efficient and Adaptive Foundation Models (SCOPE)
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);LLM(abstract,comments);分类 cs.CL、cs.LG
Comments Source code is available at https://github.com/Singularity-AI-Lab/LLM-Energy-Knowledge-Distillation
专题命中 效率与部署 :large language model(title,abstract);language model(title,abstract);prompting(abstract);分类 cs.CL、cs.LG
Comments Accepted to NeurIPS 2023 Workshop "I Can't Believe It's Not Better: Failure Modes in the Age of Foundation Models"
FormuEvo:大语言模型引导的进化算法用于发现求解器高效的混合整数规划模型
机构 * College of Computing and Data Science, Nanyang Technological University(南洋理工大学计算与数据科学学院) ; School of Computing and Information Systems, Singapore Management University(新加坡管理大学计算与信息系统学院) ; Tsinghua University(清华大学)
专题命中 效率与部署 :LLM(title,summary_cn);large language model(abstract);language model(abstract);分类 cs.CL
AI总结 FormuEvo是LLM引导的进化框架,将MIP模型设计转化为符号空间的进化优化,结合求解器感知诊断与结构化内存,发现的MIP模型性能远超专家设计及现有LLM方法,求解加速最高达5.5倍且知识可跨场景迁移。
Comments 27 pages, 6 figures, and 9 tables. To appear in the Proceedings of EMNLP 2026
大语言模型(LLM)缓存应采用哪种驱逐策略?跨工作负载、容量和编码器的系统研究
专题命中 效率与部署 :LLM(title,title_cn);分类 cs.LG
AI总结 本研究使用CLEVER工具在多场景下对比多种LLM缓存驱逐策略,发现LFU性能最优,且当前操作点的答案可替换性低、阈值难跨模型迁移,建议部署时先验证答案有效性再测试次级策略差异。
Comments 11 pages, 9 figures
基于大语言模型的可持续数据中心运行预测决策
机构 * The University of Sydney Business School, The University of Sydney(悉尼大学商学院,悉尼大学) ; University of North Carolina at Chapel Hill(北卡罗来纳大学教堂山分校) ; Purdue University(普渡大学)
专题命中 效率与部署 :LLM(title,summary_cn);large language model(abstract);language model(abstract);分类 cs.LG
AI总结 本研究针对数据中心高能耗问题,提出基于LLM的预测调度系统,经合作验证可降低32%能耗、30%等待时间,为数据中心可持续运行提供实用方案。
从大语言模型(LLM)推理到智能体工作负载:特征分析与服务系统启示
专题命中 效率与部署 :LLM(title,title_cn);分类 cs.AI
AI总结 本文提出AgentSysBench基准套件,分析智能体工作负载与传统LLM服务的6项差异,据此开展的4项设计探索可实现延迟降低、效率提升、内存减少及冗余调用节省等效果。
重新思考自动程序修复:缺陷复杂度、缺陷定位与大语言模型成本效率的影响
专题命中 效率与部署 :LLM(title,summary_cn);large language model(abstract);language model(abstract);分类 cs.AI
AI总结 本研究通过实证分析,发现中等复杂度缺陷可超50%由低成本LLM修复,不精确缺陷定位会扩大APR技术差距,高成本LLM与强推理设置并非总能提升成本效率,DeepSeek-V3.2成本效率最优。
Comments 20 pages, 6 figures, 10 tables. Accepted at ESEM 2026
通过因果推理发现基于大语言模型的多智能体系统的高效且可解释的通信拓扑
专题命中 效率与部署 :LLM(title,summary_cn);large language model(abstract);language model(abstract);分类 cs.AI
AI总结 该研究针对基于LLM的多智能体系统通信拓扑可解释性不足的问题,提出模型无关框架E2-Explainer,通过因果推理识别关键通信子图,在保持任务性能的同时降低了通信成本。
InFactPlanner:可持续地理分布式大语言模型(LLM)数据中心规划
专题命中 效率与部署 :LLM(title,title_cn);分类 cs.AI
AI总结 InFactPlanner是用于LLM推理的可持续地理分布式数据中心部署假设分析的决策支持框架,可通过多维度建模分析得出可持续性与延迟最优选择存在差异等结论。
Comments Author copy of paper published at 34th International Symposium on the Modeling, Analysis, and Simulation of Computer and Telecommunication System (MASCOTS2026)
LLM-MC-Affect: 基于大语言模型的蒙特卡洛建模:情感轨迹与潜在模糊性的人际动态洞察
机构 * University of Arizona(亚利桑那大学) ; Pennsylvania State University(宾夕法尼亚州立大学) ; Universidad de Sonora(索尔纳大学) ; University of North Dakota(北达科他大学)
专题命中 效率与部署 :LLM(title,title_cn);分类 cs.CL
AI总结 本文提出LLM-MC-Affect框架,通过概率建模方法,将情感视为连续的潜在概率分布,从而捕捉人际互动中的情感轨迹和潜在模糊性,为动态分析提供新的视角和方法。
Comments Accepted to the 64th Annual Meeting of the Association for Computational Linguistics (ACL 2026)
Astrolabe:基于随机预测引导调度的大语言模型服务负载均衡
机构 * University of Cambridge(剑桥大学)
专题命中 效率与部署 :LLM(title,summary_cn);large language model(abstract);language model(abstract);分类 cs.AI
AI总结 本文提出Astrolabe,一种用于LLM服务的随机预测引导调度器,结合响应长度估计等策略实现负载均衡,在多组基准测试中提升SLO容量、降低延迟并减少资源开销。
Comments 16 pages. Accepted at SYSTOR 2026. Camera-ready version with expanded evaluation and revisions. Previously circulated as "Block"; renamed "Astrolabe" to match the SYSTOR publication title
RouteGuard:当互补性不足时,对LLM多智能体系统中的路由增益进行认证
专题命中 效率与部署 :LLM(title,title_cn);分类 cs.LG
AI总结 针对LLM多智能体路由的部署问题,提出RouteGuard框架,通过分解增益、结合Le Cam下界等实现认证,在两个基准中验证了其有效性。
ElasticBack:通过耦合触发-规则优化实现LLM智能体技能中的隐蔽条件后门
专题命中 效率与部署 :LLM(title,title_cn);分类 cs.AI
AI总结 本研究提出ElasticBack,通过耦合触发-规则优化在LLM智能体技能中植入条件性单技能后门,实验显示其攻击性能优异且隐蔽性强,可推动技能供应链的防御研究。