多模态大模型

When Entropy Is Not Enough: Multi-Modal Classification of Encrypted and Compressed Data Fragments

当熵不够时：加密和压缩数据片段的多模态分类

Fabio De Gaspari, Dorjan Hitaj, Samuele Salaris, Luigi V. Mancini

专题命中 其他多模态 ：multi-modal(title,abstract)

AI总结 针对短数据片段（512-2048字节）中加密与压缩数据难以区分的问题，提出多模态集成架构Triumvir，融合统计、序列和空间表示，在二分类和多分类任务上分别提升高达4.5和6.4个百分点。

Comments 20 pages

Best-Arm Identification-Based Trust Region Selection for Bayesian Optimization on Multimodal Functions

基于最佳臂识别的多模态函数贝叶斯优化信任区域选择

Nobuo Namura, Sho Takemori

机构 * Fujitsu Limited（富士通有限公司） 纠错

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 提出一种结合最佳臂识别与信任区域贝叶斯优化的轨迹感知框架，通过预测局部优化器最终性能并逐步淘汰次优候选，加速多模态函数全局优化。

Comments 19 pages, 13 figures

Predicting Stock Price Direction on Earnings Announcement Days using Multi-modal Deep Learning

使用多模态深度学习预测盈利公告日的股价方向

Manuel Noseda, Nathan Soldati, Marco Paina

机构 * ETH Zürich（苏黎世联邦理工学院） 纠错

专题命中 其他多模态 ：multi-modal(title,abstract)

AI总结 本研究结合基本面指标、技术指标和新闻情感，利用LSTM和Transformer模型预测盈利公告日的股价方向，发现Transformer在识别波动方面更敏感，且新闻情感有助于提升性能。

Stein-Encoder: A White-Box Supervised Encoder via Stein Identities in Multi-Modal Studies

Stein-Encoder: 多模态研究中基于Stein恒等式的白盒监督编码器

Jiarui Zhang, Shuoxun Xu, Jiasheng Shi, Xinzhou Guo

专题命中 其他多模态 ：multi-modal(title,abstract)

AI总结 针对多模态生物医学数据中基因与临床特征混杂的问题，提出Stein-Encoder白盒监督框架，利用Stein方法和残差化技术构建可解释的单指标，实现结构解耦并提升预测性能。

Dimension-Free Multimodal Sampling via Preconditioned Annealed Langevin Dynamics

无维度多模态采样：基于预处理退火朗之万动力学

Lorenzo Baldassari, Josselin Garnier, Knut Solna, Maarten V. de Hoop

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 针对函数空间问题有限维近似细化下保持稳定的多模态目标采样算法，提出预处理退火朗之万动力学，在谱条件下实现维度一致的时间复杂度内的高斯混合目标采样。

Comments ICML 2026

Learning to Evolve: Multi-modal Interactive Fields for Robust Humanoid Navigation in Dynamic Environments

学习进化：多模态交互场用于动态环境中的稳健双足机器人导航

Peifeng Jiang, Hong Liu, Jin Jin, Wenshuai Wang, Xia Li

机构 * State Key Laboratory of General Artificial Intelligence, Peking University, Shenzhen Graduate School（一般人工智能国家重点实验室，北京大学深圳研究生院） ； Oxford Robotics Institute, University of Oxford（牛津大学机器人研究所） ； Institute for Machine Learning, Department of Computer Science, ETH Zurich（苏黎世联邦理工学院计算机科学系机器学习研究所） 纠错

专题命中 其他多模态 ：multi-modal(title,abstract)

AI总结 本文提出多模态交互场（MIF）系统，通过结合置信度感知的语义3D高斯溅射、差异触发的空间记忆更新和任务驱动的几何重建，在闭环感知-适应管道中实现稳健的双足机器人导航，显著提高了非静态环境中的重定位成功率并减少了语义内存足迹。

Comments Accepted by Robotics: Science and Systems 2026

Leveraging Self-Paced Curriculum Learning for Enhanced Modality Balance in Multimodal Conversational Emotion Recognition

通过自适应课程学习提升多模态对话情感识别的模态平衡

Phuong-Anh Nguyen, The-Son Le, Duc-Trong Le, Cam-Van Thi Nguyen

机构 * VNU University of Engineering and Technology（越南工程大学） 纠错

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 本文提出基于自适应课程学习的框架，通过双层难度评估器解决多模态对话情感识别中的模态不均衡问题，实验表明该方法在IEMOCAP和MELD数据集上显著提升了模型性能。

Comments Accepted at Neural Computing and Applications (Springer), 2026

Conformal Prediction for Multimodal Regression

多模态回归的符合预测

Alexis Bose, Jonathan Ethier, Paul Guinand

机构 * Communications Research Centre Canada（加拿大通讯研究中心） 纠错

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 本文提出多模态符合回归，通过内部特征提取实现对图像和文本等多模态数据的预测区间构造，拓展了符合预测的应用范围。

Comments Code available at https://github.com/ic-crc/uncertainty-estimation 20 pages, 34 figures

A Mutual Information Lower Bound for Multimodal Regression Active Learning

多模态回归主动学习的互信息下界

Leonardo Ferreira Guilhoto, Akshat Kaushal, Paris Perdikaris

机构 * Graduate Group on Applied Mathematics & Computational Science（应用数学与计算科学研究生组） ； Department of Computer and Information Science（计算机与信息科学系） ； University of Pennsylvania（宾夕法尼亚大学） ； Department of Mechanical Engineering and Applied Mechanics（机械工程与应用力学系） 纠错

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 本文提出多模态回归主动学习的互信息下界方法，通过两个索引框架区分epistemic和aleatoric不确定性，证明其在数据集增长时趋于零，且在多模态系统基准中优于其他基线方法。

State-resolved multimodal contributions to stratospheric polar vortex predictability

基于状态解析的多模式对平流层极涡可预测性的贡献

Shuo Yang, Dan Zhao, Tingting Xue, Chunhua Zeng, Yongwen Zhang, Xiaosong Chen

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 本文基于状态解析框架，利用厄拉五数据和特征微状态理论，揭示了平流层极涡可预测性主要由平流层状态的持续性和更高阶结构及对流层变异性共同决定，为改进亚季节到季节预报提供了物理可解释路径。

Comments 16 pages, 4 figures

STAGE: Tackling Semantic Drift in Multimodal Federated Graph Learning

STAGE：应对多模态联邦图学习中的语义漂移

Zekai Chen, Xun Wu, Xunkai Li, Yihan Sun, Rong-Hua Li, Guoren Wang

机构 * Beijing Institute of Technology（北京理工大学） ； Minzu University of China（民族大学） 纠错

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 STAGE提出一种协议优先框架，通过构建共享语义空间解决多模态联邦图学习中的语义漂移问题，提升跨客户端语义校准并减少图学习中的不一致性风险。

Multi-modal Bayesian Neural Network Surrogates with Conjugate Last-Layer Estimation

多模态贝叶斯神经网络代理模型与共轭最后一层估计

Ian Taylor, Juliane Mueller, Julie Bessac

机构 * National Laboratory of the Rockies（落基山脉国家实验室） 纠错

专题命中 其他多模态 ：multi-modal(title,abstract)

AI总结 本文提出两种多模态贝叶斯神经网络代理模型，利用共轭分布估计参数，提升多模态数据下标量和时间序列的预测精度与不确定性量化。

Comments 47 pages including references and appendix, 9 figures

ReaLB: Real-Time Load Balancing for Multimodal MoE Inference

ReaLB：多模态MoE推理的实时负载均衡

Yingping Wang, Yi Wu, Xiangyu Wu, Junwei Cui, Weilin Cai, Zhijiang Guo, Jiayi Huang

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 ReaLB通过实时调整MoE专家计算精度，提升多模态模型推理效率，减少负载不平衡，实现1.10-1.32倍的端到端加速，同时保持1%以内的精度损失。

Blaschke-type models for multimodal circle maps

多模圆映射的Blaschke型模型

Edson de Faria, Welington de Melo, Pedro A. S. Salomão, Edson Vargas

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 本文构造了多模圆映射的Blaschke型理性映射族，证明了满足自然动力学条件的多模圆映射与该族中的映射拓扑共轭，并证明该实现唯一性。

Comments 24 pages, 2 figures

Modular Markov chain Monte Carlo with application to multimodal sampling

模块化马尔可夫链蒙特卡洛方法及其在多模采样中的应用

Joonha Park

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 本文提出模块化MCMC方法，通过并行构建约束于目标空间子集的马尔可夫链，结合加权估计以减少方差，应用于多模分布的采样，提升温控方法的效率。

Tree-of-Evidence: Efficient "System 2" Search for Faithful Multimodal Grounding

证据树：高效的'系统2'搜索用于忠实的多模态接地

Micky C. Nnamdi, Benoit L. Marteau, Yishan Zhong, J. Ben Tamo, May D. Wang

机构 * Georgia Institute of Technology（佐治亚理工学院） 纠错

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 本文提出Tree-of-Evidence算法，通过离散优化问题实现多模态模型的可解释性，通过证据瓶颈和束搜索生成可审计的证据集，保留高预测性能并提升决策一致性。

Journal ref ACL 2026 Findings

Multimodal axion emissions from Abelian-Higgs cosmic strings

从阿贝尔-希格斯宇宙弦中产生多模轴子

Naoya Kitajima, Michiru Uwabo-Niibo

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 研究通过宇宙弦碰撞产生轴子，发现低能和高能区域均有轴子发射，其中低能轴子可解释冷暗物质，高能轴子可作为暗辐射，GeV级轴子可解释暗物质丰度并预测可观测暗辐射。

Comments v2: 8 pages, 8 figures; updated to match the version accepted for publication in PRD

Multimodal Remote Inference

多模态远程推断

Keyuan Zhang, Yin Sun, Bo Ji

机构 * Department of Computer Science, Virginia Tech（弗吉尼亚理工大学计算机科学系） ； Department of Electrical and Computer Engineering, Auburn University（阿伯伯大学电气与计算机工程系） 纠错

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 本文研究多模态远程推断系统，通过优化调度减少机器学习模型的推断误差，提出误差感知切换与传输策略（EAST）及低复杂度策略，实验表明EAST在多模态情况下显著降低推断误差。

Comments Submitted to IEEE/ACM Transactions on Networking; a preliminary version appeared in the Proceedings of the 22nd IEEE International Conference on Mobile Ad-Hoc and Smart Systems (MASS 2025)

Neurodiversity and Technostress: Towards a Multimodal Research Design for Evaluating Subjective, Physiological, and Behavioral Responses

神经多样性与技术压力：一种多模态研究设计，用于评估主观、生理和行为反应

Lisa van den Heuvel, Igor Ivkić, René Riedl

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 本文提出一种多模态研究设计，系统比较神经多样性与神经典型个体在标准化数字压力条件下的反应，整合主观感知、生理激活和行为表现，推动更包容的数字工作设计。

InvestChat: Exploring Multimodal Interaction via Natural Language, Touch, and Pen in an Investment Dashboard

InvestChat：通过自然语言、触控和笔在投资仪表板中探索多模态交互

Sarah Lykke Tost, Adson Lucas de Paiva Sales, Henrik Østergaard, Vaishali Dhanoa, Gabriela Molina León

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 InvestChat通过多模态输入提升投资探索体验，研究发现自然语言触控和笔输入能增强用户参与度，参与者在不同模态间互补使用，自然语言效果最佳。

Comments Poster accepted at AVI 2026; DOI included

Algorithm Unrolling-based Denoising of Multimodal Graph Signals

基于算法展开的多模态图信号去噪

Hayate Kojima, Keigo Takanami, Junya Hara, Yukihiro Bandoh, Seishi Takamura, Hiroshi Higashi, Yuichi Tanaka

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 本文提出一种基于交替最小化方案的多模态图信号去噪方法，通过同时学习图结构和信号恢复，利用深度算法展开学习参数，实验表明优于现有模型和深度学习方法。

Comments Submitted to IEEE TSIPN

Journal ref IEEE Transactions on Signal and Information Processing over Networks, 13 April 2026 (Early Access)

Leaky-Wave Antenna Analysis using Multi-Modal Network Theory with Open Periodic Boundaries

基于开放周期边界的多模网络理论的泄漏波天线分析

Oscar Senlis, John N. Le, Anthony Grbic, Mauro Ettorre, Vincent Laquerbe, David González-Ovejero

专题命中 其他多模态 ：multi-modal(title,abstract)

AI总结 本文提出两种方法，利用多模网络理论与开放周期边界分析泄漏波天线的色散特性，通过全波求解器和解析方法结合，验证了单位元的色散关系和接收性能。

Comments 9 pages, 11 figures, submitted to IEEE TAP

Multimodal branched transport infers anatomically aligned brain reaction maps

多模态分支运输推断解剖学对齐的脑反应图谱

Cristian Mendico

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 本文通过结合血氧水平依赖响应、源重构脑电图和弥散张量成像各向异性，推断出解剖学对齐的脑反应图谱，揭示了各向异性成本对路由结构的重塑作用及几何-动态优化的非平凡排名反转。

Convergence of Langevin AIS for multimodal distributions

兰格文AIS在多模分布中的收敛性

Akshat Agarwal, Gautam Iyer, Aidan Jameson, Seungjae Son, Wyatt Wimmer

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 研究多模吉布斯分布下退火重要性采样算法与兰格文蒙特卡洛结合的收敛速率，证明误差阈值固定时时间复杂度与逆温度平方成正比，并提出控制AIS采样误差的通用量。

MM-Hand: A 21-DOF Multi-modal Modular Dexterous Robotic Hand with Remote Actuation

MM-Hand：一种21自由度多模态模块化灵活机械手 with 远程驱动

Zhuoheng Li, Qingquan Lin, Checheng Yu, Qiangyu Chen, Zhiqian Lan, Lutong Zhang, Hongyang Li, Ping Luo

机构 * The University of Hong Kong（香港大学） ； City University of Hong Kong（香港城市大学） ； XiFengGu Ltd.（西风谷有限公司） 纠错

专题命中 其他多模态 ：multi-modal(title)；multimodal(abstract)

AI总结 MM-Hand通过远程驱动技术实现21自由度多模态模块化机械手，集成了弹簧回弹腱驱动手指、3D打印模块化手指和手掌结构、快速腱连接器及多模态传感系统，验证了其轻量、传感丰富和可维护性。

Predicting User Satisfaction in Online Education Platforms: A Large Language Model Based Multi-Modal Review Mining Framework

在线教育平台用户满意度预测：基于大型语言模型的多模态评论挖掘框架

Arman Bekov, Azamat Nurgali

专题命中 其他多模态 ：multi-modal(title,abstract)

AI总结 本文提出基于大型语言模型的多模态框架，通过整合文本、情感和行为数据，提升平台和课程层面用户满意度预测的准确性。

Network Capacity Bound for Personalized PageRank in Multimodal Networks

多模网络中个性化PageRank的网络容量界

M. A. Kłopotek, S. T. Wierzchoń, R. A. Kłopotek

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 本文研究多模网络中个性化PageRank的容量界限，提出适用于超图的PageRank扩展模型，并证明了不同阻尼因子情况下权威流极限的定理。

Comments 21 pages. 2 tables, 30 bibliography positions

Journal ref Fundamenta Informaticae, Volume 189, Issue 1 (July 1, 2023) fi:10214

Rapid convergence of tempering chains to multimodal Gibbs measures

温控链快速收敛于多模Gibbs测度

Seungjae Son

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 研究平行与模拟退火链的谱间隙，证明其在低目标温度下具有多项式下界，适用于广泛势能函数类。

MFE: A Multimodal Hand Exoskeleton with Interactive Force, Pressure and Thermo-haptic Feedback

MFE：一种具有交互力、压力和热触觉反馈的多模态手外骨骼

Ziyuan Tang, Yitian Guo, Chenxi Xiao

机构 * School of Information Science and Technology, ShanghaiTech University（上海科技大学信息科学与技术学院） 纠错

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 本文提出MFE多模态手外骨骼，通过20自由度捕捉手部姿态，提供力、压力和热觉反馈，提升远程操作系统的感知与交互体验。

Comments 8 pages, 7 figures, 2 tables

Journal ref IEEE Robotics and Automation Letters 11 (2026) 3756-3763

PassAI: explainable artificial intelligence algorithm for soccer pass analysis using multimodal information resources

PassAI：一种利用多模态信息资源的可解释人工智能算法用于足球传球分析

Ryota Takamido, Jun Ota, Hiroki Nakamoto

专题命中 其他多模态 ：multimodal(title,abstract)

AI总结 PassAI通过结合跟踪数据和传球者赛季统计数据，实现了足球传球成功与失败的分类，并解释其决策依据，提升了体育领域AI算法的性能和可解释性。

Comments 25 pages, 7 figures, 2 tables. IEEE Access (2025)