多模态信息融合

Information fusion and machine learning for sensitivity analysis using physics knowledge and experimental data

融合信息与机器学习的敏感性分析：利用物理知识与实验数据

Berkcan Kapusuzoglu, Sankaran Mahadevan

专题命中 融合架构与评测 ：information fusion(title)

AI总结 本文提出结合物理知识与实验数据的物理信息机器学习策略，构建DNN和GP模型并融入物理约束，经实例验证可提升全局敏感性分析的准确性。

Comments Reliability Engineering & System Safety

Journal ref Reliab. Eng. Syst. Saf. 214, 107712 (2021)

Deciding When to Rely on Visual Information: Gated Multimodal Fusion in Sequential Recommendation

何时依赖视觉信息：序列推荐中的门控多模态融合

Natalija Glisovic, Danica Kragic, Martin Tegner

专题命中 融合架构与评测 ：multimodal fusion(title)

AI总结 该研究提出VisGate框架，基于物品和用户上下文自适应融合多模态信号，揭示视觉效用随物品、交互稀疏性变化的规律，实现更精准的序列推荐并可解释视觉信息的作用。

Comments 8 pages, 6 figures, Accepted at CARS @ RecSys 2026

Bitcoin Price Direction Prediction via Regime-Aware Multi-Modal Fusion of Social Sentiment and Technical Features

通过社会情绪与技术特征的状态感知多模态融合预测比特币价格走势

Muhammad Abdullah Haroon

机构 * FAST National University of Computer and Emerging Sciences (FAST-NUCES)（快速国立计算机与新兴科学大学） 纠错

专题命中 融合架构与评测 ：multi-modal fusion(title)

AI总结 研究比特币亚日价格预测难题，提出状态感知多模态学习（RAML）方法，依据市场状态动态融合社会情绪与技术特征，实验表明该方法在预测中表现良好，确立状态条件自适应融合为多模态金融预测的必要原则。

Comments 19 pages, 15 figures, 4 tables

An Exploration of Agentic Information Fusion for Test Maintenance Prediction

用于测试维护预测的智能信息融合探索

Jingxiong Liu, Nasser Mohammadiha, Gregory Gay

机构 * Chalmers University of Technology and University of Gothenburg（楚德斯技术大学和戈特堡大学） ； Ericsson AB（爱立信有限公司） ； University of Gothenburg（戈特堡大学） 纠错

专题命中 融合架构与评测 ：information fusion(title)

AI总结 研究针对测试维护预测问题，提出多智能体框架MAST，通过智能融合多种分析方法及后检查程序，在实际场景中评估，提升了测试维护预测水平。

When Does Quality-Aware Multimodal Fusion Matter? A Leakage-Safe Diagnostic for Decision-Level Dependence

质量感知多模态融合何时重要？一种针对决策级依赖的泄漏安全诊断方法

Jaden Moon, Arvind Pillai, Andrew Campbell

机构 * Dartmouth College（达特茅斯学院） 纠错

专题命中 融合架构与评测 ：multimodal fusion(title)

AI总结 提出一种诊断方法，通过置换测试检验多模态融合中可靠性分数是否真正影响决策，实验表明仅当可靠性信号能预测单模态正确性时才有效。

Comments Accepted to INTERSPEECH 2026. 5 pages, 1 figure, 5 tables

PAMF: Prior-Aware Multimodal Fusion for Incomplete Time Series Data

PAMF: 面向不完整时间序列数据的先验感知多模态融合

Ziwen Kan, Wugeng Zheng, Tianlong Chen, Song Wang

机构 * Department of Computer Science, University of Central Florida（中央佛罗里达大学计算机科学系） ； Department of Computer Science, University of North Carolina at Chapel Hill（北卡罗来纳大学教堂山分校计算机科学系） 纠错

专题命中 融合架构与评测 ：multimodal fusion(title)

AI总结 提出PAMF框架，通过先验感知流匹配和权重共享显式处理模态内缺失和模态级缺失，将插补与下游预测耦合，提升多模态医疗时间序列任务性能。

Comments 5 figures. arXiv preprint version

Step-adaptive multimodal fusion network with multi-scale cloud feature learning for ultra-short-term solar irradiance forecasting

步进自适应多模态融合网络与多尺度云特征学习用于超短期太阳辐照度预测

Jingxin Zhang Xiaoqin Wang

机构 * School of Automation, Southeast University（自动化学院，东南大学） 纠错

专题命中 融合架构与评测 ：multimodal fusion(title)

AI总结 提出一种步进自适应多模态融合网络，通过InceptionNeXt提取多尺度云特征、步进自适应低频补偿单元动态调整低频信息，并结合气象时间序列特征进行超短期太阳辐照度预测。

Decision-Level Fusion for Robust Wearable Affect Recognition

决策级融合用于鲁棒的可穿戴情感识别

Lokesh Singh, Athina Georgara, Jayati Deshmukh, Tan Viet Tuyen Nguyen, Sarvapali D. Ramchurn

专题命中 融合架构与评测 ：decision-level fusion(title)

AI总结 本文研究了可穿戴生理数据中情感状态自动识别的鲁棒性问题，提出结合傅里叶-贝塞尔级数展开与EWT的非稳态处理流程，通过决策级融合提升在异构和部分可靠传感下的识别鲁棒性。

The Topology of Multimodal Fusion: Why Current Architectures Fail at Creative Cognition

多模态融合的拓扑学：为何当前架构在创造性认知上失败

Xiujiang Tan

机构 * Guangzhou Academy of Fine Arts（广州美术学院） 纠错

专题命中 融合架构与评测 ：multimodal fusion(title)

AI总结 本文指出当前多模态AI架构存在拓扑限制而非参数限制，通过哲学、认知科学和数学三个支柱提出多模态融合的拓扑学框架，提出UOO实现、ANALOGY-MM基准和META-TOP三阶基准，通过实验路线验证拓扑同构性。

Comments Expanded 11 technical improvements; 5 reference corrections; Appendix B pseudocode added. ~43 pages, 5 figures. Chinese philosophical terms romanized. Companion monograph available separately

Modeling Induced Pleasure through Cognitive Appraisal Prediction via Multimodal Fusion

通过多模态融合进行诱导愉悦的认知评估预测建模

Nastaran Dab, Raziyeh Zall, Mohammadreza Kangavari

机构 * Iran University of Science and Technology（伊朗科学技术大学） 纠错

专题命中 融合架构与评测 ：multimodal fusion(title)

AI总结 本文提出一种多模态融合模型，通过认知评估变量预测视频诱导的愉悦，解决标签噪声、语义鸿沟、数据稀缺和解释性不足等问题，实验验证了模型在检测视频诱导愉悦方面的有效性。

A Multi-modal Fusion Network for Star-Galaxy Classification from CSST Simulated Datasets

基于CSST模拟数据的多模态融合网络用于星系分类

Zhuoming Han, Tianmeng Zhang, Chao Liu, Chenxiaoji Ling

专题命中 融合架构与评测 ：multi-modal fusion(title)

AI总结 本文提出基于ResNet-50和BiLSTM的多模态融合网络，利用CSST模拟数据提升星系和恒星分类性能，达到99.81%的召回率。

Comments 27 pages, 12 figures

A Rank-Based Information Fusion Framework for Comparing Clustered Multivariate Socioeconomic Outcomes

基于秩的信息融合框架用于比较聚类的多变量社会经济结果

Dhrubajyoti Ghosh

专题命中 融合架构与评测 ：information fusion(title)

AI总结 本文提出一种多变量无分布排名框架，用于比较跨群体的聚类相关结果，通过分析县级社会经济数据评估州级政策环境，采用秩聚合算法处理聚类数据，揭示系统性差异。

Comments This manuscript has been accepted for publication at the 2026 IEEE International Conference on Fuzzy Systems (FUZZ-IEEE). The final published version will be available via IEEE Xplore

TLDiffGAN: A Latent Diffusion-GAN Framework with Temporal Information Fusion for Anomalous Sound Detection

TLDiffGAN：一种结合时间信息融合的扩散-生成对抗网络框架用于异常声音检测

Chengyuan Ma, Peng Jia, Hongyue Guo, Wenming Yang

机构 * Shenzhen International Graduate School, Tsinghua University, China（清华大学深圳国际研究生院） ； Collaborative Innovation Center for Transport Studies, Dalian Maritime University, China（大连海事大学交通运输协同创新中心） 纠错

专题命中 融合架构与评测 ：information fusion(title)

AI总结 TLDiffGAN通过结合潜在扩散模型与预训练音频编码器，提升异常声音检测的准确性和时间频率定位能力。

Comments Accepted by ICASSP 2026

A Multi-Modal Fusion Platform for Joint Environment Sensing and Channel Sounding in Highly Dynamic Scenarios

一种多模态融合平台，用于高动态场景中的联合环境感知与信道探测

Xuejian Zhang, Ruisi He, Mi Yang, Zhengyu Zhang, Ziyi Qi

专题命中 融合架构与评测 ：multi-modal fusion(title)

AI总结 本文提出一种多模态融合平台，用于高动态场景中联合环境感知与信道探测，支持多频段多天线测量和高精度环境感知。

AVP-Pro: An Adaptive Multi-Modal Fusion and Contrastive Learning Approach for Comprehensive Two-Stage Antiviral Peptide Identification

AVP-Pro: 一种自适应多模态融合与对比学习方法用于全面两阶段抗病毒肽鉴定

Xinru Wen, Weizhong Lin, zi liu, Xuan Xiao

专题命中 融合架构与评测 ：multi-modal fusion(title)

AI总结 AVP-Pro通过自适应多模态融合和对比学习方法，实现了抗病毒肽的高效两阶段鉴定，提升了模型判别能力和小样本下的分类精度。

Comments arXiv admin note: substantial text overlap with arXiv:2512.21544

Multimodal Fusion with LLMs for Engagement Prediction in Natural Conversation

Cheng Charles Ma, Kevin Hyekang Joo, Alexandria K. Vail, Sunreeta Bhattacharya, Álvaro Fernández García, Kailana Baker-Matsuoka, Sheryl Mathew, Lori L. Holt, Fernando De la Torre

机构 * Computer Science Department, Carnegie Mellon University（卡内基梅隆大学计算机科学系） ； Robotics Institute, Carnegie Mellon University（卡内基梅隆大学机器人研究所） ； Neuroscience Institute, Carnegie Mellon University（卡内基梅隆大学神经科学研究所） ； Department of Psychology, The University of Texas at Austin（德克萨斯大学奥斯汀分校心理学系） ； Center for Perceptual Systems, The University of Texas at Austin（德克萨斯大学奥斯汀分校感知系统中心） 纠错

专题命中 融合架构与评测 ：multimodal fusion(title)

Comments 22 pages, first three authors equal contribution

Emergency Incident Detection from Crowdsourced Waze Data using Bayesian Information Fusion

Yasas Senarath, Saideep Nannapaneni, Hemant Purohit, Abhishek Dubey

机构 * George Mason University（乔治·马歇尔大学） ； Wichita State University（威斯康星州立大学） ； Vanderbilt University（范德比大学） 纠错

专题命中 融合架构与评测 ：information fusion(title)

Comments 8 pages, The 2020 IEEE/WIC/ACM International Joint Conference On Web Intelligence And Intelligent Agent Technology (WI-IAT '20)

Bridging Collaborative Filtering and Large Language Models with Dynamic Alignment, Multimodal Fusion and Evidence-grounded Explanations

Bo Ma, LuYao Liu, Simon Lau, Chandler Yuan, and XueY Cui, Rosie Zhang

机构 * Department of Software \& Microelectronics, Peking University, Beijing, China ； Economic Law School, China University of Political Science ； Financial Media, Peking University, ChangSha, China 纠错

专题命中 融合架构与评测 ：multimodal fusion(title)

PoolingVQ: A VQVAE Variant for Reducing Audio Redundancy and Boosting Multi-Modal Fusion in Music Emotion Analysis

Dinghao Zou, Yicheng Gong, Xiaokang Li, Xin Cao, Sunbowen Lee

机构 * Wuhan University of Science and Technology（武汉科技大学） 纠错

专题命中 融合架构与评测 ：multi-modal fusion(title)

Towards a Unified Textual Graph Framework for Spectral Reasoning via Physical and Chemical Information Fusion

Jiheng Liang, Ziru Yu, Zujie Xie, Yuchen Guo, Yulan Guo, Xiangyang Yu

专题命中 融合架构与评测 ：information fusion(title)

Comments We need to further modify and supplement the experiment

Contextual Attention-Based Multimodal Fusion of LLM and CNN for Sentiment Analysis

Meriem Zerkouk, Miloud Mihoubi, Belkacem Chikhaoui

专题命中 融合架构与评测 ：multimodal fusion(title)

Comments The 38th Canadian Conference on Artificial Intelligence ( 2025 )

CAST: Cross Attention based multimodal fusion of Structure and Text for materials property prediction

Jaewan Lee, Changyoung Park, Hongjun Yang, Sungbin Lim, Woohyung Lim, Sehui Han

机构 * LG AI Research（LG人工智能研究） 纠错

专题命中 融合架构与评测 ：multimodal fusion(title)

Comments 11 pages, 4 figures

EUR-USD Exchange Rate Forecasting Based on Information Fusion with Large Language Models and Deep Learning Methods

Hongcheng Ding, Xuanze Zhao, Ruiting Deng, Shamsul Nahar Abdullah, Deshinta Arrova Dewi

机构 * INTI International University（INTI国际大学） 纠错

专题命中 融合架构与评测 ：information fusion(title)

Towards LLM-Centric Multimodal Fusion: A Survey on Integration Strategies and Techniques

Jisu An, Junseok Lee, Jeoungeun Lee, Yongseok Son

机构 * Seoul National University（首尔国立大学） ； University of California San Diego（加州大学圣地亚哥分校） ； Chung-Ang University（Chung-Ang 大学） 纠错

专题命中 融合架构与评测 ：multimodal fusion(title)

Comments 18 pages, 3 figures, 3 tables

STFM: A Spatio-Temporal Information Fusion Model Based on Phase Space Reconstruction for Sea Surface Temperature Prediction

Yin Wang, Chunlin Gong, Xiang Wu, Hanleran Zhang

机构 * School of Statistics and Mathematics（统计学与数学学院） ； Jinan Fengdi Intelligent Electronics Co Ltd（济南风迪智能电子有限公司） ； Shandong Zhike Intelligence Computing Co Ltd（山东智科智能计算有限公司） ； School of Mathematics and Physics（数学与物理学院） ； SWUFE-UD Institute of Data Science（西南财经大学-UD数据科学研究所） 纠错

专题命中 融合架构与评测 ：information fusion(title)

Comments 19 pages, 14 figures

An End-to-End Comprehensive Gear Fault Diagnosis Method Based on Multi-Scale Feature-Level Fusion Strategy

Bowei Qiao, Hongwei Wang

专题命中 融合架构与评测 ：feature-level fusion(title)

MixMAS: A Framework for Sampling-Based Mixer Architecture Search for Multimodal Fusion and Learning

Abdelmadjid Chergui, Grigor Bezirganyan, Sana Sellami, Laure Berti-Équille, Sébastien Fournier

专题命中 融合架构与评测 ：multimodal fusion(title)

Journal ref 2024 IEEE International Conference on Big Data (BigData), Washington, DC, USA, 2024, pp. 3254-3257

A Novel Method for Pignistic Information Fusion in the View of Z-number

Yuanpeng He

专题命中 融合架构与评测 ：information fusion(title)

Black-box Model Ensembling for Textual and Visual Question Answering via Information Fusion

Yuxi Xia, Kilm Zaporojets, Benjamin Roth

专题命中 融合架构与评测 ：information fusion(title)

Comments 15 pages, 6 figures, 9 tables

What Differentiates Educational Literature? A Multimodal Fusion Approach of Transformers and Computational Linguistics

Jordan J. Bird

专题命中 融合架构与评测 ：multimodal fusion(title)