CRFormer: A Cross-Region Transformer for Shadow Removal
Beijing Jiaotong University(北京交通大学);University of South Carolina(南卡罗来纳大学);China Mobile Research Institute(中国移动研究院)
为了恢复图像中阴影区域的原始强度,并使它们与剩余的非阴影区域兼容而不留下痕迹,阴影去除是一个非常具有挑战性的问题,它有利于许多下游图像/视频相关的任务。最近,Transformers已经显示出其强大的能力,在各种应用中,通过捕捉全局像素的相互作用,这种能力是非常可取的阴影消除。然而,由于以下两个原因,应用Transformers来促进阴影去除是不平凡的:1)由于不规则的阴影形状,补丁化操作不适合阴影去除; 2)阴影去除仅需要从非阴影区域到阴影区域的单向交互,而不是图像中所有像素之间的常见双向交互。在本文中,我们提出了一种新的跨区域Transformer,即CRFormer,阴影去除,它不同于现有的Transformers,只考虑像素的相互作用,从非阴影区域的阴影区域,而不分裂成补丁的图像。这是通过一个精心设计的区域感知的交叉注意操作,可以聚合恢复的阴影区域功能的非阴影区域功能的条件。在ISTD、AISTD、SRD和视频阴影去除数据集上的大量实验表明,与其他最先进的方法相比,我们的方法具有优越性。
2022-07-04 cs.CV
Interactive Removal and Ground Truth for Difficult Shadow Scenes
University of East Anglia(东英吉利大学);University of Bath(巴斯大学)
提出了一种以用户为中心的快速、交互、鲁棒和高质量阴影去除方法。我们的算法可以在一系列困难的情况下进行检测和去除:如高度纹理和彩色阴影。为了执行检测,采用了由两个粗略的用户输入的阴影和照亮区域的像素引导的动态学习方法。在检测之后,阴影去除通过将半影配准到归一化帧来执行,这允许我们有效地估计非均匀阴影照明变化,从而实现准确和鲁棒的去除。这项工作的另一个主要贡献是第一个验证和多场景类别的真值的阴影去除算法。该数据集包含186张图像,消除了阴影和无阴影图像之间的不一致性,并提供了一系列不同的阴影类型,如柔和,纹理,彩色和破碎的阴影。使用这些数据,对迄今为止最先进的阴影去除方法进行了最彻底的比较,显示了我们提出的新算法在几个测量和阴影类别上优于最先进的方法。为了补充我们的数据集,还提供了一个在线阴影消除基准网站,以鼓励在这个具有挑战性的研究领域进行未来的开放式比较。
2016-08-02 cs.CV
Learning from Synthetic Shadows for Shadow Detection and Removal
The University of Tokyo(东京大学)
阴影消除是计算机视觉和计算机图形学中的一项重要任务。最近的阴影去除方法是在真实成对的阴影/无阴影或阴影/无阴影/掩模图像数据集上训练所有训练卷积神经网络(CNN)。然而,获得大规模、多样化和准确的数据集一直是一个巨大的挑战,它限制了学习模型在具有不可见形状/强度的阴影图像上的性能。为了克服这一挑战,我们提出了SynShadow,一个新的大规模合成阴影/无阴影/无光泽图像三元组数据集和一个管道来合成它。我们扩展了一个物理接地阴影照明模型,并合成阴影图像给定的任意组合的无阴影图像,无光泽图像,和阴影衰减参数。由于SynShadow的多样性,数量和质量,我们证明了在SynShadow上训练的阴影去除模型在一些具有挑战性的基准上去除具有不同形状和强度的阴影方面表现良好。此外,我们表明,仅仅从SynShadow预训练模型进行微调,就可以改进现有的阴影检测和去除模型。代码可在https://github.com/naoto0804/SynShadow上公开获取。
2021-02-13 cs.CV
OmniSR: Shadow Removal under Direct and Indirect Lighting
Hangzhou Dianzi University(杭州电子科技大学);Zhejiang University(浙江大学)
针对直接与间接光照下的阴影去除问题,该研究提出新渲染管线生成合成数据集(含超3万图像对),并设计整合语义和几何先验的阴影去除网络,其性能优于现有技术且泛化性强。
2025-02-10 cs.CV
Shadow Removal Refinement via Material-Consistent Shadow Edges
Stony Brook University(石溪大学);EPFL(洛桑联邦理工学院);Amazon(亚马逊)
本研究针对阴影边界与材质边界易混淆的问题,微调SAM模型提取材质一致的阴影边缘作为自监督信号,引入颜色与纹理一致性损失优化阴影去除,在自然图像上超越现有方法,并提出无需配对数据的新评估指标与数据集。
2024-09-10 cs.CV
Consistency as Regularization for Unsupervised Shadow Removal
La Rochelle University(拉罗谢尔大学)
该研究提出无监督阴影去除框架ShadowCLR,利用带阴影图像间的一致性作为正则化,在多个基准上取得优于现有无监督方法的性能,无需阴影掩码或无阴影参考图像。
2026-09-03 cs.CV
Leveraging Contrast Information for Efficient Document Shadow Removal
本文提出了一种基于对比表示的端到端文档阴影去除方法,通过由粗到细的细化策略,有效定位阴影并提升去除效果,达到最先进的性能。
2025-11-26 cs.CV
Appearance Harmonization for Single Image Shadow Removal
Tsinghua University(清华大学);Adobe Systems Inc.(奥多比系统公司)
阴影通常会在照片中产生不需要的伪影,去除它们可能非常具有挑战性。以前的阴影去除方法通常会产生与图像其余部分在视觉上不一致的去阴影区域。在这项工作中,我们提出了一个全自动的阴影区域协调的方法,提高了外观的兼容性,通常由以前的方法产生的去阴影区域。它是基于阴影引导的基于块的图像合成方法,使用从非阴影区域采样的块重建阴影区域。然后基于重建置信度对结果进行细化,以处理独特的图像模式。大量的阴影去除结果和比较表明了我们的改进的有效性。对基准数据集的定量评估表明,我们的自动阴影协调方法有效地改进了最新技术。
2016-03-21 cs.CV
Shadow Removal by a Lightness-Guided Network with Training on Unpaired Data
Beijing Jiaotong University(北京交通大学);University of South Carolina(南卡罗来纳大学);Tianjin University(天津大学)
阴影去除可以显着提高图像的视觉质量,在计算机视觉中有许多应用。基于CNN的深度学习方法已经成为去除阴影的最有效方法,通过对成对数据进行训练,其中图像的阴影和底层无阴影版本都是已知的,或者对非成对数据进行训练,其中阴影和无阴影训练图像完全不同,没有对应关系。在实践中,考虑到训练数据收集的容易性,对未配对数据的CNN训练是更优选的。在本文中,我们提出了一种新的光照引导阴影消除网络(LG-ShadowNet),通过对不成对数据进行训练来消除阴影。在该方法中,我们首先训练CNN模块以补偿亮度,然后在来自第一CNN模块的亮度信息的指导下训练第二CNN模块以用于最终的阴影去除。我们还引入了一个损失函数,以进一步利用现有数据的颜色先验。在广泛使用的ISTD、调整后的ISTD和USR数据集上进行的大量实验表明,该方法在非配对数据上的训练效果优于现有的方法。
2020-06-28 cs.CV
ShadowFormer: Global Context Helps Image Shadow Removal
ROSE Lab(ROSE实验室)
最近的深度学习方法在图像阴影去除方面取得了可喜的成果。然而,大多数现有的方法集中在阴影和非阴影区域内的局部工作,导致阴影边界周围的严重工件以及阴影和非阴影区域之间的照明不一致。利用阴影和非阴影区域之间的全局上下文相关性对于深阴影去除模型仍然是具有挑战性的。在这项工作中,我们首先提出了一个基于Retinex的阴影模型,从中我们得到了一个新的基于transformer的网络,称为ShandowFormer,利用非阴影区域,以帮助阴影区域恢复。采用多尺度通道注意框架来分层地捕获全局信息。在此基础上,我们提出了一个阴影交互模块(SIM)与阴影交互注意力(SIA)的瓶颈阶段,有效地模拟阴影和非阴影区域之间的上下文相关性。我们在三个流行的公共数据集上进行了广泛的实验,包括ISTD,ISTD+和SRD,以评估所提出的方法。我们的方法通过使用多达150倍的模型参数来实现最先进的性能。
2023-02-03 cs.CV
Beyond Shadows: A Large-Scale Benchmark and Multi-Stage Framework for High-Fidelity Facial Shadow Removal
New York Institute of Technology(纽约理工学院);Shanghai University(上海大学);Central South University(中南大学);Xi'an Jiaotong-Liverpool University(西安交通大学利物浦大学);Huizhou University(惠州大学)
本文提出首个大规模真实世界面部阴影去除数据集ASFW,并引入FSE方法,通过实验验证其在提升阴影去除性能方面的有效性。
2026-01-27 cs.CV
Benchmarking Shadow Removal for Facial Landmark Detection and Beyond
University of South Carolina(南卡罗来纳大学);Nanyang Technological University(南洋理工大学);Alibaba Group(阿里巴巴集团);Cleveland State University(克利夫兰州立大学);Tianjin University(天津大学)
人脸标志点检测是一项非常基础和重要的视觉任务,具有许多重要的应用。在实践中,人脸标志点检测可能会受到许多自然退化的影响。最常见和最重要的退化之一是由光源阻挡引起的阴影。虽然近年来提出了许多先进的阴影去除方法来恢复图像质量,但它们对人脸标志点检测的影响还没有得到很好的研究。例如,目前还不清楚阴影去除是否可以增强面部特征点检测对不同阴影模式的鲁棒性。在这项工作中,作为第一次尝试,我们构建了一个新的基准来链接两个独立但相关的任务(即,阴影去除和面部界标检测)。特别是,建议的基准涵盖了不同的强度,大小,形状和位置的各种面部阴影。此外,为了针对面部地标检测挖掘硬阴影模式,我们提出了一种新的方法(即,对抗阴影攻击),这使我们能够构建一个具有挑战性的基准子集进行全面的分析。利用构建的基准,我们对三种最先进的阴影去除方法和三种地标检测器进行了广泛的分析。这项工作的观察促使我们设计一种新的检测感知阴影去除框架,该框架使阴影去除能够实现更高的恢复质量,并增强部署的面部标志检测器的阴影鲁棒性。
2021-11-27 cs.CV
ShaDocNet: Learning Spatial-Aware Tokens in Transformer for Document Shadow Removal
University of Macau(澳门大学);Shenzhen Institute of Advanced Technology(深圳先进技术研究院);Chinese Academy of Sciences(中国科学院)
本文提出基于Transformer的文档阴影去除模型ShaDocNet,通过阴影上下文编解码及由粗到细的阴影检测与像素级增强,在基准评估中表现出与最先进方法相当的竞争力。
2023-02-22 cs.CV
DC-ShadowNet: Single-Image Hard and Soft Shadow Removal Using Unsupervised Domain-Classifier Guided Network
National University of Singapore(新加坡国立大学);Yale-NUS College(耶鲁-新加坡国立大学学院)
本文提出无监督域分类器引导网络DC-ShadowNet,通过域分类器、新型损失函数和测试时训练,实现单图像硬阴影与软阴影的高质量去除。
2023-08-05 cs.CV
Shadow Removal via Shadow Image Decomposition
Stony Brook University(石溪大学)
我们提出了一种新的深度学习方法来去除阴影。受阴影形成的物理模型的启发,我们使用线性照明变换来模拟图像中的阴影效果,该阴影效果允许将阴影图像表示为无阴影图像、阴影参数和哑光层的组合。我们使用两个深度网络,即SP-Net和M-Net,分别预测阴影参数和阴影蒙版。该系统允许我们消除图像上的阴影效果。我们训练和测试我们的框架上最具挑战性的阴影消除数据集(ISTD)。与最先进的方法相比,我们的模型在阴影区域的均方根误差(RMSE)方面实现了40%的误差减少,将RMSE从13.3减少到7.9。此外,我们创建一个增强的ISTD数据集的基础上的图像分解系统,通过修改阴影参数,以生成新的合成阴影图像。在这个新的增强ISTD数据集上训练我们的模型,进一步将阴影区域的RMSE降低到7.4。
2019-08-23 cs.CV
Regional Attention for Shadow Removal
Tianjin University(天津大学)
本文提出轻量级区域注意力阴影去除模型RASM,通过让阴影区域与周围非阴影区域合理交互来捕获区域上下文相关性,在准确性和效率上优于现有最先进模型。
2024-11-21 cs.CV
Shadow Feature Refinement Network: Progressive Feature Refinement based on Knowledge Distillation for Effective Shadow Removal
Kyonggi University(庆熙大学)
提出SFR-Net,结合监督学习、特征细化损失与知识蒸馏,并引入后处理算法,在ISTD+和SRD数据集上实现高效且自然的阴影去除。
2026-10-06 cs.CV
Learning Restoration is Not Enough: Transfering Identical Mapping for Single-Image Shadow Removal
University of South Carolina(南卡罗来纳大学);Center for Frontier AI Research (CFAR), A*STAR(新加坡科技研究局前沿人工智能研究中心(CFAR));Tianjin University(天津大学)
针对阴影去除中数据恢复与恒等映射任务兼容性差的问题,提出分别处理两任务并迭代利用恒等映射指导阴影恢复的方法,包含IMB、IDB和SAB三个组件,在多个数据集上优于现有方法。
2023-05-18 cs.CV
MetaShadow: Object-Centered Shadow Detection, Removal, and Synthesis
Adobe Research(奥多比研究院);The Chinese University of Hong Kong(香港中文大学)
提出三合一框架 MetaShadow,通过协同的 Shadow Analyzer 与 Shadow Synthesizer 及中间特征引导,实现以对象为中心的阴影检测、去除和可控合成,并在多项基准与图像编辑任务上优于现有方法。
2024-12-03 cs.CV
SoftShadow: Leveraging Soft Masks for Penumbra-Aware Shadow Removal
Nanyang Technological University(南洋理工大学);The University of Texas at Austin(德克萨斯大学奥斯汀分校);Clemson University(克莱姆森大学)
本文提出 SoftShadow 框架,利用预训练 SAM 先验与半影物理约束生成软阴影掩码,联合微调实现端到端阴影去除,在常用数据集上取得最优性能并提升边界修复与泛化能力。
2025-03-12 cs.CV
ShadowMamba: State-Space Model with Boundary-Region Selective Scan for Shadow Removal
Department of Electrical Engineering, Faculty of Engineering, Universiti Malaya(马来大学电气工程系);Faculty of Engineering and Information Technology, Southern University College(南方学院工程与信息技术学院)
本文提出首个基于Mamba的阴影去除模型ShadowMamba,通过边界区域选择性扫描机制和阴影掩码去噪方法,在保持线性复杂度的同时有效提升了阴影去除性能。
2025-08-08 cs.CV
CNSNet: A Cleanness-Navigated-Shadow Network for Shadow Removal
University of Science and Technology of China(中国科学技术大学)
阴影去除的关键是在非阴影区域的指导下恢复阴影区域的内容。由于长期建模不足,基于CNN的方法不能彻底调查来自非阴影区域的信息。针对这一问题,提出了一种新的基于阴影模板的清晰度导航阴影网络(CNSNet),该网络包括阴影导向自适应归一化(SOAN)模块和阴影感知聚合Transformer(SAAT)模块。在阴影掩模的指导下,SOAN模块从非阴影区域制定统计数据,并自适应地将其应用于阴影区域,以进行区域级恢复。SAAT模块利用阴影掩模,通过考虑来自无阴影区域的高度相关像素来精确地引导每个阴影像素的恢复,以进行全局像素级恢复。在三个基准数据集(ISTD,ISTD+和SRD)上的大量实验表明,我们的方法具有优异的去阴影性能。
2022-09-06 cs.CV
Structure-Informed Shadow Removal Networks
City University of Hong Kong(香港城市大学);Institute of High Performance Computing (IHPC)(高性能计算研究所);Centre for Frontier AI Research (CFAR)(前沿人工智能研究中心);Agency for Science, Technology and Research (A*STAR)(新加坡科技研究局);InnoPeak Technology Inc.(InnoPeak科技公司);College of Intelligence and Computing, Tianjin University(天津大学智能与计算学部)
针对现有深度学习阴影去除方法存在的阴影残留问题,提出结构感知阴影去除网络StructNet,通过无阴影结构先验引导去除,经实验证明性能优于现有方法且可集成提升其他方法效果。
2024-02-01 cs.CV
ShadowRefiner: Towards Mask-free Shadow Removal via Fast Fourier Transformer
McMaster University(麦克马斯特大学);Shanghai Jiao Tong University(上海交通大学)
本文提出无掩模阴影去除网络ShadowRefiner,通过空间与频率表示学习及快速傅里叶注意力Transformer实现精细阴影去除,在NTIRE 2024阴影去除挑战赛中获得感知赛道冠军和保真度赛道第二名。
2024-07-03 cs.CV
Benchmarking Adversarial Robustness of Image Shadow Removal with Shadow-adaptive Attacks
School of Electrical and Electronic Engineering, Nanyang Technological University(南洋理工大学电气与电子工程学院);Nanyang Technological University(南洋理工大学)
针对阴影图像光照不均特性,提出阴影自适应对抗攻击,调整扰动预算以提升隐蔽性,并系统评估现有阴影去除方法的鲁棒性。
2024-03-15 cs.CV
FASR-Net: Unsupervised Shadow Removal Leveraging Inherent Frequency Priors
Faculty of Information Engineering and Automation, Kunming University of Science and Technology(昆明理工大学信息工程与自动化学院);College of Mechatronics and Control Engineering, Shenzhen University(深圳大学机电与控制工程学院)
本文提出无监督频率感知阴影去除网络FASR-Net,利用小波注意力下采样模块和多种新损失函数提升阴影去除效果,在AISTD和SRD数据集上取得优越性能。
2025-04-08 cs.CV
Single-Image Shadow Removal Using Deep Learning: A Comprehensive Survey
Nanyang Technological University(南洋理工大学);Clemson University(克莱姆森大学);Pengcheng Laboratory(鹏城实验室)
本文首次系统综述基于深度学习的单幅图像阴影去除方法,梳理技术进展、分类体系、性能比较与未来方向。
2024-10-04 cs.CV
Detail-Preserving Latent Diffusion for Stable Shadow Removal
Hangzhou Dianzi University(杭州电子科技大学);Zhejiang University(浙江大学)
针对复杂场景下阴影去除泛化性差的问题,提出基于Stable Diffusion的两阶段微调流水线,通过固定VAE微调去噪器及引入细节注入阶段,在保持高频细节的同时实现高效且泛化性强的阴影去除。
2024-12-23 cs.CV
ShadowDiffusion: When Degradation Prior Meets Diffusion Model for Shadow Removal
Nanyang Technological University(南洋理工大学);Peng Cheng Laboratory(鹏城实验室);Harvard University(哈佛大学)
最近的深度学习方法在图像阴影去除方面取得了可喜的成果。然而,由于缺乏退化前嵌入和建模能力的不足,它们的恢复图像仍然遭受不令人满意的边界伪影。我们的工作通过提出一个统一的扩散框架来解决这些问题,该框架集成了图像和退化先验,以实现高效的阴影去除。首先,我们提出了一个阴影退化模型,这启发我们建立了一个新的展开扩散模型,称为ShandowDiffusion。它通过使用退化先验和扩散生成先验逐步细化期望的输出,显着提高了模型的阴影去除能力,这本质上可以作为图像复原的新的强基线。此外,ShadowDiffusion作为扩散生成器的辅助任务,逐步细化估计的阴影遮罩,从而生成更准确、更强大的无阴影图像。我们在三个流行的公共数据集上进行了广泛的实验,包括ISTD,ISTD+和SRD,以验证我们的方法的有效性。与最先进的方法相比,我们的模型在PSNR方面取得了显着的改善,在SRD数据集上从31.69dB增加到34.73dB。
2022-12-13 cs.CV
Leveraging Inpainting for Single-Image Shadow Removal
University of South Carolina(南卡罗来纳大学);Tianjin University(天津大学)
本文针对全监督阴影去除缺乏成对训练数据且存在阴影残留的问题,利用图像修复预训练并提出双编码器自适应融合网络,仅用10%成对数据即可取得优于现有方法的性能。
2023-10-01 cs.CV
Soft-Hard Attention U-Net Model and Benchmark Dataset for Multiscale Image Shadow Removal
University of Thessaly(色萨利大学)
提出软-硬注意力U-Net(SHAU)架构和MSRD合成数据集,实现多尺度阴影去除,在基准上PSNR提升25.1%,RMSE降低61.3%。
2024-08-07 cs.CV
WildShadowRemover: In-the-Wild Video Shadow Removal via Detail-Preserving Video Diffusion Models
针对野外视频阴影去除难题,提出WildShadowRemover框架,通过LoRA微调适配视频扩散模型,结合细节注入、频率分解调制及Depth Anything 3深度先验,构建对应数据集,在阴影去除质量与时间一致性上优于现有方法。
2026-08-25 cs.CV
CANet: A Context-Aware Network for Shadow Removal
Wuhan University(武汉大学);JD Finance America Corporation(京东金融美国公司);Wuhan University of Science and Technology(武汉科技大学)
在本文中,我们提出了一种新的两阶段的上下文感知网络命名为CANet的阴影去除,其中的上下文信息从非阴影区域被转移到阴影区域的嵌入式特征空间。在第一阶段,我们提出了一个上下文补丁匹配(CPM)模块生成一组潜在的匹配对阴影和非阴影补丁。结合阴影和非阴影区域之间潜在的上下文关系,我们精心设计的上下文特征转移(CFT)机制可以将上下文信息从非阴影区域转移到不同尺度的阴影区域。利用重建的特征图,我们分别在L和A/B通道去除阴影。在第二阶段,我们使用编码器-解码器来细化当前结果并生成最终的阴影去除结果。我们在两个基准数据集和一些具有复杂场景的真实阴影图像上评估了我们提出的CANet。大量的实验结果有力地证明了我们提出的CANet的有效性,并表现出优越的性能,以国家的最先进的。
2021-08-23 cs.CV
Direction-aware Spatial Context Features for Shadow Detection and Removal
The Chinese University of Hong Kong(香港中文大学);The Hong Kong Polytechnic University(香港理工大学);Shenzhen Institutes of Advanced Technology, Chinese Academy of Sciences(中国科学院深圳先进技术研究院)
阴影检测和阴影去除是基本的和具有挑战性的任务,需要全局图像语义的理解。本文提出了一种新的深度神经网络设计的阴影检测和去除,通过分析空间图像上下文的方向感知的方式。为了实现这一点,我们首先制定了方向感知的注意力机制在空间递归神经网络(RNN)通过在RNN中聚合空间上下文特征时引入注意力权重。通过训练学习这些权重,我们可以恢复方向感知的空间上下文(DSC)来检测和去除阴影。该设计被开发到DSC模块中,并嵌入到卷积神经网络(CNN)中,以学习不同级别的DSC特征。此外,我们设计了一个加权的交叉熵损失,使有效的阴影检测的训练,并进一步采用网络的阴影去除,通过使用欧几里德损失函数和制定的颜色传递函数,以解决颜色和亮度不一致的训练对。我们采用了两个阴影检测基准数据集和两个阴影去除基准数据集,并进行了各种实验来评估我们的方法。实验结果表明,我们的方法对国家的最先进的方法进行阴影检测和阴影去除。
2019-05-25 cs.CV
NTIRE 2023 Image Shadow Removal Challenge Technical Report: Team IIM_TTI
Toyota Technological Institute(丰田工业大学)
针对NTIRE2023阴影去除挑战赛,我们改进ShadowFormer,通过五项关键改进(包括图像对齐、感知损失、半自动标注、联合学习及CutShadow增强),在LPIPS和MOS上分别取得0.196(第3)和7.44(第4)的成绩。
2024-03-15 cs.CV
A Reflectance Based Method For Shadow Detection and Removal
Purdue University(普渡大学)
阴影是图像的常见特征,如果不加以检测,会妨碍场景理解和视觉处理。提出了一种简单有效的基于反射率的阴影检测方法。首先对图像进行分割,并根据反射率、光照和纹理特征,将分割对识别为阴影对和非阴影对。所提出的方法进行了测试,在两个公开和广泛使用的数据集。我们的方法实现了更高的精度检测阴影相比,以前报道的方法,尽管需要更少的参数。我们还显示了无阴影图像的结果,通过重新照亮检测到的阴影区域中的像素。
2018-07-11 cs.CV
ShadowMaskFormer: Mask Augmented Patch Embeddings for Shadow Removal
City University of Hong Kong(香港城市大学);Sun Yat-Sen University(中山大学);CATL(宁德时代)
针对现有Transformer阴影去除方法依赖复杂注意力机制修改、计算成本高的问题,提出ShadowMaskFormer框架,通过掩码增强补丁嵌入在早期融入阴影信息,在多个基准上以更少参数实现了优于现有最优方法的性能。
2025-03-22 cs.CV
ShaDocFormer: A Shadow-Attentive Threshold Detector With Cascaded Fusion Refiner for Document Shadow Removal
University of Macau(澳门大学);Huizhou University(惠州学院)
本文提出ShaDocFormer,通过结合传统阈值技术与Transformer注意力机制的STD模块及级联融合精炼器CFR,实现精确的阴影掩膜检测与由粗到精的图像恢复,在定性和定量指标上均超越现有最先进方法。
2024-03-21 cs.CV
Structure-Guided Diffusion Models for High-Fidelity Portrait Shadow Removal
School of Computer Science and Engineering, Sun Yat-sen University, China(中山大学计算机科学与工程学院);Key Laboratory of Machine Intelligence and Advanced Computing, Ministry of Education, China(教育部人工智能与先进计算重点实验室)
本文提出一种基于扩散模型的人像阴影去除方法,通过提取阴影无关结构图引导图像修复扩散模型去除阴影,并利用梯度指导训练细节恢复模型,在基准数据集上显著优于现有方法。
2025-07-14 cs.CV
WavShadow: Wavelet Based Shadow Segmentation and Removal
Indian Institute of Technology Gandhinagar(印度甘地讷格尔印度理工学院)
本文提出WavShadow方法,通过引入MAE先验、FFC模块和Haar小波特征改进ShadowFormer模型,并实现改进的SAM Adapter,在DESOBA数据集上实现了更快的收敛速度与最先进的阴影分割及去除效果。
2024-11-12 cs.CV
Towards Ghost-free Shadow Removal via Dual Hierarchical Aggregation Network and Shadow Matting GAN
University of Macau(澳门大学);Xi’an University of Technology(西安理工大学)
阴影去除是场景理解的一项重要任务。许多研究只考虑图像内容的匹配,这通常会导致两种类型的重影:阴影区域的颜色干扰或阴影边界上的伪影。在本文中,我们从两个方面来解决这些问题。首先,为了仔细学习无边界伪影的图像,我们提出了一种新的网络结构,称为双层次聚合网络~(DHAN)。它包含一系列增长扩张卷积作为骨干,没有任何下采样,我们分层聚合多上下文特征,分别用于注意和预测。其次,我们认为,在有限的数据集上训练限制了网络的纹理理解,这导致了阴影区域的颜色不一致。目前,最大的数据集包含2k+阴影/无阴影图像对。然而,它只有0.1k+个独特的场景,因为许多样本共享具有不同阴影位置的完全相同的背景。因此,我们设计了一个阴影抠图生成对抗网络~(SMGAN),从给定的阴影掩模和无阴影图像合成逼真的阴影抠图。借助新的掩模或场景,我们使用合成的阴影图像增强当前数据集。实验表明,我们的DHAN可以消除阴影,并产生高质量的无重影图像。在对合成数据集和真实数据集进行训练后,我们的网络的性能大大优于其他最先进的方法。代码可在以下网址获得:http://github.com/vinthony/ghost-free-shadow-removal/
2019-11-21 cs.CV
DocDeshadower: Frequency-Aware Transformer for Document Shadow Removal
Faculty of Science and Technology, University of Macau(澳门大学科技学院);Tp-Link International Shenzhen Co.,Ltd.(普联国际(深圳)有限公司);School of Computer Science and Engineering, Huizhou University(惠州学院计算机科学与工程学院)
针对扫描文档阴影去除的挑战,提出基于拉普拉斯金字塔的多频率Transformer模型DocDeshadower,通过频带分解与多尺度融合有效去除阴影并保留细节,性能优于现有方法。
2024-07-30 cs.CV
FreeShadow: Training-Free Shadow Removal via Illumination Transfer and Selective Content Preservation in Diffusion Models
School of Computer Science and Engineering, South China University of Technology(华南理工大学计算机科学与工程学院);Pazhou Lab(琶洲实验室);Polytech Nantes, Université de Nantes(南特大学南特理工学院)
FreeShadow是基于预训练扩散模型的无需训练去阴影方法,通过光照迁移注意力等技术解决传统方法泛化差、易生伪影等问题,实验表明其泛化能力强且生成图像逼真。
2026-07-30 cs.CV
Stacked Conditional Generative Adversarial Networks for Jointly Learning Shadow Detection and Shadow Removal
Nanjing University of Science and Technology(南京理工大学)
在以往的研究中,从单个图像中理解阴影自发地衍生为两种类型的任务,包括阴影检测和阴影去除。在本文中,我们提出了一个多任务的角度,这是不接受任何现有的工作,共同学习检测和删除在一个端到端的方式,旨在享受相互改善的好处。我们的框架是基于一种新的堆叠条件生成对抗网络(ST-CGAN),它是由两个堆叠的CGAN,每个有一个发电机和一个神经网络。具体地,阴影图像被馈送到产生阴影检测掩模的第一生成器。该阴影图像,与其预测的掩模连接,通过第二个生成器,以恢复其无阴影图像。此外,这两个相应的鉴别器很可能分别为检测到的阴影区域和通过去除阴影进行的重建建模更高级别的关系和全局场景特性。更重要的是,对于多任务学习,我们的堆叠范式设计提供了一个新的观点,这是显着不同于常用的一个多分支版本。为了全面评估我们提出的框架的性能,我们构建了第一个大规模基准测试,其中包含135个场景下的1870个图像三元组(阴影图像、阴影掩模图像和无阴影图像)。广泛的实验结果一致显示了ST-CGAN在两个大规模公开数据集和我们新发布的数据集上的优势。
2017-12-07 cs.CV
Progressive Recurrent Network for Shadow Removal
University of Science and Technology of China(中国科学技术大学)
本文提出渐进循环网络PRNet,通过由粗到细的迭代阴影去除和重整合与更新模块,在保持细节的同时仅用最佳方法29%的参数,在ISTD、ISTD+和SRD上取得优越性能。
2023-11-01 cs.CV
LP-IOANet: Efficient High Resolution Document Shadow Removal
CERTH, Information Technologies Institute(CERTH信息技术研究所);Samsung Research UK(三星英国研究院)
文档阴影消除是文档增强管道中不可或缺的任务,因为它可以提高可见性,可读性,从而提高整体质量。假设大多数实际的文档阴影去除场景需要实时,准确的模型,可以在野外产生高分辨率的输出,我们提出了Laplacian Pyramid with Input/Output Attention Network(LP-IOANet),这是一种具有轻量级架构和上采样模块的新型管道。此外,我们提出了三个新的数据集,涵盖了广泛的照明条件,图像,阴影形状和观点。我们的研究结果表明,我们优于国家的最先进的平均误差(MAE)的35%的相对改善,同时运行在四倍的分辨率(国家的最先进的方法)在移动终端上的实时。
2023-03-22 cs.CV
Winner of CVPR2026 NTIRE Challenge on Image Shadow Removal: Semantic and Geometric Guidance for Shadow Removal via Cascaded Refinement
Austrian Institute of Technology(奥地利理工学院);Technical University of Munich(慕尼黑技术大学);University of Cambridge(剑桥大学);University of Würzburg(乌尔姆大学)
本文提出一种三阶段渐进式阴影去除管道,结合冻结的DINOv2语义引导和单目深度及表面法线几何线索,通过级联细化消除残留误差,最终在WSRD+2026测试集上取得最佳成绩。
2026-04-21 cs.CV
ARGAN: Attentive Recurrent Generative Adversarial Network for Shadow Detection and Removal
Wuhan University(武汉大学);Kitware Inc.(Kitware公司);Wuhan University of Science and Technology(武汉科技大学)
在本文中,我们提出了一个专注的递归生成对抗网络(ARGAN)来检测和去除图像中的阴影。生成器由多个渐进步骤组成。在每一步中,首先利用阴影注意检测器生成一个注意图,该注意图指定输入图像中的阴影区域,给定注意图,阴影去除编码器的负残差将恢复阴影较轻甚至无阴影的图像。设计了一个鉴别器来鉴别最后一步逐行扫描输出的图像是真的还是假的。此外,ARGAN适合采用半监督策略进行训练,以充分利用足够的无监督数据。在四个公共数据集上的实验表明,我们的ARGAN是强大的检测简单和复杂的阴影,并产生更真实的阴影去除结果。它优于最先进的方法,特别是在恢复阴影区域的细节。
2019-08-04 cs.CV
Cross-Modal Spherical Aggregation for Weakly Supervised Remote Sensing Shadow Removal
School of Artificial Intelligence, Optics and Electronics (iOPEN), Northwestern Polytechnical University(西北工业大学人工智能与光电学院(iOPEN))
提出弱监督阴影去除网络S2-ShadowNet,通过球面特征空间融合可见光与红外模态,利用相似性与正交性损失实现特征分离与对齐,并贡献了含4000张图像的大规模基准。
2024-06-25 cs.CV
Towards Hard and Soft Shadow Removal via Dual-Branch Separation Network and Vision Transformer
Shien-Ming Wu School of Intelligent Engineering, South China University of Technology(华南理工大学智能工程学院(冼为坚))
针对硬阴影与软阴影差异被忽视的问题,本文提出结合 Vision Transformer 和 UNet++ 的双路径分离网络,按阴影类型专用处理并设计损失函数,在 ISTD 上以 2.905 RMSE 优于现有方法。
2025-02-19 cs.CV
Portrait Eyeglasses and Shadow Removal by Leveraging 3D Synthetic Data
BNRist(北京信息科学与技术国家研究中心);Tsinghua University(清华大学)
在人像中,眼镜可能会遮挡面部区域并在面部上产生阴影,这会降低许多技术(如面部验证和表情识别)的性能。肖像眼镜拆除是处理这些问题的关键。然而,完全移除眼镜是具有挑战性的,因为照明效果(例如,投射阴影)通常是复杂的。在本文中,我们提出了一个新的框架,以消除眼镜以及他们的阴影从人脸图像。该方法采用先检测后去除的方式,即先检测眼镜和阴影,然后将其从图像中去除。由于缺乏用于监督训练的配对数据,我们提出了一个新的合成肖像数据集,用于检测和删除任务的中间和最终监督。此外,我们应用跨域技术来填补合成和真实数据之间的差距。据我们所知,所提出的技术是第一个同时去除眼镜及其投射阴影的技术。代码和合成数据集可在https://github.com/StoryMY/take-off-eyeglasses上获得。
2022-03-20 cs.CV
High-Resolution Document Shadow Removal via A Large-Scale Real-World Dataset and A Frequency-Aware Shadow Erasing Net
University of Macau(澳门大学)
针对高分辨率文档阴影去除,本文构建规模为现有数据集10倍的SD7K真实数据集,并提出频域解耦的频率感知擦除网络,显著提升视觉与数值性能。
2024-06-18 cs.CV
PhaSR: Generalized Image Shadow Removal with Physically Aligned Priors
National Yang Ming Chiao Tung University(国立阳明交通大学);National Cheng Kung University(国立成功大学)
PhaSR通过双层先验对齐解决不同光照条件下阴影去除问题,结合物理对齐归一化和几何-语义校正注意力,提升单光源到多源环境的鲁棒性,实验显示其在复杂光照下表现优异。
2026-03-29 cs.CV
Unsupervised Shadow Removal Using Target Consistency Generative Adversarial Network
Chongqing University of Technology(重庆理工大学)
无监督阴影去除的目的是学习一个非线性函数,在没有成对的阴影和非阴影数据的情况下,将原始图像从阴影域映射到非阴影域。在本文中,我们开发了一个简单而有效的目标一致性生成对抗网络(TC-GAN)的阴影消除任务,在无监督的方式。与基于周期一致性GAN的阴影去除方法中的双向映射相比,TC-GAN试图学习单侧映射,以将阴影图像投射到无阴影图像。提出的目标一致性约束,阴影图像和输出的无阴影图像之间的相关性被严格限制。大量的对比实验结果表明,TC-GAN在FID和KID方面分别比最先进的无监督阴影去除方法高出14.9%和31.5%。值得注意的是,TC-GAN实现了与监督阴影去除方法相当的性能。
2021-05-30 cs.CV eess.IV