Learning Low Dimensional Convolutional Neural Networks for High-Resolution Remote Sensing Image Retrieval
State Key Laboratory of Information Engineering in Surveying, Mapping and Remote Sensing, Wuhan University(武汉大学测绘遥感信息工程国家重点实验室);Electrical Engineering and Computer Science, University of California, Merced(加州大学默塞德分校电气工程与计算机科学系)
学习强大的特征表示用于图像检索一直是遥感领域的一个具有挑战性的任务。传统的方法主要集中在提取低层次的手工特征,这不仅耗时,而且往往会达到不满意的性能,由于遥感图像的内容复杂。在本文中,我们研究了如何提取基于卷积神经网络(CNN)的高分辨率遥感图像检索(HRRSIR)的深度特征表示。为此,提出了两个有效的计划,以产生强大的功能表示HRRSIR。在第一种方案中,分别从预训练的CNN模型的全连接层和卷积层中提取深度特征;在第二种方案中,我们提出了一种基于传统卷积层和三层感知器的新型CNN架构。然后在大型遥感数据集上训练新的CNN模型以学习低维特征。这两个方案在几个公共和具有挑战性的数据集上进行了评估,结果表明,所提出的方案,特别是新的CNN能够实现最先进的性能。
2016-12-30 cs.CV
DDIPNet and DDIPNet+: Discriminant Deep Image Prior Networks for Remote Sensing Image Classification
S\ a o Paulo State University - UNESP Department of Computing Bauru, SP - Brazil
遥感图像分类的研究对城市规划和农业等人类日常工作具有重要影响。如今,技术的快速进步和许多高质量的遥感图像的可用性创造了可靠的自动化方法的需求。当前的论文提出了两种用于图像分类目的的基于深度学习的新架构,即,Discriminant Deep Image Prior Network和Discriminant Deep Image Prior Network+,结合了Deep Image Prior和Triplet Networks学习策略。在三个著名的遥感图像数据集上进行的实验取得了最先进的结果,证明了使用深度图像先验进行遥感图像分类的有效性。
2022-12-20 cs.CV cs.LG
Quantitative Analysis of Primary Attribution Explainable Artificial Intelligence Methods for Remote Sensing Image Classification
Department of Electrical;Computer Engineering, Texas A\&M University, College Station, TX, USA
本文面向多模态遥感图像分类,结合最先进机器学习模型,对主要归因XAI方法开展定性与定量评估,并给出方法选择建议。
2023-12-04 cs.AI cs.CV cs.LG
Remote Sensing ChatGPT: Solving Remote Sensing Tasks with ChatGPT and Visual Models
Wuhan University(武汉大学)
本文提出Remote Sensing ChatGPT,利用ChatGPT理解用户请求并规划执行遥感解译子任务,通过视觉提示注入图像信息,使非专家用户也能便捷完成多种遥感任务。
2024-01-17 cs.CV
Exploring Models and Data for Remote Sensing Image Caption Generation
Xi’an Institute of Optics and Precision Mechanics, Chinese Academy of Sciences(中国科学院西安光机精密机械研究所);The University of Chinese Academy of Sciences(中国科学院大学)
受人造卫星发展的启发,遥感图像引起了广泛的关注。近年来,遥感图像在场景分类和目标检测方面取得了显著的进展,但如何用准确、简洁的语句来描述遥感图像的内容仍然是一个难题。本文研究如何用准确、灵活的语句来描述遥感图像。首先,针对遥感图像的特点,提出了一些标注说明,以更好地描述遥感图像。其次,为了充分利用遥感影像的内容,构建了一个大规模的航空影像数据集,用于遥感影像字幕。最后,提出了一个全面的审查建议的数据集,以充分推进遥感字幕的任务。大量的实验表明,所提出的数据集的遥感图像的内容可以通过生成的语言描述进行完整的描述。数据集可在https://github.com/201528014227051/RSICD_optimal上获得
2017-12-21 cs.CV
Mini-Unmanned Aerial Vehicle-Based Remote Sensing: Techniques, Applications, and Prospects
Wuhan University(武汉大学)
在过去的几十年里,无人机在民用领域,特别是在摄影测量和遥感领域取得了巨大的进步。与有人驾驶飞机和卫星平台相比,无人机平台具有灵活、高效、高时空分辨率、低成本、易操作等优点,这使其成为对其他遥感平台的有效补充,并成为具有成本效益的遥感手段。本文针对近年来无人机遥感应用的普及和发展,对无人机在遥感领域的最新研究进展和发展前景进行了系统的综述。具体来说,首先讨论和总结了基于无人机的遥感数据处理的主要挑战和关键技术。然后,我们提供了一个广泛的应用无人机在遥感概述。最后,对今后的工作进行了展望。希望本文能为遥感工作者提供一个无人机遥感技术发展的总体情况,并对无人机遥感技术的进一步研究起到一定的指导作用。
2020-03-15 cs.CV
Image Fusion Technologies In Commercial Remote Sensing Packages
SRTMU(斯瓦米·拉马南德·马哈拉杰大学);Yeshwant Mahavidyala College(耶什万特学院)
近十年来,随着遥感传感器技术的发展,各种遥感软件包被用于遥感数据的分析和可视化。根据文献资料,目前遥感领域还缺乏有效的遥感数据信息抽取的软件工具。因此,本文综述了多传感器图像融合技术的发展现状,并对商用遥感软件包中的单图像或融合图像的质量评价进行了综述。介绍了为图像融合和分类而开发的ALwassaiProcess程序。
2013-07-09 cs.CV
In-domain representation learning for remote sensing
Google Research(谷歌研究院)
鉴于遥感的重要性,令人惊讶的是,很少有人关注它的表示学习社区。为了解决这个问题,并在这一领域建立基线和共同的评估协议,我们以标准化的形式提供了对5个不同遥感数据集的简化访问。具体来说,我们研究域内表示学习开发通用的遥感表示,并探讨哪些特征是重要的数据集是一个很好的源遥感表示学习。所建立的基线在这些数据集上实现了最先进的性能。
2019-11-15 cs.CV
RemoteTrimmer: Adaptive Structural Pruning for Remote Sensing Image Classification
Hohai University(河海大学);Griffith University(格里菲斯大学)
针对遥感图像分类模型剪枝后精度损失显著的问题,提出结构化剪枝方法RemoteTrimmer,通过放大通道重要性差异和设计自适应挖掘损失函数,在压缩模型的同时实现最小精度损失并达到SoTA性能。
2024-12-19 cs.CV
Remote Sensing Image Scene Classification Meets Deep Learning: Challenges, Methods, Benchmarks, and Opportunities
Research & Development Institute of Northwestern Polytechnical University in Shenzhen(西北工业大学深圳研究院);School of Automation, Northwestern Polytechnical University(西北工业大学自动化学院);School of Computer Science, Wuhan University(武汉大学计算机学院)
遥感图像场景分类是根据遥感图像的内容,对遥感图像进行语义分类的一种方法,具有广泛的应用前景。在深度神经网络强大的特征学习能力的推动下,深度学习驱动的遥感图像场景分类受到了广泛关注,并取得了重大突破。然而,据我们所知,关于深度学习的遥感图像场景分类的最新成果的全面审查仍然缺乏。考虑到该领域的快速发展,本文通过涵盖160多篇论文,对用于遥感图像场景分类的深度学习方法进行了系统的综述。具体而言,我们讨论了遥感图像场景分类和调查的主要挑战(1)基于自动编码器的遥感图像场景分类方法,(2)基于卷积神经网络的遥感图像场景分类方法,(3)基于生成对抗网络的遥感图像场景分类方法。此外,我们还介绍了用于遥感图像场景分类的基准测试,并总结了二十多个代表性算法在三个常用基准数据集上的性能。最后,我们讨论了进一步研究的前景。
2020-06-25 cs.CV
Generic Knowledge Boosted Pre-training For Remote Sensing Images
State Key Laboratory of Virtual Reality Technology and Systems, Beihang University(北京航空航天大学虚拟现实技术与系统国家重点实验室);Hangzhou Innovation Institute, Beihang University(北京航空航天大学杭州创新研究院);School of Software and Microelectronics, Peking University(北京大学软件与微电子学院)
提出 GeRSP 预训练框架,通过自监督遥感分支、监督自然图像分支及师生架构融合通用与领域知识,显著提升多项遥感下游任务性能。
2024-01-21 cs.CV
Mixture-of-Experts in Remote Sensing: A Survey
本文综述了专家混合模型在遥感中的应用,涵盖基本原理、架构设计及多种遥感任务中的关键应用,并展望了未来研究方向。
2026-04-03 cs.CV
Transformers in Remote Sensing: A Survey
MBZ University of Artificial Intelligence(穆罕默德·本·扎耶德人工智能大学);Wuhan University(武汉大学)
在过去的十年中,基于深度学习的算法在遥感图像分析的不同领域中受到了广泛的欢迎。最近,最初在自然语言处理中引入的基于变换器的架构已经遍布计算机视觉领域,其中自注意力机制已经被用作流行的卷积算子的替代,用于捕获长程依赖性。受计算机视觉最新进展的启发,遥感界也见证了对用于各种任务的视觉Transformer的更多探索。虽然一些调查集中在Transformers在计算机视觉一般,据我们所知,我们是第一个提出了一个系统的审查Transformers器在遥感的基础上的最新进展。我们的调查涵盖了60多个最近的变压器为基础的方法,不同的遥感问题在遥感的子领域:非常高分辨率(VHR),高光谱(HSI)和合成孔径雷达(SAR)图像。最后,我们通过讨论遥感Transformers器的不同挑战和开放性问题来结束调查。此外,我们打算经常更新和维护遥感论文中的最新Transformers,其各自的代码在:https://github.com/VIROBO-15/Transformer-in-Remote-Sensing
2022-09-02 cs.CV
A Light-Weight Object Detection Framework with FPA Module for Optical Remote Sensing Imagery
Tongji University(同济大学);Tsinghua University(清华大学)
随着遥感技术的发展,遥感图像的获取越来越容易,为遥感目标探测任务提供了充足的数据资源。然而,如何从众多复杂的光学遥感图像中快速、准确地检测出目标是一个具有挑战性的热点问题。在本文中,我们提出了一个有效的锚无对象检测器,CenterFPANet。为了追求速度,我们使用了轻量级的骨干,并引入了不对称的旋转块。为提高检测精度,设计了FPA模块,将不同层次的特征图连接起来,并引入注意力机制动态调整各层次特征图的权重,解决了遥感目标尺寸范围大而导致的检测困难问题。该策略在不降低检测速度的前提下,提高了遥感图像目标检测的精度。在DOTA数据集上,CenterFPANet mAP为64.00%,FPS为22.2,接近目前使用的基于锚点的方法的准确率,并且比它们快得多。与更快的RCNN相比,mAP低6.76%,但快60.87%。总而言之,CenterFPANet在大规模光学遥感目标检测中实现了速度和精度的平衡。
2020-09-07 cs.CV
Spatiotemporal Fusion in Remote Sensing
The Ohio State University(俄亥俄州立大学)
遥感图像和技术是研究地球表面的有力工具。数据质量是增强遥感应用的关键,在大多数情况下,由于不同的采集(例如,大气和季节)、传感器和平台(例如,卫星角度和传感器特性)条件。随着卫星的不断发展,现在每天可以获得TB级的遥感图像。因此,信息和数据融合在遥感界可能特别重要。该融合集成了来自异步获取的各种源的数据,用于信息抽取、分析和质量改进。在这一章中,我们的目标是讨论时空融合的理论,通过调查以前的工作,除了描述的基本概念和它的一些应用,总结我们以前和正在进行的工作。
2021-07-06 cs.CV
Seasonal Contrast: Unsupervised Pre-Training from Uncurated Remote Sensing Data
Element AI;Universitat Politècnica de Catalunya(加泰罗尼亚理工大学)
遥感和自动地球监测是解决灾害预防、土地利用监测或应对气候变化等全球性挑战的关键。虽然存在大量的遥感数据,但其中大部分是未标记的,因此监督学习算法无法访问。迁移学习方法可以减少深度学习算法的数据需求。然而,大多数这些方法都是在ImageNet上进行预训练的,由于领域差距,它们对遥感图像的推广并不能得到保证。在这项工作中,我们提出了季节对比度(SeCo),这是一种有效的管道,可以利用未标记的数据进行遥感表示的域内预训练。SeCo管道由两部分组成。首先,一个原则性的程序来收集大规模的,未标记的和未经策划的遥感数据集,其中包含来自不同时间戳的多个地球位置的图像。第二,一个自我监督的算法,利用时间和位置的不变性来学习遥感应用的可转移表示。我们的经验表明,使用SeCo训练的模型在多个下游任务上的性能优于ImageNet预训练的模型和最先进的自监督学习方法。SeCo中的数据集和模型将予以公布,以便利迁移学习,并使遥感应用能够迅速取得进展。
2021-05-03 cs.CV
Bootstrapping Interactive Image-Text Alignment for Remote Sensing Image Captioning
Wuhan University(武汉大学);Hubei Luojia Laboratory(湖北珞珈实验室)
本文提出BITA方法,通过两阶段视觉-语言预训练和轻量级交互式Fourier Transformer实现遥感图像与文本的高效对齐,在多个数据集上取得优于先进方法的图像描述性能。
2023-12-02 cs.CV
A Remote Sensing Image Dataset for Cloud Removal
Institute of Electronics, Chinese Academy of Sciences(中国科学院电子学研究所)
光学遥感图像中经常出现基于云的叠加,从而限制了所获取数据的应用。去云是遥感图像分析中必不可少的预处理步骤。深度学习近年来在遥感领域取得了巨大的成功,包括场景分类和变化检测。然而,深度学习在遥感图像去云中的应用却很少。原因是缺乏用于训练神经网络的数据集。为了解决这一问题,本文首先提出了遥感影像云迁移数据集(RICE)。该数据集由两部分组成:RICE 1包含500对图像,每对图像的云和无云尺寸为512*512; RICE 2包含450组图像,每组包含3个512*512尺寸的图像。分别是没有云的参考图片、云的图片及其云的掩模。该数据集可在\url{https://github.com/BUPTLdy/RICE_DATASET}上免费获得。
2019-01-03 cs.CV
DDFAV: Remote Sensing Large Vision Language Models Dataset and Evaluation Benchmark
Liaoning Technical University(辽宁工程技术大学);Shang Hai Jiao Tong University(上海交通大学)
针对遥感LVLMs幻觉问题,本文构建了高质量数据集DDFAV及训练指令集,并提出幻觉评估方法RSPOPE,以评估不同LVLMs的零样本能力。
2024-11-05 cs.CV
A review over the applicability of image entropy in analyses of remote sensing datasets
National Institute of Technology, India(印度国立理工学院)
熵是任何数据中不确定性的度量,并且在许多遥感操作中被用于最大化互信息。宽熵变化的可用性促使我们调查这些版本的适合性偏好的特定操作。
2014-02-05 cs.CV
Geographical Knowledge-driven Representation Learning for Remote Sensing Images
Beihang University(北京航空航天大学)
遥感卫星的激增产生了大量的遥感图像。然而,由于人力和物力资源的限制,绝大多数遥感图像仍然没有标记。因此,它不能应用于当前可用的深度学习方法。为了充分利用剩余的未标记图像,提出了一种基于地理知识驱动的遥感图像表示学习方法(GeoKR),提高了网络性能,减少了对标注数据的需求。该方法将每幅遥感影像的全球土地覆盖产品和地理位置信息作为地理知识,为表示学习和网络预训练提供指导。提出了一种有效的预训练框架,以消除遥感图像和地理知识之间的成像时间和分辨率差异所造成的监督噪声。提出了一个大规模的预训练数据集Levir-KR来支持网络的预训练。它包含来自高分系列卫星的1,431,950幅各种分辨率的遥感图像。实验结果表明,我们提出的方法优于ImageNet预训练和自监督表示学习方法,并显着减少了数据标注的负担,下游任务,如场景分类,语义分割,目标检测,云/雪检测。实验结果表明,该方法可以作为一种新的预训练神经网络的范例。代码将在https://github.com/flyakon/Geographical-Knowledge-driven-Representaion-Learning上提供。
2021-07-12 cs.CV
Multimodal Object Detection in Remote Sensing
针对遥感目标检测多依赖通用方法、未充分利用多模态融合的问题,本文比较多模态检测方法、梳理可用评估数据集并展望未来方向。
2023-07-13 cs.CV
Improved-Flow Warp Module for Remote Sensing Semantic Segmentation
遥感图像语义分割的目的是为航空影像上的每个像元自动分配特定的标签。在这封信中,我们提出了一个新的模块,称为改进流翘曲模块(IFWM),调整语义特征图在不同尺度的遥感语义分割。在卷积神经网络的特征提取过程中应用改进的流扭曲模块。首先,IFWM通过可学习的方式计算像素的偏移量,这可以减轻多尺度特征的错位。其次,偏移量有助于低分辨率深度特征上采样过程,以提高特征一致性,从而提高语义分割的准确性。在多个遥感数据集上进行了验证,结果证明了该方法的有效性。
2022-05-09 cs.CV
RemoteVAR: Autoregressive Visual Modeling for Remote Sensing Change Detection
Johns Hopkins University(约翰霍普金斯大学)
RemoteVAR通过自回归模型和交叉注意力机制提升遥感变化检测的性能,实现对双时序特征的高效建模与预测。
2026-01-17 cs.CV
Effective Use of Dilated Convolutions for Segmenting Small Object Instances in Remote Sensing Imagery
PASCO CORPORATION(帕斯科公司)
由于CNN的最新进展,在高分辨率遥感图像的语义分割方面取得了实质性的改进。然而,以前的大多数工作没有充分考虑到遥感任务中存在的具体困难。其中一个困难是遥感图像中的物体很小而且很拥挤。为了解决这个具有挑战性的任务,我们提出了一种新的架构称为本地特征提取(LFE)模块附加在膨胀前端模块的顶部。LFE模块基于我们的发现,即由于内核的稀疏性,积极增加膨胀因子无法聚合局部特征,并且对小对象有害。所提出的LFE模块通过以减小的膨胀因子聚合局部特征来解决这个问题。我们在三个遥感数据集上测试了我们的网络,并在所有数据集上获得了非常好的结果,特别是对于小物体。
2017-09-01 cs.CV
Optical Remote Sensing Image Understanding with Weak Supervision: Concepts, Methods, and Perspectives
Hunan University(湖南大学);Xidian University(西安电子科技大学);Inria(法国国家信息与自动化研究所);CNRS(法国国家科学研究中心)
近年来,监督学习被广泛应用于光学遥感图像理解的各种任务中,包括遥感图像分类、逐像素分割、变化检测和目标检测。基于监督学习的方法需要大量高质量的训练数据,其性能高度依赖于标签的质量。然而,在实际的遥感应用中,往往是昂贵的和耗时的大规模数据集获得高质量的标签,这导致了缺乏足够的监督信息。在某些情况下,只能获得粗粒度的标签,导致缺乏精确的监督。此外,人工获取的监管信息可能有误,导致监管不准确。因此,遥感图像理解往往面临着监督信息不完整、不准确、不准确的问题,影响着遥感应用的广度和深度。为了解决上述问题,研究人员探索了弱监督下遥感图像理解的各种任务。综述了遥感领域弱监督学习的研究进展,包括3种典型的弱监督范式:1)不完全监督,即只给训练数据的一个子集加标签; 2)不精确监督,即只给训练数据的粗粒度标签; 3)不精确监督,即给出的标签在地面上并不总是正确的。
2022-04-18 cs.CV
A framework for remote sensing images processing using deep learning technique
IRSTEA(法国国家农业、食品与环境研究院)
深度学习技术对于解决许多图像处理任务正变得越来越重要。在常见的算法中,基于卷积神经网络和递归神经网络的系统在许多应用中对卫星和航空图像实现了最先进的结果。虽然这些方法受到科学界的关注,但目前在用户一级没有可供遥感界使用的操作性和通用性实施方法。在本文中,我们提出了一个框架,使深度学习技术与遥感图像和地理空间数据的使用。我们的解决方案植根于两个广泛使用的开源库,遥感图像处理库Orfeo ToolBox和高性能数值计算库TensorFlow。它可以应用深度网络,而不受图像大小的限制,并且无论硬件配置如何,都具有计算效率。
2018-09-05 cs.CV
Locality Preserving Multiview Graph Hashing for Large Scale Remote Sensing Image Search
University of Macau(澳门大学)
本文提出一种局部保持多视图图哈希方法,通过在低维子空间学习共识紧凑码并引入超参数可学习模块,有效解决了大规模遥感图像检索问题,实验证明其性能具竞争力。
2023-04-10 cs.CV
RS-Mamba for Large Remote Sensing Image Dense Prediction
Nanjing University(南京大学);School of Geography and Ocean Science, Nanjing University(南京大学地理与海洋科学学院);Shanghai Artificial Intelligence Laboratory(上海人工智能实验室)
针对大尺寸超高分辨率遥感影像密集预测中Transformer模型计算复杂度高、裁剪图块损失上下文的问题,提出带全向选择性扫描的RSM模型,以线性复杂度实现全局上下文建模,在相关任务上取得SOTA性能,效率精度优于Transformer模型。
2024-04-10 cs.CV
Land Use Classification in Remote Sensing Images by Convolutional Neural Networks
Università Federico II di Napoli(那不勒斯费德里科二世大学)
我们探索使用卷积神经网络的遥感场景的语义分类。最近提出的两个架构,CaffeNet和GoogLeNet,采用了三种不同的学习模式。除了从头开始的传统训练外,我们还采用了只对目标数据进行微调的预训练网络,以避免过拟合问题并减少设计时间。两个遥感数据集上的实验,具有显着不同的特点,证明了所提出的解决方案的有效性和广泛的适用性,这保证了所有国家的最先进的参考显着的性能改善。
2015-08-01 cs.CV
Self-Supervised Learning of Remote Sensing Scene Representations Using Contrastive Multiview Coding
University of Banja Luka(巴尼亚卢卡大学)
近年来,自监督学习已成为无监督表示学习的一个有前途的候选者。在视觉领域,其应用主要是在自然场景图像的背景下研究的。然而,它的适用性在特定领域特别有趣,如遥感和医学,在这些领域很难获得大量的标记数据。本文对自监督学习在遥感图像分类中的应用进行了深入的分析。我们分析了用于自监督预训练的图像的数量和域对下游任务性能的影响。我们表明,对于遥感图像分类的下游任务,使用自监督的遥感图像预训练可以得到更好的结果比使用监督的预训练的图像的自然场景。此外,我们还表明,自我监督的预训练可以很容易地扩展到多光谱图像,在我们的下游任务中产生更好的结果。
2021-06-03 cs.CV
Nearest Neighbor Based Out-of-Distribution Detection in Remote Sensing Scene Classification
用于图像分类的深度学习模型通常在“封闭世界”假设下使用预定义的图像类集合进行训练。然而,当模型被部署时,它们可能面临不属于训练期间遇到的类的输入图像。这种类型的场景在遥感图像分类中很常见,其中图像来自不同的地理区域、传感器和成像条件。在本文中,我们处理的问题,检测遥感图像来自不同的分布相比,训练数据-分布图像。我们提出了一个基准的分布外检测在遥感场景分类和评估检测器的最大softmax概率和最近的邻居。实验结果表明,基于最近邻的方法具有令人信服的优势。
2023-03-29 cs.CV
RS3DBench: A Comprehensive Benchmark for 3D Spatial Perception in Remote Sensing
College of Computer Science and Technology, Zhejiang University(浙江大学计算机科学与技术学院);Software College of Zhejiang University(浙江大学软件学院);Hangzhou City University(杭州市大学)
本文提出RS3DBench,一个包含54,951对遥感图像与像素级对齐深度图及文本描述的综合基准,并基于稳定扩散构建遥感深度估计模型,在该数据集上取得最先进性能,以推动遥感三维视觉感知与地理人工智能发展。
2025-09-23 cs.CV
A Comparative Analysis on the Applicability of Entropy in remote sensing
Dept. Of Civil MANIT-Bhopal, India(印度博帕尔MANIT土木系)
熵是任何数据中不确定性的度量,并且在许多遥感操作中被用于最大化互信息。宽熵变化的可用性促使我们调查这些版本的适合性偏好的特定操作。方法在Matlab中实现,并增强熵的变化。各种实施的评价是基于不同的统计参数,参考研究领域的流行的可用版本,如Tsalli的,Shannon的,和Renyi的熵进行了分析的背景下,各种遥感操作,即阈值,聚类和注册。
2013-03-27 cs.CV
Self-supervised Learning in Remote Sensing: A Review
Remote Sensing Technology Institute (IMF), German Aerospace Center (DLR)(德国航空航天中心(DLR)遥感技术研究所(IMF));Technical University of Munich (TUM)(慕尼黑工业大学(TUM))
在深度学习研究中,自监督学习(SSL)受到了极大的关注,引发了计算机视觉和遥感社区的兴趣。虽然在计算机视觉方面取得了巨大的成功,但SSL在地球观测领域的大部分潜力仍然被锁定。在本文中,我们提供了一个介绍,并回顾了SSL的概念和最新发展的计算机视觉在遥感的背景下。此外,我们提供了一个初步的基准现代SSL算法在流行的遥感数据集,验证SSL在遥感的潜力,并提供了一个扩展的研究数据增强。最后,我们确定了一个有前途的SSL对地观测(SSL4EO)的未来研究方向的列表,为这两个领域的富有成效的互动铺平了道路。
2022-09-02 cs.CV
Knowledge Distillation for Object Detection: from generic to remote sensing datasets
该研究在遥感车辆检测场景下,评估了基于通用数据集开发的两类知识蒸馏方法,通过xView、VEDAI等基准实验发现方法性能差异大,证实结果聚合与交叉验证对遥感数据集的重要性。
2023-07-18 cs.CV
RS-YOLOX: A High Precision Detector for Object Detection in Satellite Remote Sensing Images
School of Information Science and Engineering, Yunnan University(云南大学信息科学与工程学院);Yunnan Key Laboratory of Intelligent Systems and Computing(云南省智能系统与计算重点实验室)
本文提出RS-YOLOX模型,通过引入ECA注意力、ASFF特征融合和Varifocal Loss,并结合SAHI框架,在多个遥感数据集上实现了高精度目标检测。
2025-02-05 cs.CV
Large Selective Kernel Network for Remote Sensing Object Detection
Nankai University(南开大学)
近年来遥感目标检测的研究主要集中在改进有向边界框的表示上,而忽略了遥感场景中特有的先验知识。这种先验知识可能是有用的,因为微小的遥感物体可能在没有参考足够长距离背景的情况下被错误地检测到,并且不同类型的物体所需的长距离背景可能不同。在本文中,我们考虑到这些先验知识,并提出了大型选择性核网络(LSKNet)。LSKNet可以动态调整其大的空间感受野,以更好地模拟遥感场景中各种对象的测距上下文。据我们所知,这是第一次在遥感目标检测领域探索大的和选择性的核机制。没有花里胡哨,LSKNet在标准基准上设置了新的最先进的分数,即,HRSC2016(98.46 mAP)、DOTA-v1.0(81.85 mAP)和FAIR1M-v1.0(47.87 mAP)。基于类似的技术,我们在2022年大湾区国际算法竞赛中获得第二名。代码可在https://github.com/zcablii/Large-Selective-Kernel-Network上获得。
2023-03-20 cs.CV
Defense against Adversarial Cloud Attack on Remote Sensing Salient Object Detection
Cleveland State University(克利夫兰州立大学);OPPO US Research Center(OPPO美国研究中心);A*STAR SINGA(新加坡科技研究局SINGA);Brookhaven National Laboratory(布鲁克海文国家实验室)
本文提出Adversarial Cloud攻击方法,通过联合调节对抗曝光和加性扰动生成接近多云图像的对抗样本,并设计可学习的DefenseNet预处理模块,在不调整已部署SOD模型的情况下,实现白盒和黑盒场景下对遥感显著目标检测模型的防御。
2023-07-05 cs.CV
MAPEX: Modality-Aware Pruning of Experts for Remote Sensing Foundation Models
AIML Lab, School of Computer Science University of St.Gallen(人工智能实验室、计算机科学学院、圣加伦大学)
针对遥感基础模型预训练模态与应用模态不匹配及微调成本高的问题,提出基于混合模态专家的MAPEX模型,通过模态条件化令牌路由预训练和模态感知专家剪枝技术,生成高效特定模态模型,在多数据集上表现优异。
2025-07-10 cs.CV
FireRisk: A Remote Sensing Dataset for Fire Risk Assessment with Benchmarks Using Supervised and Self-supervised Learning
The University of Melbourne(墨尔本大学)
本文提出包含91872张图像、7类火灾风险的遥感数据集FireRisk,并在监督与自监督学习基准上验证其有效性,其中MAE取得65.29%的最高分类准确率。
2023-09-21 cs.CV
Object Fidelity Diffusion for Remote Sensing Image Generation
Fudan University(复旦大学);Shanghai Innovation Institute(上海创新研究院);Xidian University(西安电子科技大学);Shanghai Jiao Tong University(上海交通大学)
本文提出Object Fidelity Diffusion模型,通过提取对象先验形状和双分支扩散模型提升遥感图像生成的保真度和多样性。
2026-02-03 cs.CV
CAD-Net: A Context-Aware Detection Network for Objects in Remote Sensing Imagery
光学遥感图像中多类目标的准确和鲁棒检测对于城市规划、交通控制、搜索和救援等许多实际应用是必不可少的。然而,针对使用地面传感器捕获的图像设计的最新目标检测技术在直接应用于遥感图像时通常经历急剧的性能下降,这主要是由于遥感图像中的对象外观差异,即稀疏纹理、低对比度、任意取向、大尺度变化,本文提出了一种新的目标检测网络(CAD-Net),利用注意力-调制的功能以及全球和本地的背景,以解决新的挑战,从遥感图像中检测对象。所提出的CAD-Net通过分别捕获对象与全局场景(在场景级)和局部相邻对象或特征(在对象级)的相关性来学习对象的全局和局部上下文。此外,它设计了一个空间和尺度感知的注意力模块,引导网络关注更多信息的区域和特征以及更合适的特征尺度。在两个公开的遥感图像目标检测数据集上的实验表明,所提出的CAD-Net具有优异的检测性能。实施代码将公开,以方便未来的研究。
2019-03-03 cs.CV
Exploring Foundation Models in Remote Sensing Image Change Detection: A Comprehensive Survey
University of Liverpool(利物浦大学)
本文全面综述了基础模型在遥感图像变化检测任务中的应用,指出其通过增强特征提取与数据融合能力有效应对了复杂地表演变分析的挑战。
2024-10-10 cs.CV
RemoteDet-Mamba: A Hybrid Mamba-CNN Network for Multi-modal Object Detection in Remote Sensing Images
School of Computer Science, Beijing University of Posts and Telecommunications, Beijing, China(计算机科学学院,北京邮电大学);School of Electronic Engineering, Beijing University of Posts and Telecommunications, Beijing, China(电子工程学院,北京邮电大学)
RemoteDet-Mamba通过融合多模态信息提升遥感图像中小目标的检测性能,采用轻量级融合机制降低计算复杂度,实验证明其在检测精度和效率上的优势。
2026-01-18 cs.CV
Self-Supervised In-Domain Representation Learning for Remote Sensing Image Scene Classification
将ImageNet预训练的权重转移到各种遥感任务中,产生了可接受的结果,并减少了对标记样本的需求。然而,地面图像和遥感图像之间的领域差异导致这种迁移学习的性能受到限制。最近的研究表明,自监督学习方法捕获的视觉特征比监督的ImageNet权重更具鉴别力和可转移性。我们的动机是这些事实,使用对比自监督学习的遥感图像的域内表示进行预训练,并将学习到的功能转移到其他相关的遥感数据集。具体而言,我们使用SimSiam算法对遥感数据集的域内知识进行预训练,然后将获得的权重传递到其他场景分类数据集。因此,我们已经获得了国家的最先进的五个土地覆被分类数据集与不同数量的类和空间分辨率的结果。此外,通过进行适当的实验,包括使用具有不同属性的数据集进行特征预训练,我们已经确定了使数据集成为获取域内特征的良好选择的最有影响力的因素。我们已经将通过在遥感数据集上预训练SimSiam获得的特征转移到各种下游任务中,并将其用作微调的初始权重。此外,我们已经线性评估所获得的表示的情况下,每个类的样本数量是有限的。我们的实验已经证明,在自我监督的预训练阶段使用更高分辨率的数据集可以学习更多的区分性和一般性表示。
2023-02-03 cs.CV
ZoRI: Towards Discriminative Zero-Shot Remote Sensing Instance Segmentation
Nanyang Technological University(南洋理工大学);Shanghai University of Finance and Economics(上海财经大学)
提出零样本遥感实例分割任务及ZoRI框架,通过判别性增强分类器、知识保持自适应策略和先验注入预测,实现遥感图像中未见空中目标的准确分割,达到最先进性能。
2024-12-17 cs.CV
Single-Temporal Supervised Learning for Universal Remote Sensing Change Detection
LIESMARS, Wuhan University(武汉大学LIESMARS);Stanford University(斯坦福大学)
针对双时相遥感变化检测标注成本高的问题,提出单时相监督学习方法STAR,搭配统一架构的ChangeStar2检测器,仅用未配对标注图像训练即可泛化到真实双时相场景,在8个公开数据集上取得SOTA性能。
2024-06-22 cs.CV
Omni-RS: Unifying Multi-Task Understanding and Generation in Remote Sensing
本文提出Omni-RS统一遥感多任务理解与生成框架,通过场景引导两阶段训练、构建UniGen数据集及详细视觉条件策略,在理解与生成任务中均取得优异结果。
2026-10-20 cs.CV
On the Selective and Invariant Representation of DCNN for High-Resolution Remote Sensing Image Recognition
School of Geosciences and Info Physics, Central South University(中南大学地球科学与信息物理学院)
人类视觉在图像识别中具有很强的不变性。深度卷积神经网络(DCNN)直接从原始图像进行分层编码,使其认知能力接近人类视觉水平。由于其在特征表示方面的优势,DCNN在高分辨率遥感图像的场景识别和高光谱遥感图像的分类中表现出了显著的性能。深入的研究对于理解为什么DCNN可以通过其有效的特征表示准确地识别不同的地面物体仍然是必不可少的。因此,我们训练深神经网络称为AlexNet在我们的大规模遥感图像识别基准。在每个卷积层的神经元层次上,采用视觉刺激-特征响应结合特征编码-分类解码的框架,分析了DCNN在HRRS图像识别中的一般特性。具体来说,我们使用直方图统计,代表性相异度矩阵和类激活映射观察HRRS图像识别中的DCNN的选择性和不变性表示。我们认为,选择性和不变性表示在遥感图像的任务,如分类,检测和分割中起着重要的作用。选择性和不变性表示对于设计新的DCNN模型分析和理解遥感图像具有重要意义。
2017-08-04 cs.CV
RS-RIE-Bench: Benchmarking Reasoning-Guided Remote Sensing Image Editing
Huawei(华为)
该研究针对遥感图像编辑,引入RS-RIE-Bench基准,将任务分类,通过特定评估协议和方法评估模型,经实验发现当前模型在推理引导的遥感编辑中有局限,为未来模型提供了基准和研究方向。
2026-07-23 cs.CV
RSFAKE-1M: A Large-Scale Dataset for Detecting Diffusion-Generated Remote Sensing Forgeries
Zhihong Tan(谭志宏);Jiayi Wang(王佳毅);Huiying Shi(Shi 希慧);Binyuan Huang(黄彬远);Hongchen Wei(韦宏晨);Zhenzhong Chen(陈振中)
本文提出大规模遥感伪造检测数据集RSFAKE-1M,包含50万张由10个扩散模型生成的伪造图像和50万张真实图像,实验表明该数据集能显著提升检测模型的泛化能力和鲁棒性。
2025-05-29 cs.CV
Semantic Segmentation of Unmanned Aerial Vehicle Remote Sensing Images using SegFormer
Faculty of Computer Science and Engineering(计算机科学与工程学院)
针对无人机遥感图像语义分割需求,评估了SegFormer框架从B0到B5各变体在UAVid数据集上的表现,验证了其兼具高效率与高精度的地物分割能力。
2024-10-01 cs.CV
A Training-free, One-shot Detection Framework For Geospatial Objects In Remote Sensing Images
Institute of Electronics, Chinese Academy of Sciences(中国科学院电子学研究所);University of Chinese Academy of Sciences(中国科学院大学)
基于深度学习的目标检测取得了巨大成功。然而,这些监督学习方法是数据饥饿和耗时的。这种限制使它们不适合有限的数据和紧急任务,特别是在遥感应用中。受人类从很少的例子中快速学习新的视觉概念的能力的启发,我们提出了一个无训练的,一次性的遥感图像地理空间目标检测框架。它包括(1)一个具有遥感领域知识的特征提取器,(2)一个多层次的特征融合方法,(3)一个新的相似性度量方法,和(4)一个2阶段的目标检测流水线。通过对污水处理厂和机场的检测实验表明,该方法取得了一定的效果。我们的方法可以作为一个无训练,一次性地理空间目标检测的基线。
2019-04-04 cs.CV