PointFlow: Flowing Semantics Through Points for Aerial Image Segmentation
Key Laboratory of Machine Perception (MOE), Peking University（北京大学（MOE）机器感知重点实验室）；NLPR, Institute of Automation, Chinese Academy of Sciences（中国科学院自动化研究所NLPR）；School of Artificial Intelligence, University of Chinese Academy of Sciences（中国科学院大学人工智能学院）；ETH Zurich（苏黎世联邦理工学院）；SenseTime Research（商汤科技研究院）
航空图像分割是一个特殊的语义分割问题，具有一般语义分割所不具有的一些挑战性的特点。有两个关键问题：一种是前景-背景极不平衡的分布，另一种是复杂背景中的多个小目标。这些问题使得最近的密集亲和度上下文建模由于过度引入背景上下文而与基线相比表现不佳。为了解决这些问题，我们提出了一个逐点的亲和力传播模块的基础上的特征金字塔网络（FPN）的框架，命名为PointFlow。在相邻特征之间的选定点上生成稀疏亲和图，而不是密集亲和学习，这在保持效率的同时减少了背景引入的噪声。特别地，我们设计了一个双点匹配器，分别从显著区域和对象边界中选择点。在三个不同的航空图像分割数据集上的实验结果表明，该方法比现有的一般语义分割方法更有效。特别是，我们的方法实现了最好的速度和精度的权衡三个空中基准。在三个一般语义分割数据集上的实验证明了该方法的通用性。代码将在（https：//github.com/lxtGH/PFSegNets）中提供。
2021-03-11 cs.CV
AeroReformer: Aerial Referring Transformer for UAV-based Referring Image Segmentation
Intelligent Control \& Smart Energy (ICSE) Research Group, School of Engineering, University of Warwick, Coventry, CV4 7AL, UK
针对无人机影像指代图像分割研究不足、缺乏专用数据集的问题，提出带自动标注流水线和AeroReformer框架的方案，在新数据集上性能优于现有方法并建立新基准。
2025-02-28 cs.CV
TTPLA: An Aerial-Image Dataset for Detection and Segmentation of Transmission Towers and Power Lines
Department of Electrical Engineering, University of South Carolina, USA（南卡罗来纳大学电气工程系，美国）；Department of Computer Science and Engineering, University of South Carolina, USA（南卡罗来纳大学计算机科学与工程系，美国）
从航拍图像中准确检测和分割输电塔和输电线对保障电网安全和低空无人机安全具有重要意义。同时，航空图像的TT和PL提出了一些新的挑战，计算机视觉研究人员谁的工作目标检测和分割-PL是长而薄，并可能显示类似的颜色作为背景; TT可以是各种形状，最有可能由各种稀疏的线结构;背景场景，照明和对象的大小可以显着变化，从一个图像到另一个。在本文中，我们收集并发布了一个新的TT/PL航空图像（TTPLA）数据集，包括1,100张分辨率为3,840 $\times$ 2,160像素的图像，以及手动标记的8,987个TT和PL实例。我们开发了新的策略来收集，注释和标记TTPLA中的图像。与其他相关数据集不同，TTPLA除了支持检测和语义分割外，还支持对实例分割的评估。为了在TTPLA上建立检测和分割任务的基线，我们报告了几种最先进的深度学习模型在我们的数据集上的性能。TTPLA数据集可在https://github.com/r3ab/ttpla_dataset上公开获取
2020-10-20 cs.CV
Domain Adaptation on Semantic Segmentation for Aerial Images
Illinois Institute of Technology（伊利诺伊理工学院）
语义分割近年来取得了显著的进展。虽然深度神经网络可以很好地执行语义分割，但它们的成功依赖于像素级监督，这是昂贵且耗时的。此外，由于不同域中的数据分布之间的域间隙，使用来自一个域的数据进行训练可能无法很好地推广到来自新域的数据。这种域差距在航空图像中特别明显，其中视觉外观取决于成像环境的类型、季节、天气和成像环境的时间。随后，当使用预训练的分割模型来分析具有不同特征的新数据时，这种分布差距会导致严重的准确性损失。在本文中，我们提出了一种新的无监督领域自适应框架，以解决领域转移的背景下，航空语义图像分割。为此，我们通过学习源域和目标域之间的软标签分布差异来解决域偏移问题。此外，我们还在目标域上应用熵最小化来产生高置信度预测，而不是通过伪标记来使用高置信度预测。我们证明了我们的领域自适应框架使用ISPRS的挑战图像分割数据集的有效性，并显示出在各种指标方面的最先进的方法的改进。
2020-12-11 cs.CV
Edge-guided and Class-balanced Active Learning for Semantic Segmentation of Aerial Images
School of Computer Science and Technology, University of Chinese Academy of Sciences（中国科学院大学计算机科学与技术学院）；School of Engineering Science, University of Chinese Academy of Sciences（中国科学院大学工程科学学院）；School of Computer Science and Technology, Anhui University（安徽大学计算机科学与技术学院）
针对航空影像语义分割中标注成本高和类别不平衡问题，提出边缘引导标注单元与全流程类别平衡策略，在三个基准数据集上显著优于现有方法。
2024-05-28 cs.CV
Semantic Segmentation of Unmanned Aerial Vehicle Remote Sensing Images using SegFormer
Faculty of Computer Science and Engineering（计算机科学与工程学院）
针对无人机遥感图像语义分割需求，评估了SegFormer框架从B0到B5各变体在UAVid数据集上的表现，验证了其兼具高效率与高精度的地物分割能力。
2024-10-01 cs.CV
Aerial LaneNet: Lane Marking Semantic Segmentation in Aerial Imagery using Wavelet-Enhanced Cost-sensitive Symmetric Fully Convolutional Neural Networks
German Aerospace Center (DLR)（德国航空航天中心（DLR））；Technical University of Munich（慕尼黑工业大学）
了解车道标记的位置和外观是创建高精度地图的先决条件，这对于自动驾驶、基础设施监控、车道交通管理和城市规划是必要的。车道标记是此类地图的重要组成部分之一。车道标记向驾驶员传达道路规则。虽然这些规则是由人类学习的，但自动驾驶汽车应该学会学习它们以定位自己。因此，需要在道路和高速公路的图像中准确且可靠的车道标记语义分割来实现这些目标。我们使用机载图像，它可以通过引入空中车道标记数据集在短时间内捕获大面积。在这项工作中，我们提出了一个对称的全卷积神经网络增强小波变换，以自动进行车道线分割航空影像。由于车道标记像素与背景像素的数量严重不平衡的问题，我们使用自定义的损失函数以及一种新型的数据增强步骤。我们实现了一个非常高的精度，在像素的车道标记定位，而不使用第三方信息。在这项工作中，我们介绍了我们的实验中使用的第一个高质量的数据集，其中包含广泛的情况和类别的车道标记代表当前的交通系统。该数据集将公开提供，因此，它可以用作该领域内未来算法的基准数据集。
2018-11-01 cs.CV
UVid-Net: Enhanced Semantic Segmentation of UAV Aerial Videos by Embedding Temporal Information
Manipal Institute of Technology（马尼帕尔理工学院）；Manipal Academy of Higher Education（马尼帕尔高等教育学院）
航拍视频的语义分割已被广泛用于环境变化监测、城市规划和灾害管理等决策中。这些决策支持系统的可靠性依赖于视频语义分割算法的准确性。现有的基于CNN的视频语义分割方法已经通过结合诸如LSTM或光流的附加模块来增强图像语义分割方法，该附加模块用于计算视频的时间动态，这是计算开销。建议的研究工作修改的CNN架构，将时间信息，以提高视频语义分割的效率。在这项工作中，一个增强的编码器-解码器为基础的CNN架构（UVid-Net）提出了无人机视频语义分割。所提出的架构的编码器嵌入时间信息的时间一致的标签。通过引入特征细化模块增强了解码器，该模块有助于准确定位类标签。在扩展的ManipalUAVid数据集上对所提出的无人机视频语义分割UVid-Net架构进行了定量评估。已经观察到0.79的性能度量mIoU，其显著大于其他最先进的算法。此外，所提出的工作甚至对于城市街道场景的UVid-Net预训练模型也产生了有希望的结果，并对无人机空中视频的最终层进行了微调。
2021-05-27 cs.CV
DUFormer: Solving Power Line Detection Task in Aerial Images using Semantic Segmentation
Autel Robotics（道通智能）；Fujian College, University of Chinese Academy of Sciences（中国科学院大学福建学院）；Quanzhou Institute of Equipment Manufacturing, Fujian Institute of Research on the Structure of Matter, Chinese Academy of Sciences（中国科学院福建物质结构研究所泉州装备制造研究所）；Fujian Agriculture and Forestry University（福建农林大学）；RWTH Aachen University（亚琛工业大学）
针对航拍图像中电力线前景小、背景复杂导致检测难的问题，提出DUFormer语义分割算法，结合CNN强归纳偏置与Transformer全局建模，并采用联合多权重损失，在TTPLA数据集上超越现有方法。
2023-08-31 cs.CV
SAN: Scale-Aware Network for Semantic Segmentation of High-Resolution Aerial Images
Northeast Forestry University（东北林业大学）；Embry-Riddle Aeronautical University（安柏瑞德航空大学）
高分辨率航空影像有着广泛的应用，如军事勘探、城市规划等。语义分割是高分辨率航空影像分析中广泛使用的基本方法。然而，高分辨率航空影像中的地物具有尺度不一致的特点，这一特点往往会导致预测结果的意外。为了解决这个问题，我们提出了一种新的规模感知模块（SAM）。在SAM中，我们采用重采样方法，旨在使像素调整其位置，以适应不同尺度的地面对象，它隐含地引入空间注意力，采用重采样地图作为加权地图。结果表明，该网络具有较强的区分尺度不一致地物的能力。除此之外，我们提出的模块可以很容易地嵌入到大多数现有网络中，以提高其性能。在国际摄影测量与遥感学会Vaihingen数据集上对所提出的模块进行了测试，实验结果和综合分析证明了所提出模块的有效性。
2019-07-06 cs.CV
End-to-End Trainable Deep Active Contour Models for Automated Image Segmentation: Delineating Buildings in Aerial Imagery
University of California, Los Angeles（加州大学洛杉矶分校）
遥感图像中建筑物的自动分割是一项具有挑战性的任务，需要在通常较大的图像区域上准确描绘多个建筑物实例。手动方法通常很费力，目前基于深度学习的方法无法描述所有建筑实例，并且无法以足够的准确性做到这一点。作为一种解决方案，我们提出了可训练的深度活动轮廓（TDACs），这是一种自动图像分割框架，它将卷积神经网络（CNN）和活动轮廓模型（ACM）紧密结合在一起。ACM分量的欧拉能量泛函包括由骨干CNN预测的每像素参数图，其也对ACM进行建模。重要的是，ACM和CNN组件都在TensorFlow中完全实现，整个TDAC架构是端到端自动可区分和反向传播可训练的，无需用户干预。TDAC产生快速，准确，全自动同时描绘任意多个建筑物的图像。我们在两个公开的航空图像数据集上验证了该模型用于建筑物分割，我们的结果表明，TDAC建立了一个新的最先进的性能。
2020-07-22 cs.CV
Few-Shot Rotation-Invariant Aerial Image Semantic Segmentation
Shanghai Jiao Tong University（上海交通大学）；Eastern Institute for Advanced Study（东方高等研究院）
针对少样本航空图像分割中目标方向变化导致匹配失效的问题，提出FRINet网络，通过旋转自适应匹配和同标签监督，在基准上取得最先进性能。
2023-05-29 cs.CV eess.IV
COSTA: A Cluster-Centric Paradigm for Annotation-Free Open-Set Semantic Segmentation of Aerial Point Clouds with Domain Shifts
Fujian Institute of Research on the Structure of Matter, Chinese Academy of Sciences（中国科学院福建物质结构研究所）；Institute of Urban Environment, Chinese Academy of Sciences（中国科学院城市环境研究所）；University of Chinese Academy of Sciences（中国科学院大学）；School of Resource and Environmental Sciences, Wuhan University（武汉大学资源与环境科学学院）
COSTA提出以聚类为中心的范式，无需额外训练即可在推理阶段将预训练航拍点云分割模型适配到偏移目标域，在三个基准上实现按需分割，mIoU达70.09%。
2026-08-20 cs.CV
MariSat: A Maritime Dataset for Instance Segmentation of Objects in Satellite and Aerial Images
University of Carthage（迦太基大学）；University of Gabes（加贝斯大学）；University of Rouen Normandie（鲁昂诺曼底大学）；ESIGELEC（法国高等电气与电子工程学院）
该研究提出新的海事基准数据集MariSat，经半自动化标注流程生成，用于卫星与航拍图像中8类海事物体的实例分割，已被用于微调及基准测试SAM 3、YOLO11模型以实现实时海事监视。
2026-09-01 cs.CV
ECLAIR: A High-Fidelity Aerial LiDAR Dataset for Semantic Segmentation
Sharper Shape（夏普形状公司）；Aalto University（阿尔托大学）
本研究推出大规模机载LiDAR数据集ECLAIR，覆盖10平方千米、含近6亿点与11类标注类别，经专家标注保障质量，并基于Minkowski Engine的体素分割方法做基准测试，推动3D城市建模等领域发展。
2024-04-16 cs.CV
Semantic Segmentation on Swiss3DCities: A Benchmark Study on Aerial Photogrammetric 3D Pointcloud Dataset
Nomoko AG（Nomoko股份公司）；The Dalle Molle Institute for Artificial Intelligence (IDSIA)（达莱莫勒人工智能研究所（IDSIA））
我们引入了一个新的室外城市三维点云数据集，覆盖总面积为2.7 $km^2$，从三个瑞士城市具有不同的特点。该数据集被手动注释为语义分割与每点标签，并建立使用摄影测量从多旋翼配备高分辨率相机获得的图像。与地面LiDAR传感器获取的数据集相比，生成的点云密度均匀且完整，适用于不同的应用，包括自动驾驶、游戏和智能城市规划。作为基准，我们报告了PointNet++的定量结果，PointNet++是一种基于点的深度3D语义分割模型;在此模型上，我们还研究了使用不同城市进行模型泛化的影响。
2020-12-23 cs.CV
SegForestNet: Spatial-Partitioning-Based Aerial Image Segmentation
Leibniz Universität Hannover（莱布尼茨汉诺威大学）
本文改进预测BSP树的SegForestNet，通过新解码器、可微渲染器和损失函数实现多边形式航空图像分割，并揭示训练优化对架构优势的影响。
2024-04-08 cs.CV
Predicting Ground-Level Scene Layout from Aerial Imagery
University of Kentucky（肯塔基大学）
我们介绍了一种新的学习策略，从航空图像中提取语义有意义的功能。而不是手动标记的航空图像，我们建议预测（嘈杂）语义特征自动提取的共定位地面图像。我们的网络架构以航拍图像为输入，使用卷积神经网络提取特征，然后应用自适应变换将这些特征映射到地面透视图中。我们使用一个端到端的学习方法，以尽量减少直接从地面图像提取的语义分割和仅基于航拍图像预测的语义分割之间的差异。我们表明，使用这种策略学习的模型，没有额外的训练，已经能够粗略的航空图像的语义标记。此外，我们证明，通过微调这个模型，我们可以实现更准确的语义分割比两个基线初始化策略。我们使用我们的网络来处理估计地面图像的地理位置和地理方向的任务。最后，我们展示了如何从航空图像中提取的功能可以用来幻觉一个似是而非的地面全景。
2016-12-08 cs.CV
Towards Open-Set Semantic Segmentation of Aerial Images
Universidade Federal de Minas Gerais（米纳斯吉拉斯联邦大学）；University of Stirling（斯特灵大学）
经典和最近的深度计算机视觉方法针对可见光谱图像进行了优化，这些图像通常以从智能手机或相机获取的灰度或RGB颜色空间进行编码。在遥感领域利用的一种较不常见的图像来源是卫星和航空图像。然而，这些数据的模式识别方法的发展是相对较新的，主要是由于这类图像的可用性有限，因为直到最近它们还专门用于军事目的。获得航空图像，包括光谱信息，一直在增加，主要是由于无人机的成本低，成像卫星发射成本便宜，和新的公共数据集。通常遥感应用采用严格建模的闭集场景下的分类任务的计算机视觉技术。然而，现实世界的任务很少适合封闭集上下文，经常呈现以前未知的类，将它们描述为开放集场景。针对这一问题，本文首次研究和发展了遥感图像开集场景的语义分割技术。本文的主要贡献是：1）开集语义分割的相关工作的讨论，这些技术可以适用于开集遥感任务的证据; 2）开发和评估一种新的方法，开集语义分割。我们的方法产生了竞争力的结果相比，闭集方法相同的数据集。
2020-01-27 cs.CV
Tree semantic segmentation from aerial image time series
Mila；Quebec AI Institute（魁北克人工智能研究所）；School of Computer Science（计算机科学学院）；McGill University（麦吉尔大学）
本研究针对树种识别问题，提出结合时空卷积块与分类学层级损失的航空图像时间序列树木语义分割方法，验证了时间序列模态和分类标签信息对分割性能的提升作用。
2024-07-18 cs.CV
A Relation-Augmented Fully Convolutional Network for Semantic Segmentation in Aerial Scenes
German Aerospace Center (DLR)（德国航空航天中心）；Technical University of Munich (TUM)（慕尼黑工业大学）
大多数当前的语义分割方法都依赖于深度卷积神经网络（CNN）。然而，他们使用的卷积运算与当地的感受野导致失败的建模上下文空间关系。先前的工作试图通过在网络中使用图形模型或空间传播模块来解决这个问题。但这种模型往往无法捕捉实体之间的长期空间关系，这导致空间碎片化的预测。此外，最近的工作表明，通道信息也在CNN中起着关键作用。在这项工作中，我们引入了两个简单而有效的网络单元，空间关系模块和通道关系模块，学习和推理任何两个空间位置或特征图之间的全局关系，然后产生关系增强的特征表示。空间和信道关系模块是通用的和可扩展的，并且可以以即插即用的方式与现有的全卷积网络（FCN）框架一起使用。我们评估关系模块配备网络的语义分割任务使用两个航空图像数据集，这从根本上取决于远程空间关系推理。这些网络取得了非常有竞争力的结果，比基线有了重大改进。
2020-05-19 cs.CV
Unveiling Ancient Maya Settlements Using Aerial LiDAR Image Segmentation
University of North Carolina at Charlotte（北卡罗来纳大学夏洛特分校）；Davidson College（戴维森学院）
针对LiDAR考古图像人工识别效率低、需专业知识的问题，提出结合新型LiDAR预处理与数据增强的YOLOv8分割方法，在玛雅两类建筑分割上IoU达0.842和0.809，优于现有方法，可加速历史景观分析。
2024-03-09 cs.CV
TreeSegNet: Adaptive Tree CNNs for Subdecimeter Aerial Image Segmentation
Beijing University of Chemical Technology（北京化工大学）；College of Information Science & Technology（信息科学与技术学院）
对于亚分米级航空影像分割任务，由于遥感内容和光学条件的复杂性，通常很难获得细粒度的语义分割结果。最近，卷积神经网络（CNN）在这项任务上表现出了出色的性能。尽管许多深层神经网络结构和技术已被应用于提高准确性，但很少有人注意更好地区分容易混淆的类别。在本文中，我们提出了TreeSegNet，它采用自适应网络来提高像素级的分类率。具体而言，基于DeepUNet的基础设施，根据混淆矩阵和所提出的TreeCutting算法自适应地构造Tree-CNN块，其中每个节点表示ResNeXt单元。通过级联连接传输特征图，Tree-CNN块融合了多尺度特征，并学习模型的最佳权重。在ISPRS 2D语义标注波茨坦数据集上的实验中，TreeSegNet获得的结果优于其他已发表的最先进的方法。详细的比较和分析表明，自适应Tree-CNN块带来的改善是显着的。
2018-08-25 cs.CV
iSAID: A Large-scale Dataset for Instance Segmentation in Aerial Images
Inception Institute of Artificial Intelligence, UAE（阿联酋Inception人工智能研究所）；Wuhan University, China（中国武汉大学）；Huazhong University of Science and Technology, China（中国华中科技大学）
现有的地球视觉数据集适合于语义分割或目标检测。在这项工作中，我们介绍了第一个基准数据集的实例分割在航空影像，结合实例级目标检测和像素级分割任务。与自然场景中的实例分割相比，航拍图像提出了独特的挑战，例如，每个图像的实例数量巨大，对象规模变化大，以及大量的微小对象。我们在航空图像数据集（iSAID）中的大规模和密集注释的实例分割包含2，806张高分辨率图像中15个类别的655，451个对象实例。针对每个实例的这种精确的每像素注释确保了对于详细的景物分析至关重要的准确定位。与现有的基于小尺度航空影像的实例分割数据集相比，iSAID包含15个$\times$对象类别和5个$\times$实例。我们使用两种流行的自然图像实例分割方法对我们的数据集进行基准测试，即Mask R-CNN和PANet。在我们的实验中，我们表明，在航空图像上直接应用现成的Mask R-CNN和PANet会提供次优的实例分割结果，因此需要研究社区提供专门的解决方案。该数据集可在以下网址公开获取：https://captain-whu.github.io/iSAID/index.html
2019-08-28 cs.CV cs.LG
Benchmarking Deep Learning Models for Aerial LiDAR Point Cloud Semantic Segmentation under Real Acquisition Conditions: A Case Study in Navarre
Department of Statistics, Computer Science and Mathematics and Institute of Smart Cities (ISC), Public University of Navarre (UPNA)（统计、计算机科学与数学系和智能城市研究所（ISC），纳瓦拉公共大学（UPNA））；Tracasa Instrumental
本文评估了四种深度学习模型在真实飞行条件下大规模空中LiDAR数据集上的性能，揭示了空中数据中类别不平衡和几何变化的挑战，结果显示KPConv在多个类别上表现最佳。
2026-03-23 cs.CV
Joint Instance Segmentation and Geometric Attribute Regression for Roof Structures in Aerial Imagery
University of Amsterdam (UvA)（阿姆斯特丹大学）
提出一种从单张航空正射影像中联合预测屋顶实例分割掩码和三个连续几何属性（建筑高度、屋顶坡度、屋顶方位角）的方法，通过条件方位角损失和对数归一化高度表示解决数据噪声和分布偏斜问题，在荷兰大规模数据集上实现了高精度，并可从单张图像重建简化3D建筑模型。
2026-05-25 cs.CV
Augmentation Invariance and Adaptive Sampling in Semantic Segmentation of Agricultural Aerial Images
Politecnico di Torino（都灵理工大学）；LINKS Foundation（LINKS基金会）；Consorzio Interuniversitario Nazionale per l’Informatica（全国大学信息学联盟）
本文研究了农业航空影像的语义分割问题。我们观察到，用于该任务的现有方法在设计时没有考虑航空数据的两个特征：（i）自顶向下的视角意味着模型不能依赖于场景的固定语义结构，因为传感器的不同旋转可能会经历相同的场景;（ii）由于场景的相关对象可能以极其不同的尺度出现（例如，一片庄稼地和一辆小车）。我们基于两个想法提出了一个解决这些问题的方案：（i）我们一起使用一组合适的增强和一致性损失来指导模型学习语义表示，这些语义表示对于自顶向下视角的典型光度和几何变化是不变的（增广不变性）;（ii）我们使用采样方法（自适应采样），该方法基于类的逐像素分布和实际网络置信度的测量来选择训练图像。通过在Aidure-Vision数据集上进行的一组广泛的实验，我们证明了我们提出的策略提高了当前最先进方法的性能。
2022-04-17 cs.CV
AF$_2$: Adaptive Focus Framework for Aerial Imagery Segmentation
航空影像分割作为一种特殊的语义分割任务，在高空间分辨率遥感影像理解中得到了广泛的应用。航空影像分割除了面临一般语义分割任务所面临的大尺度变化等问题外，还面临着一些独特的挑战，其中最关键的挑战在于前景-背景不平衡。最近已经有一些尝试通过提出复杂的神经网络架构来解决这个问题的努力，因为它们可以用于提取信息丰富的多尺度特征表示并增加对象边界的区分。然而，他们中的许多人只是利用这些多尺度表示在特设的措施，但忽略了一个事实，即不同大小的对象的语义可以更好地识别通过不同范围的感受野。在本文中，我们提出了自适应焦点框架（AF $_2$），它采用了分层分割过程，并侧重于自适应地利用广泛采用的神经网络架构产生的多尺度表示。特别是，一个可学习的模块，称为自适应置信度机制（ACM），提出了确定表示的规模应用于分割不同的对象。综合实验表明，AF $_2$在三种广泛使用的航空基准上的精度有了显著提高，与主流方法一样快。
2022-02-18 cs.AI cs.CV
Application of a semantic segmentation convolutional neural network for accurate automatic detection and mapping of solar photovoltaic arrays in aerial imagery
Duke University（杜克大学）
我们考虑的问题，自动检测小规模的太阳能光伏阵列背后的米能源资源评估在高分辨率航空影像。这种算法提供了一种更快、更经济的解决方案来收集分布式太阳能光伏（PV）阵列的信息，例如它们的位置、容量和产生的能量。光伏阵列的表面积是一个可以从航空图像中估计的特征，它为阵列容量和能量产生提供了一个重要的代理。在这项工作中，我们采用了最先进的卷积神经网络架构，称为SegNet（Badrinarayanan et.例如，2015年），语义分割（或映射）光伏阵列在航空图像。这是建立在以前的工作重点是确定光伏阵列的位置，而不是他们的具体形状和大小。我们测量我们的SegNet实现的能力，以估计光伏阵列的表面积上的一个大的，公开的，数据集，已在以前的几项研究。结果表明，与最近提出的卷积神经网络PV检测算法相比，SegNet模型在估计形状和大小方面产生了实质性的性能改进。
2018-01-11 cs.CV
Learning Aerial Image Segmentation from Online Maps
ETH Zurich（苏黎世联邦理工学院）
本研究处理高分辨率（航空）图像的语义分割，其中语义类标签被分配给每个像素通过监督分类作为自动地图生成的基础。最近，深度卷积神经网络（CNN）表现出令人印象深刻的性能，并迅速成为语义分割的事实标准，其额外的好处是不再需要特定于任务的特征设计。然而，深度学习方法的一个主要缺点是它们非常需要数据，从而加剧了监督分类的长期瓶颈，以获得足够的注释训练数据。另一方面，已经观察到它们对训练标签中的噪声相当鲁棒。这开辟了一种有趣的可能性，可以避免注释大量的训练数据，而是从现有的遗留数据或可能表现出高噪声水平的众包地图中训练分类器。本文所解决的问题是：大规模的，公开的标签培训可以取代人工标注工作的很大一部分，仍然取得足够的性能？这些数据将不可避免地包含很大一部分错误，但作为回报，在世界上更大的地区，几乎可以获得无限数量的数据。我们采用了最先进的CNN架构，用于对航拍图像中的建筑物和道路进行语义分割，并比较了使用不同训练数据集时的性能，这些数据集包括手动标记的、同一城市的像素精确地面实况，以及从遥远位置的OpenStreetMap数据中获得的自动训练数据。我们报告我们的结果表明，满意的性能，可以得到显着减少人工注释的努力，通过利用嘈杂的大规模训练数据。
2017-07-21 cs.CV
UAV-OVVIS: Unmanned Aerial Vehicles Also Need Open-Vocabulary Video Instance Segmentation
研究针对无人机视频感知在开放场景中支持灵活查询和细粒度实例级动态理解不足的问题，提出无需训练的AeroTrack统一框架，构建AeroVIS评估基准，其实例化变体在无人机场景表现优异，还发布框架和基准以支持后续研究。
2026-07-23 cs.CV
Instance segmentation of fallen trees in aerial color infrared imagery using active multi-contour evolution with fully convolutional network-based intensity priors
The Hong Kong Polytechnic University（香港理工大学）；Bavarian Forest National Park（巴伐利亚森林国家公园）
在本文中，我们介绍了一个框架分割实例的一个共同的对象类的多个活动轮廓进化的语义分割地图的图像，通过完全卷积网络。轮廓演变被铸造作为一个能量最小化的问题，其中的总能量功能结合了一个数据拟合项，一个明确的形状模型，并占对象重叠。提出了有效的解决方案邻域算子，使优化通过元算法，如模拟退火。我们实例化的背景下分割个人下降的干高分辨率航空多光谱图像的建议框架。我们在3个不同复杂度的真实场景上验证了我们的方法。试验地块位于德国巴伐利亚森林国家公园的地区，那里遭受了严重的树皮甲虫侵扰。在多边形和线段两个层次上进行了评价，表明多轮廓分割可以达到0.93的精度和0.82的召回率。与迭代样本共识线段检测相比，召回率提高了7个百分点（PP），精确度提高了6个百分点。尽管简单的应用形状参数化，明确的形状模型纳入能量函数提高了结果高达4 PP的召回。最后，我们展示了使用基于深度学习的语义分割方法作为个体词干检测基础的重要性。我们的方法是一个步骤，增加自动倒树映射的可访问性，由于更高的成本效益相比，激光扫描的航空图像采集。精确的倒木图可进一步用作植物和动物生境模拟、森林生态系统固碳和土壤质量研究的基础。
2021-05-05 cs.CV
AIFloodSense: A Global Aerial Imagery Dataset for Semantic Segmentation and Understanding of Flooded Environments
Department of Management Science and Technology（管理科学与技术系）；Hellenic Mediterranean University（希伯伦地中海大学）；Institute of Computer Science, FORTH（信息科学研究所，FORTH）
本文提出AIFloodSense数据集，包含470张高分辨率图像，覆盖64个国家和六个大洲，支持图像分类、语义分割和视觉问答三个任务，旨在提升洪水环境的灾害评估能力。
2025-12-19 cs.CV
Improving Semantic Segmentation of Aerial Images Using Patch-based Attention
University of Trento（特伦托大学）
特征表示能力和空间定位精度之间的权衡对于航空图像的密集分类/语义分割至关重要。从神经网络的后期层提取的高级特征包含丰富的语义信息，但具有模糊的空间细节;从网络的早期层提取的低级特征包含更多的像素级信息，但孤立且有噪声。因此，很难弥合高层次和低层次特征之间的差距，因为它们在物理信息内容和空间分布方面存在差异。在这项工作中，我们有助于解决这个问题，以两种方式增强功能表示。一方面，提出了一个补丁注意模块（PAM），以增强嵌入的上下文信息的局部注意的补丁式计算的基础上。另一方面，提出了一个注意力嵌入模块（AEM），通过从高层特征中嵌入局部焦点来丰富底层特征的语义信息。这两个模块都是轻量级的，可以应用于处理卷积神经网络（CNN）的提取特征。实验表明，通过将所提出的模块集成到基准全卷积网络（FCN）中，所得到的局部注意力网络（LANet）在两个航空图像数据集上的性能比基准显著提高，并且优于其他基于注意力的方法。
2019-11-20 cs.CV
Advancements in Road Lane Mapping: Comparative Fine-Tuning Analysis of Deep Learning-based Semantic Segmentation Methods Using Aerial Imagery
本研究比较了十二种深度学习语义分割模型在部分标注数据集下的迁移学习性能，发现基于Transformer的模型优于卷积神经网络，微调后显著提升了从航空影像提取道路车道线的性能，对自动驾驶HD地图开发具有重要意义。
2024-10-15 cs.CV
Enhancing DeepLabV3+ to Fuse Aerial and Satellite Images for Semantic Segmentation
Ibnou Zohr University（伊本·佐赫尔大学）；INSA CVL（中央卢瓦尔河谷国立应用科学学院）；University of Orleans（奥尔良大学）；Polytech（综合理工学院）
本文通过引入转置卷积层块融合航空与卫星图像，增强DeepLabV3+架构，在LandCover.ai数据集上实现84.91%的mIoU，提升多模态语义分割性能。
2025-03-28 cs.AI cs.CV
SegFly: A Dataset and 2D-3D-2D Paradigm for Aerial RGB-Thermal Semantic Segmentation at Scale
Fraunhofer Institute IVI（弗劳恩霍夫交通与基础设施系统研究所）；TU Munich（慕尼黑工业大学）；MCML（慕尼黑机器学习中心）；UCLA（加州大学洛杉矶分校）；Uni Cambridge（剑桥大学）
针对航空RGB-T数据集规模小、标注成本高和对齐困难的问题，提出几何驱动的2D-3D-2D范式，通过少量RGB标注自动生成密集伪标签并实现跨模态对齐，构建含2万+RGB图像和1.5万+RGB-T对的SegFly基准，实验表明该范式有效提升分割性能。
2026-07-02 cs.CV
Image Segmentation to Identify Safe Landing Zones for Unmanned Aerial Vehicles
Dublin City University（都柏林城市大学）
城市地区的送货服务明显增加，杰夫·贝佐斯声称亚马逊运送的86%的订单重量不到5磅，现在是时候研究自动化送货过程最后阶段的经济方法了。随着半自动无人机送货服务的出现，如爱尔兰初创公司“Manna”和马耳他的“Skymax”，送货旅程的最后一步仍然是最难自动化的。本文研究了使用由无人机上的单个RGB相机捕获的简单图像来区分安全和不安全的着陆区。我们研究语义图像分割框架作为识别安全着陆区的一种方式，并证明了轻量级模型的准确性，最大限度地减少了所需的传感器数量。通过使用图像而不是视频，我们减少了识别无人机安全着陆区所需的能量，而无需人工干预。
2021-11-29 cs.CV
Learning from Unlabelled Data with Transformers: Domain Adaptation for Semantic Segmentation of High Resolution Aerial Images
European Space Agency (ESA)（欧洲空间局（ESA））；Sapienza University of Rome（罗马第一大学（萨皮恩扎大学））
针对航空对地观测数据标注难、标签易变及半监督分割挑战，提出NEOS模型，通过域适应对齐跨域表征实现无标注图像语义分割，性能优于现有模型。
2024-04-17 cs.CV cs.LG
Aerial-PASS: Panoramic Annular Scene Segmentation in Drone Videos
State Key Laboratory of Optical Instrumentation, Zhejiang University, China（浙江大学光学仪器国家重点实验室）；Institute for Anthropomatics and Robotics, Karlsruhe Institute of Technology, Germany（卡尔斯鲁厄理工学院人机与机器人研究所）
对周围环境进行空中逐像素场景感知是无人机的一项重要任务。以往的研究工作主要采用传统的针孔摄像机或鱼眼摄像机作为成像器件。然而，这些成像系统不能同时实现大视场（FoV）、小尺寸和轻量化。为此，我们设计了一种具有全景环形透镜（PAL）的无人机系统，该系统具有体积小，重量轻，360度环形FoV的特点。设计了一种轻量级的全景环形语义分割神经网络模型，实现了高精度、实时的场景解析。此外，我们提出了第一个无人机视角的全景场景分割数据集Aerial-PASS，带有田径，田径等注释标签。各种实验表明，所设计的系统在航空全景场景解析中取得了令人满意的效果。特别是，我们提出的模型罢工之间的分割性能和推理速度合适，验证了公共街道场景和我们建立的空中场景数据集的一个很好的权衡。
2021-05-15 cs.CV cs.RO eess.IV
Zero-Shot Tree Detection and Segmentation from Aerial Forest Imagery
UC Berkeley（加州大学伯克利分校）；UC Davis（加州大学戴维斯分校）
本文探索将SAM2以零样本方式用于航空森林影像中的单棵树木检测与分割，并验证其与现有专用检测模型提示相结合时的迁移效果，表明大型预训练模型在遥感领域具有良好前景。
2025-06-03 cs.CV
Deep multi-task learning for a geographically-regularized semantic segmentation of aerial images
Swiss Data Science Center, ETH Zurich（苏黎世联邦理工学院瑞士数据科学中心）；Wageningen University and Research（瓦赫宁根大学及研究中心）
当在分米空间分辨率范围内接近架空图像的语义分割时，成功的策略通常将学习语义类的视觉外观的强大方法（例如卷积神经网络）与空间正则化策略（例如图形模型，如条件随机场）相结合。在本文中，我们提出了一种方法来学习证据的形式，语义类的可能性，语义边界跨类和浅到深的视觉特征，每一个由多任务卷积神经网络架构建模。我们将这种自下而上的信息与自上而下的空间正则化相结合，该空间正则化由条件随机场模型编码，该模型优化了具有与区域之间的结构、空间和数据依赖成对关系相关的约束的分段层次结构中的标签空间。我们的研究结果表明，这种策略比一系列反映最先进技术的强基线提供了更好的正则化。所提出的策略提供了一个灵活和原则性的框架，包括视觉和结构信息的几个来源，同时允许不同程度的空间正则化占先验的预期输出结构。
2018-08-23 cs.CV
Spatially-Aware Evaluation Framework for Aerial LiDAR Point Cloud Semantic Segmentation: Distance-Based Metrics on Challenging Regions
Department of Statistics, Computer Science and Mathematics and Institute of Smart Cities (ISC), Public University of Navarre (UPNA)（统计、计算机科学与数学系和智能城市研究所（ISC），纳瓦拉公共大学）；Tracasa Instrumental
本文提出一种新的评估框架，通过引入基于距离的指标和聚焦于困难点的评估方法，解决传统指标在空中有激光雷达数据中的局限性，揭示空间误差模式，提升地球观测应用中的模型选择。
2026-03-23 cs.CV
Deep Learning-based Aerial Image Segmentation with Open Data for Disaster Impact Assessment
The University of Manchester（曼彻斯特大学）
在飓风和海啸等自然灾害发生后，卫星图像是一种极为宝贵的资源，可用于风险评估和灾害管理。为了提供及时和可操作的灾害响应信息，本文提出了一个框架，利用分段神经网络来确定受灾地区和可进入的道路在灾后的情况。分析了ImageNet预训练在航空图像分割任务中的有效性，并比较了流行的分割模型的性能。实验结果表明，ImageNet上的预训练通常会提高许多模型的分割性能。OpenStreetMap（OSM）提供的开放数据用于训练，无需耗时的手动注释。该方法还利用图论来更新OSM提供的道路网络数据，并检测自然灾害引起的变化。对2018年袭击印度尼西亚帕卢的海啸数据进行的广泛实验表明了拟议框架的有效性。与ENet相比，ENetSeparable的参数减少了30%，实现了与最先进网络相当的分割结果。
2020-06-10 cs.CV eess.IV
CP2M: Clustered-Patch-Mixed Mosaic Augmentation for Aerial Image Segmentation
Northwestern University（西北大学）；Carnegie Mellon University（卡内基梅隆大学）；The University of Hong Kong（香港大学）；Duke University（杜克大学）；University College Dublin（都柏林大学学院）；Beijing University of Technology（北京工业大学）；The ADAPT SFI Research Centre（ADAPT SFI研究中心）
本文提出CP2M数据增强策略，结合Mosaic增强与聚类补丁混合阶段，利用连通分量标记算法保持空间连贯性，在ISPRS Potsdam数据集上显著缓解过拟合并提升分割精度与模型鲁棒性。
2025-01-26 cs.CV
A Contrastive Distillation Approach for Incremental Semantic Segmentation in Aerial Images
Politecnico di Torino（都灵理工大学）；LINKS Foundation（LINKS基金会）
增量学习是航空图像处理中的一项重要任务，特别是在大规模注释数据集有限的情况下。关于当前深度神经架构的一个主要问题被称为灾难性遗忘，即一旦提供了一组新的数据进行再训练，就无法忠实地保持过去的知识。多年来，已经提出了几种技术来缓解图像分类和目标检测的这个问题。然而，直到最近，焦点才转向更复杂的下游任务，如实例或语义分割。从语义分割任务的增量类学习开始，我们的目标是使这种策略适应航空领域，利用一个独特的功能，将其与自然图像区分开来，即方向。除了标准的知识蒸馏方法，我们提出了一种对比正则化，其中任何给定的输入与其增强版本（即翻转和旋转）进行比较，以最大限度地减少两个输入产生的分割特征之间的差异。我们展示了我们的解决方案在波茨坦数据集上的有效性，在每次测试中都优于增量基线。代码可在：https://github.com/edornd/contrastive-distillation获得。
2021-12-07 cs.CV eess.IV
Vehicle Instance Segmentation from Aerial Image and Video Using a Multi-Task Learning Residual Fully Convolutional Network
Remote Sensing Technology Institute (IMF), German Aerospace Center (DLR)（德国航空航天中心（DLR）遥感技术研究所（IMF））；Technical University of Munich (TUM)（慕尼黑工业大学（TUM））
目标检测和语义分割是高分辨率遥感图像目标检索的两个主要主题，近年来，通过深度学习和卷积神经网络（CNN）的浪潮，目标检索取得了令人瞩目的成绩。在本文中，我们感兴趣的是一个新的，更具挑战性的问题，车辆实例分割，这需要识别，在像素级，车辆出现的地方，以及关联每个像素与车辆的物理实例。相比之下，车辆检测和语义分割各自仅涉及两者之一。我们建议用一个语义边界感知的多任务学习网络来解决这个问题。更具体地说，我们利用残差学习（ResNet）的理念来构建一个完全卷积的网络，该网络能够利用从不同残差块中学习到的多级上下文特征表示。我们从理论上分析和讨论了为什么残差网络可以为逐像素分割任务产生更好的概率图。然后，基于这种网络架构，我们提出了一个统一的多任务学习网络，可以同时学习两个互补的任务，即分割车辆区域和检测语义边界。后一个子问题有助于区分密集的车辆，这通常是不正确的分离到实例。目前，用于车辆提取的具有逐像素注释的数据集是ISPRS数据集和Zeebrugge上的IEEE GRSS DFC 2015数据集，其专门用于语义分割。因此，我们为车辆实例分割构建了一个新的、更具挑战性的数据集，称为繁忙停车场无人机视频数据集，我们在http://www.sipeo.bgu.tum.de/download上提供了我们的数据集，以便它可以用于对未来的车辆实例分割算法进行基准测试。
2018-05-26 cs.CV
Semantics from Space: Satellite-Guided Thermal Semantic Segmentation Annotation for Aerial Field Robots
California Institute of Technology（加州理工学院）；Pomona College（波莫纳学院）
提出利用卫星数据和机载定位姿态估计自动生成热红外图像语义分割标注的方法，结合视觉基础模型实现低成本高精度标注，性能接近高分辨率选项且显著优于零样本方法。
2024-03-21 cs.CV cs.RO
Geometry-Aware Segmentation of Remote Sensing Images via Implicit Height Estimation
New York University（纽约大学）；NYU Abu Dhabi（纽约大学阿布扎比分校）
最近的研究表明，使用额外的高程数据（例如，DSM）用于增强航空图像的语义分割的性能。然而，以前的方法大多采用3D高程信息作为额外的输入。然而在许多实际应用中，人们手头没有相应的DSM信息，并且所获取的DSM图像的空间分辨率通常与航空图像不匹配。为了减轻这种数据约束，并利用三维高程信息，在本文中，我们引入了一个几何感知的分割模型，通过联合高度估计实现准确的语义标记的航空图像。我们设计了一个单独的解码器分支来预测高度图，并使用DSM图像作为侧监督来训练这个新设计的解码器分支，而不是使用单流编码器-解码器网络进行语义标记。通过这种方式，我们的模型不需要DSM作为模型输入，并且在训练期间仍然受益于有用的3D几何信息。此外，我们开发了一个新的几何感知卷积模块，融合了高度解码器分支的3D几何特征和语义分割分支的2D上下文特征。融合的特征嵌入可以产生具有增强性能的几何感知分割图。我们的模型使用DSM图像作为侧监督进行训练，而在推理阶段，它不需要DSM数据，直接以端到端的方式预测语义标签。在ISPRS Vaihingen和Potsdam数据集上的实验表明，该方法对航空影像的语义分割是有效的。该模型在两个数据集上都取得了显着的性能，而无需使用任何手工制作的功能或后处理。
2020-09-22 cs.CV
DRespNeT: A UAV Dataset and YOLOv8-DRN Model for Aerial Instance Segmentation of Building Access Points for Post-Earthquake Search-and-Rescue Missions
Cranfield University（克兰菲尔德大学）；Centre for Autonomous and Cyberphysical Systems, Cranfield University（克兰菲尔德大学自主与网络物理系统中心）
本文提出DRespNeT高分辨率无人机航拍数据集与YOLOv8-DRN实例分割模型，用于震后建筑入口点识别，在RTX-4090上实现92.7% mAP50和27 FPS推理速度，满足搜救实时需求。
2025-09-12 cs.CV
Semi-Supervised Classification and Segmentation on High Resolution Aerial Images
Manipal Institute of Technology（马尼帕尔理工学院）
FloodNet是一个小型无人机平台DJI Mavic Pro四轴飞行器在飓风哈维之后获得的高分辨率图像数据集。该数据集提出了一个独特的挑战，即使用未标记和有限的标记数据集推进灾后场景的损害评估过程。我们提出了一个解决方案，以解决他们的分类和语义分割的挑战。我们通过在训练过程中为分类和分割生成伪标签来解决这个问题，并慢慢增加伪标签丢失对最终丢失的影响。使用这种半监督的训练方法帮助我们通过分类的巨大幅度改善了基线监督损失，使模型能够泛化并在数据集的验证和测试分割上表现得更好。在本文中，我们比较和对比的各种方法和模型的图像分类和语义分割的FloodNet数据集。
2021-06-24 cs.AI cs.CV
A Multi-Stage Multi-Task Neural Network for Aerial Scene Interpretation and Geolocalization
University Politehnica of Bucharest（布加勒斯特理工大学）；Autonomous Systems（自治系统）
航空图像的语义分割和基于视觉的地理定位是计算机视觉中具有挑战性的任务。由于深度卷积网络的出现和相对低成本的无人机的可用性，它们目前在该领域引起了越来越多的关注。我们提出了一种新的多任务多阶段神经网络，能够同时处理这两个问题，在一个单一的向前通过。我们的网络的第一阶段预测像素级类别标签，而第二阶段使用两个分支提供精确的位置。一个分支使用回归网络，而另一个分支用于预测作为分割任务训练的位置图。从结构的角度来看，我们的架构在每个阶段使用编码器-解码器模块，重复使用相同的编码器结构。此外，它的大小受到限制，以便在嵌入式GPU上易于处理。我们实现了商业GPS级的定位精度，从卫星图像的空间分辨率为1平方米每像素在一个城市范围内的利益。在语义分割任务中，我们在两个具有挑战性的数据集（Inria航拍图像标记数据集和马萨诸塞州建筑物）上获得了最先进的结果。
2018-04-04 cs.CV
Aerial Map-Based Navigation Using Semantic Segmentation and Pattern Matching
Nearthlab
提出了一种基于地图的无人机导航系统设计方法。所提出的系统尝试标签到标签匹配，而不是图像到图像匹配，航空图像和地图数据库之间。地面对象可以通过深度学习方法标记，并且对象的配置用于在地图数据库中找到对应的位置。使用深度学习技术作为提取高级特征的工具，将基于图像的定位问题简化为模式匹配问题。本文提出了一种不需要高度信息或相机模型来估计绝对水平位置的模式匹配算法。仿真图像的可行性分析表明，所提出的基于地图的导航可以实现与建议的模式匹配算法，它是能够提供位置给定的标记的对象。
2022-05-30 cs.CV cs.RO
Enhancing Ground-to-Aerial Image Matching for Visual Misinformation Detection Using Semantic Segmentation
Sapienza University of Rome（罗马第一大学）
本研究提出四流孪生式架构SAN-QUAD，利用语义分割增强地面与卫星图像匹配，在CVUSA子集上实现高达9.8%的精度提升，用于视觉虚假信息检测中的地理定位。
2025-02-24 cs.CV
