Self-Adaptive 2D-3D Ensemble of Fully Convolutional Networks for Medical Image Segmentation
University of South Florida（南佛罗里达大学）
分割是医学图像分析中的关键步骤。全卷积网络（FCN）已成为功能强大的分割模型，在各种医学图像数据集中实现了最先进的结果。网络架构通常是为特定的分割任务手动设计的，因此将其应用于其他医疗数据集需要大量的经验和时间。此外，分割需要处理大量的数据，这会导致庞大而复杂的架构。最近，已经提出了自动设计用于医学图像分割的神经网络的方法;然而，大多数方法要么没有充分考虑体积信息，要么没有优化网络的大小。在本文中，我们提出了一种新的自适应的2D-3D集成的FCNs的医学图像分割，结合体积信息，优化模型的性能和大小。该模型由提取切片内信息的2D FCN和利用切片间信息的3D FCN的集合组成。的架构的2D和3D FCN自动适应医学图像数据集使用多目标的基于进化的算法，最大限度地减少分割误差和网络中的参数的数量。在PROMISE 12 Grand Challenge的图像数据集上对所提出的2D-3D FCN集成进行了前列腺分割任务的测试。由此产生的网络排名前10，超过了其他自动设计的架构的性能，同时在尺寸上要小得多。
2019-07-26 cs.CV eess.IV
MAMBO-NET: Multi-Causal Aware Modeling Backdoor-Intervention Optimization for Medical Image Segmentation Network
Tianjin University（天津大学）；Tianjin Key Laboratory of Cognitive Computing and Application（天津认知计算与应用重点实验室）；Tianjin Key Laboratory of Advanced Networking（天津先进网络重点实验室）；Tianjin International Engineering Institute, Tianjin University（天津大学国际工程师学院）；Tianjin Central Hospital of Gynecology Obstetrics（天津市中心妇产科医院）；Silesian University of Technology（西里西亚工业大学）；University of Alberta（阿尔伯塔大学）；Istinye University（伊斯坦布尔耶尼大学）
针对医学图像分割中混淆因素影响精度的问题，提出MAMBO-NET网络，利用多重高斯分布拟合混淆因素并引入后门干预技术，有效提升了分割准确性。
2025-05-28 cs.CV eess.IV
A sparse annotation strategy based on attention-guided active learning for 3D medical image segmentation
Xidian University（西安电子科技大学）；University of North Carolina at Chapel Hill（北卡罗来纳大学教堂山分校）
三维图像分割是医学图像处理中最重要也是最普遍的问题之一。它提供了详细的定量分析，用于准确的疾病诊断，异常检测和分类。目前深度学习算法广泛应用于医学图像分割中，大多数算法都是使用完整标注的数据集训练模型。然而，获取医学图像数据集是非常困难和昂贵的，并且三维医学图像的完整标注是一项单调和耗时的工作。在3D图像中部分标记信息切片将大大减轻手动注释。基于主动学习的样本选择策略已经在二维图像领域被提出，但针对三维图像的策略还很少。本文提出了一种基于注意力引导的主动学习的稀疏标注策略用于三维医学图像分割。注意力机制用于提高分割精度，并对各切片的分割精度进行估计。使用正在开发的人类连接组计划（dHCP）数据集进行的三种不同策略的对比实验表明，我们的策略在大脑提取任务中只需要15%到20%的注释切片，在组织分割任务中只需要30%到35%的注释切片，就可以获得完全注释的比较结果。
2019-06-18 cs.CV eess.IV
MedUHIP: Towards Human-In-the-Loop Medical Segmentation
University of Oxford（牛津大学）
本文提出 MedUHIP，将不确定性感知多假设分割与临床医生人在回路迭代修正结合，在 REFUGE2、LIDC-IDRI 和 QUBIQ 上以更少交互优于多种确定性、不确定性及交互式模型。
2024-08-03 cs.CV eess.IV
Enhancing Foreground Boundaries for Medical Image Segmentation
NVIDIA（英伟达）
目标分割在现代医学图像分析中起着重要的作用，对临床研究、疾病诊断、手术规划等都有重要意义。鉴于医学图像的各种模态，自动或半自动分割方法已被用于识别和解析器官、骨骼、肿瘤和其他感兴趣区域（ROI）。然而，这些当代的分割方法往往无法预测的ROI的边界区域，因为模糊的外观对比度在成像过程中造成的。为了进一步提高边界区域的分割质量，我们提出了边界增强损失，以加强对优化机器学习模型的额外约束。所提出的损失函数是轻量级的，易于实现，无需任何预处理或后处理。我们的实验结果验证了我们的损失函数在分割精度方面优于或至少与其他最先进的损失函数相当。
2020-05-29 cs.CV eess.IV
GMISeg: General Medical Image Segmentation without Re-Training
Imperial College London（帝国理工学院）
针对医学图像分割模型难以泛化到未知新任务、需重新训练的问题，提出GMISeg通用模型，基于ViT预训练编码器结合低秩微调策略，无需额外训练即可处理新分割任务，在多模态多结构数据集上验证有效，便于模型部署。
2024-09-16 cs.CV eess.IV
MGFI-Net: A Multi-Grained Feature Integration Network for Enhanced Medical Image Segmentation
Shanghai University（上海大学）
针对医学图像分割中噪声、低对比度等问题导致的精度不足及边缘细节丢失，提出MGFI-Net，通过多粒度特征提取模块和边缘增强模块提升分割精度与时间效率，优于现有方法。
2025-02-19 cs.CV eess.IV
Boundary-aware Information Maximization for Self-supervised Medical Image Segmentation
ETS Montreal（蒙特利尔高等技术学院）
无监督预训练已被证明是一种有效的方法，可以在有限的标记数据下提高各种下游任务。在各种方法中，对比学习通过构建正负对来学习区分性表示。然而，以无监督的方式为分割任务构建合理的对并不是微不足道的。在这项工作中，我们提出了一种新的无监督预训练框架，避免了对比学习的缺点。我们的框架由两个原则组成：无监督过分割作为预训练任务，使用互信息最大化和边界感知保持学习。两个基准的医学分割数据集上的实验结果表明，我们的方法在提高分割性能的有效性时，很少有注释的图像。
2022-02-16 cs.CV eess.IV
Unified Multi-scale Feature Abstraction for Medical Image Segmentation
Rensselaer Polytechnic Institute（伦斯勒理工学院）；Wuhan University（武汉大学）；National Institutes of Health（美国国立卫生研究院）
医学图像的自动分割是医学图像分析的重要组成部分，在计算机辅助诊断中起着重要的作用。例如，定位和分割肝脏可以非常有助于肝癌的诊断和治疗。医学图像分割中最先进的模型是编码器-解码器架构的变体，如全卷积网络（FCN）和U-Net。1基于FCN的分割方法的主要焦点是通过结合最新的CNN结构（如ResNet 2和DenseNet）进行网络结构工程。3除了探索新的网络结构以有效地提取高级特征外，将多尺度图像特征提取的结构纳入FCN有助于提高分割任务的性能。在本文中，我们设计了一种新的多尺度网络架构，它采用多尺度输入和专用卷积路径来有效地组合来自不同尺度的特征，以更好地利用层次信息。
2019-10-24 cs.CV eess.IV
Informing selection of performance metrics for medical image segmentation evaluation using configurable synthetic errors
United States Food and Drug Administration（美国食品药品监督管理局）
医学成像中基于机器学习的分割广泛用于从诊断到放射治疗计划的临床应用。具有地面实况的分割的医学图像对于研究不同分割性能度量的属性以告知度量选择是有用的。规则的几何形状通常用于合成分割误差并说明性能度量的属性，但它们缺乏真实图像中解剖变化的复杂性。在这项研究中，我们提出了一种工具，通过调整从真实医学图像中提取的解剖对象的参考（真相）掩模来模拟分割。我们的工具旨在修改定义的真轮廓，并模拟不同类型的分割错误与一组用户可配置的参数。我们从放射治疗的胶质瘤图像分割（GLIS-RT）数据库中的230个患者图像中定义了地面真实对象。对于每个对象，我们使用我们的分割合成工具来合成10个版本的分割（即，10个模拟分割器或算法），其中每个版本具有分割误差的预定义组合。然后，我们应用20个性能指标来评估所有合成分割。我们展示了这些指标的属性，包括它们捕获特定类型分割错误的能力。通过分析这些指标的内在属性和分类的分割错误，我们正在努力的目标是开发一个决策树工具，以协助选择分割性能指标。
2022-12-30 cs.CV eess.IV
On The Robustness of Foundational 3D Medical Image Segmentation Models Against Imprecise Visual Prompts
University of California, San Diego（加州大学圣地亚哥分校）
本研究探讨了基础3D医学图像分割模型在面对不精确视觉提示时的鲁棒性，通过实验揭示了模型对视觉形状和空间线索的依赖性及扰动的抗性。
2026-01-23 cs.CV eess.IV
SAM2-3dMed: Empowering SAM2 for 3D Medical Image Segmentation
Beijing Jiaotong University（北京交通大学）
针对SAM2直接用于3D医学图像分割时的双向解剖连续性和边界精度不足问题，提出SAM2-3dMed，通过切片相对位置预测和边界检测模块，在MSD数据集上显著超越现有方法。
2025-10-10 cs.CV eess.IV
Modality-Agnostic Learning for Medical Image Segmentation Using Multi-modality Self-distillation
Wayne State University（韦恩州立大学）；University of Wisconsin-Madison（威斯康星大学麦迪逊分校）
提出 MAG-MS 框架，通过多模态自蒸馏将融合知识迁移到单模态表征，在有限测试模态下实现优于现有方法的医学图像分割，并指导模态选择。
2023-06-06 cs.CV eess.IV
Segment Anything Model for Medical Image Segmentation: Current Applications and Future Directions
School of Data Science, Fudan University（复旦大学）；School of Biomedical Engineering, Shanghai Jiao Tong University（上海交通大学）
本文综述了Segment Anything Model（SAM）在医学图像分割中的当前应用，涵盖实证基准测试与方法论改进，并探讨了未来研究方向，为基础模型在医学图像分析领域的发展提供指导。
2024-01-07 cs.CV eess.IV
Confidence Calibration and Predictive Uncertainty Estimation for Deep Medical Image Segmentation
The University of British Columbia（不列颠哥伦比亚大学）；Harvard Medical School（哈佛医学院）
全卷积神经网络（FCN），特别是U-Net，在许多医学成像应用的语义分割方面取得了最先进的成果。此外，批量规范化和骰子丢失已成功用于稳定和加速训练。然而，这些网络校准不良，即它们倾向于在正确和错误的分类中产生过度自信的预测，使其不可靠且难以解释。在本文中，我们研究了预测不确定性估计的FCNs的医学图像分割。我们做了以下贡献：1）我们系统地比较了交叉熵损失和Dice损失在分割质量和不确定性估计方面的FCNs; 2）我们提出了模型集成，用于批量归一化和Dice损失训练的FCNs的置信度校准; 3）我们评估了校准的FCNs预测结构分割质量和检测分布外测试示例的能力。我们在大脑，心脏和前列腺的三个医学图像分割应用程序进行了广泛的实验，以评估我们的贡献。本研究的结果提供了相当深入的预测不确定性估计和分布外检测在医学图像分割，并提供了实用的配方置信度校准。此外，我们一贯表明，模型集成提高了置信度校准。
2020-06-29 cs.CV eess.IV
Inter-slice Context Residual Learning for 3D Medical Image Segmentation
Northwestern Polytechnical University（西北工业大学）
自动和准确的3D医学图像分割在协助医疗专业人员评估疾病进展和制定快速治疗计划方面起着至关重要的作用。尽管深度卷积神经网络（DCNN）已广泛应用于这一任务，但这些模型的准确性仍需要进一步提高，主要是由于它们对3D上下文感知的能力有限。在本文中，我们提出了三维上下文残差网络（ConResNet）的准确分割的三维医学图像。该模型由编码器、分割解码器和上下文残差解码器组成。我们设计了上下文残差模块，并使用它来桥接每个尺度上的两个解码器。每个上下文残差模块包含上下文残差映射和上下文注意力映射，形式化的目标是显式地学习切片间的上下文信息，而上下文注意力映射将上下文信息作为一种注意力来提高分割精度。我们在MICCAI 2018脑肿瘤分割（BraTS）数据集和NIH胰腺分割（Pancreas-CT）数据集上评估了该模型。我们的结果不仅证明了所提出的3D上下文残差学习方案的有效性，而且还表明，所提出的ConResNet在脑肿瘤分割方面比六种顶级方法更准确，在胰腺分割方面比七种顶级方法更准确。代码可在https://git.io/ConResNet上获得
2020-11-28 cs.CV eess.IV
EViT-Unet: U-Net Like Efficient Vision Transformer for Medical Image Segmentation on Mobile and Edge Devices
School of Computing and Augmented Intelligence, Arizona State University（亚利桑那州立大学计算与增强智能学院）；Mayo Clinic（梅奥诊所）
本文提出EViT-UNet，一种结合卷积与自注意力的高效U形ViT分割网络，在保持医学图像分割精度的同时显著降低计算复杂度，适用于移动和边缘设备。
2024-10-19 cs.CV eess.IV
Cross-adversarial local distribution regularization for semi-supervised medical image segmentation
Monash University（莫纳什大学）；CSIRO’s Data61（联邦科学与工业研究组织Data61研究所）
针对医学半监督分割标注数据有限的问题，提出交叉对抗局部分布正则化方法增强平滑性假设，在LA和ACDC公开数据集上取得当前最优性能。
2023-10-02 cs.CV eess.IV
Dual-Task Mutual Learning for Semi-Supervised Medical Image Segmentation
Beihang University（北京航空航天大学）；Hefei Innovation Research Institute, Beihang University（北京航空航天大学合肥创新研究院）；Beijing Advanced Innovation Centre for Biomedical Engineering（北京生物医学工程高精尖创新中心）；Beijing Advanced Innovation Centre for Big Data-Based Precision Medicine（北京大数据精准医疗高精尖创新中心）
深度学习方法在医学图像分割任务中的成功通常需要大量的标记数据。然而，获得可靠的注释是昂贵且耗时的。半监督学习利用了无标记数据易于获取的优势，在医学图像分割中受到广泛关注。在本文中，我们提出了一种新的双任务相互学习框架的半监督医学图像分割。我们的框架可以制定为两个单独的分割网络的集成基于两个任务：学习基于区域的形状约束和学习基于边界的表面失配。与师生网络之间的单向传递不同，双任务学生的集合可以在训练过程中协作学习并隐性地从彼此那里探索有用的知识。通过联合学习目标的分割概率图和符号距离图，我们的框架可以加强几何形状约束，学习更多可靠的信息。实验结果表明，我们的方法通过利用未标记的数据实现了性能增益，并优于最先进的半监督分割方法。
2021-07-11 cs.CV eess.IV
HyperSegNAS: Bridging One-Shot Neural Architecture Search with 3D Medical Image Segmentation using HyperNet
Johns Hopkins University（约翰斯·霍普金斯大学）；NVIDIA（英伟达）；Arizona State University（亚利桑那州立大学）
由于物体（如器官或肿瘤）的形状和图案的高度可变性，3D医学图像的语义分割是一项具有挑战性的任务。鉴于深度学习最近在医学图像分割方面取得的成功，已经引入了神经架构搜索（NAS）来寻找高性能的3D分割网络架构。然而，由于3D数据的大量计算需求和架构搜索的离散优化性质，先前的NAS方法需要长的搜索时间或必要的连续松弛，并且通常导致次优网络架构。虽然一次性NAS可以潜在地解决这些缺点，但其在分割域中的应用在扩展的多尺度多路径搜索空间中还没有得到很好的研究。为了使一次性NAS的医学图像分割，我们的方法，名为HyperSegNAS，引入了一个超网络，以协助超网络的训练，结合架构拓扑信息。一旦超网被训练，这样的超网就可以被移除，并且在架构搜索期间不会引入开销。我们表明，HyperSegNAS产生更好的性能和更直观的架构相比，以前的国家的最先进的（SOTA）分割网络;此外，它可以快速，准确地找到良好的架构候选人在不同的计算约束。我们的方法在来自医学分割十项全能（MSD）挑战的公共数据集上进行了评估，并达到了SOTA性能。
2022-03-24 cs.CV eess.IV
Cross-level Contrastive Learning and Consistency Constraint for Semi-supervised Medical Image Segmentation
Sun Yat-Sen University（中山大学）；Xidian University（西安电子科技大学）；The Sixth Affiliated Hospital, Sun Yat-sen University（中山大学附属第六医院）
半监督学习（Semi-supervised learning，SSL）利用少量标记图像和大量未标记图像进行网络训练，有利于减轻医学图像分割中的数据标注负担。根据医学影像专家的经验，纹理、光泽和平滑度等局部属性是识别医学图像中病变和息肉等目标对象的重要因素。基于此，我们提出了一种跨层次的对比学习方案，以提高半监督医学图像分割中局部特征的表达能力。与现有的图像，补丁明智和点明智的对比学习算法相比，我们设计的方法是能够探索更复杂的相似性线索，即全球和本地补丁明智的表示之间的关系特性。此外，为了充分利用跨层次的语义关系，我们设计了一种新的一致性约束，比较预测的补丁对那些完整的图像。在两个医学图像数据集上，通过跨层对比学习和一致性约束，可以有效地挖掘未标记数据，提高分割性能。我们的方法代码可用。
2022-02-13 cs.CV eess.IV
CycleMix: A Holistic Strategy for Medical Image Segmentation from Scribble Supervision
Fudan University（复旦大学）
管理大量的完全注释的训练数据可能是昂贵的，特别是对于医学图像分割的任务。涂鸦是一种较弱的注释形式，在实践中更容易获得，但从有限的涂鸦监督中训练分割模型仍然具有挑战性。为了解决这些困难，我们提出了一个新的框架，涂鸦学习为基础的医学图像分割，这是由混合增强和周期一致性，因此被称为CycleMix。为了加强监督，CycleMix采用了混合策略，并采用了专门的随机遮挡设计，以执行涂鸦的增量和减量。对于监督的规则化，CycleMix强化了训练目标，一致性损失惩罚不一致的分割，这导致分割性能的显着提高。两个开放数据集的结果，即，ACDC和MSCMRseg表明，所提出的方法实现了令人振奋的性能，表现出与完全监督方法相当甚至更好的准确性。在https://github.com/BWGZK/CycleMix上可以公开获得MSCMRseg的代码和专家制作的潦草注释。
2022-03-12 cs.CV eess.IV
Stronger is not better: Better Augmentations in Contrastive Learning for Medical Image Segmentation
Department of Computer Science（计算机科学系）
本文研究了医学图像分割中对比学习的增强方法，发现强数据增强不一定提升性能，并提出了改进的增强技术以提高分割效果。
2025-12-10 cs.CV eess.IV
DoubleU-Net: A Deep Convolutional Neural Network for Medical Image Segmentation
SimulaMet；UiT The Arctic University of Norway（挪威北极大学）；Oslo Metropolitan University（奥斯陆城市大学）
语义图像分割是将图像的每个像素标记为其相应的类的过程。基于编码器-解码器的方法，如U-Net及其变体，是解决医学图像分割任务的流行策略。为了提高U-Net在各种分割任务上的性能，我们提出了一种名为DoubleU-Net的新架构，它是两个U-Net架构相互堆叠的组合。第一个U-Net使用预训练的VGG-19作为编码器，它已经从ImageNet学习了特征，可以轻松地转移到另一个任务。为了有效地捕获更多的语义信息，我们在底部添加了另一个U-Net。我们还采用Atrous空间金字塔池（ASPP）来捕获网络中的上下文信息。我们使用四个医学分割数据集对DoubleU-Net进行了评估，涵盖了各种成像方式，如结肠镜检查、皮肤镜检查和显微镜检查。在MICCAI 2015分割挑战、CVC ClinicDB、2018 Data Science Bowl挑战和病变边界分割数据集上的实验表明，DoubleU-Net优于U-Net和基线模型。此外，DoubleU-Net生成更准确的分割模板，特别是在CVC-ClinicDB和MICCAI 2015分割挑战数据集的情况下，这些数据集具有挑战性的图像，例如较小和平坦的息肉。这些结果显示了对现有U-Net模型的改进。在各种医学图像分割数据集上产生的令人鼓舞的结果表明，DoubleU-Net可以用作医学图像分割和跨数据集评估测试的强大基线，以衡量深度学习（DL）模型…
2020-06-27 cs.CV eess.IV
Roughness Index and Roughness Distance for Benchmarking Medical Segmentation
University of Arkansas（阿肯色大学）
医学图像分割是医学图像分析中最具挑战性的任务之一，并已在许多临床应用中得到广泛发展。大多数现有的度量标准首先是针对自然图像设计的，然后扩展到医学图像。虽然物体表面在医学分割和定量分析中起着重要的作用，即分析脑肿瘤表面，测量灰质体积，但大多数现有的度量在分析物体表面时受到限制，特别是在分析给定体积物体的表面光滑度或粗糙度或分析拓扑错误时。在本文中，我们首先分析了所有现有的医学图像分割指标，特别是体积数据的优点和缺点。然后提出了合适的粗糙度指数和粗糙度距离用于医学图像分割分析和评价。我们提出的方法解决了两种分割错误，即（i）边界/表面上的拓扑错误和（ii）边界/表面上的不规则性。这项工作的贡献是四倍：（i）检测表面上的不规则尖峰/孔洞，（ii）提出粗糙度指数来测量给定对象的表面粗糙度，（iii）提出一个粗糙度距离来测量两个边界/表面的距离，通过利用所提出的粗糙度指数和（iv）提出一种算法，这有助于消除不规则尖峰/孔洞，以平滑表面。我们提出的粗糙度指数和粗糙度距离是建立在固体表面粗糙度参数，已成功地开发在土木工程。
2021-03-23 cs.CV eess.IV
SS-3DCapsNet: Self-supervised 3D Capsule Networks for Medical Segmentation on Less Labeled Data
University of Arkansas（阿肯色大学）；Cyberlogitec Vietnam（越南赛博罗吉泰克公司）；VinAI（越南人工智能研究院）
胶囊网络是一种新的深度网络架构，已成功应用于医学图像分割任务。这项工作扩展了胶囊网络的体积医学图像分割与自监督学习。为了改善与以前的胶囊网络相比的权重初始化问题，我们利用自监督学习进行胶囊网络预训练，其中我们的预文本任务通过自重构进行优化。我们的胶囊网络SS-3DCapsNet具有基于UNet的架构，具有3D胶囊编码器和3D CNN解码器。我们在iSeg-2017、Hippocampus和Cardiac等多个数据集上进行的实验表明，我们具有自我监督预训练的3D胶囊网络的性能大大优于以前的胶囊网络和3D-UNets。
2022-03-28 cs.CV eess.IV
A hybrid approach for improving U-Net variants in medical image segmentation
ABV-IIITM
本研究旨在利用深度可分离卷积降低MultiResUNet等U-Net变体的网络参数需求并减少推理时间，同时通过注意力系统和残差连接在皮肤病变分割等任务中保持分割性能。
2023-07-31 cs.CV eess.IV
Performance Analysis of UNet and Variants for Medical Image Segmentation
Brunel University London（伦敦布鲁内尔大学）
本研究系统评估UNet及其变体在医学图像分割中的性能，通过优化预处理、损失函数与超参数，发现加深的标准UNet高效可用，而Res-UNet与Attention Res-UNet收敛更平稳且在细节处理上表现更优。
2023-09-22 cs.CV eess.IV
Annotator Consensus Prediction for Medical Image Segmentation with Diffusion Models
Tel-Aviv University（特拉维夫大学）
针对医学图像分割中专家标注的观察者间/内变异性问题，提出基于扩散模型的多专家预测方法，融合多标注生成共识分割图，经多数据集验证优于现有方法且代码已开源。
2023-06-15 cs.CV eess.IV
Medical Image Segmentation Using Deep Learning: A Survey
Shaanxi University of Science and Technology（陕西科技大学）；Lanzhou Jiaotong University（兰州交通大学）；Brunel University London（伦敦布鲁内尔大学）
深度学习已被广泛用于医学图像分割，并且已经提出了大量记录深度学习在该领域的成功的论文。在本文中，我们使用深度学习技术对医学图像分割进行了全面的专题调查。本文有两个原创性的贡献。首先，与传统的直接将深度学习医学图像分割文献分成许多组并对每组文献进行详细介绍的调查相比，我们将目前流行的文献按照从粗到细的多层次结构进行分类。其次，本文重点介绍了监督和弱监督学习方法，不包括无监督方法，因为它们已经在许多旧的调查中介绍，目前还不流行。对于有监督学习方法，我们从主干网的选择、网络块的设计和损失函数的改进三个方面对文献进行了分析。对于弱监督学习方法，我们分别根据数据增强、迁移学习和交互式分割来研究文献。与现有的调查相比，本次调查对文献的分类与以往有很大不同，更便于读者理解相关原理，并将引导他们思考基于深度学习方法的医学图像分割的适当改进。
2021-12-22 cs.CV eess.IV
FocusNet++: Attentive Aggregated Transformations for Efficient and Accurate Medical Image Segmentation
University of Glasgow（格拉斯哥大学）；University of York（约克大学）；Mohamed bin Zayed University of Artificial Intelligence（穆罕默德·本·扎耶德人工智能大学）；NAAMII
我们提出了一种新的卷积神经网络残差块，并证明了其在医学图像分割中的最新性能。我们将注意力机制与组卷积相结合，创建了我们的组注意力机制，它构成了我们的网络FocusNet++的基本构建块。我们采用基于平衡交叉熵，Tversky损失和自适应对数损失的混合损失，以提高性能，以及快速收敛。我们的研究结果表明，FocusNet++在ISIC 2018黑色素瘤分割和细胞核分割数据集的各种基准指标上实现了最先进的结果，参数和FLOP更少。
2021-04-07 cs.CV eess.IV
Generative Medical Segmentation
King’s College London（伦敦国王学院）；Shanghai United Imaging Intelligence Co., Ltd.（上海联影智能医疗科技有限公司）
提出生成式医学分割（GMS），利用预训练视觉基础模型在潜在空间学习图像到掩膜的映射，以较少参数实现分割，在五个数据集上优于现有模型，并具有良好的跨中心泛化能力。
2024-08-19 cs.CV eess.IV
U-Net and its variants for Medical Image Segmentation : A short review
IIT Kharagpur（印度理工学院克勒格布尔分校）
本文是一个简短的回顾医学图像分割使用U-网络及其变种。正如我们所理解的那样，通过医学图像对任何临床医生来说都不是一件容易的事情，无论是放射科医生还是病理学家。分析医学图像是进行非侵入性诊断的唯一途径。分割出感兴趣区域在医学图像中具有重要意义，是诊断的关键。本文还对医学图像分割的发展过程进行了概述。还讨论了深度神经架构的挑战和成功。以下是不同的混合架构如何建立在视觉识别任务的强大技术基础上。最后，我们将看到医学图像分割（MIS）当前的挑战和未来的发展方向。
2022-04-17 cs.AI cs.CV eess.IV
Medical Image Segmentation with 3D Convolutional Neural Networks: A Survey
National Institute of Technology Karnataka（卡纳塔克邦国家技术研究所）
计算机辅助医学图像分析在辅助医生进行专家临床诊断和确定最佳治疗方案方面发挥着重要作用。目前，卷积神经网络（CNN）是医学图像分析的首选。此外，随着三维（3D）成像系统的快速发展以及处理大量数据的优秀硬件和软件支持的可用性，3D深度学习方法在医学图像分析中越来越受欢迎。在这里，我们对医学图像分割中最近发展的3D深度学习方法进行了广泛的回顾。最后，对三维医学图像分割的研究现状和未来发展方向进行了展望。
2022-04-28 cs.CV cs.LG eess.IV
End-to-End Boundary Aware Networks for Medical Image Segmentation
University of California, Los Angeles（加州大学洛杉矶分校）；NVIDIA（英伟达）
全卷积神经网络（CNN）已被证明在表示和分类纹理信息方面是有效的，从而将图像强度转换为实现语义图像分割的输出类别掩码。然而，在医学图像分析中，专家手动分割通常依赖于感兴趣的解剖结构的边界。我们提出了边界感知CNN医学图像分割。我们的网络旨在通过提供特殊的网络边缘分支和边缘感知损失项来考虑器官边界信息，并且它们是可训练的端到端。我们使用BraTS 2018数据集验证了它们在脑肿瘤分割任务上的有效性。实验结果表明，该方法具有更高的分割精度，在医学图像分割中有着广泛的应用前景。
2019-09-10 cs.CV cs.LG eess.IV
hidden markov random fields and cuckoo search method for medical image segmentation
Ecole nationale Supérieure en Informatique（国立高等计算机学院）；Université de Bourgogne（勃艮第大学）
医学图像的分割是诊断过程中必不可少的一部分。医生需要一个自动的，强大的和有效的结果。隐马尔可夫随机场（HMRF）提供了强大的模型。后者将分割问题建模为能量函数的最小化。布谷鸟搜索（CS）算法是近年来自然启发式算法中的一种。它在许多工程优化问题中显示了其有效性。本文采用三种布谷鸟搜索算法来实现医学图像的分割。
2020-05-19 cs.CV cs.LG eess.IV
Two-Stream UNET Networks for Semantic Segmentation in Medical Images
Intel Corp.（英特尔公司）
语义图像分割的最新进展大大受益于更深和更大的卷积神经网络（CNN）模型。与自然界中的图像分割相比，由于过拟合，医学图像本身和现有医学数据集的属性阻碍了训练更深和更大的模型。为此，我们提出了一种新的双流UNET架构的自动端到端的医学图像分割，其中强度值和梯度向量流（GVF）是两个输入，分别为每个流。我们证明了具有更多低级特征的双流CNN极大地有利于不完美医学图像数据集的语义分割。我们提出的双流网络在流行的医学图像分割基准上进行了训练和评估，结果与最先进的技术相比具有竞争力。
2022-07-27 cs.CV
Exemplar Learning for Medical Image Segmentation
Carleton University（卡尔顿大学）；Amii（阿尔伯塔机器智能研究所）
医学图像标注通常需要专业知识，因此会产生耗时且昂贵的数据标注成本。为了减轻这一负担，我们提出了一种新的学习方案，范例学习（EL），探索自动学习过程中的医学图像分割与一个单一的注释图像的例子。这种创新的学习任务特别适用于医学图像分割，其中所有类别的器官都可以在一张图像中呈现并一次性注释。为了解决这一具有挑战性的EL任务，我们提出了一个基于范例学习的合成网络（ELSNet）框架，用于医学图像分割，实现了创新的基于范例的数据合成，基于像素原型的对比嵌入学习，以及基于伪标签的未标记数据的利用。具体来说，ELSNet引入了两个新的模块用于图像分割：一个样本指导的合成模块，它通过从给定的样本合成注释样本来丰富和多样化训练集，以及一个基于像素原型的对比嵌入模块，它通过对比表示学习来增强基本分割模型的区分能力。此外，我们部署了一个两阶段的分割模型训练过程，该过程利用具有预测伪分割标签的未标记数据。为了评估这个新的学习框架，我们对几个器官分割数据集进行了广泛的实验，并进行了深入的分析。实验结果表明，所提出的范例学习框架产生有效的分割结果。
2022-10-08 cs.CV cs.LG eess.IV
Iterative Deep Convolutional Encoder-Decoder Network for Medical Image Segmentation
在本文中，我们提出了一种新的医学图像分割使用迭代深度学习框架。我们结合了迭代学习方法和编码器-解码器网络来改善分割结果，这使得能够以迭代方式精确定位包括医学图像的复杂形状或详细纹理的感兴趣区域（ROI）。所提出的迭代深度卷积编码器-解码器网络由两个主要路径组成：卷积编码器路径和具有迭代学习的卷积解码器路径。实验结果表明，所提出的迭代深度学习框架能够为各种医学图像产生优异的医学图像分割性能。通过与现有医学图像分割方法的比较，证明了该方法的有效性。
2017-08-11 cs.CV
Towards a Guideline for Evaluation Metrics in Medical Image Segmentation
University of Augsburg（奥格斯堡大学）；University Hospital Augsburg（奥格斯堡大学医院）
在过去的十年中，人工智能的研究随着深度学习模型的发展而迅速增长，特别是在医学图像分割领域。各种研究表明，这些模型具有强大的预测能力，并取得了与临床医生相似的结果。然而，最近的研究表明，在图像分割研究的评价缺乏可靠的模型性能评估，并显示统计偏差不正确的度量实现或使用。因此，这项工作提供了一个概述和解释指南，以下指标的医学图像分割评估在二进制以及多类问题：骰子相似系数，Jaccard，灵敏度，特异性，兰德指数，ROC曲线，科恩的Kappa，和豪斯多夫距离。作为总结，我们提出了一个标准化的医学图像分割评价准则，以提高评价质量，重现性和可比性的研究领域。
2022-02-10 cs.CV cs.LG eess.IV
FedFMS: Exploring Federated Foundation Models for Medical Image Segmentation
School of Electronic and Computer Engineering, Peking University（北京大学电子与计算机工程学院）
针对医学图像分割中隐私保护与基础模型训练的挑战，提出联邦基础模型框架FedFMS，包含FedSAM和高效FedMSA，在保持隐私的同时达到与集中式训练相当的性能并提升效率。
2024-11-06 cs.CV cs.DC eess.IV
LIMIS: Towards Language-based Interactive Medical Image Segmentation
Institute for AI in Medicine (IKIM), University Hospital Essen（埃森大学医院医学人工智能研究所（IKIM））
本文提出首个纯语言交互的医学图像分割模型 LIMIS，通过适配 Grounded SAM 与语言交互策略，让医生仅凭语言调整掩码，并在三个公开数据集上验证了分割质量与可用性。
2024-10-22 cs.CV
Enhancing Medical Image Segmentation with Deep Learning and Diffusion Models
本文综述医学图像分割面临的低对比、边界模糊、数据稀缺等问题，分析深度学习局限与扩散模型通过迭代去噪增强细节捕捉的潜力。
2024-12-06 cs.CV cs.LG eess.IV
Effect of the output activation function on the probabilities and errors in medical image segmentation
Leipzig University（莱比锡大学）；Leipzig University Medical Centre（莱比锡大学医学中心）
sigmoid激活是神经网络二进制分类和分割中的标准输出激活函数。尽管如此，存在各种其他潜在的输出激活函数，其可以导致医学图像分割中的改进结果。在这项工作中，我们考虑不同的输出激活和损失函数的渐近行为如何影响预测概率和相应的分割误差。对于交叉熵，我们表明，激活函数的变化速度更快与更好的预测相关，而变化速度较慢可以提高概率的校准。对于骰子损失，我们发现反正切激活函数优于sigmoid函数。此外，我们提供了一个测试空间，在医学图像分割领域的任意输出激活功能。我们在四个不同的医学图像分割任务上测试了七个激活函数和三个损失函数，以提供最适合此应用场景的函数分类。
2021-09-02 cs.CV cs.LG eess.IV
Self-Supervision with Superpixels: Training Few-shot Medical Image Segmentation without Annotation
Imperial College London（帝国理工学院）；BioMedIA Group, Department of Computing（计算系BioMedIA小组）
Few-Shot语义分割（FSS）在医学成像领域有着巨大的应用潜力。大多数现有的FSS技术需要大量的注释语义类进行训练。然而，由于缺乏注释，这些方法可能不适用于医学图像。为了解决这个问题，我们做了几个贡献：（1）一个新的自监督FSS框架的医学图像，以消除在训练过程中的注释的要求。此外，生成基于超像素的伪标签以提供监督;（2）插入原型网络的自适应局部原型池化模块，以解决医学图像分割中常见的具有挑战性的前景-背景不平衡问题;（3）我们使用三个不同的任务证明了所提出的方法对医学图像的普遍适用性：用于CT和MRI的腹部器官分割，以及用于MRI的心脏分割。我们的研究结果表明，对于医学图像分割，所提出的方法优于传统的FSS方法，需要手动注释训练。
2020-10-06 cs.CV
Embracing Imperfect Datasets: A Review of Deep Learning Solutions for Medical Image Segmentation
VoxelCloud, Inc.（体素云公司）
医学成像文献在基于卷积神经网络的高性能分割模型方面取得了显着进展。尽管有新的性能高点，但最近的高级分割模型仍然需要大型，代表性和高质量的注释数据集。然而，我们很少有完美的训练数据集，特别是在医学成像领域，数据和注释的获取都很昂贵。最近，大量的研究已经研究了具有不完美数据集的医学图像分割问题，解决了两个主要的数据集限制：稀缺注释，其中只有有限的注释数据可用于训练，以及弱注释，其中训练数据只有稀疏注释，噪声注释或图像级注释。在这篇文章中，我们提供了一个详细的审查上述解决方案，总结了技术创新和实证结果。我们进一步比较了调查方法的优势和要求，并提供了我们推荐的解决方案。我们希望这篇调查文章能提高社区对处理不完美医学图像分割数据集的技术的认识。
2020-02-12 cs.CV cs.LG eess.IV
Unsupervised Medical Image Segmentation with Adversarial Networks: From Edge Diagrams to Segmentation Maps
Vector Institute（向量研究所）；McMaster University（麦克马斯特大学）
我们开发和接近无监督语义医学图像分割，扩展了以前的工作与生成对抗网络。我们使用现有的边缘检测方法来构建简单的边缘图，训练生成模型将其转换为合成医学图像，并使用提取的边缘图上的变化构建具有已知分割的合成图像的数据集。然后使用该合成数据集来训练监督图像分割模型。我们在肾脏超声图像的临床数据集和基准ISIC 2018皮肤病变数据集上测试了我们的方法。我们证明了我们的无监督方法比以前的无监督方法更准确，并且与监督图像分割模型相比表现合理。所有代码和训练模型都可以在https://github.com/kiretd/Unsupervised-MIseg上找到。
2019-11-12 cs.AI cs.CV cs.LG
Segmentation-by-Detection: A Cascade Network for Volumetric Medical Image Segmentation
University of Alberta（阿尔伯塔大学）
我们提出了一个注意力机制的三维医学图像分割。该方法，称为分段检测，是一个级联的检测模块，其次是一个分割模块。检测模块使感兴趣区域能够引起注意，并产生进一步用作注意模型的对象区域候选集合。分割模块不是处理整个体积，而是从潜在区域提取信息。该方案是体积数据的有效解决方案，因为它减少了环境噪声的影响，这对于具有低信噪比的医学数据尤其重要。对股骨头三维超声数据的实验结果表明，与标准的全卷积网络（如U-Net）相比，所提出的方法具有优越性。
2017-10-31 cs.CV
Mixing Data Augmentation with Preserving Foreground Regions in Medical Image Segmentation
Kyushu University（九州大学）
针对医学图像分割中参数化数据增强计算成本高的问题，提出无额外参数的 KeepMask 与 KeepMix，通过保留并识别前景器官边界生成增强图像，在 CHAOS 和 MSD spleen 上显著提升 Unet 分割精度。
2023-04-26 cs.CV cs.LG eess.IV
Medical SAM Adapter: Adapting Segment Anything Model for Medical Image Segmentation
University of Oxford（牛津大学）；National University of Singapore（新加坡国立大学）；University of Alberta（阿尔伯塔大学）；A*STAR（新加坡科技研究局）；Carnegie Mellon University（卡内基梅隆大学）；Singapore Eye Research Institute（新加坡眼科研究所）；Mohamed bin Zayed University of Artificial Intelligence（穆罕默德·本·扎耶德人工智能大学）；University of Hongkong（香港大学）
本文提出Medical SAM Adapter（Med-SA），通过轻量适配技术将医学知识融入SAM，利用SD-Trans和HyP-Adpt适配2D模型至3D医学图像，在17个任务上以仅2%参数更新超越SOTA方法。
2023-12-29 cs.CV
Application of belief functions to medical image segmentation: A review
Université de technologie de Compiègne（贡比涅技术大学）；University of Rouen Normandy（诺曼底鲁昂大学）；Institut universitaire de France（法国大学研究院）
不确定性的调查是非常重要的风险关键的应用，如医学图像分割。信度函数理论作为一种不确定性分析和多证据融合的形式化框架，在医学图像分割领域做出了重大贡献，特别是自深度学习发展以来。在本文中，我们提供了一个介绍的主题，医学图像分割方法的信念函数理论。根据融合步骤对融合方法进行了分类，并阐述了如何利用信度函数理论对不确定或不精确信息进行建模和融合。此外，我们还讨论了目前基于信念函数的医学图像分割的挑战和局限性，并提出了未来的研究方向。未来的研究可以同时研究置信函数理论和深度学习，以获得更有希望和可靠的分割结果。
2022-12-05 cs.CV
Morphological Operation Residual Blocks: Enhancing 3D Morphological Feature Representation in Convolutional Neural Networks for Semantic Segmentation of Medical Images
The University of Hong Kong（香港大学）
器官和组织的形状和形态是医学图像识别和分割的重要先验知识。形态学操作是用于形态学特征提取的公知方法。由于形态学操作在手工图像分割技术中表现良好，因此设计一种在卷积网络中近似形态学操作的方法也是有希望的。然而，使用传统的卷积神经网络作为一个黑盒通常是很难指定的形态操作动作。在这里，我们引入了一个3D形态操作残差块，用于在端到端深度学习模型中提取形态特征，以进行语义分割。提出了一种新的网络块结构，将形态学运算作为一种无穷强先验嵌入到卷积神经网络中。在不同的医学图像分割任务中，构建了几个具有所提出的形态学操作块的3D深度学习模型并进行了比较。实验结果表明，与传统方法相比，该网络在分割任务中取得了相对较高的性能。总之，新的网络块可以很容易地嵌入到传统网络中，并有效地加强医学成像分割的深度学习模型。
2021-03-06 cs.CV cs.LG eess.IV
Large Batch and Patch Size Training for Medical Image Segmentation
Osaka University Graduate School of Medicine（大阪大学医学研究生院）
多器官分割能够进行器官评估，考虑多个器官之间的关系，并有助于准确的诊断和治疗决策。然而，由于缺乏数据集和计算资源，只有少数模型可以准确地执行分割。在AMOS 2022挑战中，这是一个大规模，临床和多样化的腹部多器官分割基准，我们使用多GPU分布式训练训练了一个具有大批量和补丁大小的3D-UNet模型。与基线设置相比，具有大批量和补丁大小的模型的分割性能往往会增加。通过使用使用不同设置训练的集成模型，进一步提高了准确性。这些结果为器官分割中的参数选择提供了参考。
2022-10-24 cs.CV cs.LG eess.IV
SEG-SAM: Semantic-Guided SAM for Unified Medical Image Segmentation
School of Electronic and Information Engineering, South China University of Technology（华南理工大学电子与信息工程学院）；Pazhou Lab（琶洲实验室）；College of Electronic and Information Engineering, Tongji University（同济大学电子与信息工程学院）
该研究提出语义引导的SAM模型SEG-SAM，通过语义感知解码器、文本到视觉语义模块及跨掩码空间对齐策略，提升医学图像统一分割性能，实验显示其优于现有相关方法。
2026-08-27 cs.CV
