GCD-DDPM:用扩散模型重塑变化检测,精准捕捉细粒度变化

一眼概览GCD-DDPM 提出了一种 基于差分特征引导的去噪扩散概率模型(DDPM) 进行 变化检测(CD) 的方法,采用 生成式方式 直接生成变化检测(CD)图,而非传统的判别式分类方式。 在四个高分辨率遥感数据集上,该方法展现了优越的检测性能。 核心问题目前主流变化检测(CD)方法大多依赖 CNN 或 Transformer 进行判别式特征学习,但它们在 同时捕获局部细节信息和长距离依赖关系 方面存在局限,导致 变化检测精度不足,尤其是对于 复杂场景的细粒度变化 无法精准捕捉。

1. 一眼概览

GCD-DDPM 提出了一种 基于差分特征引导的去噪扩散概率模型(DDPM) 进行 变化检测(CD) 的方法,采用 生成式方式 直接生成变化检测(CD)图,而非传统的判别式分类方式。在四个高分辨率遥感数据集上,该方法展现了优越的检测性能。

2. 核心问题

目前主流变化检测(CD)方法大多依赖 CNN 或 Transformer 进行判别式特征学习,但它们在 同时捕获局部细节信息和长距离依赖关系 方面存在局限,导致 变化检测精度不足,尤其是对于 复杂场景的细粒度变化 无法精准捕捉。本文提出 GCD-DDPM,以生成式方法替代判别式方法,通过 迭代推理过程 逐步 生成高质量变化检测图,提高检测精度并抑制噪声。

3. 技术亮点

  • 生成式变化检测框架:提出 GCD-DDPM,利用 DDPM 的 去噪生成能力,逐步优化变化检测结果,相较于判别式方法更能捕捉 微小、复杂和不规则的变化
  • 差分条件编码器(DCE):设计 DCE 提取多层次的变化信息,并将其引入扩散模型的采样过程,以精细捕捉变化区域。
  • 基于噪声抑制的语义增强器(NSSE):通过 自适应频域滤波 降低当前步骤的噪声,提高变化检测的鲁棒性和准确性。

4. 方法框架

GCD-DDPM 采用 扩散模型的前向去噪和反向恢复过程,在此基础上引入 DCE 进行差分信息提取,并结合 NSSE 进行噪声抑制,最终生成精确的变化检测图:

  • 前向扩散过程:对初始 CD 标签添加 逐步增强的高斯噪声
  • 反向去噪过程:通过 神经网络预测噪声 并恢复 CD 图,借助变分推理(VI)进行 自适应校准
  • 差分条件编码器(DCE):从 变化前后图像 提取 多层次差分特征,结合 DDPM 的采样过程 指导 CD 图生成
  • 噪声抑制语义增强器(NSSE):采用 频域自适应滤波 处理 当前步骤的噪声特征,增强 CD 结果。

5. 实验结果速览

GCD-DDPM 在四个高分辨率变化检测数据集(CDD、WHU-CD、LEVIR-CD、GVLM)上进行评测,与多个先进方法(CNN、Transformer、DDPM 变体)对比,表现优越:

• CDD 数据集(季节性变化检测):

a. F1-score 提升至 94.93%,IoU 90.56%,超过 DDPM-CD 和 Transformer 方法。

• WHU-CD 数据集(城市建筑变化检测):

• F1-score 92.54%,IoU 86.52%,精准检测城市建筑变化。

• LEVIR-CD 数据集(建筑变化检测):

• F1-score 90.96%,IoU 83.56%,减少小目标遗漏,提高边界保留能力。

• GVLM 数据集(滑坡检测):

• F1-score 94.02%,IoU 89.09%,显著降低噪声,精准检测复杂地貌变化。

6. 实用价值与应用

GCD-DDPM 在多个关键领域展现潜力

• 城市发展监测:可用于 建筑物新增/拆除监测,助力 城市规划和基础设施建设

• 自然灾害评估:可精准 检测滑坡、洪水、地震等灾害前后的地表变化,为 灾害响应 提供决策支持。

• 生态环境监测:用于 森林砍伐、湿地变化、冰川消融等生态环境变化检测

• 农业与土地利用分析:可 精准分析农田变化、土地退化,提高 农业管理 水平。

7. 开放问题

  • GCD-DDPM 是否可以泛化到其他类型的变化检测任务,如医学影像变化检测?
  • 当前 GCD-DDPM 计算量较大,是否可以引入轻量级架构优化推理速度?
  • 噪声抑制语义增强器(NSSE)能否推广到其他生成模型以提升图像重建效果?

相关资讯

无需预训练,亲和力与天然蛋白相当,中国科大的蛋白质从头设计方法登Nature子刊

编辑 | 白菜叶在过去的 2-3 年里,去噪扩散概率模型 (DDPM) 在生成高质量文本、图像和视频方面取得了前所未有的成功。 这激发了人们对在蛋白质结构的从头设计中使用生成式 DDPM 的热情。 然而,大多数此类研究都遇到了相当大的困难,无法获得可以轻松生成可通过高分辨率结构分析验证的无缺陷蛋白质结构的 DDPM。

NeurIPS | 对比采样链:让扩散模型更快、更准、更清晰的秘密武器

论文 Contrastive Sampling Chains in Diffusion Models 的精炼解读。 一眼概览该论文提出了一种 对比采样链(Contrastive Sampling Chains, CSC) 方法,通过对比损失和得分匹配相结合,优化扩散模型(DMs)的采样过程,从而 减少离散化误差,提高生成图像的质量,同时提升采样速度。 核心问题扩散模型在使用数值求解方法进行采样时 不可避免地引入离散化误差,导致生成样本与真实数据分布之间存在偏差。

零样本 | ZeroDiff:扩散模型助力零样本学习,打破数据限制,实现高效泛化

一眼概览ZeroDiff 提出了一种基于扩散模型的生成式零样本学习(ZSL)方法,提升数据利用效率,实现类别级和实例级的增强。 在多个ZSL基准数据集上,ZeroDiff 取得了显著的性能提升,特别是在数据稀缺情况下仍保持稳健。 核心问题零样本学习(ZSL)试图在无训练样本的情况下识别新类别,主要依赖于已知类别的语义信息。