论文

HarmoniDiff-RS:卫星图像合成的 无需训练 扩散协调

HarmoniDiff-RS: Training-Free Diffusion Harmonization for Satellite Image Composition

应用与实践内容创作

摘要

卫星图像合成在数据增强、灾害模拟和城市规划等遥感应用中发挥着至关重要的作用。我们提出 HarmoniDiff-RS,这是一种基于 无需训练 扩散的框架,用于协调不同域条件下的合成卫星图像。我们的方法通过潜在均值平移操作来对齐源域和目标域,该操作在源域和目标域之间传递辐射特征。为了平衡协调和内容保留,我们引入了一种按时间步长的潜在融合策略,利用早期反向潜在来实现高度协调,利用后期潜在来实现语义一致性,以生成一组复合候选。训练轻量级和谐分类器以进一步自动选择其中最一致的结果。我们还构建了 RSIC-H,这是一个源自 fMoW 的卫星图像协调基准数据集,提供 500 个配对的合成样本。实验表明,我们的方法可以有效地执行卫星图像合成,显示出可扩展的遥感合成和模拟任务的强大潜力。代码位于:https://github.com/XiaoqiZhuang/HarmoniDiff-RS。