论文
JL1-CC&QA:通过变化描述和问答扩展 JL1-CD 基准
JL1-CC&QA: Extending the JL1-CD Benchmark with Change Captioning and Question Answering
摘要
遥感变化检测 (CD) 传统上侧重于像素级二进制分割,它可以识别发生变化的位置,但不能识别发生变化的内容或原因。为了弥补这一语义差距,我们引入了 JL1-CC&QA,这是一个多任务基准测试,它通过两个互补的注释层扩展了 JL1-CD 数据集:变化描述 (CC) 和更改问答 (QA)。该基准基于吉林一号卫星在 0.5-0.75m 地面采样距离处获取的 5,000 个双时相图像对,包括: (i) JL1-CC,提供 17,021 个经过质量验证的说明文字,描述不同的土地覆盖变化; (ii) JL1-QA,提供 8 种问题类型的 20,060 个问答对,实现对表面变化的细粒度、交互式询问。所有注释均通过三阶段管道生成,包括多模式 大语言模型 (LLM) 生成、基于视觉的 LLM 判断和人类专家验证。我们希望 JL1-CC&QA 作为在同一图像集上统一二进制变化掩模、变化标题和面向变化的 QA 的基准,将成为社区推进遥感中多任务变化理解的宝贵资源。该数据集可从 https://github.com/circleLZY/JL1-CD 获取。