论文
您的野火预测模型是否真的有效,或者只是得分良好?
Does Your Wildfire Prediction Model Actually Work, or Just Score Well?
摘要
野火预测对于早期预警和资源分配非常重要,但现有的地球基础模型 (Earth FM) 是针对一般大气和地球物理目标而不是野火预测进行预训练的。为了解决这一差距,我们引入了 WILDFIRE-FM,这是第一个专门针对使用天气、主动火灾观测、地形、植被和静态环境数据进行野火预测的基础模型。然而,仅仅引入特定于领域的主干网并不能解决评估问题:野火事件在空间和时间上都是稀疏的,使得转移结论对匹配规则和评估设置高度敏感。为了解决这个问题,我们引入了一个具有两个受控检查的固定契约评估框架:匹配规则效果的固定输出检查和头部选择效果的固定特征检查。在匹配合同下,我们将 WILDFIRE-FM 与 10 个 Earth-FM 基线在占用、传播、检索和回归任务方面进行比较。我们的结果表明,野火转移结论在很大程度上取决于评估设计和任务制定。我们希望该框架和 WILDFIRE-FM 为未来针对野火的 Earth-FM 研究和基准测试奠定基础。我们的代码位于 https://anonymous.4open.science/r/Wildfire-fm-evaluation-contracts-5AE9/。