论文

即使今天涌现的梗我也能懂:理解演化中的梗

I Know What You Meme, Even If it Emerged Today: Understanding Evolving Memes through Open-World Knowledge Acquisition

上下文与知识知识获取与更新

摘要

多模态模因是动态的,通常需要最新的背景知识来解释。现有的方法常常忽视这些知识,或者依赖于预训练模型的固定参数知识,这些知识可能不完整、过时或不适用于新兴模因。我们引入了 Query Retrieve 结论,这是一个零样本框架,可以识别缺失的知识,检索开放网络证据,并综合基于证据的背景知识以进行模因理解和检测。我们还引入了 2024 年至 2026 年近期模因的策划模因理解基准,并带有外部背景知识注释。对三个模因理解数据集和五个模因检测任务的实验表明,我们的框架在零样本基线上改进了知识恢复、模因理解和下游检测。

即使今天涌现的梗我也能懂:理解演化中的梗:论文配图
图 1:示例33 3 该图中使用的 meme 来源:https://knowyourmeme.com/。说明模因理解中动态世界的知识差距。直接零样本提示错过了相关上下文,而我们的框架恢复了支持正确下游检测的基于证据的背景知识。