论文

LLMBridge:用于英语端对端参考桥接解析的 LLM 管道

LLMBridge: An LLM Pipeline for End-to-end Referential Bridging Resolution in English

模型评测模型能力评测

摘要

在本文中,我们介绍了 LLMBridge,这是一种基于 LLM 的新系统,用于英语端到端参考桥接解析任务。我们的桥接解析管道将启发式预处理/后处理与来自 LLM 的自然语言推理能力相结合。我们在三个已用于英语参考桥接分辨率评估的数据集上评估我们的桥接分辨率管道:ISNotes、BASHI 和 GUMBridge。与以前的桥接分辨率系统的比较表明,在具有挑战性的端到端评估设置以及基本桥接分辨率评估设置(给出的金桥接应物)中,LLMBridge 的性能超过了所有 3 个数据集的以前最先进的 (SoTA) 系统。我们还对 LLMBridge 性能进行了彻底的错误分析,检查哪些类型的桥接对于基于 LLM 的系统来说仍然难以识别。通过本文,我们发布了 LLMBridge 管道的代码。