论文
QIAS 2026:伊斯兰继承推理共享任务概述
QIAS 2026: Overview of the Shared Task on Islamic Inheritance Reasoning
摘要
本文全面概述了 QIAS 2026 共享任务,该任务是 OSACT7 研讨会的一部分,与 LREC 2026 同一地点。该共享任务旨在评估 大语言模型 在伊斯兰继承的宗教和法律领域执行复杂推理的能力。与传统问答基准不同,QIAS 2026 侧重于自然语言案例的端到端推理,要求系统执行完整的继承计算过程,从识别合格继承人到为每个受益人分配正确的份额。为了支持这一评估,该任务基于 MAWARITH 基准,这是一个包含 12,500个阿拉伯继承案例的数据集,并附有中间推理步骤和最终答案。使用 MIR-E 评估系统提交,这是一种多步骤指标,用于衡量继承推理主要阶段的性能。总共 16支团队参与了共享任务,研究了一系列方法,包括基于提示的方法、检索增强生成和 微调 策略。结果表明,伊斯兰继承对于当前语言模型来说仍然是一个极具挑战性的基准,特别是在需要精确的法律解释和结构化数字推理的阶段。本概述总结了任务设计、数据集、评估框架、参与系统和主要结果。