论文

FIND:面向印度语言的多模式金融推理和问答

FIND: Toward Multimodal Financial Reasoning and Question Answering for Indic Languages

模型评测基准与评测资源

摘要

多语言环境中的财务决策需要基于不同模式的准确数字推理,但现有基准在很大程度上忽视了这一高风险的现实挑战,特别是对于印度语言而言。我们介绍 FinVQA,这是一个评估多语言印度语环境中的金融数值和多模态推理的基准。 FinVQA 涵盖英语、印地语、孟加拉语、马拉地语、古吉拉特语和泰米尔语,包含 14 个金融领域的 18,900 个样本。该数据集捕获了现实约束下的多种推理范式,并分为三个难度级别(简单、中等、困难)和四种问题格式:多项选择、填空、表格匹配和对/错。为了应对这些挑战,我们提出了 FIND,这是一个将监督 微调 与约束感知解码相结合的框架,以促进忠实的数值推理、稳健的多模态基础和结构化决策。 FinVQA 和 FIND 共同为高风险的多语言多模式金融推理建立了严格的评估和建模范例。