论文
越南劳动法的跨语言法律质量保证:检索、翻译和验证者引导更正
Cross-Lingual Legal QA for Vietnamese Labour Law: Retrieval, Translation, and Verifier-Guided Correction
摘要
跨语言法律问答必须跨语言检索法规,同时防止不受支持的法律主张。我们引入了越南劳动法中 231 个越南语-英语问答对的双语评估套件。其中,75 个还针对五种具有挑战性的法律推理现象进行了注释。我们评估验证者引导的管道,将答案分解为声明,检查引用的可达性和蕴涵,并纠正引用失败和矛盾。我们还引入了六种自动诊断方法,以确保检索到的证据的真实性,涵盖引文、模式、例外、程序、结论和证据支持。实验表明,学习稀疏检索对于英语到越南语的检索表现不佳(R@5~=~0.032),而密集检索达到 0.358,略优于混合检索。在我们的受控比较和支持敏感性分析中,翻译放置对这些自动诊断没有统计上可检测到的影响。验证者引导的纠正在系统级别将引文保留提高了 0.022 美元 - 0.034 美元,但在其余维度上没有产生可靠的收益。人类评估进一步表明,自动诊断并不完全符合人类对答案质量的判断。