PulseBench-Tab：基于图形评估的表提取多语言基准

我们推出了 PulseBench-Tab，这是一个开放的多语言基准，用于评估文档图像中的表格提取。该基准包括 1,820 个人工注释表格，涵盖 9 种语言和 4 种文字（拉丁语、中日韩语、阿拉伯语、西里尔语），取自 380 份真实世界源文件，包括财务备案、政府报告和监管披露。表格范围从 2 到 1,183 个单元格，其中 48.1% 包含合并或跨越单元格。除了数据集之外，我们还提出了 T-LAG（表逻辑邻接图），这是一种新颖的评估指标，它将表建模为单元格邻接上的有向图，并通过最佳二分匹配计算单个分数中的结构和内容保真度。我们跨基准评估了 9 个商业和开源表提取系统，并报告了每种语言的故障。完整的数据集、评分代码和所有提供商的输出都是公开的。