论文

现代手写热身有助于历史阿拉伯语 OCR 吗?对 Muharaf 和 KHATT 的可重复、计算匹配的评估

Does a Modern-Handwriting Warm-Up Help Historical Arabic OCR? A Reproducible, Compute-Matched Evaluation on Muharaf and KHATT

模型评测鲁棒性、公平性与可信度评测

摘要

现代阿拉伯语手写体的中间阶段是否有助于或损害历史阿拉伯语 HTR 通常取决于一次实施和一次比较,无论哪种方式,索赔的基础都太薄弱。我们通过运行相同的名义消融四次来测试稳定性,让基础检查点、编码器冻结策略、纪元预算、精度和学习率计划像开发过程中自然发生的那样变化,同时保持标准化、评分器和区间估计固定。每次运行都会直接比较现代手写体 (KHATT) 的中级训练,然后直接比较历史手稿 (Muharaf) 的 微调 和 Muharaf 的 微调。在四次运行中,估计效果从 -17.64 到 +14.52 CER 点波动,并且符号相反。这两个极端正是具有可识别混淆的两次运行(其中一个学习率低五倍;另一个是未公开出处的检查点);两次干净运行的结果分别为 -0.25 和 +0.94,即没有效果。与一个实现的紧密间隔并不能说明下一个实现的情况。然后,我们在三个种子上使用相同的预算运行计算匹配实验:KHATT 预热比匹配的同域对照差 +2.42 CER 点(95% 区间 [+0.60,+4.25]);手写领域特有的差距部分仅为 0.6 分左右,在此配置下,这是一个很小的负面影响,而不是普遍结果。我们发布了一个SaudiHeritage-OCR包,其中包含标准化器、间隔评分器、经过验证的KHATT解码器、实验清单、VLM基线和版本对齐协议,因此可以独立检查结果。 Al-Mahd 铭文线被严格保留,不作为基准。