论文
MORFES：现代希腊语中富有成效的屈折能力的基准
MORFES: A Benchmark for Productive Inflectional Competence in Modern Greek
摘要
现代希腊语是一种变形丰富的语言，但为其构建的语言模型主要根据事实知识进行评估，并且没有专门针对其变形能力的基准。我们引入了 MORFES（形态学开放类识别和形成评估套件），这是一个由 500 个专家验证的项目组成的基准，用于测试希腊语屈折形式的识别和产生，偏向低频引理，以便正确答案反映规则而不是记住的形式。我们将其公开发布于 https://huggingface.co/datasets/KIEFERSA/MORFES。我们评估了 MORFES 上的一系列开放语言模型，将它们置于从 LLaMA 到 Qwen3、DeepSeek-R1、Magistral 和 Kimi K2 的快速扩展的开放权重生态系统中，其中多语言覆盖率不断增长，但形态丰富的语言的语法能力仍然没有得到充分衡量。其中，Sophea-Genesis-1 是我们开发并在 https://huggingface.co/KIEFERSA/Sophea-Genesis-1 上作为开放权重发布的模型，它在屈折形态方面处于领先地位，同时在一般能力方面与类似大小的模型相匹配。