ltzGLUE：卢森堡通用语言理解评估

本文介绍了 ltzGLUE，这是第一个卢森堡语 (LTZ) 自然语言理解 (NLU) 基准，基于流行的英语 GLUE 基准。尽管现在许多欧洲语言都可以使用 NLU 任务，但 LTZ 是经常被忽视的官方国家语言之一。我们构建新任务并重用现有任务，以引入第一个官方 NLU 基准测试以及对该语言的编码器模型的附带评估。我们的任务包括二进制和多类分类设置中的常见自然语言处理任务，包括命名实体识别、主题分类和意图分类。我们评估了 LTZ 的各种预训练语言模型，以概述这些模型在 LTZ 语言上的当前功能。