论文
韵律 ABX:一种与语言无关的测量语音表示中韵律对比度的方法
Prosodic ABX: A Language-Agnostic Method for Measuring Prosodic Contrast in Speech Representations
摘要
众所周知,自监督语音模型(S3M)的语音表示对音素对比敏感,但它们对韵律对比的敏感度尚未直接测量。 ABX 辨别任务已用于通过最小对来测量 S3M 表示中的音素对比。我们引入了韵律 ABX,这是该框架的扩展,仅通过少数示例且没有明确的标签来评估韵律对比。此外,我们构建并发布了英语和日语最小对的数据集,并将其与普通话数据集一起使用来评估英语重音、日语音高重音和普通话声调的对比。最后,我们表明模型和层排名通常在多个实验条件下得以保留,这使得它在资源匮乏的情况下非常实用。