V2TATC：用于空中交通管制员态势感知的联合语音轨迹嵌入和数据集

随着国家空域系统的空中交通量持续扩大，特别是在低空，空中交通管制员使用的可扩展决策支持工具也需要更多的开发。本文介绍了空中交通管制的语音到轨迹，这是一种联合语音通信-飞行轨迹数据嵌入框架，它可以成为拥挤空域态势感知的一个组成部分，并协助空中交通管制工具的开发，因为它们通过自动相关监视广播轨迹或飞行员用自然语言表达的意图进行实时推理。我们证明这些数据模式不是独立的，而是代表一个共同的物理参考：一架飞过空域的飞机。 V2TATC 将语音指令和所寻址飞机的轨迹映射到单个潜在空间中的附近点，可以在两个方向上查询。它结合了自监督轨迹编码器、冻结语音编码器、对比联合嵌入和通过归一化流的双射提升。我们展示了 V2TATC 在旧金山湾区的有效性，因为该地区集中了主要机场，并且混合了商业和通用航空交通。最后，我们发布了一个新颖的配对语音轨迹数据集，并报告了跨模式检索、消融和潜在空间分析的实验。