论文

UniSpector:通过光谱对比视觉提示实现通用开放集缺陷识别

UniSpector: Towards Universal Open-set Defect Recognition via Spectral-Contrastive Visual Prompting

应用与实践行业应用

摘要

尽管工业检测系统应该能够识别前所未有的缺陷,但大多数现有方法都在封闭假设下运行,这使得它们无法检测新的异常情况。虽然视觉提示为工业检查提供了一种可扩展的替代方案,但由于类内方差高和类间细微差异,现有方法经常会遭受快速嵌入崩溃。为了解决这个问题,我们提出了 UniSpector,它将焦点从简单的提示到区域匹配转移到语义结构化和可转移提示拓扑的原则设计。 UniSpector 采用空间谱提示编码器来提取方向不变的细粒度表示;这些为对比提示编码器将提示空间显式正则化为语义组织的角度流形奠定了坚实的基础。此外,提示引导的查询选择会生成与提示一致的自适应对象查询。我们推出了 Inspect Anything,这是第一个基于视觉提示的开放集缺陷定位基准,其中 UniSpector 在 AP50b 和 AP50m 中分别显着优于基线至少 19.7% 和 15.8%。这些结果表明,我们的方法为不断发展的工业环境提供了可扩展的、无需再培训的检查范例,同时为通用视觉提示的设计提供了重要的见解。