论文
LPM:工业规模生成视频恢复
LPM: Industrial-Scale Generative Video Restoration
摘要
我们提出了大型处理模型(LPM),这是一种基于扩散的生成框架,用于在复杂的野外退化下恢复真实感视频。据我们所知,LPM 是第一个在工业规模部署的生成视频恢复模型。 LPM 通过包含大规模数据工程、基础 模型训练 和高效推理的统一系统解决用户生成内容 (UGC) 的各种退化问题。其增强的架构、渐进式训练策略和时间金字塔推理机制共同实现了在 UGC 平台上遇到的广泛内容分发中任意长视频的高保真、时间一致恢复。 LPM 已部署在快手的生产环境中,该模型处理的视频约占总观看时间的 45%,在关键体验质量指标上实现了持续改进。除了感知增强之外,LPM 还具有显着的系统级优势:在相当的感知质量下,相对于快手内部编解码器,它的比特率降低了 20%,每年可节省数亿的带宽成本。其服务成本低,还可以集成到 Kling 等产品中,这表明生成恢复对于大规模视频处理来说是实用的、可扩展的且经济高效的。