论文

GVCCTurbo:码本驱动的生成压缩的速率计算质量调度

GVCCTurbo: Rate-Compute Quality Scheduling for Codebook Driven Generative Compression

模型推理推理加速

摘要

码本驱动的生成压缩使用预训练的图像或视频生成器作为零镜头视觉先验,并传输紧凑的码本索引以指导超低比特率的重建。当前的编解码器将每个有限速率校正与新的先前评估联系起来,因此缩短采样器也会删除携带目标相关信息的校正槽。我们提出了 GVCCTurbo,一种 BPP 驱动的调度程序,它将昂贵的先前刷新与码本校正分开:在每个协议校准一次原子计数操作点和跳过间隙比率后,它将目标码本有效负载比特率映射到轨迹长度和刷新周期,使 BPP 成为调度输入,而不是采样器长度的固定结果。相同的端点预测和有限速率转向接口涵盖了 GVCC 式整流流视频和 DDCM 式扩散图像压缩,保留了零训练部署以及与未来蒸馏先验的兼容性。原生 1080p 曲线将完整的零样本编解码器置于超低比特率状态。在一项受控的 720p Wan-GVCC 研究中,调度程序将先前的评估从 20 个减少到 9 个,以在整个调度系列中共享测量的 $\sim\!44\%$ 测量解码时间减少,并且在高动态内容上共享 LPIPS 成本很小;在该系列中,统一刷新稀疏(纯跳过)是一个边界点,并且 BPP 感知内部点在可比较的 LPIPS 下以少 2.9\%$ 的码本有效负载位换取始终较高的 PSNR。这些结果支持 BPP 到计算调度作为采样器长度调整的可控扩展,而不需要分配的点支配每个边界点。