近因强制:弥合自回归视频生成的长时程差距
英文标题:Recency Forcing: Bridging the Long-Horizon Gap in Autoregressive Video Generation
该论文提出“Recency Forcing(近因强制)”,旨在改善自回归(AR)视频生成在长时程上的质量退化问题。作者将这一问题归因于一个此前被忽视的训练—推理差异,即“KV 缓存驱逐不匹配”(KV eviction mismatch)。训练时模型处理短视频片段,所有上下文帧通常都保留在 KV 缓存中;而推理时受内存限制影响,部分历史上下文需要被驱逐。该工作对长视频生成模型的训练策略、上下文缓存管理和推理部署具有参考意义。
打开原文相关 2.4 · 机会 0
640 B
612 B
380 B
9.1 KB
32.7 KB
22.8 KB
24.2 KB
34.7 KB
中文
BibTeX 格式引用
English / 原文
BibTeX formatted citation
×