让AI生成视频「又长又快」:Rolling Forcing实现分钟级实时生成
南洋理工大学与腾讯ARC实验室联合提出Rolling Forcing,通过滚动窗口联合降噪、Attention Sink机制和高效训练算法,在单张GPU上实现16 fps的实时长视频生成,显著降低误差累积,ΔDriftQuality指标优于主流模型,并支持动态提示调整的交互式生成,为神经游戏引擎等应用提供可能,但在长程记忆、训练效率与低延迟推理方面仍需进一步优化。来源:https://mp.weixin.qq.com/s/UMXGBNRrxnev5dWjp0dVRA
页:
[1]