一个模型统一4D世界生成与重建,港科大One4D框架来了
香港科技大学团队提出One4D,一种统一的4D生成与重建框架,可同步输出RGB视频与Pointmap几何视频。通过DLC解耦控制和UMC统一掩码条件,该模型在不牺牲视觉质量的前提下,实现从单图、稀疏帧到完整视频的多任务4D建模。基于34K视频在8张H800 GPU上训练后,One4D在VBench动态性评分达55.7(对比4DNeX的25.6),并在Sintel、Bonn等数据集上超越多种重建方法,展现出在生成真实性与几何可用性上的双重优势。来源:https://mp.weixin.qq.com/s/fdpf9JA2MMchd5JSe0NNsQ
页:
[1]