上海AI Lab开源全球750城5000小时高清视频数据集Sekai，助力世界模型研究
由上海人工智能实验室、北京理工大学、东京大学等机构联合发起的Sekai项目，致力于构建高质量视频数据集以推动“世界模型”研究。该项目包含来自全球101个国家、超过5000小时的第一视角真实与虚拟视频，覆盖行走、无人机拍摄与游戏场景，并配有精细的文本描述、地点、天气、时间、人群密度与相机轨迹等多维标签。其中Sekai-Real源自YouTube视频，经严格筛选后保留高画质片段；Sekai-Game则来自高拟真游戏《Lushfoil Photography Sim》，具备精确标注。团队还基于该数据训练了交互式视频生成模型Yume。未来，Sekai将持续迭代，为世界建模、视频理解、视听协同建模与自主导航提供坚实数据支撑。来源：https://mp.weixin.qq.com/s/gNcdw9cu7LDXowtrlrtx-g
页:
[1]