微软推出视频生成世界模型 Mirage,空间记忆跨镜头不丢失
微软研究院与多所高校联合推出视频世界模型 Mirage。与传统像素空间点云存储不同,Mirage 将场景信息直接存储在潜在空间,大幅降低计算时间和显存占用。该模型在摄像机长镜头移动时保持场景的空间一致性,使生成的视频中背景与环境信息持久化不丢失。当前弱点是对跨镜头移动物体的追踪仍不够稳定。
微软研究院与多所高校联合推出视频世界模型 Mirage。与传统像素空间点云存储不同,Mirage 将场景信息直接存储在潜在空间,大幅降低计算时间和显存占用。该模型在摄像机长镜头移动时保持场景的空间一致性,使生成的视频中背景与环境信息持久化不丢失。当前弱点是对跨镜头移动物体的追踪仍不够稳定。