FramePackFramePack 是一个创新的视频生成模型,旨在通过压缩输入帧的上下文来提高视频生成的质量和效率。其主要优点在于解决了视频生成中的漂移问题,通过双向采样方法保持视频质量,适合需要生成长视频的用户。该技术背景来源于对现有模型的深入研究和实验,以改进视频生成的稳定性和连贯性。
Diffusion-Vas这是一个由卡内基梅隆大学提出的视频非可见物体分割和内容补全的模型。该模型通过条件生成任务的方式,利用视频生成模型的基础知识,对视频中的可见物体序列进行处理,以生成包括可见和不可见部分的物体掩码和RGB内容。该技术的主要优点包括能够处理高度遮挡的情况,并且能够对变形物体进行有效的处理。此外,该模型在多个数据集上的表现均优于现有的先进方法,特别是在物体被遮挡区域的非可见分割上,性能提升高达13%。