https://zhuanlan.zhihu.com/p/677918122https://zhuanlan.zhihu.com/p/677918122

视频生成无论是文生视频，还是图生视频，图生视频这块普遍的操作还是将图片作为一个模态crossattention进unet进行去噪，这一步是需要训练的，svd除此之外，还将图片和noise做拼接，这一步，很多文生视频的方式通过通过这一步来扩展其成为图生视频&#x