昆仑万维最近开源了全球首个基于扩散强迫框架的无限时长电影生成模型:SkyReels-V2,嗯,就是理论上可以一直生成。 主要发布了三款模型SkyReels-V2-I2V、SkyReels-V2-T2V以及-DF,每款模型又发布了多个型号和尺寸。 其中的 SkyReels-V2-DF 模型更是打破了传统视频生成模型在时长上的限制,可以生成无限时长的视频。 SkyReels-V2-DF 分别发布了1.3B 和 14B 两种参数的模型,1.3B 模型只需要 12G 显存就可以完美运行,而且效果也很好,并且生成速度很快,22 秒的视频只需要 8 分钟。 好了,话不多说,我们直接开整。
项目地址:https://github.com/SkyworkAI/SkyReels-V2
来看下官方的生成效果,以下的视频都是一镜到底的视频,是不是很流畅,视频的一致性保持的也很好。
来看下我们本地生成的视频,我们来生成一个 22 秒,24 帧,总帧数相当于 528 帧,相对于 81 帧的视频,提升了将近 7 倍的视频时长。至于为什么是 22 秒,我们后边说明。
可以看到不管是流畅度,还是人物的一致性保持的都是相当不错,而且显存也只需要 12G 不到,即使后边再增加视频时长,也不会增加显存的使用。
最后的分镜加了一个摸头发的动作。
虽然还有一些瑕疵,比如背景中的车倒着开了,不过只关注主体人物的好,整体表现的还是很不错的。
为了更好的阅读体验,来飞书看吧:
https://dardrwsz7u9.feishu.cn/docx/DArDd7SJVoCFk1xUnbDcqt44njk
Comments on "[ComfyUI]SkyReels-V2:突破技术极限,开启无限时长视频生成新时代,本地运行只需 12G 显存! 副本" :