字节发布AnimateDiff-Lightning模型 4步推理就能生成高质量视频

字节发布AnimateDiff-Lightning模型 4步推理就能生成高质量视频

最近，字节跳动在视频生成领域扔下了一颗“重磅冲击波”——名为AnimateDiff-Lightning的模型正式亮相。这款模型的性能相当能打，最吸引人的是，它只需要4到8步的推理过程，就能生成视觉效果相当出色的视频片段。对于整个视频内容创作行业而言，这绝对称得上是一次里程碑式的技术跃升。

相关的技术论文可以通过这个地址获取：https://arxiv.org/html/2403.12706v1。

更妙的是，这款模型与Contorlnet的配合度非常高，这意味着，现有的视频转绘工作流可能面临一次全面升级。为了推动应用落地，字节还同步开源了对应的Comfyui工作流。这一举措非常到位，大大降低了技术门槛，让开发者能更快速地集成和使用。

从技术路径上看，AnimateDiff-Lightning模型是从之前的AnimateDiff SD1.5v2模型蒸馏而来。它贴心地提供了1步、2步、4步和8步等多个蒸馏版本。实际测试表明，其中的2步、4步和8步版本，在生成质量上已经达到了令人惊喜的水平。这等于为视频创作者提供了从速度到质量的灵活“档位”选择。

在使用过程中，有个小技巧值得注意：官方建议搭配使用运动LoRA。这是因为运动LoRA能显著增强视频中的动态效果，让生成的内容更具活力。不过，为了避免可能产生的水印等伪影，建议将运动LoRA的使用强度控制在0.7到0.8这个“甜点”区间，效果最佳。

总而言之，字节这次推出的AnimateDiff-Lightning模型，凭借其高效、高质量的生成能力，实实在在地为视频制作领域开拓了新的想象空间。它不仅是一次技术展示，更是为从业者送上了一套强大且实用的新工具。