▼
AI赋能视频创作：传统与现代的完美结合
在AI生成视频成为热门趋势的今天，作为一名资深动态设计师，我深知将AI技术应用于实际商业项目的重要性。我有幸参与了京东618的一个TVC项目。这次，我不是以传统的设计师或导演身份参与，而是作为AI动态设计专家。本项目将传统TVC广告制作手法与现代AI视频创作技术完美结合，尽管AIGC部分仅有最后的6秒钟，但它充分展示了AI在视频创作领域的巨大潜力和广阔前景。
近期，“AI感”逐渐成为视频创作中的一种新风格，广泛吸引了观众的注意。AI生成的视频，以其独特的视觉效果和极具创造力的内容，屡次在视频平台上引发热潮。特别是Deform这个开源项目，以其“无限穿越”、“瞬息全宇宙”等效果而备受欢迎，成为视频创作的新宠。
在此次项目中，我采用了Stable Diffusion-Deforum与三维动画、AE合成相结合的工作流。这种工作流不仅高效地完成了项目，还解决了AI生成视频中常见的一些问题，确保了最终效果的高质量输出。
注:以下是本项目的基本制作流程
Stable Diffusion-Deforum部分
在Stable Diffusion-Deforum部分，我们专注于打造浓郁的中式风格。具体来说，我通过LoRA（Low-Rank Adaptation）技术，将多种风格融合在一起，形成独特的中式视觉效果。为了确保最佳效果，使用了XYZ图表脚本对关键参数进行了跑图测试，并通过严格筛选大模型来保证生成的稳定性和质量。
LoRA融合技巧：通过LoRA技术，我测试了几乎市面上所有关于中国画的LoRA模型，打造出独特的中式视觉效果。
注:以下是我筛选出用作本项目的中国画风lora，可以参考进行训练或调用。
注:测试的部分结果
XYZ跑图测试技巧：通过大量跑图测试，优化生成效果，确保所有参数达到最佳状态。
注:通过XYZ进行多维度跑图测试
大模型筛选技巧：在众多模型中筛选出最适合的一个，确保最终生成效果的稳定性和质量。在筛选过程中，通过XYZ图表脚本对项目所有的高频元素词汇进行测试，选出最适合的基础模型。
注:通过XYZ进行基础模型筛选测试
尽管Stable Diffusion-Deforum在生成艺术效果方面表现出色，但在定制化需求方面仍存在不足，例如本项目中的蝴蝶飞舞效果。在这个环节，我通过传统的三维动画和AE合成流程，成功弥补了这些缺陷。
三维动画部分：我通过三维动画制作蝴蝶飞舞的效果，确保其运动轨迹和视觉效果符合要求。
注:通过C4D快速对蝴蝶模型进行动画制作
动画的转绘处理：将三维动画再次通过Deforum进行风格化重绘，使其与整体风格保持一致。
注:将三维软件输出的蝴蝶素材进行二次转绘
AE处理与合成：将Deforum处理过的图像进行合成，通过AI抠像、抽帧等方式进行二次合成，提升视频的整体融合度。
注:将二次转绘的素材在AE中进行合成、抽帧、校色 等后期加工
注:Deforum输出格式不带通道，所以我使用在comfyUI中设计的工作流进行图像扣图等处理
通过这次项目的实践，我们不仅成功完成了京东618促销活动的TVC广告制作，还展示了AI技术在视频创作中的巨大潜力。AI技术的应用不仅提高了制作效率，还为创作带来了更多可能性。未来，我期待AI技术在更多创意项目中的应用，创造出更多令人惊叹的作品。
这次项目让我深刻感受到了AI视频创作的无限可能性。通过分享这次经历，我希望能激发更多创作者对AI技术的兴趣，共同探索AI在视频创作中的更多应用。
—END—