VACE Wan2.1 | V2V
VACE Wan2.1(Video-Aware Composable Editing for Wan2.1)是一个灵活的全能模型,适用于高级AI视频工作流。这个V2V(视频到视频)工作流允许用户输入源视频和参考风格图像,并输出完全重新渲染的视频,反映参考的视觉特征。无论您是想重新风格化动画、改变环境,还是应用一致的美学变换,这个工作流都可以使用VACE Wan2.1模型在ComfyUI中实现高质量的参考驱动视频到视频生成。ComfyUI VACE Wan2.1 工作流程
ComfyUI VACE Wan2.1 示例
ComfyUI VACE Wan2.1 描述
VACE Wan2.1 | 视频到视频
VACE Wan2.1通过在整个视频中应用单个参考图像的风格实现创意视频转换。基于VACE Wan2.1模型并集成到ComfyUI中,这个工作流允许用户生成视觉一致的风格化视频,其中每一帧都采用给定图像的纹理、颜色和氛围。
VACE Wan2.1非常适合动画重新风格化、艺术视频创作和实验美学,简化了风格转移过程,同时在输出中保持时间一致性和视觉流畅性。VACE Wan2.1技术为视频风格化提供了一种创新的方法,艺术家和创作者会发现这对他们的项目非常有价值。
为什么使用VACE Wan2.1进行图像到视频风格转移?
VACE Wan2.1工作流提供了一种灵活、高效的方法,通过参考驱动的风格转换视频:
- 使用VACE Wan2.1将单个图像的风格应用于整个视频序列
- 使用VACE Wan2.1技术保持风格化视频帧的时间一致性
- 通过VACE Wan2.1处理输出由视觉参考引导的高质量720p视频
- 只需上传一张图像和一个视频,VACE Wan2.1的设置极为简单
- 非常适合艺术风格化、概念动画和由VACE Wan2.1驱动的视觉故事工作流
无论您是将实景素材变成绘画场景,还是使用独特的美学重新构想视频片段,VACE Wan2.1仅需一张图像和一个视频即可解锁强大的视觉转换。VACE Wan2.1系统在整个视频帧中出色地保留了参考风格的精髓。
如何使用VACE Wan2.1工作流?
VACE Wan2.1快速开始步骤:
按照以下步骤使用VACE Wan2.1生成高质量的从头到尾的帧视频:
- 将您的参考图像上传到VACE Wan2.1处理的
Load Image
节点中 - 将您的源视频上传到VACE Wan2.1转换的
Upload Video
节点中 - 根据需要编辑VACE Wan2.1风格化的正向和负向提示
- 根据您的VACE Wan2.1项目需要更改视频的时长或分辨率
- 点击运行按钮或按Ctrl(或Cmd)+ Enter开始VACE Wan2.1视频生成
- 从视频保存节点(
Outputs
文件夹)查看并下载您的最终VACE Wan2.1视频
1 - 加载VACE Wan2.1模型
选择合适的Vace Compatible模型和资产进行VACE Wan2.1生成:
Wan2_1_VACE_1_3B_preview_bf16.safetensors
: VACE扩散模型加载器用于VACE Wan2.1umt5_xxl_fp8_e4m3fn_scaled.safetensors
: CLIP文本编码器用于VACE Wan2.1中的提示理解wan_2.1_vae.safetensors
: VAE解码器用于高质量的VACE Wan2.1帧输出
2 - 输入VACE Wan2.1的输入
VACE Wan2.1的提示
- 正向提示:
- 引导VACE Wan2.1帧中的运动动态、视觉风格和场景一致性
- 使用描述性和生动的语言(例如,"阳光草地,电影灯光,生动氛围")可以生成更丰富、更连贯的VACE Wan2.1动画
- 负向提示:
- 帮助避免VACE Wan2.1输出中的不良视觉伪影,如*"模糊、变形、失真、暗斑"*
- 包含诸如*"平滑、清晰、详细"*的术语可以进一步稳定和增强生成的VACE Wan2.1视频的流畅性
VACE Wan2.1的参考图像
- 输入您的参考图像,这将指导VACE Wan2.1视频生成的风格。
- 与源视频相对应的方向可能会在VACE Wan2.1处理中产生更好的效果。
VACE Wan2.1的源视频
- 上传源视频,将其用作VACE Wan2.1模型的深度控制视频。
- 您可以直接从VHS加载视频节点更改视频的时长和FPS,以获得定制的VACE Wan2.1输出。
3 - VACE Wan2.1采样器
设置已经调整为VACE Wan2.1的最佳参数,但您可以随意更改和测试其他采样器设置,以定制您的VACE Wan2.1体验。
4 - VACE Wan2.1输出
渲染的VACE Wan2.1视频将存储在Comfyui > Output文件夹中。每个VACE Wan2.1项目都会创建一个独特的输出,将您的参考图像风格与源视频的运动结合在一起。
致谢
VACE Wan2.1 V2V从图像到视频的工作流基于社区开发的开源VACE模型和节点集。VACE Wan2.1系统代表了AI驱动的视频风格化技术的重要进步。
特别感谢Datou和T8star-Aix设计了VACE工作流,以及Kijai创建了支持VACE Wan2.1高级功能的VACE节点系统。他们的贡献使得在ComfyUI中进行图像引导的视频风格化变得简单、灵活和极具创意。
我们也感谢ComfyUI开发者社区的持续支持,他们的模块化节点架构继续为像VACE Wan2.1这样的快速、强大且用户友好的AI视频工作流提供支持。