用Wan 2.1轻松创建风格化视频
风格化视频与Wan 2.1
Wan 2.1 是一个快速、开源的模型,用于从文本或图像生成视频。
一个特别有趣的用法是进行视频风格迁移。
无论是想制作梦幻的吉卜力风格循环动画、粗粝的赛博朋克预告片,还是完全属于自己的内容,Wan都能轻松创建风格化视频。可以立即从预置风格开始使用,也可以在几分钟内使用自己的图像训练一个自定义风格。
某中心还支持在Wan 2.1上使用LoRA进行快速推理,因此可以用更短的等待时间且无需额外设置即可为视频应用风格。
以下是入门方法。
使用预置风格
可以在以下两个文本到视频的Wan 2.1模型之上运行预置风格:
- Wan 2.1 文本到视频,480p
- Wan 2.1 文本到视频,720p
要使用某个风格,需要输入提示词,将 fast_mode 设置为“Fast”,并在 lora_weights 输入项中添加权重的链接。此链接可以是互联网上的任意 safetensors 文件URL——来自 HuggingFace、CivitAI 或任何其他平台。
lora_weights 字段甚至接受在某中心上找到的微调过的Wan模型。以下是一个使用某中心Python客户端的示例,模型为 fofr/wan-14b-cyberpunk-realistic:
import Replicate from "replicate";
const replicate = new Replicate();
const model = "wavespeedai/wan-2.1-t2v-480p";
const input = {
prompt: "driving a car very fast through a city at night",
fast_mode: "Fast",
lora_weights: "fofr/wan-14b-cyberpunk-realistic",
};
const output = await replicate.run(model, { input });
console.log(output.url());
以下是一些可以尝试的预置风格:
- 梵高风格
- 黑巩膜眼睛风格
- 彩虹棱镜光照风格
- 运动模糊风格
- 扁平色彩风格
创建自己的风格
在某中心上,还可以通过整理照片来训练Wan,从而创建自己的风格化视频。以下是使用 ostris/wan-lora-trainer 的方法。
- 选择一个目标模型(或输入新名称以创建一个)。
- 准备训练图像。创建一个包含至少25张反映您风格的图像的文件夹,然后将该文件夹压缩成ZIP文件。
- 将ZIP文件上传到
input_images字段。 - 选择一个触发词——这是在提示词中键入以激活该风格的词语。
- 保持自动标注功能开启。可以选择添加
autocaption_prefix或autocaption_suffix来更好地引导风格。 - 保持其他设置不变(或根据需要调整),然后点击运行。
几分钟后,您将拥有自己的、在您选择的风格上训练过的Wan版本,可以随时生成视频。
无论使用预置风格还是训练自己的风格,Wan 2.1 都让创建感觉独一无二的风格化视频变得简单。
只需选择一个风格,写下提示词,然后点击运行。
更多精彩内容 请关注我的个人公众号 公众号(办公AI智能小助手)或者 我的个人博客 https://blog.qife122.com/
对网络安全、黑客技术感兴趣的朋友可以关注我的安全公众号(网络安全技术点滴分享)
公众号二维码

公众号二维码


浙公网安备 33010602011771号