SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)

入门教程11个月前更新 花花
24,128 0 1

引言:今天将为您逐一详解如何在电脑上巧妙应用 Stable Video Division 模型,创造出引人入胜的视频。这项技术在潮流前沿,通过巧妙设计的步骤,您将能够在家中轻松实现这一引人注目的创作。请跟随以下步骤,深入了解这一创作之旅

在线体验地址:stability-ai/stable-video-diffusion – Run with an API on Replicate

测试安装环境Windows,显卡3070TI!

第一步:安装环境 

  1. 下载与解压模型: 在 Hugging Face 平台下载 Stable Video Division 模型,将其解压到硬盘。
    SVD模型下载:稳定性ai/stable-video-diffusion-img2vid 在主 (huggingface.co)
    SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
  2. 获取 Comfy UI: 访问 Comfy UI 官网,下载适用于 Windows 操作系统的 direct DOWNLOAD link。
    Comfy UI官网地址:comfyanonymous/ComfyUI: The most powerful and modular stable diffusion GUI with a graph/nodes interface. (github.com)
    SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)

    1. 点击下载适应于Windows的软件包,也可以根据自己的电脑 ,在其中选择适合自己的系统的版本:
      SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
    2. 现在完毕后,解压到硬盘里,如下图:
      SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
    3. 安装 Comfy UI Manager: 进入 "Comfy UI" 文件夹,通过命令行安装 Coffee UI Manager。将 SVD 模型复制到 "models" -> "checkpoints" 目录。
      1. 进入Comfy ui文件夹,找到 custom nodes文件夹SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
      2. 点击nodes文件夹,地址栏,输入"CMD"命令
        SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
      3. 进入Windows命令行界面,输入命令:git cloneSVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
      4. 输入 Comfy UImanager的地址:https://github.com/ltdrdata/ComfyUI-Manager ,然后系统就会自动安装SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)Comfy UI Manager 地址:ltdrdata/ComfyUI-Manager (github.com)
      5. 找到解压文件夹中的 Comfy ui的目录,找到models文件夹,打开 checkpoints,文件夹,将SVD模型复制到这个文件夹中!SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版) SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
  3. 启动 Comfy UI: 启动 Comfy UI,加载 SVD 工作流。
    1. 返回 comfy UI目录,输入cmd命令,进入命令行界面:SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
    2. 安装包依赖包:输入命令:pip install -r requirements.txt
    3. 输入“python main.py,即开始启动 ComfyUI界面!这里是一个默认的工作流SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
    4. 点击“load”导入SVD工作流!SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
    5. 解决错误,导入后会出现很多错误,如图:SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
      1. 安装依赖包: 在 Manager 中,点击 "install missing custom notes",勾选所有选项,点击 Instal(所有的instal)。SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版) SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
      2. 重新启动: 重新启动 Comfy UI 以确保所有更改生效。SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)重启后界面如下:
        SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)

第二步:设置模型参数

  1. 加载模型: 在工作流程中加载模型,选择一个已下载的模型。
    SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
  2. 导入图片: 通过 "Choose file to upload" 导入原始图片,例如一张火箭的图片。SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
  3. 参数调整: 在参数设置中,逐一调整宽高比例、video frame、motion bucket ID 等参数,根据您的创意需求。
    SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)model 暂时不用动!~
  4. K Sampler参数:其他基本不需要条恒,CFG 3/4效果最好~剩下的均可以默认
    steps:步骤(更精细的效果),sampler_name采样器名称,scheduler:调度器,dnoise:去噪,其他根据自己需要调整,
    SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)Seed:随机种子可以适当调高,可以让生成的视频更加多样化!SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)

第三 步:生成视频

  1. 触发生成: 点击 Queue Prompt 开始生成视频,耐心等待片刻(3070 月末3分钟生成)。SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
  2. 下载视频: 生成完成后,右键点击视频,选择 "Save Preview" 下载。

以下是一些视频效果展示:

 

扫描以下二维码加群

告诉管理员您遇到的问题

我们会第一时间为您挑选优质教程和帮您解决问题

SVD 文本图像转视频动画本地部署,Stable Video Diffusion AI视频开源发布,ComfyUI工作流|AI视频(图文版)
© 版权声明

相关文章

分享