云端AI视频创作新纪元:ComfyUI+SVD实战教程
2024.08.14 11:26浏览量:13简介:本文详细介绍如何在云端使用ComfyUI结合SVD模型制作AI视频,从环境搭建到效果演示,助力非专业用户也能轻松上手AI视频创作。
云端AI视频创作新纪元:ComfyUI+SVD实战教程
引言
随着AI技术的飞速发展,AI视频创作已成为数字内容领域的热门话题。ComfyUI与Stable Video Diffusion(SVD)的结合,为用户提供了从静态图片到动态视频的高效转换工具。本文将带您一步步在云端服务器上部署ComfyUI并安装SVD模型,实现AI视频的快速创作。
一、环境准备
1. 云端服务器选择
推荐使用揽睿星舟(Lanrui AI)作为云端部署平台,该平台提供便捷的注册和算力支持。新用户注册即可免费使用2小时算力,足够完成初步的入门体验。
2. 创建工作空间
- 登录揽睿星舟官网(https://www.lanrui-ai.com/register),注册并登录。
- 在工作空间页面选择B4区,实例选择4090单卡,镜像选择应用镜像/comfyui-journey/v1.0.3,挂载网盘,数据集选择sd-base,然后点击创建。
二、ComfyUI部署
1. 配置学术加速
实例创建完成后,进入工作空间界面,点击Jupyter页面,新建一个终端,并执行以下命令以配置学术加速:
export http_proxy=http://192.101.1.254:10800 && export https_proxy=http://192.101.1.254:10800
cd ComfyUI-master/
2. 配置模型地址
在ComfyUI目录下,找到extra_model_paths.yaml.example
文件,重命名为extra_model_paths.yaml
,并修改文件内的base_path
参数为/home/user/imported_datasets/sd-base
。
3. 启动ComfyUI
执行以下命令启动ComfyUI,并将服务映射到工作空间的27777端口:
python3 main.py --port 27777 --listen 0.0.0.0
启动完成后,复制工作空间的调试地址到浏览器打开,即可看到ComfyUI的使用界面。
三、SVD插件及模型安装
1. 安装SVD插件
在ComfyUI界面点击Manager
,选择Install Custom Nodes
,搜索svd
,选择ComfyUI-SVD
进行安装。等待几分钟安装完成后,点击重启按钮。
2. 安装SVD大模型
再次点击Manager
,选择Install Models
,搜索svd
。根据您的显卡性能选择适合的模型版本(如4090显卡推荐选择25帧版本)。安装过程可能需要较长时间,请耐心等待。
四、图片转视频操作
1. 导入工作流
从ComfyUI官方GitHub(https://comfyanonymous.github.io/ComfyUI_examples/video/)下载工作流文件或使用拖拽方式导入图片。
2. 上传图片并生成视频
- 选择一张图片上传。
- 选中
svd_xt
大模型,参数值保持默认。 - 点击
Queue Prompt
执行,等待几秒钟即可看到生成的视频。
五、效果演示与优化
1. 效果演示
生成的视频默认为webp格式,您可以使用在线转换工具(如https://webpconverter.com/zh/webp-to-gif)将其转换为GIF或MP4格式,以便在更多平台上播放。
2. 参数优化
- 运动幅度:通过调整SVD模型中的相关参数(如
motion_scale
),可以控制视频的运动幅度。 - CFG值:CFG(Classifier-Free Guidance)值控制绘制内容与条件的相关性,适当调整可以优化视频质量。
- 噪声量:增加噪声量可以使视频与初始帧的差异更大,但过高的噪声可能导致画面错乱。
六、总结
通过本文的教程,您已经掌握了在云端使用Com
发表评论
登录后可评论,请前往 登录 或 注册