前言

Stable Video 初次登场的表现比我想象中的要厉害很多啊哈哈哈,主体变化幅度很大且不变形,很强了哈哈哈~已经开始期待微调训练后的惊艳效果了~

就是分辨率还不足点,只有1024*576,下方视频刻意没有使用高清功能放大,大家可以感受一下~

使用指南

目前推荐使用Colab云端部署跑Stable Video Diffusion ,本地部署还没有跑通,以下是具体流程,Colab的详细使用不懂的可以搜B站教程,本篇不会赘述~充会员后使用A100显卡生成4s视频的速度是53秒,T4显卡是7分钟,可供参考~

前置步骤
首先打开Colab笔记本链接
https://colab.research.google.com/github/mkshing/notebooks/blob/main/stable_video_diffusion_img2vid.ipynb
然后依次点击播放图标运行不同单元格,配置好环境和模型。
第一格:Setup

第一格运行结束会有报错但不影响生成,可以不管。播放器图标旁边有绿色小勾即是代表运行完成。

第二格:Colab hack for SVD
第三格:Download weights
第四格:Load Model
第五格:Sampling function
第六格:Do the Run! 这就是最后一格了,运行成功后会出现一个地址,点击地址会打开一个网页,就可以愉快的上传图片生成了~
记得只支持PNG格式,其他格式图片需要转化为png格式。生成分辨率是1024*576,不是这个比例大小的图片可以选择是否自动变形压缩到这个比例。

生成视频后的界面如图,记得下载保存视频。

高级选项一般不需要调整,调节太高会炸显存。

总结

以上就是Stable Video Diffusion 在Colab 中运行教程啦,有不懂的可以加文末的交流群交流~更多往期视频和文章有兴趣也可以看看~
不用4090也都能跑!SD电脑主机配置+笔记本选购指南(不同价位跑Stable Diffusion 的最佳性价比之选)10月版
【AI电商设计】奢华电商展台300张高清素材包免费分享
BDicon SDXL 使用指南-包括文生图、线稿控制(ControlNet LoRA )、图生图等操作流程与要点
10月15日炼丹大会深圳场第一波嘉宾揭秘:麦橘与逗砂两位重磅大咖即将登场分享
【AIGC】超完整的Stable Diffusion 学习应用指南(8月最新版)
聊聊全职研究SD半年我收获了什么?又踩过哪些坑?有哪些经验对SD新手有用?