利用AnimateDiff让你生成的小姐姐动起来
大模型选择二次元的效果会比较好,采样器选择DPM++2M SDE Karras,提示词的书写需要比较精简,控制在75个tag内,且选择这类比较有动感的词汇如falling petals,wind,flying butterfly效果会比较好,图片会保存在stable-diffusion-webui/outputs/txt2img-images/AnimateDiff文件夹里。“杰作,最佳质量”,1
今天和大家分享一款stable diffusion扩展AnimateDiff,利用AnimateDiff可以直接生成gif动图,让你生成的小姐姐动起来,这个功能有点类似与runway gen2的image to Video,但是更加具有可控性,话不多说,直接看效果图和对比图
原图
AnimateDiff
runway gen2
原图
AnimateDiff
runway gen2
插件安装方法:点击扩展插件-从网址安装,输入github地址 https://gitee.com/swordfishx/sd-webui-animatediff.git点击安装等待安装完毕之后重启webui即可
安装完成后还需要下载两个运动模块,我已经给大家准备好了,下载链接放在文章最后,大家下载完成之后放到extensions/sd-webui-animatediff/model/文件夹下即可
大模型选择二次元的效果会比较好,采样器选择DPM++2M SDE Karras,提示词的书写需要比较精简,控制在75个tag内,且选择这类比较有动感的词汇如falling petals,wind,flying butterfly效果会比较好,图片会保存在stable-diffusion-webui/outputs/txt2img-images/AnimateDiff文件夹里。
正面提示词:(masterpiece, best quality),1girl,solo,cheery blossoms,pink flower,white flower,spring season,wisteria,petals,plum blossoms,outdoor,falling petals,wind,flying butterfly,
“杰作,最佳质量”,1个女孩,独奏,樱花,粉色花朵,白色花朵,春季,藤蔓,花瓣,梅花,户外,飘落的花瓣,风,飞舞的蝴蝶。
负面提示词:EasyNegativeV2,badhandv4,lowres,watermark,monochrome,watermask,
参数说明
- Motion module运动模块:选择任一即可,我这里使用的是mm_sdv15.ckpt
- Number of frames帧数— 该模型使用 16 帧进行训练,因此当帧数设置为 16帧时效果最好
- Frames per second (FPS)每秒帧数— 每秒显示多少帧(图像)。如果以每秒 8 帧的速度生成 16 帧,则 GIF 的持续时间为 2 秒。
- Display loop number循环次数— GIF 播放的次数。值
0
表示 GIF 永远不会停止播放。
注意事项:
1.tag不要超过75个,不然会默认生成两段gif
2.目前还并不支持在图生图界面使用,最初版本可以,这个版本反而不行了,作者表示将会修复
3.不要开ADetailer(可以打开面部修复),不然脸部会崩坏的很严重,就像这样
4.不要开高清修复!不要开高清修复!不要开高清修复!及其容易爆显存
总结:由于目前这个插件才刚开发出来不久,到现在也就才第二个版本,有一些已知bug,但是作为目前为数不多的文本转视频类工具,依旧拥有非常广阔的前景,相信在不久的将来,人人都可以通过文字来生成梦想的画面,期待作者的后续更新!
网盘链接:百度网盘 请输入提取码
提取码:cmjh
注:本文源自乾坤AI,作者:ai-world,更多内容请关注乾坤AI。
乾坤AI官网地址:https://qkunai.com
更多推荐
所有评论(0)