Tiled Diffusion + Tiled VAE + ControlNet Tile模型
只有图生图才能使用Tiled放大倍数。文生图没有放大倍数选项但是可以使用覆盖图像尺寸直接更改尺寸。(文生图不容易控制,不如图生图)
【采用接力的方法进行放大:先文生图高清修复提高细节和质量到1920,然后发送到图生图用Tiled放大,如果放大不理想再开启ControlNet Tile】
1.先把描述写好后生成小像素图,挑选满意的。然后点选高清修复进行2倍放大,大概像素超过1080以上就可以,注意重绘幅度降低到0.3-0.5。因为像素低不光是分辨率小,而且对应的图片细节和质量都会很低。
2.图片满意后发送到图生图里,然后开启Tiled Diffusion方案选择MultiDiffusion更佳,潜空间分块高度和宽度可以适当扩大增加速度,96-160之间合适。潜空间分块重叠是接缝处平滑。放大倍数就是控制放大。放大算法选择R-ESRGAN 4X+/如果是二次元就选择后面是ANIME的算法。 还可以开启启动噪声反转(具有一定的稳定画面的作用,如果不想改变画面结构尤其是人脸就开启,配合上方降低重绘幅度比如0.3-0.5更佳。如果不开启噪声反转也问题不大。) 可以配合重铺噪声强度或者修复程度控制噪声干扰。
再开启 Tiled VAE,如果出现图片色彩问题,可以开启快速编码器颜色修复。
如果不开启ControlNet Tile,经过自己实验,比如一个女孩,会生成整个区块都是一个女孩。
3.开启ControlNet,从控制类型直接选择Tile分块,然后下方预处理器和模型自动加载,不用动其他参数。
4.放大是非常缓慢的,视频教程也说很慢,可以从代码窗口观看进度条。
使用ControlNet会额外增加显卡运行,速度会慢3-4倍,如果显存报错,也可以选择将ControlNet移至CPU,但是会更慢。
5.ControlNet Tile的分块控制也可以用在其他功能上,比如用脚本的放大原理也是分区块放大,配合ControlNet Tile也可以避免出错。
ControlNet Tile不要忘记放图生图的图片进去。
常见错误:重绘幅度一定要低一点,太高容易出现多头多人现象。 如果开启噪声反转,皮肤上容易出现噪点,可以把重回幅度降低到0.3,解决不了只能不开启噪声反转。(原理是噪声是为了稳定住画面结构进行噪点定位,但是图生图本身就是重绘一张图,重绘的时候有可能因为噪点的影响被识别为图像内容从而改变了原图或者出现瑕疵,因此配合降低重回幅度可以一定的解决。)
写在最后
感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。
AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。
一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。