字节跳动的Lightning团队发布的新图像模型蒸馏算法Hyper-SD,是一项在图像处理和机器学习领域的重要进展。这项技术通过创新的方法提升了模型在不同推理步骤下的性能,同时保持了模型大小的精简。
基于这个算法模型,一个很实用的功能出现了,就是实现一键手绘插画的功能,几乎实现了实时生成图片的功能。即会画画,就能玩AI绘画了。
我来说下具体实现:你只需要像画画一样,在画板上画出轮廓,输入相关的提示词,比如下图,输入“a little cat”,然后在画板上画出轮廓,就可以轻松生成一张对应姿势的小猫咪。
有了这个工具,大家可以脑洞大开,发挥自己的想象力,瞬间化身”神笔马良“,利用这个工具创造无限高质量的素材了。尤其是插画师和美工行业的从业人员,有了这个工具,可谓如虎添翼。想要的素材,输入提示词,鼠标画一画就有了。在也不用苦恼到哪里去找到需要的素材了。
一键整合包下载:Hyper-SD - AI一键手绘绘画,实时同步画图,字节lightning团队最新开源 本地一键整合包下载
使用教程
1、下载一键包,双击运行一键启动
2、在左上角图像区域,可以当作画板来作画。下方可以调节笔刷大小,和实用橡皮擦擦除画错的,如下图
3、可以在画板画出草图轮廓,在下方可以调节相应的高级参数。可以调节 图像数量、推理步数、和提示词这几个参数,其他默认即可。
图像数量就是一次生成几张图片
推理步数就是推理计算的步骤次数
提示词就是生成图像主体,比如一只小猫,就输入 a little cat
可以先设置好参数,再画草图,这个是实时生成的
如果后期修改参数,修改后,再点下方运行更新生成
测试了几个,效果不太好,可能是需要写绘画技巧,大家可以自行尝试。