不知道有多少小伙伴是因为工作需要去学习Stable Diffusion的,像是设计师、动画从业人员等或多或少都会接触到AI绘画。
当然还有无孔不入的老色批们(例如我)
一些专业的人员会用PhotoShop来辅助AI绘画进行产出,而像我这种小学计算机课跑去玩4399的自然不知道PS是怎么用的,对我来说PS最常见的用处就是抠图。
而今天我则发现了一个东西:Layer Diffusion。
可能有些小伙伴看到这个头像就有点眼熟了,这个人还开发了另一个东西叫做ControlNet,属于是AI绘画界绕不开的大山了。
而这个Layer Diffusion简单来说就是在Stable Difffusion里生成拥有透明背景的图片,和那些借助主体识别实现智能抠图的工具不太一样,这个生成阶段就直接帮你扣好了主体,可以直接放置在任何的背景中。
甚至Layer Diffusion还可以根据前景内容补全背景这样的一次性生成“多层”的AI绘图,像是这样生成具有透明通道的AI素材可以直接用到例如平面设计、游戏制作等多种场景里。
这个是真的蛮实用的,所以让我们少说废话直接开始!
Layer Diffusion的下载安装
首先得说一下,目前的WebUI和Layer Diffusion并不太兼容,所以这次演示我使用的是ForgeUI,当然ComfyUI好像也可以用大家可以试一试。
ForgeUI的下载也很简单,来到大佬的页面(文末也有完整的”一键喂到嘴里安装包”):
https://github.com/lllyasviel/stable-diffusion-webui-forge
点击右侧有个latest,点开以后来到这个界面
选择下载这个1.73GB的压缩包,然后网页会自动下载。
在下载完毕之后解压到一个全新的文件夹中:
先点击update,等update的命令行跑完之后再点击Run就可以启动ForgeUI了。
启动出来后页面是这样的,其实和WebUI大差不差不过都是英文的。
然后在上方选择栏中找到Extensions也就是扩展的选项:
选择Install from URL也就是从网址下载,然后在下方的第一个输入框中复制进这段地址:
https://github.com/layerdiffusion/sd-forge-layerdiffuse
等待安装后等待一段时间,直到底下有个安装成功的提示。
然后点击Install from URL同一行最左侧的Installed,进入之后选择Apply and restrat UI重启整个ForgeUI。
重启之后就可以在文生图版块下方看到LayerDiffusion了
Layer Diffusion的简单使用
Layer Diffusion可以通过这个启动按钮来控制功能的开关
先简单生成个东西吧,例如一个黄色的苹果:
苹果部分素材来源:Nenly同学
像这样还没开启LayerDiffusion的时候生成的是这样带有背景的黄色苹果,但是如果勾选后重新生成则是会变成这样:
背景则是会变成这样的灰白格子,这个灰白格子代表的就是透明背景,而LayerDiffusion会生成两张图片,第二张图片才是真正的透明背景PNG。
点击右上角的下载按钮可以进行下载,大伙可以直接导入到PS里面放到任意一个背景中,这就是一个现成的PNG素材了。
虽说直接用人手动扣也可以慢慢抠出来这样的图片,但是LayerDiffusion还有个更厉害的地方就是生成半透明素材。
例如先让AI生成一个透明的玻璃瓶,然后放在一个任意的图片上:
这样的透明效果是不是就有点厉害了。
这个LayerDiffusion是以一种类似LoRA的形式注入到主模型里参与生成的,所以可以和任意一个大模型搭配使用,从3D科技风格的Icon再到扁平风格的插画都能高清免扣。
包括我最需要的游戏角色的原画设计,这样纯透明的背景可以节省大把时间的同时让我更加方便地去编辑。
今天的内容就到这里啦!
其实本身LayerDiffusion的内容就不是很多,而且在下载运行的过程中我遇到了一些报错,我正在努力解决它但是需要一点时间。
如果遇到报错欢迎截图后私信我,我会尽可能帮助大家解决。
大伙下篇笔记见,拜了个拜!
评论0