GitHub 热门项目：sd-forge-layerdiffuse

GitHub 项目：sd-forge-layerdiffuse 仓库地址：https://github.com/lllyasviel/sd-forge-layerdiffuse 星级：4108 | 作者：lllyasviel 项目描述：[WIP] WebUI 的层扩散（来自 Forge） =================================================== 自述文件内容： # sd-forge-layerdiffuse 使用潜在透明度的透明图像层扩散  这是 SD WebUI 的 WIP 扩展 [（通过 Forge）](https://github.com/lllyasviel/stable-diffusion-webui-forge)，用于生成透明图像和图层。 # 更新 1.img2img完成！另请参阅[此处](https://github.com/lllyasviel/stable-diffusion-webui-forge/discussions/854) # 开始之前 因为很多人可能好奇透明扩散过程中的潜在预览是什么样子，所以我录制了一个视频，以便您在下载模型和扩展之前可以看到它： https://github.com/layerdiffusion/sd-forge-layerdiffusion/assets/161511761/e93b71d1-3560-48e2-a970-0b8efbfebb42 可以看到，原生透明扩散可以处理透明玻璃、半透明发光效果等，这是简单的背景去除方法无法实现的。原生透明漫射还为您提供了详细的毛皮、头发、胡须以及像骨骼一样的详细结构。 # 型号注释 **请注意，在此扩展中，所有模型下载/选择都是全自动的。事实上，大多数用户可以跳过此部分。** 已发布以下型号： 1. `layer_xl_transparent_attn.safetensors` 这是一个 256 级 LoRA，可将 SDXL 变成透明图像生成器。它将模型的潜在分布更改为可以通过特殊 VAE 管道解码的“透明潜在空间”。 2. `layer_xl_transparent_conv.safetensors` 这是将 SDXL 变成透明图像生成器的替代模型。该安全张量文件包含所有转换层的偏移量（实际上，所有不是任何关注层的 q、k、v 的层）。这些偏移可以合并到任何 XL 模型中，以将潜在分布更改为透明图像。因为我们排除了任何 q,k,v 层的偏移训练，所以对 SDXL 的即时理解应该被完美保留。然而，在实践中，我发现“layer_xl_transparent_attn.safetensors”会带来更好的结果。对于一些需要特殊提示理解的特殊用例，仍然包含此“layer_xl_transparent_conv.safetensors”。此外，该模型可能会对基础模型产生强烈的风格影响。 3. `layer_xl_fg2ble.safetensors` 这是一个 safetensors 文件，包含将 SDXL 转换为图层生成模型的偏移量，该模型以前景为条件，并生成混合合成。 4. `layer_xl_fgble2bg.safetensors` 这是一个 safetensors 文件，包含将 SDXL 转换为图层生成模型的偏移量，该模型以前景和混合合成为条件，并生成背景。 5. `layer_xl_bg2ble.safetensors` 这是一个 safetensors 文件，包含将 SDXL 转换为图层生成模型的偏移量，该模型以背景为条件，并生成混合合成。 6. `layer_xl_bgble2fg.safetensors` 这是一个安全的