|
上个月 AI 绘画领域其实有一个很大的突破，号称 Stable Diffusion最强版本的 SDXL 1.0 模型被东家 Stability AI 放了出来。 但不同于 Lora 风靡、ControlNet 炸场，一问世就是绝对 C 位，而网上对 SDXL 1.0 这个迄今为止最厉害的图像生成大模型的态度，可谓是相当拧巴。 先抛开 SDXL 1.0 不谈，我们来说说 Lora 为 AI 绘画带来什么？ 可以这么说，文能固定人物做二创，武能确定风格穿黑丝，Lora 凭一手训练快、效果好，在 AI 绘画里扛起客制化风格的大梁。
那 ControlNet 又能为 AI 绘画带来什么？ 上至人物姿势做定型，下至光影控制整花活，ControlNet 的每一次突破，不光是 AI 绘画玩法的更新，更是为相对不可控的 AI 绘画带来了控制的可能。
不夸张的说，正是基于 Lora、ControlNet 的出现，搭配上各式各样的 WebUI 扩展，构建起了这半年来 AI 绘画兴起到破圈的生态。 那这次号称最强版本的 SDXL 1.0 又会为 AI 绘画带来什么呢？ SDXL 1.0 无论是 Lora 也好，ControlNet 也罢，这些被训练出来的模型，虽然用法不一样，但认祖归宗，它们都拥有同一个底子——SD 1.5。
SD 1.5 是我们平常所说的底模嘛？毫无疑问它是的，但不同于采用特定风格训练集，二次训练来的「Checkpoint」底模，SD 1.5 是通用的。
和不了解什么是底模的小伙伴展开说一下，我们平常提到的底模，有偏向二次元的，有偏向写实风的：
抛开已有底模间的相互融合，炼丹师们会专门找来一批特定风格的训练图片，在 SD 1.5 的基础上二次训练。 也就是说，牺牲了 SD 1.5 什么风格都能产出的特性，让新模型固定在一个方向上。 而为了保持模型间的兼容通用，Lora、ControlNet 等模型的训练，同样是在 SD 1.5 基础上展开的。 也正因如此，过去半年我们总结了许多 AI 绘画的小技巧，都和 SD 1.5 的特性分不开关系—— 1、比如 SD 1.5 的训练图片的尺寸都是 512×512，当你尺寸一拉大，就会出现多人、多头的克苏鲁图； 2、比如 SD 1.5 的理解能力有限，Prompt 需要我们拆分成一个又一个特定的短词、短句； 3、比如 SD 1.5 的图片细节能力有限，画不了手，更搞不出来文字，对比度、光线和阴影方面也差隔壁 MJ 一头。 但因为前面提到的，包括 Lora、ControlNet、扩展插件等 AI 绘画生态的补足，这些问题没有那么糟心。 这个时候 SDXL 1.0 来了—— 1、SDXL 1.0 的训练图片尺寸升级到了 1024×1024，意味着可以直出大尺寸的图，不会出现莫名其妙的崩坏。
2、35 亿的模型参数，让 SDXL 1.0 能够更好的理解 Prompt，不需要拆分成词条，简短的一句「王家卫动漫风街道上的情侣」就能得到下面这些例图：
3、除了基础模型外，SDXL 1.0 还有个配套的 Refiner 图生图模型，简单说就是在基础模型上增添亿点点细节。
网上有很多基础模型的对比，SDXL 1.0 毋庸置疑是强于 SD 1.5 的，这也是为什么很大一部分网友都在说，SDXL 1.0 会引领 AI 绘画进化到新的时代。 那拧巴的地方在哪呢？ 1、短期内生态的不支持，准确说来，SDXL 1.0 是第三代通用底模了，中间的 SD 2.X 系列压根没能溅起水花，如果 SDXL 1.0 想替代前辈，还需要各方的调教。 PS：好消息是包括 C 站在内的模型分享站，已经开始拿出 RTX 4090 作为奖品吸引炼丹师们开拓新的疆土了。。。
2、更大更新的 SDXL 1.0 对硬件需求更大了，官方给出的最低显卡要求是 8G N 卡，但对我而言最难受的不是显卡，而是内存很致命。 WebUI 对 SDXL 1.0 的适配还未做好，16G 的内存真的会拉满，按不少网友的说法，没 32G 内存，或者不去搞虚拟内存，是没办法畅玩 SDXL 1.0 了。
3、底模不能直接支持 NSFW。 体验方案 我在本地把玩了两次 SDXL 1.0 后，果断暂停了本地探索，毕竟生态未全、解决方案不定的当下，没必要让电脑吃这个苦。 但如果你又想尝鲜，该怎么办呢？两个方案—— 1、DisCord SDXL 1.0 之前还有个 0.9 的版本，从内测到公测，DisCord 上一直有能免费体验的频道，而且说实话，DisCord 并非一定需要魔法，咱们可以本地代理等方式免翻使用。 这里需要借助的工具是原 Steam++，改过名的 Watt Toolkit 加速器。 地址：https:///download 上面的链接是官网下载地址，你也可以直接在微软商店里搜索，打开后勾选 DisCord，并开启「一键加速」：
搞定了这一步，你就可以在浏览器访问下面这个链接了。 discord.gg/stablediffusion 浏览器登录 DisCord 账号，加入频道后就能在 bot 1-10 这里去生图了。
如果你更喜欢 DisCord 客户端，也能够通过搜索「Stable fundation」的方式加入频道。
在消息发送栏里输入「/dream」即可输入提示词，选择预设的风格等等。
响应速度很快，30 秒左右就能出图：
简单对比过几款反代的加速工具，Watt Toolkit 相对来说是最稳定的，值得一用。
2、Libilibi AI 就像 C 站很想在 SDXL 1.0 带来的洗牌中抢占先机一样，国内很多模型分享站也都在搞活动。 之前我们不是分享过 Liblibi AI 里的在线跑图功能嘛，👉你终于可以免费用4090显卡画小姐姐了！ 地址：https://www. 咱们只要把 SDXL 1.0 的模型加入模型库。
就能在线体验 SDXL 1.0 的魅力了，正在搞活动的 Libilibi AI 把每天的生图额度从 100 上调到了 300。
Libilibi AI 里有不少基于 SDXL 1.0 模型训练的底模和 Lora，如果你想，可以添加到模型库快速体验。 实话实说，在 Libilibi AI 里跑图，比我本地 RTX 3060 + 16G 内存要快的多。 对了，SDXL 1.0 不是还配的有一个叫 Refiner 填补细节的图生图模型嘛， Libilibi AI 内置到了参数设置里，勾选后适当调低重绘幅度就能快速体验。
以上两个方法，前者快速便捷，颇有一种拒绝 MJ，理解 MJ，成为 MJ 的赶脚；后者原汁原味，无需重新学习 ComfyUI，就能体验 SDXL 1.0，等 WebUI 优化好了，再上手体验也 OK。 结语 以上就是今天的全部内容了，玩了一周左右的 SDXL 1.0，给我最大的感受是：它不是一步登天，让 AI 绘画直接快进到言出法随，但它值得等待，未来可期。
好了，还没体验过 SDXL 1.0 的小伙伴，快去试试吧。
|
|
|
