1327522.jpg

Ridley

GF  2024-04-02 05:46
(空的)

向nai3宣战!简单讨论并分享一下最近社区sdxl模型跑的图


如果你是被引战标题骗进来的,我在这里先说声抱歉,这其实并不是一个拉踩贴

随机抽一个老婆镇楼


继之前发了NAI3,  Animagine和PonyDiffusion的使用体验以来,NAI3只更新了一个SD1.5就有的类reference功能(等于没更新),而社区模型则有了肉眼可见的进步,其中最主要的几点是

1. 在维持Pony模型优越的多人复杂构图与nsfw能力的同时,进行绘图风格迁移
2. 在维持Animagine模型优秀的动漫风格和acg角色还原能力的同时,优化人物复杂动作下的肢体结构与prompt的可控性
3. 更多的lora支持等等


因为模型架构的不同,pony模型和Animagine模型之间并不存在理想的merge,二次元sdxl模型的社区发展方向因此产生了明显的分叉。然而从目前消费级显卡的训练融合效果来看,两方都给我一种拆东墙补西墙,越来越收敛成NAI3的错觉。

在SD3到来之前的现在,SDXL模型似乎并不足以完全学会并融会贯通玩家期望的概念——[人物形象]×[美学风格]×[复杂构图],这也是我不看好novelai以及各家企业付费模型的原因,如今的AI画图社区最理想的方案仍旧是各种工作流和多模型协同(不妨简单尝试下Pony模型文生图+Animagine模型高清修复)。

NAI3,  Animagine系和PonyDiffusion系单模型之间依旧是各有优势(具体见旧帖),但基于社区模型的解决方案和工作流成果可以说(在大多数情形下)比NAI3更可靠。当然成图效果在不同玩家之间的偏差要远大于模型本身之间的偏差,以上结论都基于个人使用经验。


唠完了,感谢听我讲完一堆废话。
以下图片由Animagine和PonyDiffusion及其衍生模型生成:












































































































以上所有图片仅由A1111's stable diffusion webui文生图(含高清修复)功能实现(少部分3K图由ultimate upscaler放大),无其他修改。


发此贴只是为了抛砖引玉,希望泥潭能有更多更丰富的SDXL画图帖子,比如介绍一下模型,分享一下画图经验和工作流,乃至于更多玩法(比如我之前在sillytavern上应用sdxl实现类似galgame的效果)                      

“泥潭成为最好的无限制AI画图中文社区指日可待”


220445.jpg

流浪包子

B1F  2024-04-02 05:59
(地狱空荡荡,恶魔在人间。)
好多图。。。。。

none.gif

0452d9af

好图我赞,真不错话说大佬有打包下载吗,一张一张下好费劲

1327522.jpg

Ridley

B3F  2024-04-02 06:32
(空的)
yysy,这些图都是直接文生图出来的,甚至都没经过修正,除了prompt完全没有保存的意义(我放这么多其实就是这个意思)

none.gif

XXOXO

感谢分享

μ


1071324.png

呱呱

B6F  2024-04-02 08:04
(111)
ohhhhhhh好色!

105059.jpg

洞壁琴音

B7F  2024-04-02 08:40
(一梦千年)
感谢大佬分享

none.gif

黑阳

B8F  2024-04-02 09:27
(黑阳)
难道你是天才

1215742.jpg

三相猛冲

nai3 开箱即用就是贵,sdxl 社区版要自己搞,硬件和电费比较贵,租云服务器不一定用得上,但是便宜一些有镜像可以操作。

none.gif

8656b145

B10F  2024-04-02 13:36
(L.S不死啊。。。咱不信啊。。。)
你做的好啊 , 做的好   

none.gif

1234miao

我很久不发贴了。因为现在全是炒冷饭,没有一点新意。
不管是人还是图。但是更适合初学者了。

1327522.jpg

Ridley

B12F  2024-04-02 19:17
(空的)

回 11楼(1234miao) 的帖子

就是SD1.5热度过去后sdxl没能及时接棒,大部分玩家都半弃坑了(包括我)。
然后nai3因为不需要部署加模型优秀快速吸引了一批新玩家,直到最近两个月社区模型才有重新盘活的迹象,这其实也是好事,把nai3入坑的玩家吸引到社区中来何尝不能中兴

none.gif

告之水之

B13F  2024-04-02 21:43
(告之水之)
谢谢分享

none.gif

asm

谢谢分享

640493.jpg

黎曦夜

有图包吗

1642618.jpg

sk2

B16F  2024-04-03 01:09
(路過走過-路人甲)
感谢分享

none.gif

94566c05

谢谢大佬分享

a10.gif

Alois°

实际上就自己最近上手玩XL的感觉,其实comfyUI上手了把工作流弄熟了(或者直接嫖个好用的工作流)潜力比nai3高太多,本身comfyui的底层就比webui精练导致加载速度和显存占用都显著地小了不少(利益相关:本人8G显存,webui跑XL往往三十多秒一张图,还有爆显存风险,comfyui只需要几秒,和nai3步数一样速度堪比nai3), 加上包括lora的分层、区域生成、controlnet和修复模型的使用等等真的是秒了nai3

现在XL社区最大的问题确实是楼主提到的pony和AniXL之间底层打标完全不同导致的分裂,现在很多nsfw的lora分享者都主要做pony的lora,导致AniXL以及AniXL衍生的社区模型往往在nsfw图的生成能力上还不如pony系 。(有一说一,我是真觉得pony生成nsfw比nai3强多了,nai3没有lora导致很多时候图少的动作tag经常出不来)
但是pony系又在角色理解、画风模仿上显著不如AniXL和nai3,真挺纠结的;不过个人还是觉得AniXL系潜力更大一点,希望哪天能有哪个社区模型直接结合两家之长,sfw和nsfw都能有极好的表现

最后吐槽一下,其实SDXL最让我失望的反而是真人模型;目前市场上的几个亚洲脸XL表现都说好听点叫不尽人意,说难听点比SD1.5的亚洲模差多了,还搞什么GPT4V打标,打得描述乱七八糟,啥图都出不来;欧洲脸的XL还好一点,Juggernautt团队更新快而且训练得好,勉强能用;唉,希望XL也能横空出世一个chilloutmix或者麦橘了

none.gif

db848106


SD1.5我有几百个大模型,上千个各种lora。导致我SDXL并不想碰。
pony看似更好,但是也面对和XL同样的困局。
直到上个月1.5已经玩腻很久,于是开始用PS自己做一些猎奇玩意自己炼丹。
比如在奶子RT位置P上一根大丁日,或者吧乳头变阴道啥的。
现在刚想研究XL,发现SD3未来会开源。。
于是又搁置了。

none.gif

Mni

B20F  2024-04-04 00:02
(快乐炼丹人)

回 18楼(Alois°) 的帖子

gpt4v挺好用啊 我常用来做提示词反推 加上control net出图效果还不错的

none.gif

告之水之

B21F  2024-04-04 00:09
(告之水之)
谢谢分享

1327522.jpg

Ridley

B22F  2024-04-04 14:45
(空的)

回 18楼(Alois°) 的帖子

虽然但是,comfyui只是不占显存内存吧,单模型的出图速率没什么变化,我用SDXL画一张1024*1024都是30s。唯一的可能是你在webui里开了medvram,而comfyui在启动时觉得你显存足够就没开。不过在comfyui下确实可以实现很多webui里会爆显存的操作,比如放几十个controlnet串一起

1309429.jpg

sdfdfd

B23F  2024-04-05 23:03
(是的服的反的)
uuuu

none.gif

君君

感谢分享太爱了

none.gif

asnnn

感谢分享   

1374103.jpg

朝比奈まふゆ

各位佬 求一个Animagine高清修复的workflow

1176523.jpg

七木

然而3060笔记本带不动sdxl模型 等出50换电脑再说吧