1327522.jpg

Ridley

GF  2024-04-02 05:46
(空的)

向nai3宣战!简单讨论并分享一下最近社区sdxl模型跑的图


如果你是被引战标题骗进来的,我在这里先说声抱歉,这其实并不是一个拉踩贴

随机抽一个老婆镇楼


继之前发了NAI3,  Animagine和PonyDiffusion的使用体验以来,NAI3只更新了一个SD1.5就有的类reference功能(等于没更新),而社区模型则有了肉眼可见的进步,其中最主要的几点是

1. 在维持Pony模型优越的多人复杂构图与nsfw能力的同时,进行绘图风格迁移
2. 在维持Animagine模型优秀的动漫风格和acg角色还原能力的同时,优化人物复杂动作下的肢体结构与prompt的可控性
3. 更多的lora支持等等


因为模型架构的不同,pony模型和Animagine模型之间并不存在理想的merge,二次元sdxl模型的社区发展方向因此产生了明显的分叉。然而从目前消费级显卡的训练融合效果来看,两方都给我一种拆东墙补西墙,越来越收敛成NAI3的错觉。

在SD3到来之前的现在,SDXL模型似乎并不足以完全学会并融会贯通玩家期望的概念——[人物形象]×[美学风格]×[复杂构图],这也是我不看好novelai以及各家企业付费模型的原因,如今的AI画图社区最理想的方案仍旧是各种工作流和多模型协同(不妨简单尝试下Pony模型文生图+Animagine模型高清修复)。

NAI3,  Animagine系和PonyDiffusion系单模型之间依旧是各有优势(具体见旧帖),但基于社区模型的解决方案和工作流成果可以说(在大多数情形下)比NAI3更可靠。当然成图效果在不同玩家之间的偏差要远大于模型本身之间的偏差,以上结论都基于个人使用经验。


唠完了,感谢听我讲完一堆废话。
以下图片由Animagine和PonyDiffusion及其衍生模型生成:












































































































以上所有图片仅由A1111's stable diffusion webui文生图(含高清修复)功能实现(少部分3K图由ultimate upscaler放大),无其他修改。


发此贴只是为了抛砖引玉,希望泥潭能有更多更丰富的SDXL画图帖子,比如介绍一下模型,分享一下画图经验和工作流,乃至于更多玩法(比如我之前在sillytavern上应用sdxl实现类似galgame的效果)                      

“泥潭成为最好的无限制AI画图中文社区指日可待”


1327522.jpg

Ridley

B1F  2024-04-02 06:32
(空的)
yysy,这些图都是直接文生图出来的,甚至都没经过修正,除了prompt完全没有保存的意义(我放这么多其实就是这个意思)

1327522.jpg

Ridley

B2F  2024-04-02 19:17
(空的)

回 11楼(1234miao) 的帖子

就是SD1.5热度过去后sdxl没能及时接棒,大部分玩家都半弃坑了(包括我)。
然后nai3因为不需要部署加模型优秀快速吸引了一批新玩家,直到最近两个月社区模型才有重新盘活的迹象,这其实也是好事,把nai3入坑的玩家吸引到社区中来何尝不能中兴

1327522.jpg

Ridley

B3F  2024-04-04 14:45
(空的)

回 18楼(Alois°) 的帖子

虽然但是,comfyui只是不占显存内存吧,单模型的出图速率没什么变化,我用SDXL画一张1024*1024都是30s。唯一的可能是你在webui里开了medvram,而comfyui在启动时觉得你显存足够就没开。不过在comfyui下确实可以实现很多webui里会爆显存的操作,比如放几十个controlnet串一起