文章转载于:优设网 作者:夏花生
大家好,这里是和你们一起探索 AI 绘画的花生~
最近网上看到一些用 Stable Diffusion 生成的毛绒玩具,非常可爱。我也尝试了一下,效果很不错,还能体验一下自己做周边设计师的快乐。
这种效果做起来其实并不难,基本思路还是 controlnet 控制外形 lora 生成特殊材质。那今天就为大家分享 3 种不同材质的毛绒玩具的生成方法,打开你的 Stable Diffusion WebUI 我们马上开始 ~
一、真实毛绒 lora这是最近非常火的一个毛绒玩具 Lora,可以生成宜家或 jellycat 的同款毛绒玩具。
这个 Lora 需要与 Controlnet 搭配才能生成比较好的效果,所以我们要先准备图片素材,你可以用 Midjourney 或者 Stable diffusion WebUI 生成,或者自己发挥创意自己画一个也行。需要注意图像需要是简单的扁平插画,不要有很粗的描边或者特别明显光影,不然会影响最终的生成效果,然后用 抠图工具 去除图像背景。
相关设置:
- 大模型:写实类大模型,比如 MagicMix Realistic V7
- Lora 模型:真实毛绒 lora,权重按效果灵活调整(文末有资源包)
- VAE: vae-ft-mse-840000-ema-pruned.safetensors
- 正面提示词:masterpiece,best quality,chibi,minimalist background,stuffed toy,<lora:真实毛绒 lora_毛绒 v1:1.2>;
- 反向提示词:BadDream,FastNegativeV2,UnrealisticDream;
- Steps: 26, Sampler: Euler a, CFG scale: 7, Seed: 2934175654, Size: 768x768
- ControlNet 0: 预处理器: lineart_realistic, 模型: control_v11p_sd15_lineart, 权重: 0.85(作用是控制外形);
- ControlNet 1:预处理器: tile_colorfix sharp,模型: control_v11f1e_sd15_tile, 权重: 0.9(作用是还原颜色);
- 高清修复:Hires upscale: 1.5, Hires steps: 20, Hires upscaler: R-ESRGAN 4x ,重绘幅度 0.2-0.3。
相关参数可以灵活调整,记得多生成一些图片,这样我们就能通过后期去处理小的瑕疵或者进行合成,以取得最好的效果。
二、钩针玩具使用 Lora 模型 「SDXL_Sewing_doll 针线娃娃」可以生成高质量的钩针玩偶,包括人物和动物等多种类型,造型准确,毛线的细节也很逼真。
相关参数:
- 大模型:写实风格的 XL 大模型,比如 SDXL 1.0 Base 或者 DreamsharpXL 1.0。
- Lora 模型:SDXL_Sewing_Doll 针线娃娃,权重 0.6-0.7(文末有资源包)。
- 正向提示词:BJ_Sewing_doll, goose, flower, outdoors, blurry, black_eyes, no_humans, depth_of_field, blurry_background, bird, animal, grass, white_flower, animal_focus, duck,,photo,8k,highly detailed,digital photography,hdr,realistic,high definition,,
- 反向提示词:text,watermark,low quality,medium quality,blurry,censored,wrinkles,deformed,mutated,BadDream,UnrealisticDream
- 相关参数:Clip Skip:1;Steps: 20-25;Sampler: Euler a;CFG scale: 8;Size: 不低于 768x768
由于这个这是一个 SDXL lora 模型,如果想使用 Controlnet 对其进行控制,记得要选择 XL 系列的控制模型,相关教程可以看我之前写的 《 Controlnet 模型安装使用教程》 。如果你还不了解 Stable Diffusion WebUI,欢迎了解我最新制作的新手入门课程 《AI 绘画入门完全指南》 ,我会系统讲解 Stable Diffusion WebUI 的基础用法和使用技巧,帮你掌握图生图、文生图功能以及当下最热门的控制插件 Controlnet。
用 SDXL Depth 模型控制生成的钩针圣诞老人:
三、羊毛毡玩具Lora 模型「Wool felt v1.0_毛毡」则是可以帮我们生成精致小巧的羊毛毡作品,搭配 controlnet 一起使用,可以让你的插画马上变成超可爱的玩具周边,也适合生成小的海报装饰元素。
相关参数:
- 大模型:revAnimated_v122
- Lora 模型:Wool felt v1.0_毛毡,权重 0.7-0.9(文末有资源包)
- VAE:vae-ft-mse-840000-ema-pruned.safetensors
- 正向提示词:a dumpling,food focus,anthropomorphic,chibi, simple background,Wool felt,no person,(一定要有 Wool felt / chibi / anthropomorphic 的关键词)
- 反向提示词:easynegative,ng_deepnegative_v1_75t
- 生成参数:Steps: 20, Sampler: Euler a, CFG scale: 7, Size: 512x512
- ControlNet 0:预处理器:lineart_realistic;模型: control_v11p_sd15_lineart;权重 0.85
- ControlNet 1: 预处理器:tile_colorfix sharp;模型: control_v11f1e_sd15_tile;权重: 0.8
- ControlNet 2: 预处理器:depth_midas;模型: control_v11f1p_sd15_depth;权重: 1(作用是还原物理表面细节,可用可不用)
好啦以上就是本期为大家为大家推荐的用 Stable Diffusion WebUI 制作毛绒完全的相关教程,相关模型资源都在文末的网盘内,可以直接下载使用。
Stable Diffusion 模型生态中还有很多其他材质的 Lora,大家都可以用这种思路使用。喜欢本期推荐的话记得点赞收藏支持一波,之后会继续为大家带来更多 AI 绘画干货知识 ~