ComfyUI工作流分享-小红书黏土风格特效工作流

介绍

五一假期,小红书被黏土风格的照片攻占了,数据都很离谱。
图片
大家给的教程都是苹果端使用Remini的软件制作,免费白嫖7天,7天后就要收费,作为ComfyUI技术党,当然是选择自己实现了,搭建一套工作流就搞定,这不,今天就来分享一套对应的黏土效果工作流,几秒出一张图,岂不美滋滋。
图片
图片
图片

02

原理拆解

下图为完整的工作流截图,懂的人看完这个就了解原理了。
图片
我们来简单拆解一下,涉及的技术点有:
  • 黏土风格lora使用
  • IPAdapter风格提取
  • WD1.4提示词反推
  • Controlent Canny出图约束
大模型和lora选择
我们这里使用的是SDXL的大模型配合SDXL的Lora
两个lora地址:
https://civitai.com/models/208168/claymate-claymation-style-for-sdxl
https://civitai.com/models/181962/doctor-diffusions-claymation-style-lora
lora强度自己控制,记得提示词那边带上触发词即可。

图片

IPAdapter风格提取
IPAdapter用来提取特征,这里使用了最强的PLUS(高强度),权重设置0.7,这里图片做了缩放,限制了宽度最高1024,如果想要和原图大小一致,可以关闭图像缩放节点。

图片

WD1.4提示词反推
提示词使用WD14来反推,然后再通过文本联结和通用提示词合并,这里给出正面提示词和负面提示词:
claymotion, made-of-clay, stopmotion, polymer clay, ultra light clay, High quality, details, cartoonish, 8k
claymotion, made-of-clay, stopmotion, polymer clay, ultra light clay, High quality, details, cartoonish, 8k,1girl, solo, long_hair, looking_at_viewer, blue_eyes, shirt, hat, jacket, upper_body, white_hair, open_clothes, bag, blurry, lips, blurry_background, sunglasses, denim, blue_headwear, realistic, beanie, denim_jacket, aviator_sunglasses, blue-tinted_eyewear, 

图片

Controlent Canny出图约束
最后再引入一个Canny的Controlnet,这里也是用SDXL的Canny,你可以改成其他Controlent,比如LineArt等。最后使用K采样器出图即可了。

图片

THE END