Stable Diffusion绘图：人物去除与背景融合的技巧

2023-08-2910:47:09设计达人Comments6,758 views字数 1018阅读模式

01需求分析

文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

以前通常情况下是用图生图中的局部重绘功能，希望把人物重绘成背景，但是这种方法很多时候生成的画面只会用一个物体替代另外一个物体，难以获得想要的效果，比如下面这样，涂黑的地方又生成其他奇奇怪怪的东西，达不到我的需求。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

我的需求是扣掉人物后的地方背景是干净的，和后面场景要融合。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

SD可以通过 ControlNet 的 inpaint 重绘模型实现我的需求，下面是实操步骤和效果展示。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

02实操步骤

上面原图也是之前文生图实现的，所以提示词我还有，把里面人物的描述都去掉，就留下其他描述场景的文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

(Masterpiece, best picture quality realistic :1.2),underwater, fish,文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

如果你这个是网图，那么就要去Tagger反推里面，把你的图编辑按钮，移动画框把人物屏蔽掉，然后反推提示词，得出来的词记得检查下是否有描述人物的，有的话去掉即可。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

在文生图那边，填入上面这个描述词，ControlNet启用，把上面原图拖进去，点击编辑把人物涂黑。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

预处理选择 inpaint_global_harmonious，模型选择inpaint，权重默认1，后面有需要再增加。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

控制模式记得选择 更偏向提示词。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

ControlNet 中的inpaint模型，除了重绘遮罩的部份外，遮罩意外的地方或多或少也会被重绘，带来的好处就是它能更好的将重绘区域与整体画面融合。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

然后就可以开始生成二次元，多生成几张，挑选效果最好的。效果图如下：文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

正常这时候生成的图就可以用了，但是如果发现不满意，如我上图所示发现还有点瑕疵，层次还有点问题，这时候可以到图生图那边，同样的描述词，ControlNet 启用，我这里用深度模型，重绘程度设置至少要0.5，太低的话还会出现这个分层问题。文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html

文章源自菜鸟学院-https://www.cainiaoxueyuan.com/design/55354.html