Comfyui使用SDXL-Turbo实现实时图片生成工作流
stable diffusion的母公司stability Al又出了一个新的模型叫SDXL turbo模型。它是一个什么样的模型?它是一个实时生成的模型,所以它能达到什么样的速度?可以看看官方的视频,基本上可以看到它的输入就可以实时渲染了。我看了数据基本上在A100上面,它的渲染速度200多毫秒就能渲染一张图,比前四五十秒跑一张图的速度快很多。
今天也用ComfyUI给它搭了一下。ComfyUI从哪里搭?可以进入官方的example。
·第一步,先把SDXL Turbo的checkpoint模型下载下来。下载下来之后还是老规矩放在comfy UI models,checkpoint文件夹里面放到这里。
·第二步,把它的workflow下载下来。千万不要被这小狐狸所迷惑了,它就是一个workflow。workflow下载下来之后就是这样子的。
·接下来打开comfy UI,comfyUI里面直接把小狐狸拖进去。投进去了之后可以尝试一下执行一次,可以看到它生成速度是十分快的。
·这时候要实现像视频里面那种效果,就边打字边渲染这种效果。可以把自动队列在extra option里面打开,点击一下。点击一次之后会发现队列大小从零一这边在不断的跳。可以实时输入渲染看看,输入熊猫,它的渲染速度是十分快的。假如要输入一只猫,可以看得到它的渲染速度基本上也是几百毫秒这样的速度。
·可以看看它的内存占用、显存占用。显存占用基本上优化一下可能只有3060或3070都可以把它跑起来,8G以上的都可以跑起来。
THE END