【AIGC】0成本学习:AI工作流生成Joy(ComfyUI)

云上有数芯 2024-08-06 19:54:40



现如今在AIGC大环境的推动下AI生成的工作也不断的在进化,从起初的MJ到SD,从WebUI到现在的ComfyUI。每一次变化都再不断的提升AI方向的质量和效率。今天就带大家把最近火圈的ComfyUi用起来!!!同时这次也将提供给大家所有基础的工作流,以及定制JOY工作流。

这次分享会帮大家把ComfyUI的基础使用和学习成本降到最低,降到最低,降到最低!!!(tip:后续将会分享更多好用的工作流,所以快学起来吧)

先来看看ComfyUI相比WebUI最大的优势在哪里

1、效率升级:ComfyUI提供了工作流的创建(WebUI的参数配置可能需要10-15分钟不等,ComfyUI的工作流只需要1秒,拖入即用)

用大白话来说,也就是可以把造轮子这个过程保存下来作为模版,当下一次要造轮子的时候这个过程将根据你设定的模版自动执行。

2、创意升级:ComfyUI的工作流可以随意组合(WebUI无法线性完成基础生成+高清+N)

你可能创建造轮子的工作流程,可以创建造电脑的工作流程,最后你可以把造轮子和造电脑的工作流程合并,你将会创造一个会用轮子跑的电脑。

如果有同学记得之前分享的WebUI生成流程,应该已经体验到当时带来的生产效率了,但我想说今天的ComfyUi将重新刷新你的认知

(如果不记得话可以回顾一下:首个Joy 模型诞生!!!全民生成Joy大片)

看看实际效果吧(下载分享的工作流,导入环境即可生成)



1、准备工作(在开始之前,请大家下载好本次生成需要使用到的模型)

1、大模型:下载链接

2、京东Joy-Lora模型: 下载链接 (⚠️非京东同学禁止下载或商用,以免被追法律责任)

3、基础工作流+Joy定制工作流:下载链接(⚠️非京东同学禁止下载或商用,以免被追法律责任)

2、ComfyUi云端部署

1、打开云端地址:https://www.autodl.com/home



2、注册登陆后,点击算力市场

3、选择按量计费、重庆A区或内蒙A区(RTX3090、RTX4090均可)



4、点击社区镜像



5、输入Comfyui,找到框内的版本



6、点击立即创建



7、点击JupyterLab,进入启动器



8、点击加速符号,进行配置



9、当看到蓝色的URL时,则表示运行成功了,然后返回AutoDL自己的服务器



10、点击“自定义服务”,然后根据他的提示,选择自己的系统(window 或 Linux/Mac)并进行操作

linux/Mac:(1、打开终端)——(2、复制第一行命令,黏贴到终端,然后回车)——(3、回答yes)——(4、复制第二行密码,黏贴到终端,然后回车)——(5、点击最后一行链接)



Window:(1、下载AutoDL-SSH-Tools)——(2、打开下载的工具)——(3、复制ssh和密码到工具中,代理端口保持默认)——(4、点击开始代理)——(5、点击底部出现的链接)



11、恭喜你打开了ComfyUI界面

3、模型放至



1、大模型:autodl-tmp/models/checkpoint

2、京东Joy-Lora模型:autodl-tmp/models/lora

3、工作流不需要放置:等启动后直接拖到ComfyUI界面中(想用哪个拖哪个)

4、拖入工作流,见证奇迹

把下载的工作流拖进ComfyUI的界面中,所有的配置就会已经为你设置好了(前提是模型都已成功放置到目录中),然后点击Queue Prompt,Joy的生成图就生成完毕了,你没有听错就是这么简单!



以上这些就是作为新人可以直接上手生成图的流程,那如果你想要改变一下画面该怎么操作呢?

你可以找到CLIP绿色和红色的2个模块,对画面的关键词进行修改(建议关键词不要太多,会互相污染),这样你就可以得到一些不一样的画面了(新人不用去改其他模块的参数,因为所有的参数在我设置的工作流中已经调优过)

5、新人小伙伴的一些小问题

· 生成不出图:你需要检查大模型和LoRa有没有放到正确的目录里,模型有没有正确上传(进度要读完才算上传成功)

· 参数调乱了:如果你在使用过程中把参数调错了,不要担心,因为你可以再次把我提供的工作流拖到ComfyUI中,这样就能恢复了

6、for有SD-WebUI基础的小伙伴

ComfyUI里的模块和WebUI的功能其实是一致的,让我来帮你快速对应上(详细WebUI功能介绍可以康康之前分享的文章)

· basic模块中主要运用到的模块有:大模型调用、LoRa调用、VAE调用

· first模块中主要运用到的模块有:正负向提示词、图片尺寸、批数、采样器、图片预览

· second模块中主要运用到的模块有:放大算法&模型、放大倍数&尺寸、采样器、图片浏览

如果你是有SD基础的小伙伴,那这些参数你一定很熟悉了,你一定知道怎么通过参数来调整画面~

ComfyUI是未来工作中必不可少的工具,目前我已经制定了非常多实用的工作流,本次分享只是分享了一些基础的部分。如果你已经使用了工作流或对工作流感兴趣,可以在评论区和我交流,后续将会分享工作流如何搭建,以及进阶版的工作流模版,敬请期待吧!!!

0 阅读:0

云上有数芯

简介:感谢大家的关注