写点什么

【AIGC】 0 成本学习:AI 工作流生成 Joy(ComfyUI)

  • 2024-08-08
    北京
  • 本文字数:1889 字

    阅读完需:约 6 分钟

【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI)



现如今在 AIGC 大环境的推动下 AI 生成的工作也不断的在进化,从起初的 MJ 到 SD,从 WebUI 到现在的 ComfyUI。每一次变化都再不断的提升 AI 方向的质量和效率。今天就带大家把最近火圈的 ComfyUi 用起来!!!同时这次也将提供给大家所有基础的工作流,以及定制 JOY 工作流

这次分享会帮大家把 ComfyUI 的基础使用和学习成本降到最低,降到最低,降到最低!!!(tip:后续将会分享更多好用的工作流,所以快学起来吧)



先来看看 ComfyUI 相比 WebUI 最大的优势在哪里

1、效率升级:ComfyUI 提供了工作流的创建(WebUI 的参数配置可能需要 10-15 分钟不等,ComfyUI 的工作流只需要 1 秒,拖入即用)

用大白话来说,也就是可以把造轮子这个过程保存下来作为模版,当下一次要造轮子的时候这个过程将根据你设定的模版自动执行。

2、创意升级:ComfyUI 的工作流可以随意组合(WebUI 无法线性完成基础生成+高清+N)

你可能创建造轮子的工作流程,可以创建造电脑的工作流程,最后你可以把造轮子和造电脑的工作流程合并,你将会创造一个会用轮子跑的电脑。



如果有同学记得之前分享的 WebUI 生成流程,应该已经体验到当时带来的生产效率了,但我想说今天的 ComfyUi 将重新刷新你的认知

(如果不记得话可以回顾一下:首个Joy 模型诞生!!!全民生成Joy大片



看看实际效果吧(下载分享的工作流,导入环境即可生成)





1、准备工作(在开始之前,请大家下载好本次生成需要使用到的模型)

1、大模型:下载链接

2、京东 Joy-Lora 模型: 下载链接 (⚠️非京东同学禁止下载或商用,以免被追法律责任)

3、基础工作流+Joy 定制工作流:下载链接(⚠️非京东同学禁止下载或商用,以免被追法律责任)



2、ComfyUi 云端部署

1、打开云端地址:https://www.autodl.com/home





2、注册登陆后,点击算力市场



3、选择按量计费、重庆 A 区或内蒙 A 区(RTX3090、RTX4090 均可)




4、点击社区镜像





5、输入 Comfyui,找到框内的版本





6、点击立即创建





7、点击 JupyterLab,进入启动器





8、点击加速符号,进行配置





9、当看到蓝色的 URL 时,则表示运行成功了,然后返回 AutoDL 自己的服务器





10、点击“自定义服务”,然后根据他的提示,选择自己的系统(window 或 Linux/Mac)并进行操作

linux/Mac:(1、打开终端)——(2、复制第一行命令,黏贴到终端,然后回车)——(3、回答 yes)——(4、复制第二行密码,黏贴到终端,然后回车)——(5、点击最后一行链接)





Window:(1、下载 AutoDL-SSH-Tools)——(2、打开下载的工具)——(3、复制 ssh 和密码到工具中,代理端口保持默认)——(4、点击开始代理)——(5、点击底部出现的链接)





11、恭喜你打开了 ComfyUI 界面



3、模型放至





1、大模型:autodl-tmp/models/checkpoint

2、京东 Joy-Lora 模型:autodl-tmp/models/lora

3、工作流不需要放置:等启动后直接拖到 ComfyUI 界面中(想用哪个拖哪个)



4、拖入工作流,见证奇迹

下载的工作流拖进 ComfyUI 的界面中,所有的配置就会已经为你设置好了(前提是模型都已成功放置到目录中),然后点击 Queue Prompt,Joy 的生成图就生成完毕了,你没有听错就是这么简单!





以上这些就是作为新人可以直接上手生成图的流程,那如果你想要改变一下画面该怎么操作呢?

你可以找到 CLIP 绿色和红色的 2 个模块,对画面的关键词进行修改(建议关键词不要太多,会互相污染),这样你就可以得到一些不一样的画面了(新人不用去改其他模块的参数,因为所有的参数在我设置的工作流中已经调优过)



5、新人小伙伴的一些小问题

· 生成不出图:你需要检查大模型和 LoRa 有没有放到正确的目录里,模型有没有正确上传(进度要读完才算上传成功)

· 参数调乱了:如果你在使用过程中把参数调错了,不要担心,因为你可以再次把我提供的工作流拖到 ComfyUI 中,这样就能恢复了



6、for 有 SD-WebUI 基础的小伙伴

ComfyUI 里的模块和 WebUI 的功能其实是一致的,让我来帮你快速对应上(详细 WebUI 功能介绍可以康康之前分享的文章)

· basic 模块中主要运用到的模块有:大模型调用、LoRa 调用、VAE 调用

· first 模块中主要运用到的模块有:正负向提示词、图片尺寸、批数、采样器、图片预览

· second 模块中主要运用到的模块有:放大算法 &模型、放大倍数 &尺寸、采样器、图片浏览

如果你是有 SD 基础的小伙伴,那这些参数你一定很熟悉了,你一定知道怎么通过参数来调整画面~



ComfyUI 是未来工作中必不可少的工具,目前我已经制定了非常多实用的工作流,本次分享只是分享了一些基础的部分。如果你已经使用了工作流或对工作流感兴趣,可以在评论区和我交流,后续将会分享工作流如何搭建,以及进阶版的工作流模版,敬请期待吧!!!

发布于: 刚刚阅读数: 9
用户头像

还未添加个人签名 2024-01-12 加入

京东零售那些事,有品、有调又有料的研发资讯,带你深入了解程序猿的生活和工作。

评论

发布
暂无评论
【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI)_AIGC_京东零售技术_InfoQ写作社区