写点什么

【AIGC】 0 成本学习:AI 工作流生成 Joy(ComfyUI)

  • 2024-08-06
    北京
  • 本文字数:1839 字

    阅读完需:约 6 分钟


现如今在 AIGC 大环境的推动下 AI 生成的工作也不断的在进化,从起初的 MJ 到 SD,从 WebUI 到现在的 ComfyUI。每一次变化都再不断的提升 AI 方向的质量和效率。今天就带大家把最近火圈的 ComfyUi 用起来!!!同时这次也将提供给大家所有基础的工作流,以及定制 JOY 工作流


这次分享会帮大家把 ComfyUI 的基础使用和学习成本降到最低,降到最低,降到最低!!! (tip:后续将会分享更多好用的工作流,所以快学起来吧)

先来看看 ComfyUI 相比 WebUI 最大的优势在哪里

1、效率升级:ComfyUI****提供了工作流的创建(WebUI 的参数配置可能需要 10-15 分钟不等,ComfyUI 的工作流只需要 1 秒,拖入即用)


用大白话来说,也就是可以把造轮子这个过程保存下来作为模版,当下一次要造轮子的时候这个过程将根据你设定的模版自动执行。


2、创意升级:ComfyUI 的****工作流可以随意组合(WebUI 无法线性完成基础生成+高清+N)


你可能创建造轮子的工作流程,可以创建造电脑的工作流程,最后你可以把造轮子和造电脑的工作流程合并,你将会创造一个会用轮子跑的电脑。


如果有同学记得之前分享的 WebUI 生成流程,应该已经体验到当时带来的生产效率了,但我想说今天的 ComfyUi 将重新刷新你的认知


(如果不记得话可以回顾一下:首个Joy 模型诞生!!!全民生成Joy大片

看看实际效果吧(下载分享的工作流,导入环境即可生成)


1、准备工作(在开始之前,请大家下载好本次生成需要使用到的模型)

1、大模型:下载链接


2、京东 Joy-Lora 模型: 下载链接 (⚠️非京东同学禁止下载或商用,以免被追法律责任)


3、基础工作流+Joy 定制工作流:下载链接(⚠️非京东同学禁止下载或商用,以免被追法律责任)

2、ComfyUi 云端部署

1、打开云端地址:https://www.autodl.com/home



2、注册登陆后,点击算力市场



3、选择按量计费、重庆 A 区或内蒙 A 区(RTX3090、RTX4090 均可)



4、点击社区镜像



5、输入 Comfyui,找到框内的版本



6、点击立即创建



7、点击 JupyterLab,进入启动器



8、点击加速符号,进行配置



9、当看到蓝色的 URL 时,则表示运行成功了,然后返回 AutoDL 自己的服务器



10、点击“自定义服务” ,然后根据他的提示,选择自己的系统(window 或 Linux/Mac) 并进行操作


linux/Mac: (1、打开终端)——(2、复制第一行命令,黏贴到终端,然后回车)——(3、回答 yes)——(4、复制第二行密码,黏贴到终端,然后回车)——(5、点击最后一行链接)



Window: (1、下载 AutoDL-SSH-Tools)——(2、打开下载的工具)——(3、复制 ssh 和密码到工具中,代理端口保持默认)——(4、点击开始代理)——(5、点击底部出现的链接)



11、恭喜你打开了 ComfyUI 界面

3、模型放至


1、大模型:autodl-tmp/models/checkpoint


2、京东 Joy-Lora 模型:autodl-tmp/models/lora


3、工作流不需要放置:等启动后直接拖到 ComfyUI 界面中(想用哪个拖哪个)

4、拖入工作流,见证奇迹

下载的工作流拖进 ComfyUI 的界面中,所有的配置就会已经为你设置好了(前提是模型都已成功放置到目录中),然后点击 Queue Prompt,Joy 的生成图就生成完毕了,你没有听错就是这么简单!



以上这些就是作为新人可以直接上手生成图的流程,那如果你想要改变一下画面该怎么操作呢?


你可以找到 CLIP 绿色和红色的 2 个模块,对画面的关键词进行修改(建议关键词不要太多,会互相污染),这样你就可以得到一些不一样的画面了(新人不用去改其他模块的参数,因为所有的参数在我设置的工作流中已经调优过)

5、新人小伙伴的一些小问题

· 生成不出图:你需要检查大模型和 LoRa 有没有放到正确的目录里,模型有没有正确上传(进度要读完才算上传成功)


· 参数调乱了:如果你在使用过程中把参数调错了,不要担心,因为你可以再次把我提供的工作流拖到 ComfyUI 中,这样就能恢复了

6、for 有 SD-WebUI 基础的小伙伴

ComfyUI 里的模块和 WebUI 的功能其实是一致的,让我来帮你快速对应上(详细 WebUI 功能介绍可以康康之前分享的文章)


· basic 模块中主要运用到的模块有:大模型调用、LoRa 调用、VAE 调用


· first 模块中主要运用到的模块有:正负向提示词、图片尺寸、批数、采样器、图片预览


· second 模块中主要运用到的模块有:放大算法 &模型、放大倍数 &尺寸、采样器、图片浏览


如果你是有 SD 基础的小伙伴,那这些参数你一定很熟悉了,你一定知道怎么通过参数来调整画面~


ComfyUI 是未来工作中必不可少的工具,目前我已经制定了非常多实用的工作流,本次分享只是分享了一些基础的部分。如果你已经使用了工作流或对工作流感兴趣,可以在评论区和我交流,后续将会分享工作流如何搭建,以及进阶版的工作流模版,敬请期待吧!!!

发布于: 刚刚阅读数: 3
用户头像

拥抱技术,与开发者携手创造未来! 2018-11-20 加入

我们将持续为人工智能、大数据、云计算、物联网等相关领域的开发者,提供技术干货、行业技术内容、技术落地实践等文章内容。京东云开发者社区官方网站【https://developer.jdcloud.com/】,欢迎大家来玩

评论

发布
暂无评论
【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI)_京东科技开发者_InfoQ写作社区