写点什么

使用 PAI-DSW x Free Prompt Editing 图像编辑算法,开发个人 AIGC 绘图小助理

  • 2024-06-07
    浙江
  • 本文字数:2125 字

    阅读完需:约 7 分钟

教程简述

在本教程中,您将学习在阿里云交互式建模平台 PAI-DSW x Free Prompt Editing(CVPR2024 中选论文算法)图像编辑算法,开发个人 AIGC 绘图小助理,实现文本驱动的图像编辑功能单卡即可完成 AIGC 图片风格变化、背景变化和主体变化等功能。让我们一同开启这场旅程,为您的图像编辑添上无限可能性的翅膀吧。FreePromptEditing 是一个基于文本驱动的 Stable Diffusion 图像编辑算法,用户可以直接通过输入 Edit Prompt 对生成图像或者真实图像进行编辑。本教程使用 Free Prompt Editing 图像编辑算法,实现的图片风格变化对比:




基于本教程可以体验:👍新用户可免费领取价值万元的人工智能平台PAI试用资源👍 学会如何快速在阿里云上创建一个交互式训练开发环境👍 学会如何在 DSW 中编译代码、启动 WebUI👍 学会如何在 DSW 开发个人 AIGC 绘图小助理

答疑交流群

如需技术支持,请在钉钉搜索群号「 52485000325」,加入群聊

使用 PAI-DSW 开发 AIGC 绘图小助理

1.准备环境和资源

1.1 领取交互式建模 PAI-DSW 免费试用权益

前往活动页面,领取交互式建模 PAI-DSW 产品免费试用资源包



  • 对于交互式建模 PAI-DSW 的新用户,阿里云提供了 5000CUH 的免费试用资源,可以在活动页面中直接领取(试用规则请参照阿里云免费试用:https://free.aliyun.com/);或可以购买交互式建模 PAI-DSW 资源包参与活动,购买链接:PAI-DSW 100CUH 资源包,价格 59 元起;如不购买资源包,PAI-DSW 会按量进行计费,计费标准详见阿里云产品定价。

1.2 创建 PAI-DSW 实例

  1. 前往人工智能平台 PAI 控制台,链接:https://pai.console.aliyun.com/

  2. 开通人工智能 PAI 并创建默认工作空间。请参见开通并创建默认工作空间

  3. 在人工智能平台 PAI 控制台内,选择交互式建模 PAI-DSW



  1. 点击新建实例(如上图)

  2. 自定义输入实例名称(如下图)

  3. 选择实例机型,GPU 推荐使用 A10 或者 V100(16GB)及以上配置,GPU 分类-ecs.gn6v-c8g1.2xlarge(支持资源包抵扣),若无此机型库存可更换地域尝试;



  1. 选择镜像:pytorch-develop:1.12-gpu-py39-cu113-ubuntu20.04



  1. 点击“下一步”



  1. 确认【资源配置】及【镜像】如图所示,点击创建实例



  1. 约等到 3-5 分钟,实例状态变为「运行中」,实例创建完成;


1.3 在 DSW 中打开教程文件

  1. 单击需要打开的实例操作列下的打开,进入 PAI-DSW 实例开发环境。

  2. Notebook 页签的 Launcher 页面,单击前往浏览 Gallery,打开 Gallery 页面



  1. 在 DSW Gallery 页面中,搜索并找到 AI 美术师:图像编辑的无限可能教程,单击教程卡片中的在 DSW 中打开。



  1. 完成以上步骤,顺利打开 AI 美术师:图像编辑的无限可能 Notebook 最佳实践


1.4 运行教程文件

  1. 您可以直接看到教程文本,您可以在教程文件中直接运行每个代码片段。当成功运行结束一个步骤命令后,再顺次运行下个步骤的命令。



  1. 本教程一共 3 个运行步骤:

  2. 准备工做

  3. 下载和安装环境

  4. 运行 WebUI

  5. 当第 3 步运行 WebUI 运行完成后,在返回的运行详情结果中单击 URL 链接,进入 WebUI 页面。请发挥你的创意,生成您想要得到的图像吧!


2.完成部署,开始体验 AI 图像编辑的无限可能

运行成功后打开链接,请发挥你的创意,修改您想要得到的图像吧!WebUI 界面可调参数说明-- Attention map Replacing Scale ratio of Editing 取值 0.0-1.0,越大保留原图细节越多,建议值 0.4-0.8-- DDIM Steps 去噪步数-- Layers to Edit 编辑的层数,建议值 32,16-- Image Resolution 图像分辨率,建议值 512-- CFG Scale 文本提示控制强度,建议值 7.5-- Seed 随机种子我们已经在 WebUI 预置了上述的可调参数,并提供了示例图像,编辑文本,以及负文本,您可以直接点击一键运行。

2.1 进入 WebUI 界面

点击运行,稍等片刻后,在下方区域会输出原图像和编辑结果图像。

2.2 更改图像背景

可以看到,基于 FreePromptEditing,算法很好地理解了输入的编辑指导文本,将图像的背景转移到了森林中。Edit Prompt(编辑文本):a Chinese building on the forestNegative Prompt(负文本): nsfw, worst quality, low quality, normal quality, lowres, watermark



您也可以将示例的建筑搬到纽约,示例如下:Edit Prompt(编辑文本):a Chinese building in New York CityNegative Prompt(负文本): nsfw, worst quality, low quality, normal quality, lowres, watermark


2.3 更改图像风格

除了使用修改之外,我们也可以随意发挥想象力,通过设计编辑提示词,来改变原图的图像风格。下面展示些创意示例,仅仅修改了提示词,其他配置参数跟上文一致.编辑文本:a kids drawing of a cat (儿童画的一只猫)



编辑文本:Van Gogh style architectural picture (梵高风格建筑图片)



成为无拘无束的创意画师,让您的幻想遨游色彩的世界,现在就启程,为您的图像添加无限的可能吧。


♥♥ 您可以自由发挥 AI 绘画新创作,本次活动要求:任意上传一张照片,变为梵高风格,并分享前后对比图。🎁🎁作品完成上传活动页面,邀请好友一起参与活动,有机会赢取小度智能屏 X9、米家小白摄像头、天猫魔投等好礼


3.资源清理及后续

3.1 清理

  • 在实验完成后,可前往对应产品控制台,停止或删除实例(两个操作均可),避免实例持续处于运行中,在超出免费试用额度后,带来额外的扣费



  • 后续仍考虑使用该实例>>停止;后续不再使用该实例>>删除,成功停止后即停止资源消耗。

3.2 后续

在试用有效期期间,您还可以继续使用 DSW 实例进行模型训练和推理验证。


用户头像

还未添加个人签名 2020-10-15 加入

分享阿里云计算平台的大数据和AI方向的技术创新和趋势、实战案例、经验总结。

评论

发布
暂无评论
使用 PAI-DSW x Free Prompt Editing图像编辑算法,开发个人AIGC绘图小助理_人工智能_阿里云大数据AI技术_InfoQ写作社区