如何在算家云搭建SDXL-Lightning(图像生成)

ops/2024/9/24 11:26:20/

SDXL-Lightning简介">一、SDXL-Lightning简介

SDXL-Lightning 项目是由字节跳动开发的一个创新性的 AI 图像生成项目,该项目通过采用全新的蒸馏战略,优化了扩散模型,实现了从文字到高清图像的快速、高质量生成。以下是对 SDXL-Lightning 项目的详细介绍:

1.项目背景与特点

  • 背景 :随着 AI 绘画技术的不断发展,图像生成的质量和速度成为了重要的研究方向。SDXL-Lightning 项目正是字节跳动在这一领域的重要尝试。
  • 特点 :
    • 快速生成 :SDXL-Lightning 能够在极短的时间内生成高质量的图像,相较于传统方法,其出图速度有了显著提升。
    • 高质量 :项目通过结合渐进式和对抗式蒸馏方法,不仅保证了生成图像的多样性,还显著提升了图像的质量。
    • 多样化 :生成的图像覆盖了广泛的图像模式,能够满足不同用户的需求。

2.技术原理

  • 扩散模型优化 :SDXL-Lightning 项目采用了结合渐进式和对抗式蒸馏的扩散蒸馏方法,对原有的扩散模型进行了优化。
    • 渐进式蒸馏 :保留了原模型的图像风格和种类。
    • 对抗式蒸馏 :用于提升图像生成的质量。
  • 模型选择 :项目提供了多种步数的蒸馏模型,包括 1 步、2 步、4 步和 8 步等,用户可以根据需求选择合适的模型进行图像生成

3.应用与效果

  • 应用范围 :SDXL-Lightning 项目可以广泛应用于文生图、图生图、局部修复等多种工作流程中。
  • 生成效果 :
    • 在 2-8 步之间,SDXL-Lightning 的生成效果都非常不错,特别是在 8 步时,其生成图像的质量最为稳定,甚至可以与 SDXL 模型 32 步的生成效果相媲美。
    • 即使在 4 步条件下,SDXL-Lightning 的图像质量和风格多样性也远超 Turbo 和 LCM 模型。

4.项目资源

秒级文生图 · 创空间 (modelscope.cn)

二、模型搭建流程

1.容器镜像一键使用

建议使用RTX3090+24G显卡,使用RTX3060+12G显卡显存不足,结束运行

(1)进入算家云“应用社区”,点击搜索或者找到"SDXL-Lightning",进入该模型详情页后点击“创建应用”,即可进入“租用实例”页面

image.png

image.png

(2)进入“租用实例”页面后之后会自动匹配模型,选择 3090 卡或 4090 卡,点击“立即创建”即可创建实例

image.png

2.进入创建的实例

在“项目实例”页面点击对应实例的“Web SSH”进入终端操作

b5ad37cf876cdd60c5925a98f471107.jpg

image.png

以下命令均在该页面进行:

(1)打开文件

cd SDXL-Lightning

(2)激活虚拟环境SDXL

conda activate SDXL

(3)指定端口,运行 py 文件(第一次运行需要等待自动下载的部分模型)

export GRADIO_SERVER_NAME=0.0.0.0
export GRADIO_SERVER_PORT=8080
python app.py

出现以下界面即为运行成功:

image.png

3.开启外部访问获取访问链接

返回“项目实例”列表,选择并点击对应实例的“开放端口”操作。

image.png

有两种访问方式可以选择:本地私密访问和对外开放端口

(1)本地私密访问:选择 ssh 工具访问,登录之后填写各选项,点击“开启代理”

image.png

(2)对外开放端口:请按照下图操作

image.png

三、网页演示

运行成功后获取访问链接,即可进入 webUI 界面使用:(注意:第一次运行时会自动下载相应的蒸馏模型,下载完成后即可生成结果)

屏幕截图

以上就是在算家云搭建 SDXL-Lightning的流程,具体使用方式可进入算家云应用社区查看该模型的使用说明。

复制下方网址,进入算家云,选择模型,一键开启 AI 之旅!

算家云应用社区 https://www.suanjiayun.com/container/#/mirror/?source=CSDN

首页.png


http://www.ppmy.cn/ops/115259.html

相关文章

【第十六章:Sentosa_DSML社区版-机器学习之生存分析】

【第十六章:Sentosa_DSML社区版-机器学习之生存分析】 16.1 加速失效时间回归 1.算子介绍 加速失效时间回归模型Accelerated failure time (AFT)是一个监督型参数化的回归模型,它可以处理删失数据。它描述了一个生存时间的对数模型,所以它通…

nodejs之SSH

SSH(Secure Shell)是一个加密的网络协议,用于在不安全的网络上安全地执行远程命令和管理系统。SSH 最常见的用途是通过加密的连接远程登录计算机,但它也可以用于传输文件、隧道其他协议、以及执行其他网络服务。 而 node-ssh 是一…

JavaScript 网页设计案例详解( 最新技术趋势)

前言 随着 JavaScript 生态系统的不断发展和浏览器支持的不断完善,2024 年的前端开发技术已经变得更加现代化和高效。JavaScript 在网页设计中的应用不再局限于基础的交互,它与最新的 Web 标准、API 结合,为开发者带来了丰富的功能和出色的性…

多应用共享数据的两种方式 - Settings.Global.putXxx 和 ContentProvider

有需求: A 应用联网获取一时间戳,而B应用负责展示。为什么这么神奇,不直接在B应用中向服务端获取?别问,问就是业务导致。 既然存在这么个需求,解决数据存储以及数据获取问题就可以了。如题所说&#xff0c…

基于Python+SQLite的课程管理系统

系统需求简介 1.1需求分析 实现一个具体的课程管理系统。按照软件工程思路设计简化的专业课数据库,尽量模拟现有专业课程一个学期的选课排课原型实际情况。(注:本系统由本人单独设计、开发完成) 1.2 数据结构需求分析 课程管理…

SPWM正弦波控制

目录 前言一、PWM简介二、SPWM基本原理2.1 SPWM简介2.2 SPWM控制方法2.2.1 直接计算法2.2.2 自然采样法2.2.3 谐波法 2.3 SPWM的注意点2.3.1 死区效应2.3.2 过调制2.3.3 转矩与转速控制 三、SPWM实现四、补充 前言 本文主要介绍SPWM原理及C语言单片机的实现 一、PWM简介 PWM是P…

二维矩阵的行、列、斜线特征(二维数组)

1. 行特征 二维 n*m 矩阵,用 x[i][j] 表示第 i 行第 j 列的元素。同一行的元素的 i 值是相同的。 例如,上图中绿色格子的数组元素分别是 x[4][1],x[4][2],x[4][3],x[4][4],x[4][5],x[4][6]。 …

使用SBP打AssetBundle时脚本引用丢失

1)使用SBP打AssetBundle时脚本引用丢失 2)在UE 5.3中连接Power节点为何10的3次幂等于1009 3)如何在Widget中倾斜一张纹理贴图 4)如何在打开关卡蓝图时更改游戏模式 这是第401篇UWA技术知识分享的推送,精选了UWA社区的热…