自学内容网 自学内容网

stable diffusion生成模型

1、stable diffusion

Stable Diffusion 是一种扩散模型,基于对图像的逐步去噪过程训练和生成。它的核心包括以下几个步骤:

  • 扩散过程(Diffusion Process)

在训练时,向真实图像逐步添加噪声,最终将其变为纯随机噪声。这是一个正向过程,目的是学习如何将复杂的图像分解成随机噪声。

  • 逆扩散过程(Denoising Process)

模型训练的目标是学习从纯噪声中逐步还原出真实图像。这需要一个条件生成模型(如 U-Net),结合特定的条件(如文本描述)对噪声进行逐步去噪。

  • 条件输入(Conditioning)

Stable Diffusion 是一个条件生成模型,可以根据输入的文本(通过 CLIP 模型编码的文本嵌入)或其他条件(如已有的图像)生成特定的图像。

  • 潜空间表示(Latent Space Representation)

Stable Diffusion 不直接对高分辨率图像操作,而是使用预训练的 VAE(变分自编码器)将图像压缩到潜空间中。生成和操作都发生在这个


原文地址:https://blog.csdn.net/xiaomu_347/article/details/143982209

免责声明:本站文章内容转载自网络资源,如本站内容侵犯了原著者的合法权益,可联系本站删除。更多内容请关注自学内容网(zxcms.com)!