当前位置:AIGC资讯 > AIGC > 正文

【Stable Diffusion】Stable Diffusion各类模型描述

Stable Diffusion 是一种新型的生成模型,它可以用于生成高质量的图像、文本和音频等多种形式的数据。目前已经出现了许多基于 Stable Diffusion 模型的变种,下面简单介绍其中几种比较流行的模型:

模型链接:https://huggingface.co/stabilityai

DDIM (Deep Diffusion Image Model)

DDIM 是 Stable Diffusion 的第一个应用,它采用了局部证据传递(Local Evidence Accumulation)的方法来构建 Diffusion Process。在 DDIM 中,Diffusion Process 通过 N 次迭代来完成,每次迭代包括两个阶段:更新噪声和更新图像。在更新噪声的阶段中,噪声被推断成为观察到的图像与当前候选图像之间的噪声;在更新图像的阶段中,通过候选噪声来构建图像。

CDPM (Conditional Diffusion Process Model)

CDPM 是一种条件 Stable Diffusion 模型,它能够生成给定条件下的高质量图像。与 DDIM 不同,CDPM 采用了 PixelCNN++ 来构建条件估计器,从而将条件信息导入到 Diffusion Process 中。与传统的条件生成模型不同,CDPM 不需要将条件信息与初始噪声混合,而是在 Diffusion Process 中同时处理条件信息和噪声,从而更好地利用条件信息。

Diffusion Probabilistic Models (DPM)

DPM 是一种在多个时刻点上建模数据分布的 Stable Diffusion 模型。与其他 Stable Diffusion 模型不同,DPM 可以预测数据在未来时刻点的分布,这使得 DPM 在视频生成和自动驾驶等领域具有潜在的应用价值。DPM 中的 Diffusion Process 是由许多分数阶微分方程组成的,在每个时刻点上使用一个分数阶微分方程来描述数据的条件分布。

更新时间 2023-11-15