Stable Diffusion(stable diffusion controlnet)

稳定扩散(Stable Diffusion)的运作方式如下:

从全局视角来看,稳定扩散是一个巨大的神经网络,其内部的复杂程度较高,且神经网络本质上是纯粹的数学,实际上我们并不完全清楚它具体的运作细节。但最终它能工作是因为经过了训练。 稳定扩散通过逐步去除图像中的噪点来生成图像。例如在一个运行 25 步的例子中,像外星吉他手这样的图像,起始图像可能完全无法辨认,实际上最初的图像是从完全的噪点开始的。 为了生成艺术,我们给稳定扩散提供一个纯噪点的初始图像,比如谎称这是一幅充满噪点的特定风格的画让其清理。对于这样的任务,平面艺术家可能束手无策,但稳定扩散作为计算机程序会尽力处理。从更深层次讲,稳定扩散等 AI 模型很大程度上基于统计数据,它们会估计所有选项的概率,即使正确概率极低,也会选择概率最高的路径,比如寻找哪部分噪点最可能像是吉他边缘的部分,然后开始填充物体。由于没有正确答案,每次给它不同的纯噪点图像,它都会创作出不同的艺术作品。

0
分享到:
没有账号? 忘记密码?