天河外贸型网站建设,网站第二次备案,创建一个网站的技术,wordpress带会员vip主题前言
在 Stable Diffusion 想要生成高清分辨率的图片。在文生图的功能里#xff0c;需要设置更大的宽度和高度。在图生图的功能里#xff0c;需要设置更大的重绘尺寸或者重绘尺寸。但是设置完更大的图像分辨率#xff0c;需要更大显存#xff0c;1024*1024的至少要电脑的空…前言
在 Stable Diffusion 想要生成高清分辨率的图片。在文生图的功能里需要设置更大的宽度和高度。在图生图的功能里需要设置更大的重绘尺寸或者重绘尺寸。但是设置完更大的图像分辨率需要更大显存1024*1024的至少要电脑的空余显存在8G以上。如显存不够就会爆显存生图失败。即使显卡的显存够用更大的分辨率的生成的时间也会越久。这里我们就需要高清修复的功能了这个功能能大大降低生成高清图对显存的要求。
目前主要有三种方式分别是高清修复Hi-Res.Fix、SD放大SD Upscale、附加功能放大。
高清修复HiRes.Fix
高分辨率修复 (Hires. fix)是指使用高分辨率HiRes修复.Fix的稳定扩散Stable Diffusion技术。只在文生图的功能有这个选项位置在采样算法下方点击展开后有6个参数设置。分别是方法算法高分迭代步数重绘幅度放大倍数修复后的宽度和高度设置。 下图中的从512512到10241024是指我们文生图的设置的宽高是512512要重新修复生成的图片的宽高是10241024。 这里我们先简单讲解下这些参数的作用
放大算法
简单来说就是我们要把一张512512的图片变成10241024的高清图片的放大算法。算法选择框里包含的放大算法有16种。
Latent Latent 放大算法是一种基于 VAE 模型的图像增强算法通过将原始图像编码成潜在向量并对其进行随机采样和重构从而增强图像的质量、对比度和清晰度。这种方法通常能得到不错的效果但与4x-UltraSharp、R-ESRGAN等相比显存消耗比较小但效果不是最优。Latent (antialiased) 结合了抗锯齿antialiasing技术的图像Latent放大算法。抗锯齿是一种用于消除图像中锯齿状边缘的技术常用于提高图像的视觉质量。Latent (bicubic) Latent 放大算法是一种图像超分辨率技术可以通过插值算法来放大图像的尺寸从而提高图像的分辨率。其中双立方插值算法Bicubic Interpolation是一种常见的插值算法它基于双线性插值算法通过扩展影响范围至邻近的16个像素点依据对未知像素点P的远近影响进行插值计算从而得到更细致的影像。Latent (bicubic antialiased) 结合了双立方插值算法Bicubic Interpolation和抗锯齿Antialiasing技术的图像超分辨率技术的Latent放大算法。该算法通过插值算法来放大图像的尺寸同时消除锯齿状边缘从而提高图像的分辨率和质量。Latent (nearest) 结合了最近邻插值算法Nearest Neighbor Interpolation的图像超分辨率技术的Latent放大算法。该算法通过插值算法来放大图像的尺寸同时保持图像的原始像素值从而提高图像的分辨率和质量。Latent (nearest-exact) 结合了最近邻插值算法和双线性插值算法的特点的Latent放大算法以达到更精确的放大效果。None无 没有使用放大算法。如何重绘幅度设置为0的画单纯改变图像的宽高。图片放大程度越高图像越模糊。不建议选择这个选择None 生成图片速度和其他算法比不经没有提升清晰度也比不上使用算法放大的。Lanczos Lanczos算法是一种将对称矩阵通过正交相似变换变成对称三对角矩阵的算法以20世纪匈牙利数学家Cornelius Lanczos命名。Lanczos算法是一种注重质量的放大算法在缩小画面时能保持较好锐度。Nearest 最临近点插值算法Nearest Neighbor是一种最简单也是速度最快的一种算法。其做法是将放大后未知的像素点将其位置换算到原始影像上与原始的邻近的4周像素点A,B,C,D做比较令P点的像素值等于最靠近的邻近点像素值即可。BSRGAN BSRGAN是一种第三类放大算法其核心是通过建立一个对抗网络让这个网络去判断图像放大的好坏最终得出成功放大的图像。ESRGAN_4x ESRGAN_4x是使用生成对抗网络GAN技术进行图像放大的算法其工作原理是将图像分割成小块然后以生成式对抗网络算法来进行局部演算最后再统一拟合。该算法比系统自带的其它放大演算法更加高效能够增加细节纹理图像质量更高。LDSR LDSR算法是一种深度卷积神经网络DCNN实现的图像超分辨率技术。它具有高精度、高效率、易于实现等优点在图像超分辨率等领域得到了广泛应用。不建议选择这个出图时间是其他算法的好几倍太慢了R-ESRGAN 4x ESRGAN_4x的增强版使用它将原图放大四倍之后仍能充分保留原图细节的连贯性。它工作原理是通过将图片分割成小块然后再以生成式对抗网络算法来进行局部演算最后再统一拟合。所以它比系统自带的其它放大演算法更加高效并且能够增加细节纹理图像质量更高。R-ESRGAN 4x Anime6B R-ESRGAN 4x Anime6B 是一种结合了 R-ESRGAN 4x 和 Anime6B 两种算法的图像放大技术。 R-ESRGAN 4x 是一种基于生成对抗网络GAN的图像超分辨率算法可以将低分辨率的图像通过神经网络模型增强到4倍的分辨率。该算法通过生成器网络Generator和判别器网络Discriminator相互对抗以提高生成器的超分辨率效果。 Anime6B 是一种插画模式可以应用于图像的放大过程旨在补充细节并增强色彩。 将这两种算法结合使用可以在保证图像质量的同时增加更多的细节和色彩从而得到更加丰富和生动的图像效果。这种技术在动漫、游戏、插画等领域中得到了广泛的应用。ScuNET ScuNET是一种真实感图像超分辨率增强方法。ScuNET PSNR ScuNET的PSNR值峰值信噪比是评价图像质量的一种指标PSNR值越高说明图像的质量越好。ScuNET是一种真实感图像超分辨率增强方法通过自注意力机制和残差学习能够有效地提高图像的分辨率和视觉效果。SwinIR_4x SwinIR_4x是一种基于Swin Transformer的图像超分辨率算法使用4倍放大倍数进行超分辨率计算。该算法使用小尺寸卷积核来模拟感受野更大的卷积将小尺寸的卷积核通过窗口分割和跳跃连接将小尺寸的感受野扩大到大尺寸的感受野。通过这种方式SwinIR_4x能够有效地提高图像的分辨率和视觉效果。
高分迭代步数
高分迭代步数即高质量高分辨的的迭代次数原图和要放大倍数4倍以内 高分迭代步数对最终的画质和细节只有很小的影响肉眼很难看出来。越高的迭代步数步数越要更长的出图时间所以建议对设置为0。
重绘幅度
即在原来文生图的基础上重新绘制的程度。SD web的默认值是0.7。同一随机种子和其他参数、提示词完全相同的情况下重绘幅度幅度越大和原图越不像。
放大倍数
放大倍数即将文生图设置的原始宽高放大多少倍。放大倍数越大需要的显存越大、出图时间越久。
宽高设置
除了通过设置放到倍数以外还是可以通过设置要高清修复的宽度和高度来控制最终生成图片的大小。宽度和高度设置有一个不为0时放大倍数设置的参数失效。
SD Upscale(SD 放大脚本)
SD Upscale 是Stable Diffusion web ui的第三方脚本(SD秋叶整合包内自带)。它能解决因为显存不足而无法生成高分辨率图片的问题。原理是通过图像分块按比例放大图像。安装这个插件后它只在图生图的功能的脚本显示文生图的脚本选择框没有。
安装
通过国内镜像仓库 https://gitcode.net/ranting8323/multidiffusion-upscaler-for-automatic1111下载后解压到 SD web根目录下的extensions文件夹内或者通过web页面中的扩展》》从网址安装里填入仓库地址安装即可。 这两种方式选则其一弄好后重启下服务就安装成功了
参数设置介绍
安装后在图生图面板网页最下方的脚本选择框里选择SD Upscale 就能展开SD Upscale 参数设置。 选择SD Upscale 后出现以下参数设置的面板。只有三个参数设置一是分块重叠像素宽度、一个是放大倍数、一个是放大算法。放大倍数和放大算法上面已经说过这里主要解释下什么是分块重叠像素宽度
分块重叠像素宽度
“分块重叠像素宽度”可以理解为在进行图像处理或计算机视觉任务时将图像分割成多个小块并且每个小块之间会有一定程度的重叠。这里的“重叠像素宽度”就是指这些小块之间的重叠区域的大小。
这样做通常是为了在处理图像时能够更好地捕捉到图像的整体信息避免出现边界效应或者信息丢失。通过调整重叠区域的大小可以平衡图像的整体效果和计算效率。
分块重叠像素宽度的设置大小设置需要要根据具体的任务和需求来决定。
在图像处理或计算机视觉任务中分块重叠像素宽度的设置需要考虑以下几个因素
图像分辨率和尺寸对于高分辨率的图像分块重叠像素宽度可以设置得相对较大以更好地捕捉图像的细节和整体信息。而对于低分辨率的图像则可以设置较小的重叠宽度以避免浪费计算资源和产生过多的噪点。任务特点和需求不同的计算机视觉任务对图像处理的要求和效果不同。例如在图像分割或目标检测任务中分块重叠像素宽度可以设置得相对较大以更好地捕捉到目标物体和其周围的区域。而在图像去噪或超分辨率任务中则可以设置较小的重叠宽度以避免引入过多的噪点或产生过度锐化的效果。计算资源和时间限制分块重叠像素宽度的设置也受到计算资源和时间的限制。如果处理任务需要大量的计算资源和时间那么重叠宽度的设置应该相对较小以减少计算量和时间成本。
综上所述分块重叠像素宽度的设置需要根据具体的任务和需求来决定需要权衡考虑图像分辨率和尺寸、任务特点和需求以及计算资源和时间限制等多个因素。一般情况下我们维持默认就行。越大分块重叠像素宽度需要耗费更多的计算资源。
后期处理Extras
Extras有的翻译为附加功能我这里的中文插件翻译为了后期处理。在这里可以处理单张或者多张图片的高清方法功能。参数中的缩放比例和方法算法上面已讲这里主要说一下。GFPGAN visibility和CodeFormer visibility。 GFPGAN 和CodeFormer 都是用于放大图片人物的面部修复的开源的面部修复模型。多数情况当人像图片成倍放大依托发达算法对人脸的生成会有问题或者原始图片就是问题的时候我们可以选择面部修复的模型对图片人物的面部进行高清修复。GFPGAN 和CodeFormer选择两个设置一个即可两个的效果有一些微小的区别看个人的喜好选择了
值得注意的是这里必须选择方法算法后缩放倍数和缩放尺寸才生效缩放倍数和缩放尺寸切换到那个tab页那个生效。
