【Super Resolution】超分辨率的总结——评价指标

news/2024/7/23 23:53:08 标签: Super Resolution, 超分辨率, 评价指标, PSNR, SSIM

SR常用的评价指标有两种,一种是PSNR(峰值信噪比),另一种是SSIM(结构相似性评价),这两种评价指标是SR中最基础的测量被压缩的重构图像质量的指标。

(1)PSNR——峰值信噪比 Peak Signal-to-Noise Ratio
PSNR是信号的最大功率和信号噪声功率之比,来测量已经被压缩的重构图像的质量,通常以分贝(dB)来表示。PSNR指标越高,说明图像质量越好。
P S N R = 10 ∗ log ⁡ 10 ( M A X I 2 M S E ) = 20 ∗ log ⁡ 10 ( M A X I M S E ) PSNR=10*\log_{10}(\frac{MAX_I^2}{MSE})=20*\log_{10}(\frac{MAX_I}{\sqrt {MSE}}) PSNR=10log10(MSEMAXI2)=20log10(MSE MAXI)

其中, M A X I MAX_I MAXI表示的是图像中像素值中的最大值, M S E MSE MSE表示的两个图像之间对应像素之间差值的平方的均值,单通道图像的 M S E MSE MSE可以表示为如下公式:
M S E = 1 M ∗ N ∑ i = 1 N ∑ j = 1 M ( f i j − f i j ′ ) 2 MSE=\frac{1}{M*N} \sum_{i=1}^N \sum_{j=1}^M (f_{ij}-f'_{ij})^2 MSE=MN1i=1Nj=1M(fijfij)2

多通道(C通道)图像的 M S E MSE MSE可以表示为如下公式:
M S E = 1 C ∗ M ∗ N ∑ k = 1 C ∑ i = 1 N ∑ j = 1 M ( f i j k − f i j k ′ ) 2 MSE=\frac{1}{C*M*N} \sum_{k=1}^C \sum_{i=1}^N \sum_{j=1}^M (f_{ijk}-f'_{ijk})^2 MSE=CMN1k=1Ci=1Nj=1M(fijkfijk)2

(2)SSIM——结构相似性评价 Structural Similarity Index
SSIM是衡量两幅图像相似度的指标,其取值范围为[0,1],SSIM的值越大,表示图像失真程度越小,说明图像质量越好。
话不多说,先把SSIM的公式放上:
L ( X , Y ) = 2 μ X μ Y + C 1 μ X 2 + μ Y 2 + C 1 L(X,Y)=\frac{2\mu_X\mu_Y+C_1}{\mu_X^2+\mu_Y^2+C_1} L(X,Y)=μX2+μY2+C12μXμY+C1

C ( X , Y ) = 2 σ X σ Y + C 2 σ X 2 + σ Y 2 + C 2 C(X,Y)=\frac{2\sigma_X\sigma_Y+C_2}{\sigma_X^2+\sigma_Y^2+C_2} C(X,Y)=σX2+σY2+C22σXσY+C2

S ( X , Y ) = σ X Y + C 3 σ X σ Y + C 3 S(X,Y)=\frac{\sigma_{XY}+C_3}{\sigma_X\sigma_Y+C_3} S(X,Y)=σXσY+C3σXY+C3

S S I M ( X , Y ) = L ( X , Y ) ∗ C ( X , Y ) ∗ S ( X , Y ) SSIM(X,Y)=L(X,Y)*C(X,Y)*S(X,Y) SSIM(X,Y)=L(X,Y)C(X,Y)S(X,Y)

其中, μ X \mu_X μX μ Y \mu_Y μY为图像X,图像Y的像素的均值, σ X \sigma_X σX σ Y \sigma_Y σY为图像X,图像Y的像素的标准值, σ X Y \sigma_{XY} σXY代表图像X和图像Y的协方差。
此外, C 1 C_1 C1, C 2 C_2 C2 C 3 C_3 C3是常数, C 1 = ( K 1 ∗ L ) 2 C_1=(K_1*L)^2 C1=(K1L)2 C 2 = ( K 2 ∗ L ) 2 C_2=(K_2*L)^2 C2=(K2L)2 C 3 = 1 2 C 3 C_3=\frac{1}{2}C_3 C3=21C3,一般的, K 1 = 0.01 K_1=0.01 K1=0.01 K 2 = 0.03 K_2=0.03 K2=0.03 L = 255 L=255 L=255
在实际操作中,对于求得图像像素的均值、方差和标准差,可以用高斯函数计算图像参数,可以保证更高的效率。同时,我们可以用平均结构相似性评价指标MSSIM来代替结构相似性评价指标SSIM
平均结构相似性评价指标MSSIM:利用滑动窗将图像分块,令分块总数为N,采用高斯加权计算每一窗口的均值、方差和协方差,计算对应块的结构相似度SSIM,取平均值。
M S S I M ( X , Y ) = 1 N ∑ k = 1 N S S I M ( X k , Y k ) MSSIM(X,Y)=\frac{1}{N} \sum_{k=1}^{N} SSIM(X_k,Y_k) MSSIM(X,Y)=N1k=1NSSIM(Xk,Yk)

我们对于图像重构质量的评价指标还有其他许多种,但是我们也要思考的是真的是评价指标的高低和我们人眼看到的优劣是一致的么?除了这些常用评价指标外还有没有其他的指标可以衡量图像重构的质量。这也是我们一点点的思考~


http://www.niftyadmin.cn/n/524716.html

相关文章

【论文翻译】SIXray : A Large-scale Security Inspection X-ray Benchmark

再一次来拜读一下大佬的论文,准确的是说基于X光的Benchmark(DatasetBaseline),我们来看一下论文(蓝色字体为小编的划重点和总结,不在论文原文中;引用是补充的内容;想看翻译的小伙伴可…

深度学习中的各种卷积总结

深度学习中的各种卷积总结01 普通卷积(Convolution)A. 普通卷积的计算操作B. 特殊的普通卷积B1.用途广泛的1x1卷积B2.卷积都是奇数的、nxn的么?02 转置卷积/反卷积(Transposed convolution)A.转置卷积/反卷积的计算操作B.转置卷积/反卷积有什么作用?03 空…

【Super Resolution】超分辨率——SRCNN

SRCNN01 闲聊——图像的超分辨率02 SRCNN——超分和DL的结合02-1 双三次插值02-2 SRCNN的网络结构02-3 Training 训练阶段03 EXPERIMENTS 实验阶段04 对于一些名词的理解SRCNN 01 闲聊——图像的超分辨率 在一切开始之前,先整体的介绍一下超分辨率(Sup…

Ubuntu16.04 安装TensorFlow-gpu版本

Ubuntu16.04安装TensorFlow-gpu版本1. 查看CUDA和Cudnn的版本2. 选取适合的TensorFlow-gpu版本3. 安装TensorFlow-gpu4. 测试TensorFlow-gpu是否安装成功5. 一些报错的解决方案5.1 numpy的版本过高5.2 选用的TensorFlow-gpu版本和CUDA/Cudnn版本不符5.3 ImportError: No module…

【Super Resolution】超分辨率——SRGAN

1、为什么提出SRGAN?2、SRGAN的网络模型3、SRGAN的损失函数4、SRGAN的评价指标5、SRGAN的代码详解6、代码运行报错解决8、最后的Conclusion接触这篇paper的理由——据说这是第一篇将GAN应用到超分领域的论文。在SRGAN之前,个人认为,超分网络的…

【Super Resolution】超分辨率——ESRGAN

1、ESRGAN的简单了解2、ESRGAN的网络结构3、ESRGAN中的判别器4、ESRGAN中的感知损失5、ESRGAN中的网络插值6、最后的Conclusion在上一篇文章【Super Resolution】超分辨率——SRGAN中,我们详细的介绍了SRGAN,那么是否SRGAN可以再进行改进呢?这…

【字体风格迁移】Multi-Content GAN for Few-Shot Font Style Transfer

00、写在McGAN开始之前01、McGAN的整体框架02、McGAN的结构详解02-1、Glyph Network02-2、Ornamentation Network03、McGAN的实验结果00、写在McGAN开始之前 这篇论文发表于2018年的CVPR,是美国伯克利大学BAIR实验室和Adobe研究院一起合作的论文,都是大…

【杂七杂八的笔记】2019CVPR论文快读

2019年CVPR一共收到创纪录的5165篇有效投稿,比2018年的3309篇多出近2000篇,最终有1294篇论文被接收,最终录取率为25.2%。1294篇录取论文中,有288篇被录用为Oral论文。现在,距离2020年CVPR的截稿还剩整整一个月&#xf…