MSE（Mean Squared Error）均方误差
MSE公式
MSE 计算模型的预测 ? 与真实标签 Y 的接近程度。公式表示为：
对于两个m×n的单通道图像I和K，它们的均方误差可定义为：
优点：MSE的函数曲线光滑、连续，处处可导，便于使用梯度下降算法，是一种常用的损失函数。而且，随着误差的减小，梯度也在减小，这有利于收敛，即使使用固定的学习速率，也能较快的收敛到最小值。
缺点：当真实值y和预测值f(x)的差值大于1时，会放大误差；而当差值小于1时，则会缩小误差，这是平方运算决定的。MSE对于较大的误差(>1)给予较大的惩罚，较小的误差(<1）给予较小的惩罚。也就是说，对离群点比较敏感，受其影响较大。
代码实现
- # MSE
- # 方法一：自定义函数
- import numpy as np
- def MSE( img1,img2):
- mse = np.mean( (img1 - img2) ** 2 )
- return mse
- # 方法二：调用库函数
- # 老版本的scikit-image，加载SSIM、PSNR、MSE的方式：
- from skimage.measure import compare_mse as mse
- # 新版本的scikit-image，加载方式：
- from skimage.metrics import mean_squared_error as mse
PSNR（Peak Signal-to-Noise Ratio）峰值信噪比
PSNR(Peak Signal to Noise Ratio)，峰值信噪比，是一种评价图像的客观标准。，应用场景有很多。它具有局性，PSNR是“Peak Signal to Noise Ratio”的缩写。peak的中文意思是顶点。而ratio的意思是比率或比列的。整个意思就是到达噪音比率的顶点信号，psnr一般是用于最大值信号和背景噪音之间的一个工程项目。通常在经过影像压缩之后，通常输出的影像都会在某种程度与原始影像不同。为了衡量经过处理后的影像品质，通常会参考PSNR值来衡量某个处理程序能否令人满意。它是原图像与被处理图 像之间的均方误差相对于(2n-1)2的对数值(信号最大值的平方，n是每个采样值的比特数)，它的单位是dB。
PSNR是最普遍和使用最为广泛的一种图像客观评价指标，然而它是基于对应像素点间的误差，即 基于误差敏感的图像质量评价。由于并未考虑到人眼的视觉特性（人眼对空间频率较低的对比差异敏感度较高，人眼对亮度对比差异的敏感度较色度高，人眼对一个 区域的感知结果会受到其周围邻近区域的影响等），因而经常出现评价结果与人的主观感觉不一致的情况。
PSNR公式
PSNR是通过MSE得出来的，公式如下：
其中，MAXI是表示图像点颜色的最大数值，如果每个采样点用 8 位表示，那么就是 255。
所以MSE越小，则PSNR越大；所以PSNR越大，代表着图像质量越好。一般来说，
- PSNR高于40dB说明图像质量极好（即非常接近原始图像）；
- 在30—40dB通常表示图像质量是好的（即失真可以察觉但可以接受）；
- 在20—30dB说明图像质量差；
- 最后，PSNR低于20dB图像不可接受。
代码实现
- # PSNR
- # 方法一：自定义函数
- import numpy
- import math
- def psnr( img1, img2):
- mse = numpy.mean( (img1 - img2) ** 2 )
- if mse == 0:
- return 100
- PIXEL_MAX = 255.0
- return 20 * math.log10(PIXEL_MAX / math.sqrt(mse))
- # 方法二：调用库函数
- # 老版本的scikit-image，加载SSIM、PSNR、MSE的方式：
- from skimage.measure import compare_ssim as ssim
- from skimage.measure import compare_psnr as psnr
- from skimage.measure import compare_mse as mse
- # 新版本的scikit-image，加载方式：
- from skimage.metrics import structural_similarity as ssim
- from skimage.metrics import peak_signal_noise_ratio as psnr
- from skimage.metrics import mean_squared_error as mse
SSIM（structural similarity）结构相似性
SSIM(structural similarity)，结构相似性，是一种衡量两幅图像相似度的指标。
SSIM算法主要用于检测两张相同尺寸的图像的相似度、或者检测图像的失真程度。
SSIM公式基于样本x和y之间的三个比较衡量：亮度 (luminance)、对比度 (contrast) 和结构 (structure)。
SSIM公式
常数????， ????， ????是为了避免当分母为 0 时造成的不稳定问题。
????为均值， ???? 为方差， ?????? 表示协方差。
SSIM取值范围为[0,1]，值越大表示输出图像和无失真图像的差距越小，即图像质量越好。
缺点：结构相似性指标有其限制，对于影像出现位移、缩放、旋转（皆属于非结构性的失真）的情况无法有效的运作。
代码实现
- # SSIM
- # https://github.com/scikit-image/scikit-image/blob/v0.21.0/skimage/metrics/_structural_similarity.py
- # 方法一：自定义函数
- import numpy as np
- def ssim( y_true , y_pred):
- u_true = np.mean(y_true)
- u_pred = np.mean(y_pred)
- var_true = np.var(y_true)
- var_pred = np.var(y_pred)
- std_true = np.sqrt(var_true)
- std_pred = np.sqrt(var_pred)
- R = 255
- c1 = np.square( 0.01*R)
- c2 = np.square( 0.03*R)
- ssim = ( 2 * u_true * u_pred + c1) * ( 2 * std_pred * std_true + c2)
- denom = (u_true ** 2 + u_pred ** 2 + c1) * (var_pred + var_true + c2)
- return ssim / denom
- # 方法二：调用库函数
- # 老版本的scikit-image，加载SSIM、PSNR、MSE的方式：
- from skimage.measure import compare_ssim as ssim
- from skimage.measure import compare_psnr as psnr
- from skimage.measure import compare_mse as mse
- # 新版本的scikit-image，加载方式：
- from skimage.metrics import structural_similarity as ssim
- from skimage.metrics import peak_signal_noise_ratio as psnr
- from skimage.metrics import mean_squared_error as mse
函数 structural_similarity
- def structural_similarity( *, im1, im2,
- win_size=None, gradient=False, data_range=None,
- multichannel=False, gaussian_weights=False,
- full=False, **kwargs)
处理RGB等多通道图像或划分为多块时
上述原始计算方式仅法针对单通道灰度图，
求RGB图或多通道图时，PSNR有三种方式，其他类似：
- 分别计算 RGB 三个通道的 PSNR，然后取平均值。
- 计算 RGB 三通道的 MSE ，然后再除以 3 。
- 将图片转化为 YCbCr 格式，然后只计算 Y 分量也就是亮度分量的 PSNR。
分为多块时，在实际应用中，可以利用滑动窗将图像分块，令分块总数为N，考虑到窗口形状对分块的影响，采用高斯加权计算每一窗口的均值、方差以及协方差，然后计算对应块的结构相似度SSIM，最后将平均值作为两图像的结构相似性度量，即平均结构相似性SSIM。
例：计算两个RGB图像的MSE（均方误差）：
- ?从红色通道开始?；
- ?计算两个图像的红色通道中每个像素的灰度值之间的差异（所有像素位置的(redA(0,0)-redB(0,0)等）；
- ?对每个像素的差异进行平方 (redA(0,0)-redB(0,0)^2；
- ?计算红色通道中所有像素的平方差之和?；
- ?对绿色和蓝色通道重复上述操作?；
- ?将 3 个通道的总和相加并除以 3，即 （红色通道和+绿色通道和+蓝色通道和）/ 3?；
- ?除以图像面积（宽度高度）??以形成平均值或平均值，即（红和+绿和+蓝和）/（3* 宽度*高度）??= MSE?。
余弦相似度
把图片表示成一个向量，通过计算向量之间的余弦距离来表征两张图片的相似度。
余弦相似度算法：一个向量空间中两个向量夹角间的余弦值作为衡量两个个体之间差异的大小，余弦值接近1，夹角趋于0，表明两个向量越相似，余弦值接近于0，夹角趋于90度，表明两个向量越不相似。
余弦公式
代码实现
图片相似度计算方法总结 - 知乎 (zhihu.com)
- # -*- coding: utf-8 -*-
- # !/usr/bin/env python
- # 余弦相似度计算
- from PIL import Image
- from numpy import average, dot, linalg
- # 对图片进行统一化处理
- def get_thum( image, size=(64, 64), greyscale=False):
- # 利用image对图像大小重新设置, Image.ANTIALIAS为高质量的
- image = image.resize(size, Image.ANTIALIAS)
- if greyscale:
- # 将图片转换为L模式，其为灰度图，其每个像素用8个bit表示
- image = image.convert( 'L')
- return image
- # 计算图片的余弦距离
- def image_similarity_vectors_via_numpy( image1, image2):
- image1 = get_thum(image1)
- image2 = get_thum(image2)
- images = [image1, image2]
- vectors = []
- norms = []
- for image in images:
- vector = []
- for pixel_tuple in image.getdata():
- vector.append(average(pixel_tuple))
- vectors.append(vector)
- # linalg=linear（线性）+algebra（代数），norm则表示范数
- # 求图片的范数
- norms.append(linalg.norm(vector, 2))
- a, b = vectors
- a_norm, b_norm = norms
- # dot返回的是点积，对二维数组（矩阵）进行计算
- res = dot(a / a_norm, b / b_norm)
- return res
- image1 = Image. open( '010.jpg')
- image2 = Image. open( '011.jpg')
- cosin = image_similarity_vectors_via_numpy(image1, image2)
- print( '图片余弦相似度', cosin)
哈希相似度 Hash
图片相相似度计算（Hash、SSIM、compareHist）_南苏月的博客-CSDN博客_图像相似度计算公式
哈希算法-图片相似度计算_chenghaoy的博客-CSDN博客_均值哈希算法相似度
实现图片相似度比较的hash算法有三种：均值哈希算法（AHash），差值哈希算法（DHash），感知哈希算法 （PHash）。
- aHash：平均值哈希。速度比较快，但是常常不太精确。
- pHash：感知哈希。精确度比较高，但是速度方面较差一些。
- dHash：差异值哈希。精确度较高，且速度也非常快。
哈希不是以严格的方式计算Hash值，而是以更加相对的方式计算哈希值，因为“相似”与否，就是一种相对的判定。值哈希算法、差值哈希算法和感知哈希算法都是值越小，相似度越高，取值为0-64，即汉明距离中，64位的hash值有多少不同。三直方图和单通道直方图的值为0-1，值越大，相似度越高。
均值哈希算法（AHash）
一张图片就是一个二维信号，它包含了不同频率的成分。亮度变化小的区域是低频成分，它描述大范围的信息。而亮度变化剧烈的区域（比如物体的边缘）就是高频的成分，它描述具体的细节。或者说高频可以提供图片详细的信息，而低频可以提供一个框架。 而一张大的，详细的图片有很高的频率，而小图片缺乏图像细节，所以都是低频的。所以我们平时的下采样，也就是缩小图片的过程，实际上是损失高频信息的过程。均值哈希算法就是利用图片的低频信息。
具体步骤：
- 缩小尺寸：将图片缩小到8x8的尺寸，总共64个像素。这一步的作用是去除图片的细节，只保留结构、明暗等基本信息，摒弃不同尺寸、比例带来的图片差异。
- 简化色彩：将缩小后的图片，转为64级灰度。也就是说，所有像素点总共只有64种颜色。
- 计算平均值：计算所有64个像素的灰度平均值
- 比较像素的灰度：将每个像素的灰度，与平均值进行比较。大于或等于平均值，记为1；小于平均值，记为0。
- 计算哈希值：将上一步的比较结果，组合在一起，就构成了一个64位的整数，这就是这张图片的指纹。组合的次序并不重要，只要保证所有图片都采用同样次序就行了。
最后得到两张图片的指纹信息后，计算两组64位数据的汉明距离，即对比数据不同的位数，不同位数越少，表明图片的相似度越大。
分析： 均值哈希算法计算速度快，不受图片尺寸大小的影响，但是缺点就是对均值敏感，例如对图像进行伽马校正或直方图均衡就会影响均值，从而影响最终的hash值。
感知哈希算法 （PHash）
感知哈希算法是一个比均值哈希算法更为健壮的一种算法，与均值哈希算法的区别在于感知哈希算法是通过DCT（离散余弦变换）来获取图片的低频信息。
离散余弦变换（DCT）是种图像压缩算法，它将图像从像素域变换到频率域。然后一般图像都存在很多冗余和相关性的，所以转换到频率域之后，只有很少的一部分频率分量的系数才不为0，大部分系数都为0（或者说接近于0）。经过DCT变换后的系数矩阵从左上角到右下角频率越来越高，因此图片的能量主要保留在左上角的低频系数上了。
具体步骤：
- 缩小尺寸：pHash以小图片开始，但图片大于8x8，32x32是最好的。这样做的目的是简化了DCT的计算，而不是减小频率。
- 简化色彩：将图片转化成灰度图像，进一步简化计算量。
- 计算DCT：计算图片的DCT变换，得到32x32的DCT系数矩阵。
- 缩小DCT：虽然DCT的结果是32x32大小的矩阵，但我们只要保留左上角的8x8的矩阵，这部分呈现了图片中的最低频率。
- 计算平均值：如同均值哈希一样，计算DCT的均值。
- 计算hash值：这是最主要的一步，根据8x8的DCT矩阵，设置0或1的64位的hash值，大于等于DCT均值的设为”1”，小于DCT均值的设为“0”。组合在一起，就构成了一个64位的整数，这就是这张图片的指纹。
分析： 结果并不能告诉我们真实性的低频率，只能粗略地告诉我们相对于平均值频率的相对比例。只要图片的整体结构保持不变，hash结果值就不变。能够避免伽马校正或颜色直方图被调整带来的影响。对于变形程度在25%以内的图片也能精准识别。
差值哈希算法（DHash）
比pHash，dHash的速度要快的多，相比aHash，dHash在效率几乎相同的情况下的效果要更好，它是基于渐变实现的。
主要步骤：
- 缩小尺寸：收缩到8x9（高x宽）的大小，一遍它有72的像素点
- 转化为灰度图：把缩放后的图片转化为256阶的灰度图。
- 计算差异值：dHash算法工作在相邻像素之间，这样每行9个像素之间产生了8个不同的差异，一共8行，则产生了64个差异值
- 获得指纹：如果左边的像素比右边的更亮，则记录为1，否则为0.
代码实现
- import cv2
- import numpy as np
- #感知哈希算法
- def pHash( image):
- image = cv2.resize(image,( 32, 32), interpolation=cv2.INTER_CUBIC)
- image = cv2.cvtColor(image,cv2.COLOR_BGR2GRAY)
- # cv2.imshow('image', image)
- # cv2.waitKey(0)
- # cv2.destroyAllWindows()
- # 将灰度图转为浮点型，再进行dct变换
- dct = cv2.dct(np.float32(image))
- # print(dct)
- # 取左上角的8*8，这些代表图片的最低频率
- # 这个操作等价于c++中利用opencv实现的掩码操作
- # 在python中进行掩码操作，可以直接这样取出图像矩阵的某一部分
- dct_roi = dct[ 0: 8, 0: 8]
- avreage = np.mean(dct_roi)
- hash = []
- for i in range(dct_roi.shape[ 0]):
- for j in range(dct_roi.shape[ 1]):
- if dct_roi[i,j] > avreage:
- hash.append( 1)
- else:
- hash.append( 0)
- return hash
- #均值哈希算法
- def aHash( image):
- #缩放为8*8
- image=cv2.resize(image,( 8, 8),interpolation=cv2.INTER_CUBIC)
- #转换为灰度图
- image=cv2.cvtColor(image,cv2.COLOR_BGR2GRAY)
- avreage = np.mean(image)
- hash = []
- for i in range(image.shape[ 0]):
- for j in range(image.shape[ 1]):
- if image[i,j] > avreage:
- hash.append( 1)
- else:
- hash.append( 0)
- return hash
- #差值感知算法
- def dHash( image):
- #缩放9*8
- image=cv2.resize(image,( 9, 8),interpolation=cv2.INTER_CUBIC)
- #转换灰度图
- image=cv2.cvtColor(image,cv2.COLOR_BGR2GRAY)
- # print(image.shape)
- hash=[]
- #每行前一个像素大于后一个像素为1，相反为0，生成哈希
- for i in range( 8):
- for j in range( 8):
- if image[i,j]>image[i,j+ 1]:
- hash.append( 1)
- else:
- hash.append( 0)
- return hash
- #计算汉明距离
- def Hamming_distance( hash1,hash2):
- num = 0
- for index in range( len(hash1)):
- if hash1[index] != hash2[index]:
- num += 1
- return num
- if __name__ == "__main__":
- image_file1 = './data/cartoon1.jpg'
- image_file2 = './data/cartoon3.jpg'
- img1 = cv2.imread(image_file1)
- img2 = cv2.imread(image_file2)
- hash1 = pHash(img1)
- hash2 = pHash(img2)
- dist = Hamming_distance(hash1, hash2)
- #将距离转化为相似度
- similarity = 1 - dist * 1.0 / 64
- print(dist)
- print(similarity)
直方图距离
图片的相似度--直方图距离 - 知乎 (zhihu.com)
直方图距离描述
方法描述：按照某种距离度量的标准对两幅图像的直方图进行相似度的测量。
图像直方图丰富的图像细节信息，反映了图像像素点的概率分布情况，统计每一个像素点强度值具有的像素个数。
- 优点：计算量比较小。
- 缺点： 直方图反应的是图像灰度值得概率分布，并没有图像的空间位置信息在里面，因此，会出现误判；比如纹理结构相同，但明暗不同的图像，应该相似度很高，但实际结果是相似度很低，而纹理结构不同，但明暗相近的图像，相似度却很高。
计算步骤：
- 将图片resize，得到相同大小的图片；
- 将图片灰度，灰度后图片的像素在[0-255]之间；
- 计算图片的直方图数据，统计相同像素点的概率分布；
- 根据相关性计算公式，计算两个图片直方图的相关性。
代码实现
- import cv2
- def calculate( image1, image2):
- # 灰度直方图算法
- # 计算单通道的直方图的相似值
- hist1 = cv2.calcHist([image1], [ 0], None, [ 256], [ 0.0, 255.0])
- hist2 = cv2.calcHist([image2], [ 0], None, [ 256], [ 0.0, 255.0])
- # 计算直方图的重合度
- degree = 0
- for i in range( len(hist1)):
- if hist1[i] != hist2[i]:
- degree = degree + ( 1 - abs(hist1[i] - hist2[i]) / max(hist1[i], hist2[i]))
- else:
- degree = degree + 1
- degree = degree / len(hist1)
- return degree
- def classify_hist_with_split( image1, image2, size=(256, 256)):
- # RGB每个通道的直方图相似度
- # 将图像resize后，分离为RGB三个通道，再计算每个通道的相似值
- image1 = cv2.resize(image1, size)
- image2 = cv2.resize(image2, size)
- sub_image1 = cv2.split(image1)
- sub_image2 = cv2.split(image2)
- sub_data = 0
- for im1, im2 in zip(sub_image1, sub_image2):
- sub_data += calculate(im1, im2)
- sub_data = sub_data / 3
- return sub_data
互信息（Mutual Information）
归一化互信息(NMI)评价指标_易_的博客-CSDN博客_nmi指标
信息熵、相对熵、互信息
信息熵：对信息进行量化度量。可以理解为某种特定信息的出现概率。
相对熵：（relative entropy），又被称为Kullback-Leibler散度（Kullback-Leibler divergence，KL散度）或信息散度（information divergence），是两个概率分布（probability distribution）间差异的非对称性度量 。在在信息理论中，相对熵等价于两个概率分布的信息熵（Shannon entropy）的差值。
互信息：(Mutual Information)是信息论里一种有用的信息度量，它可以看成是一个随机变量中包含的关于另一个随机变量的信息量，或者说是一个随机变量由于已知另一个随机变量而减少的不肯定性。
归一化互信息：将互信息放在[0,1]之间，容易评价算法的好坏。
代码实现
- from sklearn import metrics as mr
- img1 = cv2.imread( '1.png')
- img2 = cv2.imread( '2.png')
- img2 = cv2.resize(img2, (img1.shape[ 1], img1.shape[ 0])
- nmi = mr.normalized_mutual_info_score(img1.reshape(- 1), img2.reshape(- 1))
像素匹配 pixelmatch
GitHub - whtsky/pixelmatch-py: A fast pixel-level image comparison library, originally created to compare screenshots in tests.
利用像素之间的匹配来计算相似度
- # https://github.com/whtsky/pixelmatch-py
- # 第一步：
- pip install pixelmatch
- # 第二步：
- from PIL import Image
- from pixelmatch.contrib.PIL import pixelmatch
- img_a = Image. open( "a.png")
- img_b = Image. open( "b.png")
- img_diff = Image.new( "RGBA", img_a.size)
- # note how there is no need to specify dimensions
- mismatch = pixelmatch(img_a, img_b, img_diff, includeAA= True)
- img_diff.save( "diff.png")
举例1——使用四种方法计算图片相似度：MD5、直方图、PSNR、SSIM
有史以来最全的图像相似度算法_小殊小殊的博客-CSDN博客_图片相似度
使用四种方法计算图片相似度：MD5（粗暴的md5比较，判断是否完全相同）、直方图、PSNR、SSIM。
- import numpy as np
- from PIL import Image
- from skimage.metrics import structural_similarity
- import cv2
- import os
- import hashlib
- import math
- '''
- 粗暴的md5比较 返回是否完全相同
- '''
- def md5_similarity( img1_path, img2_path):
- file1 = open(img1_path, "rb")
- file2 = open(img2_path, "rb")
- md = hashlib.md5()
- md.update(file1.read())
- res1 = md.hexdigest()
- md = hashlib.md5()
- md.update(file2.read())
- res2 = md.hexdigest()
- return res1 == res2
- def normalize( data):
- return data / np. sum(data)
- '''
- 直方图相似度
- 相关性比较 cv2.HISTCMP_CORREL：值越大，相似度越高
- 相交性比较 cv2.HISTCMP_INTERSECT：值越大，相似度越高
- 卡方比较 cv2.HISTCMP_CHISQR：值越小，相似度越高
- 巴氏距离比较 cv2.HISTCMP_BHATTACHARYYA：值越小，相似度越高
- '''
- def hist_similarity( img1, img2, hist_size=256):
- imghistb1 = cv2.calcHist([img1], [ 0], None, [hist_size], [ 0, 256])
- imghistg1 = cv2.calcHist([img1], [ 1], None, [hist_size], [ 0, 256])
- imghistr1 = cv2.calcHist([img1], [ 2], None, [hist_size], [ 0, 256])
- imghistb2 = cv2.calcHist([img2], [ 0], None, [hist_size], [ 0, 256])
- imghistg2 = cv2.calcHist([img2], [ 1], None, [hist_size], [ 0, 256])
- imghistr2 = cv2.calcHist([img2], [ 2], None, [hist_size], [ 0, 256])
- distanceb = cv2.compareHist(normalize(imghistb1), normalize(imghistb2), cv2.HISTCMP_CORREL)
- distanceg = cv2.compareHist(normalize(imghistg1), normalize(imghistg2), cv2.HISTCMP_CORREL)
- distancer = cv2.compareHist(normalize(imghistr1), normalize(imghistr2), cv2.HISTCMP_CORREL)
- meandistance = np.mean([distanceb, distanceg, distancer])
- return meandistance
- def PSNR( img1, img2):
- mse = np.mean((img1/ 255. - img2/ 255.) ** 2)
- if mse == 0:
- return 100
- PIXEL_MAX = 1
- return 20 * math.log10(PIXEL_MAX / math.sqrt(mse))
- def SSIM( img1, img2):
- gray1 = cv2.cvtColor(img1, cv2.COLOR_BGR2GRAY)
- gray2 = cv2.cvtColor(img2, cv2.COLOR_BGR2GRAY)
- # 计算两个灰度图像之间的结构相似度
- score, diff = structural_similarity(gray1, gray2, win_size= 101, full= True)
- # diff = (diff * 255).astype("uint8")
- # print("SSIM:{}".format(score))
- return score, diff
- def ssim( img1, img2):
- u_true = np.mean(img1)
- u_pred = np.mean(img2)
- var_true = np.var(img1)
- var_pred = np.var(img2)
- std_true = np.sqrt(var_true)
- std_pred = np.sqrt(var_pred)
- c1 = np.square( 0.01* 7)
- c2 = np.square( 0.03* 7)
- ssim = ( 2 * u_true * u_pred + c1) * ( 2 * std_pred * std_true + c2)
- denom = (u_true ** 2 + u_pred ** 2 + c1) * (var_pred + var_true + c2)
- return ssim/denom
- def MSE( img1,img2):
- mse = np.mean( (img1 - img2) ** 2 )
- return mse
- if __name__ == '__main__':
- img1_path = '1_08.jpg'
- img2_path = '2_08.jpg'
- img1 = cv2.imread(img1_path)
- img2 = cv2.imread(img2_path)
- # 1.粗暴的md5比较 返回是否完全相同
- print( 'md5_similarity:', md5_similarity(img1_path, img2_path))
- # 2.直方图相似度
- print( 'hist_similarity:', hist_similarity(img1, img2))
- # 3.PSNR
- print( 'PSNR:', PSNR(img1, img2))
- # 4.SSIM
- print( '灰度图SSIM:', SSIM(img1, img2)[ 0])
- print( 'RGB图_ssim:', ssim(img1, img2))
- print( 'RGB图_structural_similarity:', structural_similarity(img1,img2, multichannel= True))
- # 5.MSE
- print( 'MSE:', MSE(img1, img2))
效果展示：
- md5_similarity: False
- hist_similarity: 0.1344447074377748
- PSNR: 12.980832701995697
- 灰度图SSIM: 0.5966066785284522
- RGB图_ssim: 0.9917382398395064
- RGB图_structural_similarity: 0.525279441002218
- MSE: 86.05895699395074
举例2——批量计算PSNR、SSIM、MSE
- import os
- import numpy as np
- from glob import glob
- import cv2
- from skimage.measure import compare_mse,compare_ssim,compare_psnr
- def read_img( path):
- return cv2.imread(path,cv2.IMREAD_GRAYSCALE)
- def mse( tf_img1, tf_img2):
- return compare_mse(tf_img1,tf_img2)
- def psnr( tf_img1, tf_img2):
- return compare_psnr(tf_img1,tf_img2)
- def ssim( tf_img1, tf_img2):
- return compare_ssim(tf_img1,tf_img2)
- def main():
- WSI_MASK_PATH1 = 'E:/test/A/'
- WSI_MASK_PATH2 = 'E:/test/B/'
- path_real = glob(os.path.join(WSI_MASK_PATH1, '*.jpg'))
- path_fake = glob(os.path.join(WSI_MASK_PATH2, '*.jpg'))
- list_psnr = []
- list_ssim = []
- list_mse = []
- for i in range( len(path_real)):
- t1 = read_img(path_real[i])
- t2 = read_img(path_fake[i])
- result1 = np.zeros(t1.shape,dtype=np.float32)
- result2 = np.zeros(t2.shape,dtype=np.float32)
- cv2.normalize(t1,result1,alpha= 0,beta= 1,norm_type=cv2.NORM_MINMAX,dtype=cv2.CV_32F)
- cv2.normalize(t2,result2,alpha= 0,beta= 1,norm_type=cv2.NORM_MINMAX,dtype=cv2.CV_32F)
- mse_num = mse(result1, result2)
- psnr_num = psnr(result1, result2)
- ssim_num = ssim(result1, result2)
- list_psnr.append(psnr_num)
- list_ssim.append(ssim_num)
- list_mse.append(mse_num)
- #输出每张图像的指标：
- print( "{}/". format(i+ 1)+ "{}:". format( len(path_real)))
- str = "\"
- print( "image:"+path_real[i][(path_real[i].index( str)+ 1):])
- print( "PSNR:", psnr_num)
- print( "SSIM:", ssim_num)
- print( "MSE:",mse_num)
- #输出平均指标：
- print( "平均PSNR:", np.mean(list_psnr)) # ,list_psnr)
- print( "平均SSIM:", np.mean(list_ssim)) # ,list_ssim)
- print( "平均MSE:", np.mean(list_mse)) # ,list_mse)
- if __name__ == '__main__':
- main()
举例3——计算Y通道或RGB通道的PSNR和SSIM
Python计算Y通道或者RGB通道的PSNR_SSIM_未知量0520的博客-CSDN博客_folder_gt
- 添加：PSNR/SSIM计算结果，保存文件（txt），便于后期导入excel列表分析。
- 代码介绍：PSNR_SSIM效果和matlab计算的结果一致（本人没有验证）。
- 代码功能，能够计算图像的Y_channel 或者RGB_channel状态下的PSNR_SSIM结果
- 用法：将真实图片，生成图片分别放入两个文件夹，代码中有选择两种方式（only_Y, RGB），切换注释相应的代码行即可。
- 注意：安装相应的代码库。
- '''
- calculate the PSNR and SSIM.
- same as MATLAB's results
- https://blog.csdn.net/qq_45041702/article/details/120997743
- '''
- import os
- import math
- import numpy as np
- import cv2
- import glob
- import os
- def main():
- # Configurations
- # GT - Ground-truth;
- # Gen: Generated / Restored / Recovered images
- folder_GT = '/content/drive/MyDrive/Experiment/codes/26_PSNR_SSIM/All/groud_truth_png'
- folder_Gen = '/content/drive/MyDrive/Experiment/codes/26_PSNR_SSIM/All/1_ESPCN_png'
- #save the psnr and ssim score by txt
- PS_path = '/content/drive/MyDrive/Experiment/codes/26_PSNR_SSIM/Score'
- if not os.path.exists(PS_path):
- print( 'NO_path to sava the NIQE_Score,Making....')
- os.makedirs(PS_path)
- else:
- print( "The NIQE_Score_path has existed")
- PS_txt = open(PS_path + '/score1.txt', 'a' )
- crop_border = 4 # same with scale
- suffix = '' # suffix for Gen images
- test_Y = False # True: test Y channel only; False: test RGB channels
- PSNR_all = []
- SSIM_all = []
- img_list = sorted(glob.glob(folder_GT + '/*'))
- if test_Y:
- print( 'Testing Y channel.')
- else:
- print( 'Testing RGB channels.')
- for i, img_path in enumerate(img_list):
- base_name = os.path.splitext(os.path.basename(img_path))[ 0]
- print(base_name)
- im_GT = cv2.imread(img_path) / 255.
- #不同格式图像
- # im_Gen = cv2.imread(os.path.join(folder_Gen, base_name + suffix + '.tif')) / 255.
- im_Gen = cv2.imread(os.path.join(folder_Gen, base_name + suffix + '.png')) / 255.
- if test_Y and im_GT.shape[ 2] == 3: # evaluate on Y channel in YCbCr color space
- im_GT_in = bgr2ycbcr(im_GT)
- im_Gen_in = bgr2ycbcr(im_Gen)
- else:
- im_GT_in = im_GT
- im_Gen_in = im_Gen
- # crop borders
- if crop_border == 0:
- cropped_GT = im_GT_in
- cropped_Gen = im_Gen_in
- else:
- if im_GT_in.ndim == 3:
- cropped_GT = im_GT_in[crop_border:-crop_border, crop_border:-crop_border, :]
- cropped_Gen = im_Gen_in[crop_border:-crop_border, crop_border:-crop_border, :]
- elif im_GT_in.ndim == 2:
- cropped_GT = im_GT_in[crop_border:-crop_border, crop_border:-crop_border]
- cropped_Gen = im_Gen_in[crop_border:-crop_border, crop_border:-crop_border]
- else:
- raise ValueError( 'Wrong image dimension: {}. Should be 2 or 3.'. format(im_GT_in.ndim))
- #不同通道数（Y通道和RGB三个通道），需要更改
- # calculate PSNR and SSIM
- # PSNR = calculate_psnr(cropped_GT * 255, cropped_Gen * 255)
- PSNR = calculate_rgb_psnr(cropped_GT * 255, cropped_Gen * 255)
- SSIM = calculate_ssim(cropped_GT * 255, cropped_Gen * 255)
- print( '{:3d} - {:25}. PSNR: {:.4f} dB, SSIM: {:.4f}'. format(
- i + 1, base_name, PSNR, SSIM))
- PSNR_all.append(PSNR)
- SSIM_all.append(SSIM)
- single_info = '[{}],PSNR(dB),{:.4f}, SSIM,{:.4f}'
- PS_txt.write(single_info. format(base_name,PSNR,SSIM))
- PS_txt.write( " ")
- Mean_format = 'Mean_PSNR: {:.4f}, Mean_SSIM: {:.4f}'
- Mean_PSNR = sum(PSNR_all) / len(PSNR_all)
- Mean_SSIM = sum(SSIM_all) / len(SSIM_all)
- print(Mean_format. format(Mean_PSNR,Mean_SSIM))
- PS_txt.write(Mean_format. format(Mean_PSNR,Mean_SSIM))
- PS_txt.write( ' ')
- def calculate_psnr( img1, img2):
- # img1 and img2 have range [0, 255]
- img1 = img1.astype(np.float64)
- img2 = img2.astype(np.float64)
- mse = np.mean((img1 - img2)** 2)
- if mse == 0:
- return float( 'inf')
- return 20 * math.log10( 255.0 / math.sqrt(mse))
- def calculate_rgb_psnr( img1, img2):
- """calculate psnr among rgb channel, img1 and img2 have range [0, 255]
- """
- n_channels = np.ndim(img1)
- sum_psnr = 0
- for i in range(n_channels):
- this_psnr = calculate_psnr(img1[:,:,i], img2[:,:,i])
- sum_psnr += this_psnr
- return sum_psnr/n_channels
- def ssim( img1, img2):
- C1 = ( 0.01 * 255)** 2
- C2 = ( 0.03 * 255)** 2
- img1 = img1.astype(np.float64)
- img2 = img2.astype(np.float64)
- kernel = cv2.getGaussianKernel( 11, 1.5)
- window = np.outer(kernel, kernel.transpose())
- mu1 = cv2.filter2D(img1, - 1, window)[ 5:- 5, 5:- 5] # valid
- mu2 = cv2.filter2D(img2, - 1, window)[ 5:- 5, 5:- 5]
- mu1_sq = mu1** 2
- mu2_sq = mu2** 2
- mu1_mu2 = mu1 * mu2
- sigma1_sq = cv2.filter2D(img1** 2, - 1, window)[ 5:- 5, 5:- 5] - mu1_sq
- sigma2_sq = cv2.filter2D(img2** 2, - 1, window)[ 5:- 5, 5:- 5] - mu2_sq
- sigma12 = cv2.filter2D(img1 * img2, - 1, window)[ 5:- 5, 5:- 5] - mu1_mu2
- ssim_map = (( 2 * mu1_mu2 + C1) * ( 2 * sigma12 + C2)) / ((mu1_sq + mu2_sq + C1) *
- (sigma1_sq + sigma2_sq + C2))
- return ssim_map.mean()
- def calculate_ssim( img1, img2):
- '''calculate SSIM
- the same outputs as MATLAB's
- img1, img2: [0, 255]
- '''
- if not img1.shape == img2.shape:
- raise ValueError( 'Input images must have the same dimensions.')
- if img1.ndim == 2:
- return ssim(img1, img2)
- elif img1.ndim == 3:
- if img1.shape[ 2] == 3:
- ssims = []
- for i in range(img1.shape[ 2]):
- ssims.append(ssim(img1[..., i], img2[..., i]))
- return np.array(ssims).mean()
- elif img1.shape[ 2] == 1:
- return ssim(np.squeeze(img1), np.squeeze(img2))
- else:
- raise ValueError( 'Wrong input image dimensions.')
- def bgr2ycbcr( img, only_y=True):
- '''same as matlab rgb2ycbcr
- only_y: only return Y channel
- Input:
- uint8, [0, 255]
- float, [0, 1]
- '''
- in_img_type = img.dtype
- img.astype(np.float32)
- if in_img_type != np.uint8:
- img *= 255.
- # convert
- if only_y:
- rlt = np.dot(img, [ 24.966, 128.553, 65.481]) / 255.0 + 16.0
- else:
- rlt = np.matmul(img, [[ 24.966, 112.0, - 18.214], [ 128.553, - 74.203, - 93.786],
- [ 65.481, - 37.797, 112.0]]) / 255.0 + [ 16, 128, 128]
- if in_img_type == np.uint8:
- rlt = rlt. round()
- else:
- rlt /= 255.
- return rlt.astype(in_img_type)
- if __name__ == '__main__':
- main()
结果展示：
举例4——调用SSIM算法，结合opencv阈值分割和轮廓提取，找两图差异
SSIM---结构相似性算法（OpenCV+Python)_hedgehog__的博客-CSDN博客_python 结构相似性 通过调用skimage.metrics包下的SSIM算法，结合OpenCV的阈值分割及轮廓提取算法，找出两幅图像的差异。
- # https://blog.csdn.net/hedgehog__/article/details/107257755
- import cv2
- import imutils
- from skimage.metrics import structural_similarity
- import time
- from skimage import filters, img_as_ubyte
- import numpy as np
- start = time.time()
- # 读入图像，转为灰度图像
- src = cv2.imread( 'C:/Users/Hedgehog/Desktop/right.jpg')
- img = cv2.imread( 'C:/Users/Hedgehog/Desktop/left.jpg')
- grayA = cv2.cvtColor(src, cv2.COLOR_BGR2GRAY)
- grayB = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY)
- # 计算两个灰度图像之间的结构相似度
- (score, diff) = structural_similarity(grayA, grayB, win_size= 101, full= True)
- diff = (diff * 255).astype( "uint8")
- cv2.namedWindow( "diff", cv2.WINDOW_NORMAL)
- cv2.imshow( "diff", diff)
- print( "SSIM:{}". format(score))
- # 找到不同的轮廓以致于可以在表示为 '不同'的区域放置矩形
- # 全局自适应阈值分割（二值化），返回值有两个，第一个是阈值，第二个是二值图像
- dst = cv2.threshold(diff, 0, 255, cv2.THRESH_BINARY_INV | cv2.THRESH_OTSU)[ 1]
- cv2.namedWindow( "threshold", cv2.WINDOW_NORMAL)
- cv2.imshow( 'threshold', dst)
- # findContours找轮廓，返回值有两个，第一个是轮廓信息，第二个是轮廓的层次信息（“树”状拓扑结构）
- # cv2.RETR_EXTERNAL：只检测最外层轮廓
- # cv2.CHAIN_APPROX_SIMPLE：压缩水平方向、垂直方向和对角线方向的元素，保留该方向的终点坐标，如矩形的轮廓可用4个角点表示
- contours, hierarchy = cv2.findContours(dst.copy(), cv2.RETR_EXTERNAL, cv2.CHAIN_APPROX_SIMPLE)
- print(contours)
- newimg = np.zeros(dst.shape, np.uint8) # 定义一个和图像分割处理后相同大小的黑色图
- # drawContours画轮廓，将找到的轮廓信息画出来
- cv2.drawContours(newimg, contours, - 1, ( 255, 255, 255), 1)
- cv2.namedWindow( "contours", cv2.WINDOW_NORMAL)
- cv2.imshow( 'contours', newimg)
- # cnts = cnts[0] if imutils.is_cv3() else cnts[0] 取findContours函数的第一个返回值，即取轮廓信息
- # 找到一系列区域，在区域周围放置矩形
- for c in contours:
- (x, y, w, h) = cv2.boundingRect(c) # boundingRect函数：计算轮廓的垂直边界最小矩形，矩形是与图像上下边界平行的
- cv2.rectangle(src, (x, y), (x + w, y + h), ( 0, 255, 0), 2) # rectangle函数：使用对角线的两点pt1，pt2画一个矩形轮廓
- cv2.rectangle(img, (x, y), (x + w, y + h), ( 0, 255, 0), 2) # 画矩形的图, pt1, pt2,(对角线两点的坐标), 矩形边框的颜色，矩形边框的粗细
- end = time.time()
- print(end - start)
- # 用cv2.imshow 展现最终对比之后的图片
- cv2.namedWindow( "right", cv2.WINDOW_NORMAL)
- cv2.imshow( 'right', src)
- cv2.namedWindow( "left", cv2.WINDOW_NORMAL)
- cv2.imshow( 'left', img)
- cv2.waitKey( 0)
- cv2.destroyAllWindows()
效果展示：
参考博客
计算两幅图像的相似度总结_JerrySing的博客-CSDN博客_compare_ssim
Python计算图片之间的相似度_～小疯子～的博客-CSDN博客_python 识别图片相似度
有史以来最全的图像相似度算法_小殊小殊的博客-CSDN博客_图片相似度
（超详细）实现计算图片相似度MSE和PSNR_Natuki丶的博客-CSDN博客_计算psnr和mse
Python批量计算PSNR、SSIM、MSE_杨杨杨Garrick的博客-CSDN博客
图像质量评价指标MSE/PSNR/SSIM_秋天的从从的博客-CSDN博客_图像mse
图片相相似度计算（Hash、SSIM、compareHist）_南苏月的博客-CSDN博客_图像相似度计算公式
【OpenCV-Python】：图像PSNR、SSIM、MSE计算_米开朗琪罗~的博客-CSDN博客_图像的mse计算
Python计算Y通道或者RGB通道的PSNR_SSIM_未知量0520的博客-CSDN博客_folder_gt
scikit-image 0.18.0版本计算PSNR、SSIM、MSE(Python代码)_YZBshanshan的博客-CSDN博客_scikit-image版本
图像质量评估中的PSNR和SSIM的定义，公式和含义_·如烟·的博客-CSDN博客_psnr定义
【基础知识】图像去噪评估—PSNR和SSIM - 梁君牧 - 博客园 (cnblogs.com)
SSIM---结构相似性算法（OpenCV+Python)_hedgehog__的博客-CSDN博客_python 结构相似性
图片相似度计算方法总结 - 知乎 (zhihu.com)
相似度计算方法(三) 余弦相似度_潘永青的博客-CSDN博客_余弦相似度
图片的相似度--直方图距离 - 知乎 (zhihu.com)