CN107105223B - 一种基于全局特征的色调映射图像质量客观评价方法 - Google Patents

一种基于全局特征的色调映射图像质量客观评价方法 Download PDF

Info

Publication number
CN107105223B
CN107105223B CN201710164242.8A CN201710164242A CN107105223B CN 107105223 B CN107105223 B CN 107105223B CN 201710164242 A CN201710164242 A CN 201710164242A CN 107105223 B CN107105223 B CN 107105223B
Authority
CN
China
Prior art keywords
denoted
pixel value
indicate
fitting
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710164242.8A
Other languages
English (en)
Other versions
CN107105223A (zh
Inventor
邵枫
姜求平
李福翠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Weishi Photoelectric Technology Co ltd
Original Assignee
Ningbo University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ningbo University filed Critical Ningbo University
Priority to CN201710164242.8A priority Critical patent/CN107105223B/zh
Publication of CN107105223A publication Critical patent/CN107105223A/zh
Application granted granted Critical
Publication of CN107105223B publication Critical patent/CN107105223B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/02Diagnosis, testing or measuring for television systems or their details for colour television signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种基于全局特征的色调映射图像质量客观评价方法,其包括训练阶段和测试阶段两个过程;其考虑了自然场景统计特征和颜色统计特征对色调映射的影响,提取出色调映射图像的全局特征矢量,然后利用支持向量回归对训练图像集中的所有色调映射图像的全局特征矢量进行训练,构造质量预测模型;在测试阶段,通过计算用作测试的色调映射图像的全局特征矢量,并根据训练阶段构造的质量预测模型,预测得到该色调映射图像的质量客观评价预测值,由于获得的全局特征矢量信息具有较强的稳定性,且能够较好地反映色调映射图像的质量变化情况,因此有效地提高了客观评价结果与主观感知之间的相关性。

Description

一种基于全局特征的色调映射图像质量客观评价方法
技术领域
本发明涉及一种图像质量评价方法,尤其是涉及一种基于全局特征的色调映射图像质量客观评价方法。
背景技术
随着显示技术的快速发展,高动态范围图像(HDR)已越来越受到关注。高动态范围图像的层次丰富,可以达到远比普通图像更逼近现实的光影效果。然而,传统的显示设备只能支持低动态范围的显示输出。为了解决真实场景和传统的显示设备的动态范围不匹配的矛盾,目前提出了许多高动态范围图像的色调映射(Tone Mapping)算法。高动态范围图像的色调映射算法的目标是将高动态范围图像的亮度压缩到传统的显示设备可以接受的范围,同时尽可能保留原图的细节信息,并避免造成图像瑕疵。因此,如何准确、客观地评价不同色调映射方法的性能,对指导内容制作和后期处理具有十分重要的作用。
而对于色调映射图像质量评价而言,如果直接将现有的图像质量评价方法应用于色调映射图像,则由于色调映射图像只有高动态范围图像作为参考,因此会导致无法精确预测得到客观评价值。因此,如何在评价过程中有效地提取出视觉特征,使得客观评价结果更加感觉符合人类视觉***,是在对色调映射图像进行客观质量评价过程中需要研究解决的问题。
发明内容
本发明所要解决的技术问题是提供一种基于全局特征的色调映射图像质量客观评价方法,其能够有效地提高客观评价结果与主观感知之间的相关性。
本发明解决上述技术问题所采用的技术方案为:一种基于全局特征的色调映射图像质量客观评价方法,其特征在于包括训练阶段和测试阶段两个过程;
所述的训练阶段过程的具体步骤为:
①_1、选取N幅色调映射图像构成训练图像集,记为其中,N>1,1≤k≤N,表示中的第k幅色调映射图像,中的每幅色调映射图像的宽度为W,且高度为H;
①_2、计算中的每幅色调映射图像的自然场景统计特征矢量,将的自然场景统计特征矢量记为其中,的维数为5×1;
①_3、计算中的每幅色调映射图像的颜色统计特征矢量,将的颜色统计特征矢量记为其中,的维数为18×1;
①_4、将中的每幅色调映射图像的自然场景统计特征矢量和颜色统计特征矢量构成中的每幅色调映射图像的全局特征矢量,将的全局特征矢量记为Fk其中,Fk的维数为23×1,符号“[]”为矢量表示符号,表示将连接起来形成一个全局特征矢量;
①_5、将中的所有色调映射图像各自的全局特征矢量和平均主观评分差值构成训练样本数据集合,训练样本数据集合中包含N个全局特征矢量和N个平均主观评分差值;然后采用支持向量回归作为机器学***均主观评分差值之间的误差最小,拟合得到最优的权重矢量wopt和最优的偏置项bopt;接着利用最优的权重矢量wopt和最优的偏置项bopt,构造质量预测模型,记为f(F),其中,f()为函数表示形式,F用于表示色调映射图像的全局特征矢量,且作为质量预测模型的输入矢量,(wopt)T为wopt的转置,为F的线性函数;
所述的测试阶段过程的具体步骤为:
②对于任意一幅用作测试的色调映射图像Itest,按照步骤①_2至步骤①_4相同的操作,获取Itest的全局特征矢量,记为Ftest;然后根据训练阶段构造的质量预测模型对Ftest进行测试,预测得到Ftest对应的预测值,将该预测值作为Itest的质量客观评价预测值,记为Qtest其中,Itest的宽度为W',且高度为H',Ftest的维数为23×1,表示Ftest的线性函数。
所述的步骤①_2中的的获取过程为:
①_2a、计算中的每幅色调映射图像中的所有像素点的像素值的均值,将中的所有像素点的像素值的均值记为ρ,然后计算中的每幅色调映射图像中的所有像素点的像素值的标准差,将中的所有像素点的像素值的标准差记为δ,接着计算中的每幅色调映射图像中的所有像素点的像素值的偏度,将中的所有像素点的像素值的偏度记为θ,并计算中的每幅色调映射图像中的所有像素点的像素值的峰度,将中的所有像素点的像素值的峰度记为κ,再计算中的每幅色调映射图像中的所有像素点的像素值的熵,将中的所有像素点的像素值的熵记为η,其中,1≤x≤W,1≤y≤H,表示中坐标位置为(x,y)的像素点的像素值,0≤g≤255,pg表示中的所有像素点的像素值中属于第g个密度值的概率密度函数值,
①_2b、通过对中的所有色调映射图像各自中的所有像素点的像素值的均值进行高斯分布拟合,拟合得到中的所有色调映射图像的均值高斯分布拟合曲线,然后根据拟合得到的均值高斯分布拟合曲线获得ρ的拟合值,记为fρ同样,通过对中的所有色调映射图像各自中的所有像素点的像素值的标准差进行高斯分布拟合,拟合得到中的所有色调映射图像的标准差高斯分布拟合曲线,然后根据拟合得到的标准差高斯分布拟合曲线获得δ的拟合值,记为fδ通过对中的所有色调映射图像各自中的所有像素点的像素值的偏度进行高斯分布拟合,拟合得到中的所有色调映射图像的偏度高斯分布拟合曲线,然后根据拟合得到的偏度高斯分布拟合曲线获得θ的拟合值,记为fθ通过对中的所有色调映射图像各自中的所有像素点的像素值的峰度进行高斯分布拟合,拟合得到中的所有色调映射图像的峰度高斯分布拟合曲线,然后根据拟合得到的峰度高斯分布拟合曲线获得κ的拟合值,记为fκ通过对中的所有色调映射图像各自中的所有像素点的像素值的熵进行高斯分布拟合,拟合得到中的所有色调映射图像的熵高斯分布拟合曲线,然后根据拟合得到的熵高斯分布拟合曲线获得η的拟合值,记为fη其中,μρ和σρ表示均值高斯分布拟合曲线的参数值,exp()表示以自然基数e为底的指数函数,μδ和σδ表示标准差高斯分布拟合曲线的参数值,μθ和σθ表示偏度高斯分布拟合曲线的参数值,μκ和λκ表示峰度高斯分布拟合曲线的参数值,μη和ση表示熵高斯分布拟合曲线的参数值;
①_2c、将fρ、fδ、fθ、fκ和fη按序排列,得到 其中,符号“[]”为矢量表示符号。
所述的步骤①_3中的的获取过程为:
①_3a、将在RGB颜色空间的三个分量分别记为{Rk(x,y)}、{Gk(x,y)}和{Bk(x,y)},其中,1≤x≤W,1≤y≤H,Rk(x,y)表示{Rk(x,y)}中坐标位置为(x,y)的像素点的像素值,Gk(x,y)表示{Gk(x,y)}中坐标位置为(x,y)的像素点的像素值,Bk(x,y)表示{Bk(x,y)}中坐标位置为(x,y)的像素点的像素值;
①_3b、对{Rk(x,y)}进行归一化操作,将{Rk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 并对{Gk(x,y)}进行归一化操作,将{Gk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 对{Bk(x,y)}进行归一化操作,将{Bk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 其中,表示{Rk(x,y)}中的所有像素点的像素值的均值, 表示{Rk(x,y)}中的所有像素点的像素值的标准差, 表示{Gk(x,y)}中的所有像素点的像素值的均值, 表示{Gk(x,y)}中的所有像素点的像素值的标准差, 表示{Bk(x,y)}中的所有像素点的像素值的均值, 表示{Bk(x,y)}中的所有像素点的像素值的标准差,
①_3c、采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gR(h),并采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gG(h),采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gB(h),其中,0≤h≤255,αR表示拟合曲线gR(h)的尺度参数,βR表示拟合曲线gR(h)的形状参数,exp()表示以自然基数e为底的指数函数,符号“||”为取绝对值符号,t为积分变量,αG表示拟合曲线gG(h)的尺度参数,βG表示拟合曲线gG(h)的形状参数,αB表示拟合曲线gB(h)的尺度参数,βB表示拟合曲线gB(h)的形状参数,
①_3d、将在CIELAB颜色空间的三个分量分别记为{Lk(x,y)}、{ak(x,y)}和{bk(x,y)},其中,Lk(x,y)表示{Lk(x,y)}中坐标位置为(x,y)的像素点的像素值,ak(x,y)表示{ak(x,y)}中坐标位置为(x,y)的像素点的像素值,bk(x,y)表示{bk(x,y)}中坐标位置为(x,y)的像素点的像素值;
①_3e、对{Lk(x,y)}进行归一化操作,将{Lk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 并对{ak(x,y)}进行归一化操作,将{ak(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 对{bk(x,y)}进行归一化操作,将{bk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 其中,表示{Lk(x,y)}中的所有像素点的像素值的均值, 表示{Lk(x,y)}中的所有像素点的像素值的标准差, 表示{ak(x,y)}中的所有像素点的像素值的均值, 表示{ak(x,y)}中的所有像素点的像素值的标准差, 表示{bk(x,y)}中的所有像素点的像素值的均值, 表示{bk(x,y)}中的所有像素点的像素值的标准差,
①_3f、采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gL(h),并采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为ga(h),采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gb(h),其中,αL表示拟合曲线gL(h)的尺度参数,βL表示拟合曲线gL(h)的形状参数,αa表示拟合曲线ga(h)的尺度参数,βa表示拟合曲线ga(h)的形状参数,αb表示拟合曲线gb(h)的尺度参数,βb表示拟合曲线gb(h)的形状参数,
①_3g、将在YCbCr颜色空间的三个分量分别记为{Yk(x,y)}、{Uk(x,y)}和{Vk(x,y)},其中,Yk(x,y)表示{Yk(x,y)}中坐标位置为(x,y)的像素点的像素值,Uk(x,y)表示{Uk(x,y)}中坐标位置为(x,y)的像素点的像素值,Vk(x,y)表示{Vk(x,y)}中坐标位置为(x,y)的像素点的像素值;
①_3h、对{Yk(x,y)}进行归一化操作,将{Yk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 并对{Uk(x,y)}进行归一化操作,将{Uk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 对{Vk(x,y)}进行归一化操作,将{Vk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 其中,表示{Yk(x,y)}中的所有像素点的像素值的均值, 表示{Yk(x,y)}中的所有像素点的像素值的标准差, 表示{Uk(x,y)}中的所有像素点的像素值的均值, 表示{Uk(x,y)}中的所有像素点的像素值的标准差, 表示{Vk(x,y)}中的所有像素点的像素值的均值, 表示{Vk(x,y)}中的所有像素点的像素值的标准差,
①_3i、采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gY(h),并采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gU(h),采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gV(h),其中,αY表示拟合曲线gY(h)的尺度参数,βY表示拟合曲线gY(h)的形状参数,αU表示拟合曲线gU(h)的尺度参数,βU表示拟合曲线gU(h)的形状参数,αV表示拟合曲线gV(h)的尺度参数,βV表示拟合曲线gV(h)的形状参数,
①_3j、将αR、βR、αG、βG、αB、βB、αL、βL、αa、βa、αb、βb、αY、βY、αU、βU、αV和βV按序排列,得到 其中,符号“[]”为矢量表示符号。
与现有技术相比,本发明的优点在于:
本发明方法考虑了自然场景统计特征和颜色统计特征对色调映射的影响,提取出色调映射图像的全局特征矢量,然后利用支持向量回归对训练图像集中的所有色调映射图像的全局特征矢量进行训练,构造质量预测模型;在测试阶段,通过计算用作测试的色调映射图像的全局特征矢量,并根据训练阶段构造的质量预测模型,预测得到该色调映射图像的质量客观评价预测值,由于获得的全局特征矢量信息具有较强的稳定性,且能够较好地反映色调映射图像的质量变化情况,因此有效地提高了客观评价结果与主观感知之间的相关性。
附图说明
图1为本发明方法的总体实现框图。
具体实施方式
以下结合附图实施例对本发明作进一步详细描述。
本发明提出的一种基于全局特征的色调映射图像质量客观评价方法,其总体实现框图如图1所示,其包括训练阶段和测试阶段两个过程。
所述的训练阶段过程的具体步骤为:
①_1、选取N幅色调映射图像构成训练图像集,记为其中,N>1,在本实施例中选取TMID数据库中的120幅色调映射图像、选取ESPL-LIVE数据库中的1811幅色调映射图像,1≤k≤N,表示中的第k幅色调映射图像,中的每幅色调映射图像的宽度为W,且高度为H。
①_2、计算中的每幅色调映射图像的自然场景统计(SceneNaturalness)特征矢量,将的自然场景统计特征矢量记为其中,的维数为5×1。
在本实施例中,步骤①_2中的的获取过程为:
①_2a、计算中的每幅色调映射图像中的所有像素点的像素值的均值,将中的所有像素点的像素值的均值记为ρ,然后计算中的每幅色调映射图像中的所有像素点的像素值的标准差,将中的所有像素点的像素值的标准差记为δ,接着计算中的每幅色调映射图像中的所有像素点的像素值的偏度,将中的所有像素点的像素值的偏度记为θ,并计算中的每幅色调映射图像中的所有像素点的像素值的峰度,将中的所有像素点的像素值的峰度记为κ,再计算中的每幅色调映射图像中的所有像素点的像素值的熵,将中的所有像素点的像素值的熵记为η,其中,1≤x≤W,1≤y≤H,表示中坐标位置为(x,y)的像素点的像素值,0≤g≤255,pg表示中的所有像素点的像素值中属于第g个密度值的概率密度函数值,
①_2b、通过对中的所有色调映射图像各自中的所有像素点的像素值的均值进行高斯分布拟合,拟合得到中的所有色调映射图像的均值高斯分布拟合曲线,然后根据拟合得到的均值高斯分布拟合曲线获得ρ的拟合值,记为fρ同样,通过对中的所有色调映射图像各自中的所有像素点的像素值的标准差进行高斯分布拟合,拟合得到中的所有色调映射图像的标准差高斯分布拟合曲线,然后根据拟合得到的标准差高斯分布拟合曲线获得δ的拟合值,记为fδ通过对中的所有色调映射图像各自中的所有像素点的像素值的偏度进行高斯分布拟合,拟合得到中的所有色调映射图像的偏度高斯分布拟合曲线,然后根据拟合得到的偏度高斯分布拟合曲线获得θ的拟合值,记为fθ通过对中的所有色调映射图像各自中的所有像素点的像素值的峰度进行高斯分布拟合,拟合得到中的所有色调映射图像的峰度高斯分布拟合曲线,然后根据拟合得到的峰度高斯分布拟合曲线获得κ的拟合值,记为fκ通过对中的所有色调映射图像各自中的所有像素点的像素值的熵进行高斯分布拟合,拟合得到中的所有色调映射图像的熵高斯分布拟合曲线,然后根据拟合得到的熵高斯分布拟合曲线获得η的拟合值,记为fη其中,μρ和σρ表示均值高斯分布拟合曲线的参数值,在本实施例中取μρ=121.70、σρ=36.11,exp()表示以自然基数e为底的指数函数,μδ和σδ表示标准差高斯分布拟合曲线的参数值,在本实施例中取μδ=56.47、σδ=18.43,μθ和σθ表示偏度高斯分布拟合曲线的参数值,在本实施例中取μθ=0.15、σθ=0.89,μκ和λκ表示峰度高斯分布拟合曲线的参数值,在本实施例中取μκ=2.82、λκ=18.86,μη和ση表示熵高斯分布拟合曲线的参数值,在本实施例中取μη=7.56、ση=0.27。
①_2c、将fρ、fδ、fθ、fκ和fη按序排列,得到 其中,符号“[]”为矢量表示符号。
①_3、计算中的每幅色调映射图像的颜色统计(ChromaticInformation)特征矢量,将的颜色统计特征矢量记为其中,的维数为18×1。
在本实施例中,步骤①_3中的的获取过程为:
①_3a、将在RGB颜色空间的三个分量分别记为{Rk(x,y)}、{Gk(x,y)}和{Bk(x,y)},其中,1≤x≤W,1≤y≤H,Rk(x,y)表示{Rk(x,y)}中坐标位置为(x,y)的像素点的像素值,Gk(x,y)表示{Gk(x,y)}中坐标位置为(x,y)的像素点的像素值,Bk(x,y)表示{Bk(x,y)}中坐标位置为(x,y)的像素点的像素值。
①_3b、对{Rk(x,y)}进行归一化操作,将{Rk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 并对{Gk(x,y)}进行归一化操作,将{Gk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 对{Bk(x,y)}进行归一化操作,将{Bk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 其中,表示{Rk(x,y)}中的所有像素点的像素值的均值, 表示{Rk(x,y)}中的所有像素点的像素值的标准差, 表示{Gk(x,y)}中的所有像素点的像素值的均值, 表示{Gk(x,y)}中的所有像素点的像素值的标准差, 表示{Bk(x,y)}中的所有像素点的像素值的均值, 表示{Bk(x,y)}中的所有像素点的像素值的标准差,
①_3c、采用现有的广义高斯分布(GGD)模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gR(h),并采用现有的广义高斯分布(GGD)模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gG(h),采用现有的广义高斯分布(GGD)模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gB(h),其中,0≤h≤255,αR表示拟合曲线gR(h)的尺度参数,βR表示拟合曲线gR(h)的形状参数,exp()表示以自然基数e为底的指数函数,符号“||”为取绝对值符号,t为积分变量,αG表示拟合曲线gG(h)的尺度参数,βG表示拟合曲线gG(h)的形状参数,αB表示拟合曲线gB(h)的尺度参数,βB表示拟合曲线gB(h)的形状参数,
①_3d、将在CIELAB颜色空间的三个分量分别记为{Lk(x,y)}、{ak(x,y)}和{bk(x,y)},其中,Lk(x,y)表示{Lk(x,y)}中坐标位置为(x,y)的像素点的像素值,ak(x,y)表示{ak(x,y)}中坐标位置为(x,y)的像素点的像素值,bk(x,y)表示{bk(x,y)}中坐标位置为(x,y)的像素点的像素值。
①_3e、对{Lk(x,y)}进行归一化操作,将{Lk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 并对{ak(x,y)}进行归一化操作,将{ak(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 对{bk(x,y)}进行归一化操作,将{bk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 其中,表示{Lk(x,y)}中的所有像素点的像素值的均值, 表示{Lk(x,y)}中的所有像素点的像素值的标准差, 表示{ak(x,y)}中的所有像素点的像素值的均值, 表示{ak(x,y)}中的所有像素点的像素值的标准差, 表示{bk(x,y)}中的所有像素点的像素值的均值, 表示{bk(x,y)}中的所有像素点的像素值的标准差,
①_3f、采用现有的广义高斯分布(GGD)模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gL(h),并采用现有的广义高斯分布(GGD)模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为ga(h),采用现有的广义高斯分布(GGD)模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gb(h),其中,αL表示拟合曲线gL(h)的尺度参数,βL表示拟合曲线gL(h)的形状参数,αa表示拟合曲线ga(h)的尺度参数,βa表示拟合曲线ga(h)的形状参数,αb表示拟合曲线gb(h)的尺度参数,βb表示拟合曲线gb(h)的形状参数,
①_3g、将在YCbCr颜色空间的三个分量分别记为{Yk(x,y)}、{Uk(x,y)}和{Vk(x,y)},其中,Yk(x,y)表示{Yk(x,y)}中坐标位置为(x,y)的像素点的像素值,Uk(x,y)表示{Uk(x,y)}中坐标位置为(x,y)的像素点的像素值,Vk(x,y)表示{Vk(x,y)}中坐标位置为(x,y)的像素点的像素值。
①_3h、对{Yk(x,y)}进行归一化操作,将{Yk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 并对{Uk(x,y)}进行归一化操作,将{Uk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 对{Vk(x,y)}进行归一化操作,将{Vk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 其中,表示{Yk(x,y)}中的所有像素点的像素值的均值, 表示{Yk(x,y)}中的所有像素点的像素值的标准差, 表示{Uk(x,y)}中的所有像素点的像素值的均值, 表示{Uk(x,y)}中的所有像素点的像素值的标准差, 表示{Vk(x,y)}中的所有像素点的像素值的均值, 表示{Vk(x,y)}中的所有像素点的像素值的标准差,
①_3i、采用现有的广义高斯分布(GGD)模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gY(h),并采用现有的广义高斯分布(GGD)模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gU(h),采用现有的广义高斯分布(GGD)模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gV(h),其中,αY表示拟合曲线gY(h)的尺度参数,βY表示拟合曲线gY(h)的形状参数,αU表示拟合曲线gU(h)的尺度参数,βU表示拟合曲线gU(h)的形状参数,αV表示拟合曲线gV(h)的尺度参数,βV表示拟合曲线gV(h)的形状参数,
①_3j、将αR、βR、αG、βG、αB、βB、αL、βL、αa、βa、αb、βb、αY、βY、αU、βU、αV和βV按序排列,得到 其中,符号“[]”为矢量表示符号。
①_4、将中的每幅色调映射图像的自然场景统计特征矢量和颜色统计特征矢量构成中的每幅色调映射图像的全局特征矢量,将的全局特征矢量记为Fk其中,Fk的维数为23×1,符号“[]”为矢量表示符号,表示将连接起来形成一个全局特征矢量。
①_5、将中的所有色调映射图像各自的全局特征矢量和平均主观评分差值构成训练样本数据集合,训练样本数据集合中包含N个全局特征矢量和N个平均主观评分差值;然后采用支持向量回归作为机器学***均主观评分差值之间的误差最小,拟合得到最优的权重矢量wopt和最优的偏置项bopt;接着利用最优的权重矢量wopt和最优的偏置项bopt,构造质量预测模型,记为f(F),其中,f()为函数表示形式,F用于表示色调映射图像的全局特征矢量,且作为质量预测模型的输入矢量,(wopt)T为wopt的转置,为F的线性函数。
所述的测试阶段过程的具体步骤为:
②对于任意一幅用作测试的色调映射图像Itest,按照步骤①_2至步骤①_4相同的操作,获取Itest的全局特征矢量,记为Ftest;然后根据训练阶段构造的质量预测模型对Ftest进行测试,预测得到Ftest对应的预测值,将该预测值作为Itest的质量客观评价预测值,记为Qtest其中,Itest的宽度为W',且高度为H',W'可与W相同或不相同,H'可与H相同或不相同,Ftest的维数为23×1,表示Ftest的线性函数。
在本实施例中,采用加拿大滑铁卢大学建立的TMID数据库和美国德克萨斯大学奥斯汀分校建立的ESPL-LIVE数据库作为色调映射图像数据库,TMID数据库包括120幅色调映射图像,ESPL-LIVE数据库包括1811幅色调映射图像。利用评估图像质量评价方法的2个常用客观参量作为评价指标,即非线性回归条件下的Pearson线性相关系数(Pearson linearcorrelation coefficient,PLCC)和Spearman秩等级相关系数(Spearman rank ordercorrelation coefficient,SROCC)。PLCC和SROCC越高说明本发明方法的评价结果与平均主观评分差值的相关性越好。表1给出了本发明方法得到的质量客观评价预测值与平均主观评分差值之间的相关性,从表1中可以看出,采用本发明方法得到的色调映射图像的质量客观评价预测值与平均主观评分差值之间的相关性是很高的,表明客观评价结果与人眼主观感知的结果较为一致,足以说明本发明方法的有效性。
表1采用本发明方法得到的质量客观评价预测值与平均主观评分差值之间的相关性
数据库 PLCC SROCC
TMID 0.744 0.698
ESPL-LIVE 0.639 0.629

Claims (2)

1.一种基于全局特征的色调映射图像质量客观评价方法,其特征在于包括训练阶段和测试阶段两个过程;
所述的训练阶段过程的具体步骤为:
①_1、选取N幅色调映射图像构成训练图像集,记为其中,N>1,1≤k≤N,表示中的第k幅色调映射图像,中的每幅色调映射图像的宽度为W,且高度为H;
①_2、计算中的每幅色调映射图像的自然场景统计特征矢量,将的自然场景统计特征矢量记为其中,的维数为5×1;
所述的步骤①_2中的的获取过程为:
①_2a、计算中的每幅色调映射图像中的所有像素点的像素值的均值,将中的所有像素点的像素值的均值记为ρ,然后计算中的每幅色调映射图像中的所有像素点的像素值的标准差,将中的所有像素点的像素值的标准差记为δ,接着计算中的每幅色调映射图像中的所有像素点的像素值的偏度,将中的所有像素点的像素值的偏度记为θ,并计算中的每幅色调映射图像中的所有像素点的像素值的峰度,将中的所有像素点的像素值的峰度记为κ,再计算中的每幅色调映射图像中的所有像素点的像素值的熵,将中的所有像素点的像素值的熵记为η,其中,1≤x≤W,1≤y≤H,表示中坐标位置为(x,y)的像素点的像素值,0≤g≤255,pg表示中的所有像素点的像素值中属于第g个密度值的概率密度函数值,
①_2b、通过对中的所有色调映射图像各自中的所有像素点的像素值的均值进行高斯分布拟合,拟合得到中的所有色调映射图像的均值高斯分布拟合曲线,然后根据拟合得到的均值高斯分布拟合曲线获得ρ的拟合值,记为fρ同样,通过对中的所有色调映射图像各自中的所有像素点的像素值的标准差进行高斯分布拟合,拟合得到中的所有色调映射图像的标准差高斯分布拟合曲线,然后根据拟合得到的标准差高斯分布拟合曲线获得δ的拟合值,记为fδ通过对中的所有色调映射图像各自中的所有像素点的像素值的偏度进行高斯分布拟合,拟合得到中的所有色调映射图像的偏度高斯分布拟合曲线,然后根据拟合得到的偏度高斯分布拟合曲线获得θ的拟合值,记为fθ通过对中的所有色调映射图像各自中的所有像素点的像素值的峰度进行高斯分布拟合,拟合得到中的所有色调映射图像的峰度高斯分布拟合曲线,然后根据拟合得到的峰度高斯分布拟合曲线获得κ的拟合值,记为fκ通过对中的所有色调映射图像各自中的所有像素点的像素值的熵进行高斯分布拟合,拟合得到中的所有色调映射图像的熵高斯分布拟合曲线,然后根据拟合得到的熵高斯分布拟合曲线获得η的拟合值,记为fη其中,μρ和σρ表示均值高斯分布拟合曲线的参数值,exp()表示以自然基数e为底的指数函数,μδ和σδ表示标准差高斯分布拟合曲线的参数值,μθ和σθ表示偏度高斯分布拟合曲线的参数值,μκ和λκ表示峰度高斯分布拟合曲线的参数值,μη和ση表示熵高斯分布拟合曲线的参数值;
①_2c、将fρ、fδ、fθ、fκ和fη按序排列,得到 其中,符号“[]”为矢量表示符号;
①_3、计算中的每幅色调映射图像的颜色统计特征矢量,将的颜色统计特征矢量记为其中,的维数为18×1;
①_4、将中的每幅色调映射图像的自然场景统计特征矢量和颜色统计特征矢量构成中的每幅色调映射图像的全局特征矢量,将的全局特征矢量记为Fk其中,Fk的维数为23×1,符号“[]”为矢量表示符号,表示将连接起来形成一个全局特征矢量;
①_5、将中的所有色调映射图像各自的全局特征矢量和平均主观评分差值构成训练样本数据集合,训练样本数据集合中包含N个全局特征矢量和N个平均主观评分差值;然后采用支持向量回归作为机器学***均主观评分差值之间的误差最小,拟合得到最优的权重矢量wopt和最优的偏置项bopt;接着利用最优的权重矢量wopt和最优的偏置项bopt,构造质量预测模型,记为f(F),其中,f()为函数表示形式,F用于表示色调映射图像的全局特征矢量,且作为质量预测模型的输入矢量,(wopt)T为wopt的转置,为F的线性函数;
所述的测试阶段过程的具体步骤为:
②对于任意一幅用作测试的色调映射图像Itest,按照步骤①_2至步骤①_4相同的操作,获取Itest的全局特征矢量,记为Ftest;然后根据训练阶段构造的质量预测模型对Ftest进行测试,预测得到Ftest对应的预测值,将该预测值作为Itest的质量客观评价预测值,记为Qtest其中,Itest的宽度为W',且高度为H',Ftest的维数为23×1,表示Ftest的线性函数。
2.根据权利要求1所述的一种基于全局特征的色调映射图像质量客观评价方法,其特征在于所述的步骤①_3中的的获取过程为:
①_3a、将在RGB颜色空间的三个分量分别记为{Rk(x,y)}、{Gk(x,y)}和{Bk(x,y)},其中,1≤x≤W,1≤y≤H,Rk(x,y)表示{Rk(x,y)}中坐标位置为(x,y)的像素点的像素值,Gk(x,y)表示{Gk(x,y)}中坐标位置为(x,y)的像素点的像素值,Bk(x,y)表示{Bk(x,y)}中坐标位置为(x,y)的像素点的像素值;
①_3b、对{Rk(x,y)}进行归一化操作,将{Rk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 并对{Gk(x,y)}进行归一化操作,将{Gk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 对{Bk(x,y)}进行归一化操作,将{Bk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 其中,表示{Rk(x,y)}中的所有像素点的像素值的均值, 表示{Rk(x,y)}中的所有像素点的像素值的标准差, 表示{Gk(x,y)}中的所有像素点的像素值的均值, 表示{Gk(x,y)}中的所有像素点的像素值的标准差, 表示{Bk(x,y)}中的所有像素点的像素值的均值, 表示{Bk(x,y)}中的所有像素点的像素值的标准差,
①_3c、采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gR(h),并采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gG(h),采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gB(h),其中,0≤h≤255,αR表示拟合曲线gR(h)的尺度参数,βR表示拟合曲线gR(h)的形状参数,exp()表示以自然基数e为底的指数函数,符号“| |”为取绝对值符号,t为积分变量,αG表示拟合曲线gG(h)的尺度参数,βG表示拟合曲线gG(h)的形状参数,αB表示拟合曲线gB(h)的尺度参数,βB表示拟合曲线gB(h)的形状参数,
①_3d、将在CIELAB颜色空间的三个分量分别记为{Lk(x,y)}、{ak(x,y)}和{bk(x,y)},其中,Lk(x,y)表示{Lk(x,y)}中坐标位置为(x,y)的像素点的像素值,ak(x,y)表示{ak(x,y)}中坐标位置为(x,y)的像素点的像素值,bk(x,y)表示{bk(x,y)}中坐标位置为(x,y)的像素点的像素值;
①_3e、对{Lk(x,y)}进行归一化操作,将{Lk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 并对{ak(x,y)}进行归一化操作,将{ak(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 对{bk(x,y)}进行归一化操作,将{bk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 其中,表示中的所有像素点的像素值的均值, 表示{Lk(x,y)}中的所有像素点的像素值的标准差, 表示{ak(x,y)}中的所有像素点的像素值的均值, 表示{ak(x,y)}中的所有像素点的像素值的标准差, 表示{bk(x,y)}中的所有像素点的像素值的均值, 表示{bk(x,y)}中的所有像素点的像素值的标准差,
①_3f、采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gL(h),并采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为ga(h),采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gb(h),其中,αL表示拟合曲线gL(h)的尺度参数,βL表示拟合曲线gL(h)的形状参数,αa表示拟合曲线ga(h)的尺度参数,βa表示拟合曲线ga(h)的形状参数,αb表示拟合曲线gb(h)的尺度参数,βb表示拟合曲线gb(h)的形状参数,
①_3g、将在YCbCr颜色空间的三个分量分别记为{Yk(x,y)}、{Uk(x,y)}和{Vk(x,y)},其中,Yk(x,y)表示{Yk(x,y)}中坐标位置为(x,y)的像素点的像素值,Uk(x,y)表示{Uk(x,y)}中坐标位置为(x,y)的像素点的像素值,Vk(x,y)表示{Vk(x,y)}中坐标位置为(x,y)的像素点的像素值;
①_3h、对{Yk(x,y)}进行归一化操作,将{Yk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 并对{Uk(x,y)}进行归一化操作,将{Uk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 对{Vk(x,y)}进行归一化操作,将{Vk(x,y)}经归一化操作后得到的图像记为中坐标位置为(x,y)的像素点的像素值记为 其中,表示{Yk(x,y)}中的所有像素点的像素值的均值, 表示{Yk(x,y)}中的所有像素点的像素值的标准差, 表示{Uk(x,y)}中的所有像素点的像素值的均值, 表示{Uk(x,y)}中的所有像素点的像素值的标准差, 表示{Vk(x,y)}中的所有像素点的像素值的均值, 表示{Vk(x,y)}中的所有像素点的像素值的标准差,
①_3i、采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gY(h),并采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gU(h),采用广义高斯分布模型对的颜色分布进行拟合,拟合得到的拟合曲线,记为gV(h),其中,αY表示拟合曲线gY(h)的尺度参数,βY表示拟合曲线gY(h)的形状参数,αU表示拟合曲线gU(h)的尺度参数,βU表示拟合曲线gU(h)的形状参数,αV表示拟合曲线gV(h)的尺度参数,βV表示拟合曲线gV(h)的形状参数,
①_3j、将αR、βR、αG、βG、αB、βB、αL、βL、αa、βa、αb、βb、αY、βY、αU、βU、αV和βV按序排列,得到 其中,符号“[]”为矢量表示符号。
CN201710164242.8A 2017-03-20 2017-03-20 一种基于全局特征的色调映射图像质量客观评价方法 Active CN107105223B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710164242.8A CN107105223B (zh) 2017-03-20 2017-03-20 一种基于全局特征的色调映射图像质量客观评价方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710164242.8A CN107105223B (zh) 2017-03-20 2017-03-20 一种基于全局特征的色调映射图像质量客观评价方法

Publications (2)

Publication Number Publication Date
CN107105223A CN107105223A (zh) 2017-08-29
CN107105223B true CN107105223B (zh) 2018-12-07

Family

ID=59675339

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710164242.8A Active CN107105223B (zh) 2017-03-20 2017-03-20 一种基于全局特征的色调映射图像质量客观评价方法

Country Status (1)

Country Link
CN (1) CN107105223B (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108322733B (zh) * 2018-01-17 2019-09-03 宁波大学 一种无参考高动态范围图像客观质量评价方法
CN109218716B (zh) * 2018-10-22 2020-11-06 天津大学 基于色彩统计和信息熵无参考色调映射图像质量评价方法
CN109788275A (zh) * 2018-12-28 2019-05-21 天津大学 自然性、结构和双目不对称无参考立体图像质量评价方法
CN109919959B (zh) * 2019-01-24 2023-01-20 天津大学 基于色彩、自然性及结构的色调映射图像质量评价方法
EP4014487A1 (en) * 2019-08-15 2022-06-22 Dolby Laboratories Licensing Corporation Efficient user-defined sdr-to-hdr conversion with model templates
CN110717892B (zh) * 2019-09-18 2022-06-28 宁波大学 一种色调映射图像质量评价方法
CN110910346A (zh) * 2019-10-17 2020-03-24 浙江工商职业技术学院 基于稠密尺度不变特征变换的色调映射图像质量评价方法
CN113099215B (zh) * 2021-03-19 2022-06-21 宁波大学 一种卡通图像质量评价方法
CN117041531B (zh) * 2023-09-04 2024-03-15 无锡维凯科技有限公司 一种基于图像质量评估的手机摄像头聚焦检测方法和***

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103338380A (zh) * 2013-06-06 2013-10-02 宁波大学 一种自适应图像质量客观评价方法
CN105741328A (zh) * 2016-01-22 2016-07-06 西安电子科技大学 基于视觉感知的拍摄图像质量评价方法
CN105825500A (zh) * 2016-03-10 2016-08-03 江苏商贸职业学院 一种对相机图像质量的评价方法与装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103338380A (zh) * 2013-06-06 2013-10-02 宁波大学 一种自适应图像质量客观评价方法
CN105741328A (zh) * 2016-01-22 2016-07-06 西安电子科技大学 基于视觉感知的拍摄图像质量评价方法
CN105825500A (zh) * 2016-03-10 2016-08-03 江苏商贸职业学院 一种对相机图像质量的评价方法与装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
SUPPORTING BINOCULAR VISUAL QUALITY PREDICTION USING MACHINE LEARNING;Shanshan Wang;《Multimedia and Expo Workshops (ICMEW), 2014 IEEE International Conference on》;20140718;第2.2节 *
基于双目特征联合的无参考立体图像质量评价;李柯蒙;《光电子.激光》;20151130;第26卷(第11期);全文 *
高动态范围图像客观质量评价方法;管非凡;《计算机应用》;20170310;全文 *

Also Published As

Publication number Publication date
CN107105223A (zh) 2017-08-29

Similar Documents

Publication Publication Date Title
CN107105223B (zh) 一种基于全局特征的色调映射图像质量客观评价方法
CN110046673B (zh) 基于多特征融合的无参考色调映射图像质量评价方法
CN107172418B (zh) 一种基于曝光情况分析的色阶映射图像质量评价方法
CN103996192B (zh) 基于高质量自然图像统计量模型的无参考图像质量评价方法
CN108010024B (zh) 一种盲参考色调映射图像质量评价方法
CN106709958A (zh) 一种基于灰度梯度和颜色直方图的图像质量评价方法
CN108428227A (zh) 基于全卷积神经网络的无参考图像质量评价方法
CN105261013B (zh) 一种扫描图像质量综合评价方法及评价***
CN105574901B (zh) 一种基于局部对比度模式的通用无参考图像质量评价方法
CN107040775B (zh) 一种基于局部特征的色调映射图像质量客观评价方法
CN107396095B (zh) 一种无参考三维图像质量评价方法
CN104376565B (zh) 基于离散余弦变换和稀疏表示的无参考图像质量评价方法
CN110717892B (zh) 一种色调映射图像质量评价方法
CN109191460B (zh) 一种对于色调映射图像的质量评价方法
CN107146220B (zh) 一种通用型无参考图像质量评价方法
CN104658002A (zh) 一种无参考图像客观质量评价方法
CN110516716A (zh) 基于多分支相似度网络的无参考图像质量评价方法
CN105654465B (zh) 一种采用视差补偿视点间滤波的立体图像质量评价方法
CN109191450A (zh) 一种遥感图像融合质量评价方法
CN102722888A (zh) 基于生理与心理立体视觉的立体图像客观质量评价方法
CN109859166A (zh) 一种基于多列卷积神经网络的无参3d图像质量评估方法
CN106709504A (zh) 细节保持的高保真色调映射方法
CN105976351A (zh) 基于中央偏移的立体图像质量评价方法
CN112950596A (zh) 基于多区域多层次的色调映射全向图像质量评价方法
CN107018410A (zh) 一种基于预注意机制和空间依赖性的无参考图像质量评价方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20201202

Address after: Room 1,020, Nanxun Science and Technology Pioneering Park, No. 666 Chaoyang Road, Nanxun District, Huzhou City, Zhejiang Province, 313000

Patentee after: Huzhou You Yan Intellectual Property Service Co.,Ltd.

Address before: 315211 Zhejiang Province, Ningbo Jiangbei District Fenghua Road No. 818

Patentee before: Ningbo University

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20221221

Address after: Floor 4, Unit 1, Building J, No. 6, Zhongtai Road, Loucun Community, Xinhu Street, Guangming District, Shenzhen, Guangdong 518107

Patentee after: Shenzhen Weishi Photoelectric Technology Co.,Ltd.

Address before: 313000 room 1020, science and Technology Pioneer Park, 666 Chaoyang Road, Nanxun Town, Nanxun District, Huzhou, Zhejiang.

Patentee before: Huzhou You Yan Intellectual Property Service Co.,Ltd.

TR01 Transfer of patent right