首页 > 专利 > 宁波大学 > 一种基于全局特征的色调映射图像质量客观评价方法专利详情

一种基于全局特征的色调映射图像质量客观评价方法   0    0

有效专利 查看PDF
专利申请流程有哪些步骤?
专利申请流程图
申请
申请号:指国家知识产权局受理一件专利申请时给予该专利申请的一个标示号码。唯一性原则。
申请日:提出专利申请之日。
2017-03-20
申请公布
申请公布指发明专利申请经初步审查合格后,自申请日(或优先权日)起18个月期满时的公布或根据申请人的请求提前进行的公布。
申请公布号:专利申请过程中,在尚未取得专利授权之前,国家专利局《专利公报》公开专利时的编号。
申请公布日:申请公开的日期,即在专利公报上予以公开的日期。
2017-09-22
授权
授权指对发明专利申请经实质审查没有发现驳回理由,授予发明专利权;或对实用新型或外观设计专利申请经初步审查没有发现驳回理由,授予实用新型专利权或外观设计专利权。
2018-12-07
预估到期
发明专利权的期限为二十年,实用新型专利权期限为十年,外观设计专利权期限为十五年,均自申请日起计算。专利届满后法律终止保护。
2037-03-20
基本信息
有效性 有效专利 专利类型 发明专利
申请号 CN201710164242.8 申请日 2017-03-20
公开/公告号 CN107105223B 公开/公告日 2018-12-07
授权日 2018-12-07 预估到期日 2037-03-20
申请年 2017年 公开/公告年 2018年
缴费截止日
分类号 H04N17/00H04N17/02 主分类号 H04N17/00
是否联合申请 独立申请 文献类型号 B
独权数量 1 从权数量 1
权利要求数量 2 非专利引证数量 1
引用专利数量 3 被引证专利数量 0
非专利引证 1、管非凡.高动态范围图像客观质量评价方法《.计算机应用》.2017,李柯蒙.基于双目特征联合的无参考立体图像质量评价《.光电子.激光》.2015,第26卷(第11期),Shanshan Wang.SUPPORTING BINOCULARVISUAL QUALITY PREDICTION USING MACHINELEARNING《.Multimedia and Expo Workshops(ICMEW), 2014 IEEE InternationalConference on》.2014,;
引用专利 CN105741328A、CN105825500A、CN103338380A 被引证专利
专利权维持 1 专利申请国编码 CN
专利事件 事务标签 公开、实质审查、授权
申请人信息
申请人 第一申请人
专利权人 宁波大学 当前专利权人 宁波大学
发明人 邵枫、姜求平、李福翠 第一发明人 邵枫
地址 浙江省宁波市江北区风华路818号 邮编 315211
申请人数量 1 发明人数量 3
申请人所在省 浙江省 申请人所在市 浙江省宁波市
代理人信息
代理机构
专利代理机构是经省专利管理局审核,国家知识产权局批准设立,可以接受委托人的委托,在委托权限范围内以委托人的名义办理专利申请或其他专利事务的服务机构。
宁波奥圣专利代理事务所 代理人
专利代理师是代理他人进行专利申请和办理其他专利事务,取得一定资格的人。
周珏
摘要
本发明公开了一种基于全局特征的色调映射图像质量客观评价方法,其包括训练阶段和测试阶段两个过程;其考虑了自然场景统计特征和颜色统计特征对色调映射的影响,提取出色调映射图像的全局特征矢量,然后利用支持向量回归对训练图像集中的所有色调映射图像的全局特征矢量进行训练,构造质量预测模型;在测试阶段,通过计算用作测试的色调映射图像的全局特征矢量,并根据训练阶段构造的质量预测模型,预测得到该色调映射图像的质量客观评价预测值,由于获得的全局特征矢量信息具有较强的稳定性,且能够较好地反映色调映射图像的质量变化情况,因此有效地提高了客观评价结果与主观感知之间的相关性。
  • 摘要附图
    一种基于全局特征的色调映射图像质量客观评价方法
  • 说明书附图:图1
    一种基于全局特征的色调映射图像质量客观评价方法
法律状态
序号 法律状态公告日 法律状态 法律状态信息
1 2020-12-15 专利权的转移 登记生效日: 2020.12.02 专利权人由宁波大学变更为湖州优研知识产权服务有限公司 地址由315211 浙江省宁波市江北区风华路818号变更为313000 浙江省湖州市南浔区南浔镇朝阳路666号南浔科技创业园一层1020室
2 2018-12-07 授权
3 2017-09-22 实质审查的生效 IPC(主分类): H04N 17/00 专利申请号: 201710164242.8 申请日: 2017.03.20
4 2017-08-29 公开
权利要求
权利要求书是申请文件最核心的部分,是申请人向国家申请保护他的发明创造及划定保护范围的文件。
1.一种基于全局特征的色调映射图像质量客观评价方法,其特征在于包括训练阶段和
测试阶段两个过程;
所述的训练阶段过程的具体步骤为:
①_1、选取N幅色调映射图像构成训练图像集,记为 其中,N>1,1≤k≤
N, 表示 中的第k幅色调映射图像, 中的每幅色调映射图
像的宽度为W,且高度为H;
①_2、计算 中的每幅色调映射图像的自然场景统计特征矢量,将 的
自然场景统计特征矢量记为 其中, 的维数为5×1;
所述的步骤①_2中的 的获取过程为:
①_2a、计算 中的每幅色调映射图像中的所有像素点的像素值的均值,
将 中的所有像素点的像素值的均值记为ρ, 然后计算
中的每幅色调映射图像中的所有像素点的像素值的标准差,将 中的所
有像素点的像素值的标准差记为δ, 接着计算
中的每幅色调映射图像中的所有像素点的像素值的偏度,将 中的所有像素点的像素值
的偏度记为θ, 并计算 中的每幅色调映射图像中
的所有像素点的像素值的峰度,将 中的所有像素点的像素值的峰度记为κ,
再计算 中的每幅色调映射图像中的所有像素
点的像素值的熵,将 中的所有像素点的像素值的熵记为η, 其中,1
≤x≤W,1≤y≤H, 表示 中坐标位置为(x,y)的像素点的像素值,0≤g≤255,pg
表示 中的所有像素点的像素值中属于第g个密度值的概率密度函数值,
①_2b、通过对 中的所有色调映射图像各自中的所有像素点的像素值的
均值进行高斯分布拟合,拟合得到 中的所有色调映射图像的均值高斯分布
拟合曲线,然后根据拟合得到的均值高斯分布拟合曲线获得ρ的拟合值,记为fρ,
同样,通过对 中的所有色调映射图像各自中
的所有像素点的像素值的标准差进行高斯分布拟合,拟合得到 中的所有色
调映射图像的标准差高斯分布拟合曲线,然后根据拟合得到的标准差高斯分布拟合曲线获
得δ的拟合值,记为fδ, 通过对 中的所有色调
映射图像各自中的所有像素点的像素值的偏度进行高斯分布拟合,拟合得到
中的所有色调映射图像的偏度高斯分布拟合曲线,然后根据拟合得到的偏
度高斯分布拟合曲线获得θ的拟合值,记为fθ, 通过对
中的所有色调映射图像各自中的所有像素点的像素值的峰度进行高斯分布
拟合,拟合得到 中的所有色调映射图像的峰度高斯分布拟合曲线,然后根据拟
合得到的峰度高斯分布拟合曲线获得κ的拟合值,记为fκ,
通过对 中的所有色调映射图像各自中的所有像素点的像素值的熵进行高斯
分布拟合,拟合得到 中的所有色调映射图像的熵高斯分布拟合曲线,然后根据
拟合得到的熵高斯分布拟合曲线获得η的拟合值,记为fη,
其中,μρ和σρ表示均值高斯分布拟合曲线的参数值,exp()表示以自然基数e为底的指数函
数,μδ和σδ表示标准差高斯分布拟合曲线的参数值,μθ和σθ表示偏度高斯分布拟合曲线的参数值,μκ和λκ表示峰度高斯分布拟合曲线的参数值,μη和ση表示熵高斯分布拟合曲线的参数值;
①_2c、将fρ、fδ、fθ、fκ和fη按序排列,得到 其中,符号“[]”
为矢量表示符号;
①_3、计算 中的每幅色调映射图像的颜色统计特征矢量,将 的颜色
统计特征矢量记为 其中, 的维数为18×1;
①_4、将 中的每幅色调映射图像的自然场景统计特征矢量和颜色统计
特征矢量构成 中的每幅色调映射图像的全局特征矢量,将 的全局特征
矢量记为Fk, 其中,Fk的维数为23×1,符号“[]”为矢量表示符号,
表示将 和 连接起来形成一个全局特征矢量;
①_5、将 中的所有色调映射图像各自的全局特征矢量和平均主观评分
差值构成训练样本数据集合,训练样本数据集合中包含N个全局特征矢量和N个平均主观评
分差值;然后采用支持向量回归作为机器学习的方法,对训练样本数据集合中的所有全局
特征矢量进行训练,使得经过训练得到的回归函数值与平均主观评分差值之间的误差最
小,拟合得到最优的权重矢量wopt和最优的偏置项bopt;接着利用最优的权重矢量wopt和最优
的偏置项bopt,构造质量预测模型,记为f(F), 其中,f()为函数表示
形式,F用于表示色调映射图像的全局特征矢量,且作为质量预测模型的输入矢量,(wopt)T
为wopt的转置, 为F的线性函数;
所述的测试阶段过程的具体步骤为:
②对于任意一幅用作测试的色调映射图像Itest,按照步骤①_2至步骤①_4相同的操作,
获取Itest的全局特征矢量,记为Ftest;然后根据训练阶段构造的质量预测模型对Ftest进行测
试,预测得到Ftest对应的预测值,将该预测值作为Itest的质量客观评价预测值,记为Qtest,
其中,Itest的宽度为W',且高度为H',Ftest的维数为23×1, 表
示Ftest的线性函数。

2.根据权利要求1所述的一种基于全局特征的色调映射图像质量客观评价方法,其特
征在于所述的步骤①_3中的 的获取过程为:
①_3a、将 在RGB颜色空间的三个分量分别记为{Rk(x,y)}、{Gk(x,y)}和{Bk(x,y)},
其中,1≤x≤W,1≤y≤H,Rk(x,y)表示{Rk(x,y)}中坐标位置为(x,y)的像素点的像素值,Gk
(x,y)表示{Gk(x,y)}中坐标位置为(x,y)的像素点的像素值,Bk(x,y)表示{Bk(x,y)}中坐标
位置为(x,y)的像素点的像素值;
①_3b、对{Rk(x,y)}进行归一化操作,将{Rk(x,y)}经归一化操作后得到的图像记为
将 中坐标位置为(x ,y)的像素点的像素值记为
并对{Gk(x,y)}进行归一化操作,将{Gk(x,y)}经归一化操作后得到
的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
对{Bk(x,y)}进行归一化操作,将{Bk(x,y)}经归一化操作后得到的
图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
其中, 表示{Rk(x,y)}中的所有像素点的像素值的均值,
表示{Rk(x ,y)}中的所有像素点的像素值的标准差,
表示{Gk(x,y)}中的所有像素点的像素值的均值,
表示{Gk(x,y)}中的所有像素点的像素值的标准差,
表示{Bk(x,y)}中的所有像素点的像素值的均值,
表示{Bk(x,y)}中的所有像素点的像素值的标准差,
①_3c、采用广义高斯分布模型对 的颜色分布进行拟合,拟合得到 的
拟合曲线,记为gR(h), 并采用广义高斯分布模型对
的颜色分布进行拟合,拟合得到 的拟合曲线,记为gG(h),
采用广义高斯分布模型对 的颜色分布进
行拟合,拟合得到 的拟合曲线,记为gB(h),
其中,0≤h≤255,αR表示拟合曲线gR(h)的尺度参数,βR表示拟合曲线gR(h)的形状参数,exp
()表示以自然基数e为底的指数函数,符号“| |”为取绝对值符号,
t为积分变量,αG表示拟合曲线gG(h)的尺度参数,βG表示拟合曲线gG(h)的形状参数,
αB表示拟合曲线gB(h)的尺度参数,βB表示拟合曲线gB(h)的形状参
数,
①_3d、将 在CIELAB颜色空间的三个分量分别记为{Lk(x,y)}、{ak(x,y)}和{bk(x,
y)},其中,Lk(x,y)表示{Lk(x,y)}中坐标位置为(x,y)的像素点的像素值,ak(x,y)表示{ak
(x,y)}中坐标位置为(x,y)的像素点的像素值,bk(x,y)表示{bk(x,y)}中坐标位置为(x,y)
的像素点的像素值;
①_3e、对{Lk(x,y)}进行归一化操作,将{Lk(x,y)}经归一化操作后得到的图像记为
将 中坐标位置为(x,y)的像素点的像素值记为
并对{ak(x,y)}进行归一化操作,将{ak(x,y)}经归一化操作后得到
的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
对{bk(x,y)}进行归一化操作,将{bk(x,y)}经归一化操作后得到的
图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
其中, 表示 中的所有像素点的像素值的均值,
表示{Lk(x ,y)}中的所有像素点的像素值的标准差,
表示{ak(x,y)}中的所有像素点的像素值的均值,
表示{ak(x,y)}中的所有像素点的像素值的标准差,
表示{bk(x,y)}中的所有像素点的像素值的均值,
表示{bk(x ,y)}中的所有像素点的像素值的标准差,
①_3f、采用广义高斯分布模型对 的颜色分布进行拟合,拟合得到 的
拟合曲线,记为gL(h), 并采用广义高斯分布模型对
的颜色分布进行拟合,拟合得到 的拟合曲线,记为ga(h),
采用广义高斯分布模型对 的颜色分布进行
拟合,拟合得到 的拟合曲线,记为gb(h), 其
中,αL表示拟合曲线gL(h)的尺度参数,βL表示拟合曲线gL(h)的形状参数,
αa表示拟合曲线ga(h)的尺度参数,βa表示拟合曲线ga(h)的形状参
数, αb表示拟合曲线gb(h)的尺度参数,βb表示拟合曲线gb(h)的形状
参数,
①_3g、将 在YCbCr颜色空间的三个分量分别记为{Yk(x,y)}、{Uk(x,y)}和{Vk(x,
y)},其中,Yk(x,y)表示{Yk(x,y)}中坐标位置为(x,y)的像素点的像素值,Uk(x,y)表示{Uk
(x,y)}中坐标位置为(x,y)的像素点的像素值,Vk(x,y)表示{Vk(x,y)}中坐标位置为(x,y)
的像素点的像素值;
①_3h、对{Yk(x,y)}进行归一化操作,将{Yk(x,y)}经归一化操作后得到的图像记为
将 中坐标位置为(x ,y)的像素点的像素值记为
并对{Uk(x,y)}进行归一化操作,将{Uk(x,y)}经归一化操作后得到
的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
对{Vk(x,y)}进行归一化操作,将{Vk(x,y)}经归一化操作后得到的
图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
其中, 表示{Yk(x,y)}中的所有像素点的像素值的均值,
表示{Yk(x,y)}中的所有像素点的像素值的标准差,
表示{Uk(x,y)}中的所有像素点的像素值的均值,
表示{Uk(x,y)}中的所有像素点的像素值的标准差,
表示{Vk(x,y)}中的所有像素点的像素值的均值,
表示{Vk(x ,y)}中的所有像素点的像素值的标准差,
①_3i、采用广义高斯分布模型对 的颜色分布进行拟合,拟合得到 的
拟合曲线,记为gY(h), 并采用广义高斯分布模型对
的颜色分布进行拟合,拟合得到 的拟合曲线,记为gU(h),
采用广义高斯分布模型对 的颜色分布进行
拟合,拟合得到 的拟合曲线,记为gV(h), 其
中,αY表示拟合曲线gY(h)的尺度参数,βY表示拟合曲线gY(h)的形状参数,
αU表示拟合曲线gU(h)的尺度参数,βU表示拟合曲线gU(h)的形状参
数, αV表示拟合曲线gV(h)的尺度参数,βV表示拟合曲线gV(h)的形状
参数,
①_3j、将αR、βR、αG、βG、αB、βB、αL、βL、αa、βa、αb、βb、αY、βY、αU、βU、αV和βV按序排列,得到其中,符号“[]”为矢
量表示符号。
说明书

技术领域

[0001] 本发明涉及一种图像质量评价方法,尤其是涉及一种基于全局特征的色调映射图像质量客观评价方法。

背景技术

[0002] 随着显示技术的快速发展,高动态范围图像(HDR)已越来越受到关注。高动态范围图像的层次丰富,可以达到远比普通图像更逼近现实的光影效果。然而,传统的显示设备只
能支持低动态范围的显示输出。为了解决真实场景和传统的显示设备的动态范围不匹配的
矛盾,目前提出了许多高动态范围图像的色调映射(Tone Mapping)算法。高动态范围图像
的色调映射算法的目标是将高动态范围图像的亮度压缩到传统的显示设备可以接受的范
围,同时尽可能保留原图的细节信息,并避免造成图像瑕疵。因此,如何准确、客观地评价不
同色调映射方法的性能,对指导内容制作和后期处理具有十分重要的作用。
[0003] 而对于色调映射图像质量评价而言,如果直接将现有的图像质量评价方法应用于色调映射图像,则由于色调映射图像只有高动态范围图像作为参考,因此会导致无法精确
预测得到客观评价值。因此,如何在评价过程中有效地提取出视觉特征,使得客观评价结果
更加感觉符合人类视觉系统,是在对色调映射图像进行客观质量评价过程中需要研究解决
的问题。

发明内容

[0004] 本发明所要解决的技术问题是提供一种基于全局特征的色调映射图像质量客观评价方法,其能够有效地提高客观评价结果与主观感知之间的相关性。
[0005] 本发明解决上述技术问题所采用的技术方案为:一种基于全局特征的色调映射图像质量客观评价方法,其特征在于包括训练阶段和测试阶段两个过程;
[0006] 所述的训练阶段过程的具体步骤为:
[0007] ①_1、选取N幅色调映射图像构成训练图像集,记为 其中,N>1,1≤k≤N, 表示 中的第k幅色调映射图像, 中的每幅色调映射
图像的宽度为W,且高度为H;
[0008] ①_2、计算 中的每幅色调映射图像的自然场景统计特征矢量,将的自然场景统计特征矢量记为 其中, 的维数为5×1;
[0009] ①_3、计算 中的每幅色调映射图像的颜色统计特征矢量,将 的颜色统计特征矢量记为 其中, 的维数为18×1;
[0010] ①_4、将 中的每幅色调映射图像的自然场景统计特征矢量和颜色统计特征矢量构成 中的每幅色调映射图像的全局特征矢量,将 的全局
特征矢量记为Fk, 其中,Fk的维数为23×1,符号“[]”为矢量表示符号,
表示将 和 连接起来形成一个全局特征矢量;
[0011] ①_5、将 中的所有色调映射图像各自的全局特征矢量和平均主观评分差值构成训练样本数据集合,训练样本数据集合中包含N个全局特征矢量和N个平均主
观评分差值;然后采用支持向量回归作为机器学习的方法,对训练样本数据集合中的所有
全局特征矢量进行训练,使得经过训练得到的回归函数值与平均主观评分差值之间的误差
最小,拟合得到最优的权重矢量wopt和最优的偏置项bopt;接着利用最优的权重矢量wopt和最
优的偏置项bopt,构造质量预测模型,记为f(F), 其中,f()为函数表
示形式,F用于表示色调映射图像的全局特征矢量,且作为质量预测模型的输入矢量,(wopt
)T为wopt的转置, 为F的线性函数;
[0012] 所述的测试阶段过程的具体步骤为:
[0013] ②对于任意一幅用作测试的色调映射图像Itest,按照步骤①_2至步骤①_4相同的操作,获取Itest的全局特征矢量,记为Ftest;然后根据训练阶段构造的质量预测模型对Ftest
进行测试,预测得到Ftest对应的预测值,将该预测值作为Itest的质量客观评价预测值,记为
Qtest, 其中,Itest的宽度为W',且高度为H',Ftest的维数为23×1,
表示Ftest的线性函数。
[0014] 所述的步骤①_2中的 的获取过程为:
[0015] ①_2a、计算 中的每幅色调映射图像中的所有像素点的像素值的均值,将 中的所有像素点的像素值的均值记为ρ, 然后计算
中的每幅色调映射图像中的所有像素点的像素值的标准差,将 中的所
有像素点的像素值的标准差记为δ, 接着计算
中的每幅色调映射图像中的所有像素点的像素值的偏度,将 中的所有像素点的像素值
的偏度记为θ, 并计算 中的每幅色调映射图像中
的所有像素点的像素值的峰度,将 中的所有像素点的像素值的峰度记为κ,
再计算 中的每幅色调映射图像中的所有像素点的
像素值的熵,将 中的所有像素点的像素值的熵记为η, 其中,1≤x≤W,1
≤y≤H, 表示 中坐标位置为(x,y)的像素点的像素值,0≤g≤255,pg表示 中
的所有像素点的像素值中属于第g个密度值的概率密度函数值,
[0016] ①_2b、通过对 中的所有色调映射图像各自中的所有像素点的像素值的均值进行高斯分布拟合,拟合得到 中的所有色调映射图像的均值高斯
分布拟合曲线,然后根据拟合得到的均值高斯分布拟合曲线获得ρ的拟合值,记为fρ,
同样,通过对 中的所有色调映射图像各自中
的所有像素点的像素值的标准差进行高斯分布拟合,拟合得到 中的所有色
调映射图像的标准差高斯分布拟合曲线,然后根据拟合得到的标准差高斯分布拟合曲线获
得δ的拟合值,记为fδ, 通过对 中的所有色调
映射图像各自中的所有像素点的像素值的偏度进行高斯分布拟合,拟合得到
中的所有色调映射图像的偏度高斯分布拟合曲线,然后根据拟合得到的偏
度高斯分布拟合曲线获得θ的拟合值,记为fθ, 通过对
中的所有色调映射图像各自中的所有像素点的像素值的峰度进行高斯分布
拟合,拟合得到 中的所有色调映射图像的峰度高斯分布拟合曲线,然后根据
拟合得到的峰度高斯分布拟合曲线获得κ的拟合值,记为fκ,
通过对 中的所有色调映射图像各自中的所有像素点的像素值的熵进行高斯
分布拟合,拟合得到 中的所有色调映射图像的熵高斯分布拟合曲线,然后根据
拟合得到的熵高斯分布拟合曲线获得η的拟合值,记为fη,
其中,μρ和σρ表示均值高斯分布拟合曲线的参数值,exp()表示以自然基数e为底的指数函
数,μδ和σδ表示标准差高斯分布拟合曲线的参数值,μθ和σθ表示偏度高斯分布拟合曲线的参
数值,μκ和λκ表示峰度高斯分布拟合曲线的参数值,μη和ση表示熵高斯分布拟合曲线的参数
值;
[0017] ①_2c、将fρ、fδ、fθ、fκ和fη按序排列,得到 其中,符号“[]”为矢量表示符号。
[0018] 所述的步骤①_3中的 的获取过程为:
[0019] ①_3a、将 在RGB颜色空间的三个分量分别记为{Rk(x,y)}、{Gk(x,y)}和{Bk(x,y)},其中,1≤x≤W,1≤y≤H,Rk(x,y)表示{Rk(x,y)}中坐标位置为(x,y)的像素点的像素
值,Gk(x,y)表示{Gk(x,y)}中坐标位置为(x,y)的像素点的像素值,Bk(x,y)表示{Bk(x,y)}
中坐标位置为(x,y)的像素点的像素值;
[0020] ①_3b、对{Rk(x,y)}进行归一化操作,将{Rk(x,y)}经归一化操作后得到的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
并对{Gk(x,y)}进行归一化操作,将{Gk(x,y)}经归一化操作后得到
的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
对{Bk(x,y)}进行归一化操作,将{Bk(x,y)}经归一化操作后得到的
图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
其中, 表示{Rk(x,y)}中的所有像素点的像素值的均值,
表示{Rk(x ,y)}中的所有像素点的像素值的标准差,
表示{Gk(x,y)}中的所有像素点的像素值的均值,
表示{Gk(x ,y)}中的所有像素点的像素值的标准差,
表示{Bk(x,y)}中的所有像素点的像素值的均值,
表示{Bk(x ,y)}中的所有像素点的像素值的标准差,
[0021] ①_3c、采用广义高斯分布模型对 的颜色分布进行拟合,拟合得到的拟合曲线,记为gR(h), 并采用广义高斯
分布模型对 的颜色分布进行拟合,拟合得到 的拟合曲线,记为gG(h),
采用广义高斯分布模型对 的颜色分布进
行拟合,拟合得到 的拟合曲线,记为gB(h),
其中,0≤h≤255,αR表示拟合曲线gR(h)的尺度参数,βR表示拟合曲线gR(h)的形状参数,exp
()表示以自然基数e为底的指数函数,符号“||”为取绝对值符号, t
为积分变量,αG表示拟合曲线gG(h)的尺度参数,βG表示拟合曲线gG(h)的形状参数,
αB表示拟合曲线gB(h)的尺度参数,βB表示拟合曲线gB(h)的形状参
数,
[0022] ①_3d、将 在CIELAB颜色空间的三个分量分别记为{Lk(x,y)}、{ak(x,y)}和{bk(x,y)},其中,Lk(x,y)表示{Lk(x,y)}中坐标位置为(x,y)的像素点的像素值,ak(x,y)表示
{ak(x,y)}中坐标位置为(x,y)的像素点的像素值,bk(x,y)表示{bk(x,y)}中坐标位置为(x,
y)的像素点的像素值;
[0023] ①_3e、对{Lk(x,y)}进行归一化操作,将{Lk(x,y)}经归一化操作后得到的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
并对{ak(x,y)}进行归一化操作,将{ak(x,y)}经归一化操作后得到
的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
对{bk(x,y)}进行归一化操作,将{bk(x,y)}经归一化操作后得到的
图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
其中, 表示{Lk(x,y)}中的所有像素点的像素值的均值,
表示{Lk(x ,y)}中的所有像素点的像素值的标准差,
表示{ak(x,y)}中的所有像素点的像素值的均值,
表示{ak(x,y)}中的所有像素点的像素值的标准差,
表示{bk(x,y)}中的所有像素点的像素值的均值,
表示{bk(x,y)}中的所有像素点的像素值的标准差,
[0024] ①_3f、采用广义高斯分布模型对 的颜色分布进行拟合,拟合得到的拟合曲线,记为gL(h), 并采用广义高斯分
布模型对 的颜色分布进行拟合,拟合得到 的拟合曲线,记为ga(h),
采用广义高斯分布模型对 的颜色分布进行
拟合,拟合得到 的拟合曲线,记为gb(h), 其
中,αL表示拟合曲线gL(h)的尺度参数,βL表示拟合曲线gL(h)的形状参数,
αa表示拟合曲线ga(h)的尺度参数,βa表示拟合曲线ga(h)的形状参
数, αb表示拟合曲线gb(h)的尺度参数,βb表示拟合曲线gb(h)的形状
参数,
[0025] ①_3g、将 在YCbCr颜色空间的三个分量分别记为{Yk(x,y)}、{Uk(x,y)}和{Vk(x,y)},其中,Yk(x,y)表示{Yk(x,y)}中坐标位置为(x,y)的像素点的像素值,Uk(x,y)表示
{Uk(x,y)}中坐标位置为(x,y)的像素点的像素值,Vk(x,y)表示{Vk(x,y)}中坐标位置为(x,
y)的像素点的像素值;
[0026] ①_3h、对{Yk(x,y)}进行归一化操作,将{Yk(x,y)}经归一化操作后得到的图像记为 将 中坐标位置为(x ,y)的像素点的像素值记为
并对{Uk(x,y)}进行归一化操作,将{Uk(x,y)}经归一化操作后得到
的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
对{Vk(x,y)}进行归一化操作,将{Vk(x,y)}经归一化操作后得到
的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
其中, 表示{Yk(x,y)}中的所有像素点的像素值的均值,
表示{Yk(x ,y)}中的所有像素点的像素值的标准差,
表示{Uk(x,y)}中的所有像素点的像素值的均值,
表示{Uk(x ,y)}中的所有像素点的像素值的标准差,
表示{Vk(x,y)}中的所有像素点的像素值的均值,
表示{Vk(x ,y)}中的所有像素点的像素值的标准差,
[0027] ①_3i、采用广义高斯分布模型对 的颜色分布进行拟合,拟合得到的拟合曲线,记为gY(h), 并采用广义高斯
分布模型对 的颜色分布进行拟合,拟合得到 的拟合曲线,记为gU(h),
采用广义高斯分布模型对 的颜色分布进行
拟合,拟合得到 的拟合曲线,记为gV(h), 其
中,αY表示拟合曲线gY(h)的尺度参数,βY表示拟合曲线gY(h)的形状参数,
αU表示拟合曲线gU(h)的尺度参数,βU表示拟合曲线gU(h)的形状参
数, αV表示拟合曲线gV(h)的尺度参数,βV表示拟合曲线gV(h)的形状
参数,
[0028] ①_3j、将αR、βR、αG、βG、αB、βB、αL、βL、αa、βa、αb、βb、αY、βY、αU、βU、αV和βV按序排列,得到其中,符号“[]”为矢量表示符号。
[0029] 与现有技术相比,本发明的优点在于:
[0030] 本发明方法考虑了自然场景统计特征和颜色统计特征对色调映射的影响,提取出色调映射图像的全局特征矢量,然后利用支持向量回归对训练图像集中的所有色调映射图
像的全局特征矢量进行训练,构造质量预测模型;在测试阶段,通过计算用作测试的色调映
射图像的全局特征矢量,并根据训练阶段构造的质量预测模型,预测得到该色调映射图像
的质量客观评价预测值,由于获得的全局特征矢量信息具有较强的稳定性,且能够较好地
反映色调映射图像的质量变化情况,因此有效地提高了客观评价结果与主观感知之间的相
关性。

实施方案

[0032] 以下结合附图实施例对本发明作进一步详细描述。
[0033] 本发明提出的一种基于全局特征的色调映射图像质量客观评价方法,其总体实现框图如图1所示,其包括训练阶段和测试阶段两个过程。
[0034] 所述的训练阶段过程的具体步骤为:
[0035] ①_1、选取N幅色调映射图像构成训练图像集,记为 其中,N>1,在本实施例中选取TMID数据库中的120幅色调映射图像、选取ESPL-LIVE数据库中的1811幅色
调映射图像,1≤k≤N, 表示 中的第k幅色调映射图像,
中的每幅色调映射图像的宽度为W,且高度为H。
[0036] ①_2、计算 中的每幅色调映射图像的自然场景统计(SceneNaturalness)特征矢量,将 的自然场景统计特征矢量记为 其中, 的维数
为5×1。
[0037] 在本实施例中,步骤①_2中的 的获取过程为:
[0038] ①_2a、计算 中的每幅色调映射图像中的所有像素点的像素值的均值,将 中的所有像素点的像素值的均值记为ρ, 然后计算
中的每幅色调映射图像中的所有像素点的像素值的标准差,将 中的所
有像素点的像素值的标准差记为δ, 接着计算
中的每幅色调映射图像中的所有像素点的像素值的偏度,将 中的所有像素点的像素值
的偏度记为θ, 并计算 中的每幅色调映射图像中
的所有像素点的像素值的峰度,将 中的所有像素点的像素值的峰度记为κ,
再计算 中的每幅色调映射图像中的所有像素
点的像素值的熵,将 中的所有像素点的像素值的熵记为η, 其中,1≤
x≤W,1≤y≤H, 表示 中坐标位置为(x,y)的像素点的像素值,0≤g≤255,pg表
示 中的所有像素点的像素值中属于第g个密度值的概率密度函数值,
[0039] ①_2b、通过对 中的所有色调映射图像各自中的所有像素点的像素值的均值进行高斯分布拟合,拟合得到 中的所有色调映射图像的均值高
斯分布拟合曲线,然后根据拟合得到的均值高斯分布拟合曲线获得ρ的拟合值,记为fρ,
同样,通过对 中的所有色调映射图像各自
中的所有像素点的像素值的标准差进行高斯分布拟合,拟合得到 中的所有
色调映射图像的标准差高斯分布拟合曲线,然后根据拟合得到的标准差高斯分布拟合曲线
获得δ的拟合值,记为fδ, 通过对 中的所有色
调映射图像各自中的所有像素点的像素值的偏度进行高斯分布拟合,拟合得到
中的所有色调映射图像的偏度高斯分布拟合曲线,然后根据拟合得到的偏
度高斯分布拟合曲线获得θ的拟合值,记为fθ, 通过对
中的所有色调映射图像各自中的所有像素点的像素值的峰度进行高斯分布拟
合,拟合得到 中的所有色调映射图像的峰度高斯分布拟合曲线,然后根据拟
合得到的峰度高斯分布拟合曲线获得κ的拟合值,记为fκ, 通
过对 中的所有色调映射图像各自中的所有像素点的像素值的熵进行高斯分
布拟合,拟合得到 中的所有色调映射图像的熵高斯分布拟合曲线,然后根据
拟合得到的熵高斯分布拟合曲线获得η的拟合值,记为fη,
其中,μρ和σρ表示均值高斯分布拟合曲线的参数值,在本实施例中取μρ=121.70、σρ=
36.11,exp()表示以自然基数e为底的指数函数,μδ和σδ表示标准差高斯分布拟合曲线的参
数值,在本实施例中取μδ=56.47、σδ=18.43,μθ和σθ表示偏度高斯分布拟合曲线的参数值,
在本实施例中取μθ=0.15、σθ=0.89,μκ和λκ表示峰度高斯分布拟合曲线的参数值,在本实
施例中取μκ=2.82、λκ=18.86,μη和ση表示熵高斯分布拟合曲线的参数值,在本实施例中取
μη=7.56、ση=0.27。
[0040] ①_2c、将fρ、fδ、fθ、fκ和fη按序排列,得到 其中,符号“[]”为矢量表示符号。
[0041] ①_3、计算 中的每幅色调映射图像的颜色统计(Chromatic Information)特征矢量,将 的颜色统计特征矢量记为 其中, 的维数为18×1。
[0042] 在本实施例中,步骤①_3中的 的获取过程为:
[0043] ①_3a、将 在RGB颜色空间的三个分量分别记为{Rk(x,y)}、{Gk(x,y)}和{Bk(x,y)},其中,1≤x≤W,1≤y≤H,Rk(x,y)表示{Rk(x,y)}中坐标位置为(x,y)的像素点的像素
值,Gk(x,y)表示{Gk(x,y)}中坐标位置为(x,y)的像素点的像素值,Bk(x,y)表示{Bk(x,y)}
中坐标位置为(x,y)的像素点的像素值。
[0044] ①_3b、对{Rk(x,y)}进行归一化操作,将{Rk(x,y)}经归一化操作后得到的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
并对{Gk(x,y)}进行归一化操作,将{Gk(x,y)}经归一化操作后得到
的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
对{Bk(x,y)}进行归一化操作,将{Bk(x,y)}经归一化操作后得到的
图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
其中, 表示{Rk(x,y)}中的所有像素点的像素值的均值,
表示{Rk(x ,y)}中的所有像素点的像素值的标准差,
表示{Gk(x,y)}中的所有像素点的像素值的均值,
表示{Gk(x,y)}中的所有像素点的像素值的标准差,
表示{Bk(x,y)}中的所有像素点的像素值的均值,
表示{Bk(x,y)}中的所有像素点的像素值的标准差,
[0045] ①_3c、采用现有的广义高斯分布(GGD)模型对 的颜色分布进行拟合,拟合得到 的拟合曲线,记为gR(h), 并采用现
有的广义高斯分布(GGD)模型对 的颜色分布进行拟合,拟合得到 的拟合
曲线,记为gG(h), 采用现有的广义高斯分布(GGD)模
型对 的颜色分布进行拟合,拟合得到 的拟合曲线,记为gB(h),
其中,0≤h≤255,αR表示拟合曲线gR(h)的尺度参
数,βR表示拟合曲线gR(h)的形状参数,exp()表示以自然基数e为底的指数函数,符号“||”
为取绝对值符号, t为积分变量,αG表示拟合曲线gG(h)的尺度参数,
βG表示拟合曲线gG(h)的形状参数, αB表示拟合曲线gB(h)的尺度参
数,βB表示拟合曲线gB(h)的形状参数,
[0046] ①_3d、将 在CIELAB颜色空间的三个分量分别记为{Lk(x,y)}、{ak(x,y)}和{bk(x,y)},其中,Lk(x,y)表示{Lk(x,y)}中坐标位置为(x,y)的像素点的像素值,ak(x,y)表示
{ak(x,y)}中坐标位置为(x,y)的像素点的像素值,bk(x,y)表示{bk(x,y)}中坐标位置为(x,
y)的像素点的像素值。
[0047] ①_3e、对{Lk(x,y)}进行归一化操作,将{Lk(x,y)}经归一化操作后得到的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
并对{ak(x,y)}进行归一化操作,将{ak(x,y)}经归一化操作后得到
的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
对{bk(x,y)}进行归一化操作,将{bk(x,y)}经归一化操作后得到的
图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
其中, 表示{Lk(x,y)}中的所有像素点的像素值的均值,
表示{Lk(x ,y)}中的所有像素点的像素值的标准差,
表示{ak(x,y)}中的所有像素点的像素值的均值,
表示{ak(x ,y)}中的所有像素点的像素值的标准差,
表示{bk(x,y)}中的所有像素点的像素值的均值,
表示{bk(x ,y)}中的所有像素点的像素值的标准差,
[0048] ①_3f、采用现有的广义高斯分布(GGD)模型对 的颜色分布进行拟合,拟合得到 的拟合曲线,记为gL(h), 并采用现
有的广义高斯分布(GGD)模型对 的颜色分布进行拟合,拟合得到 的拟合
曲线,记为ga(h), 采用现有的广义高斯分布(GGD)模
型对 的颜色分布进行拟合,拟合得到 的拟合曲线,记为gb(h),
其中,αL表示拟合曲线gL(h)的尺度参数,βL表示拟合
曲线gL(h)的形状参数, αa表示拟合曲线ga(h)的尺度参数,βa表示拟
合曲线ga(h)的形状参数, αb表示拟合曲线gb(h)的尺度参数,βb表示
拟合曲线gb(h)的形状参数,
[0049] ①_3g、将 在YCbCr颜色空间的三个分量分别记为{Yk(x,y)}、{Uk(x,y)}和{Vk(x,y)},其中,Yk(x,y)表示{Yk(x,y)}中坐标位置为(x,y)的像素点的像素值,Uk(x,y)表示
{Uk(x,y)}中坐标位置为(x,y)的像素点的像素值,Vk(x,y)表示{Vk(x,y)}中坐标位置为(x,
y)的像素点的像素值。
[0050] ①_3h、对{Yk(x,y)}进行归一化操作,将{Yk(x,y)}经归一化操作后得到的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
并对{Uk(x,y)}进行归一化操作,将{Uk(x,y)}经归一化操作后得到
的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
对{Vk(x,y)}进行归一化操作,将{Vk(x,y)}经归一化操作后得到的
图像记为 将 中坐标位置为(x,y)的像素点的像素值记为
其中, 表示{Yk(x,y)}中的所有像素点的像素值的均值,
表示{Yk(x ,y)}中的所有像素点的像素值的标准差,
表示{Uk(x,y)}中的所有像素点的像素值的均值,
表示{Uk(x ,y)}中的所有像素点的像素值的标准差,
表示{Vk(x,y)}中的所有像素点的像素值的均值,
表示{Vk(x ,y)}中的所有像素点的像素值的标准差,
[0051] ①_3i、采用现有的广义高斯分布(GGD)模型对 的颜色分布进行拟合,拟合得到 的拟合曲线,记为gY(h), 并采用现有
的广义高斯分布(GGD)模型对 的颜色分布进行拟合,拟合得到 的拟合曲
线,记为gU(h), 采用现有的广义高斯分布(GGD)模型
对 的颜色分布进行拟合,拟合得到 的拟合曲线,记为gV(h),
其中,αY表示拟合曲线gY(h)的尺度参数,βY表示拟合
曲线gY(h)的形状参数, αU表示拟合曲线gU(h)的尺度参数,βU表示
拟合曲线gU(h)的形状参数, αV表示拟合曲线gV(h)的尺度参数,βV表
示拟合曲线gV(h)的形状参数,
[0052] ①_3j、将αR、βR、αG、βG、αB、βB、αL、βL、αa、βa、αb、βb、αY、βY、αU、βU、αV和βV按序排列,得到其中,符号“[]”为矢量表示符号。
[0053] ①_4、将 中的每幅色调映射图像的自然场景统计特征矢量和颜色统计特征矢量构成 中的每幅色调映射图像的全局特征矢量,将 的全局
特征矢量记为Fk, 其中,Fk的维数为23×1,符号“[]”为矢量表示符号,
表示将 和 连接起来形成一个全局特征矢量。
[0054] ①_5、将 中的所有色调映射图像各自的全局特征矢量和平均主观评分差值构成训练样本数据集合,训练样本数据集合中包含N个全局特征矢量和N个平均主
观评分差值;然后采用支持向量回归作为机器学习的方法,对训练样本数据集合中的所有
全局特征矢量进行训练,使得经过训练得到的回归函数值与平均主观评分差值之间的误差
最小,拟合得到最优的权重矢量wopt和最优的偏置项bopt;接着利用最优的权重矢量wopt和最
优的偏置项bopt,构造质量预测模型,记为f(F), 其中,f()为函数表
示形式,F用于表示色调映射图像的全局特征矢量,且作为质量预测模型的输入矢量,(wopt
)T为wopt的转置, 为F的线性函数。
[0055] 所述的测试阶段过程的具体步骤为:
[0056] ②对于任意一幅用作测试的色调映射图像Itest,按照步骤①_2至步骤①_4相同的操作,获取Itest的全局特征矢量,记为Ftest;然后根据训练阶段构造的质量预测模型对Ftest
进行测试,预测得到Ftest对应的预测值,将该预测值作为Itest的质量客观评价预测值,记为
Qtest, 其中,Itest的宽度为W',且高度为H',W'可与W相同或不相同,
H'可与H相同或不相同,Ftest的维数为23×1, 表示Ftest的线性函数。
[0057] 在本实施例中,采用加拿大滑铁卢大学建立的TMID数据库和美国德克萨斯大学奥斯汀分校建立的ESPL-LIVE数据库作为色调映射图像数据库,TMID数据库包括120幅色调映
射图像,ESPL-LIVE数据库包括1811幅色调映射图像。利用评估图像质量评价方法的2个常
用客观参量作为评价指标,即非线性回归条件下的Pearson线性相关系数(Pearson linear 
correlation coefficient,PLCC)和Spearman秩等级相关系数(Spearman rank order 
correlation coefficient,SROCC)。PLCC和SROCC越高说明本发明方法的评价结果与平均
主观评分差值的相关性越好。表1给出了本发明方法得到的质量客观评价预测值与平均主
观评分差值之间的相关性,从表1中可以看出,采用本发明方法得到的色调映射图像的质量
客观评价预测值与平均主观评分差值之间的相关性是很高的,表明客观评价结果与人眼主
观感知的结果较为一致,足以说明本发明方法的有效性。
[0058] 表1采用本发明方法得到的质量客观评价预测值与平均主观评分差值之间的相关性
[0059]数据库 PLCC SROCC
TMID 0.744 0.698
ESPL-LIVE 0.639 0.629

附图说明

[0031] 图1为本发明方法的总体实现框图。
版权所有:盲专网 ©2023 zlpt.xyz  蜀ICP备2023003576号