Page 131 - 《武汉大学学报(信息科学版)》2025年第10期
P. 131

2066                            武 汉 大 学 学 报  (信 息 科 学 版)                       2025 年 10 月























                                      图 2 特定区域识别模块示意图(指定车辆的挡风玻璃区域检测)
                        Fig.  2 Illustration of Specific Areas Recognition Module (Windshield Detection of Designated Vehicles)
                1.3 无参考图像质量评估模块                                  要求特征提取器具有良好的特征提取能力,另一
                     为了结合基于参考图和无真实参考图的图                          方面,为了保留重建图像的噪声,需要选取具有
                像 质 量 评 估 方 法 的 优 点 ,受 生 成 对 抗 网 络      [14-15]  弱的抗噪能力的特征提取器;对抗损失是为了学
                (generative  adversarial  network,  GAN)启 发 ,本   会鉴别输入图像是否是真样本或假样本,真假样
                文提出了一种协同质量评估的对抗学习网络和                             本标签的判断与图像质量评估任务协同,即如果
                新的对抗训练方式,通过生成重建图像为伪参考                            生成图像能帮助提升对实际图像的质量评估性
                图像,从而将较困难的无参考图像质量评估问题                            能,那么它被赋予真样本标签。
                转变成相对简单的有参考图像质量评估问题。                                 具体而言,分别记理想图像为 I r、退化图像为
                     本质上,本文方法未借助真实参考图像,仍                         I d、重建图像为 I c,为了产生成对的退化图像与重
                然属于无参考图像质量评估的范畴。同时,尽管                            建图像,如图 3(a)所示,在生成器模块中,先使用
                本文所生成的伪参考图可能图像质量较好,但是                            理想图像(图像质量高的图像,从数据集中选取)
                它不能代替原始图像作为后续任务(例如有关部                            通过随机退化的方式转变成退化图像;然后通过
                门执法时对证据的选取)的输入。一方面因为这                            生成器将退化图像恢复为重建图像。
                些后续任务需要原始图像保证证据的真实性,另                                为 了 训 练 生 成 器 ,采 用 像 素 损 失 和 特 征 损
                一方面因为本文中的模型比较关注伪参考图对                             失,如图 3(b)所示,像素损失是理想图像和重建
                图像质量评估任务的贡献,保留对图像质量有益                            图像的像素点的 L 1 损失:
                的特征,而忽略伪参考图本身的某些其他图像特                                         L 1 = ∑ ||g ( I d )- I r || 2 2  (1)
                征,这可能导致伪参考图的部分信息丢失。                              式中, g ( ) 为生成器。特征损失为重建图像和理
                1.3.1 结合质量评估和协同学习的伪参考图的生成                        想图像特征之间的 L 2 损失:
                     本文设计的对抗网络联合了图像质量评估                                   L 2 = ∑ ||ϕ( g ( I d ) )- ϕ( I r )|| 2 2  (2)
                网络,通过两者的协同学习,以对抗训练的方式                            式中, ϕ 为特征提取器,可以使用预训练的浅层网
                生成有助于提升图像质量评估的伪参考图。因                             络,比如 VGG-19    [16] ,预训练的网络保证其具有良
                此,要求该对抗网络具有以下特点:(1)生成图像                          好的特征提取能力,浅层的网络保证其具有弱的
                和理想图像的像素距离较小;(2)生成图像和理                           去噪能力,确保能捕捉失真信息。
                想图像的特征距离较小;(3)生成图像能够提升                               此外,本文还提出了与鉴别器模块相对应的
                真实图像的质量评估的性能。                                    对抗损失,如图 3(c)所示。目的是学会鉴别输入
                     基于这 3 点,本文提出了像素损失、特征损失                      图像是否是真样本或假样本。为了得到输入图
                和对抗损失。像素损失是理想图像和重建图像                             像的真值标签,本文结合了图像质量评估任务,
                的像素点之间的损失,惩罚重建图像和理想图像                            并设置两组基线。即使输入图像不是特别清晰
                之间每个像素点的不同;特征损失的目的是降低                            的重建图像,与基线相比较,如果它能帮助提升
                重建图像的特征和理想图像的特征的差距,一方                            对实际预测图像的质量评估器的性能,那么它可
                面,为了能够提供结构化和纹理化的特征信息,                            被赋予真样本标签。
   126   127   128   129   130   131   132   133   134   135   136