李昆侖 熊婷 張炘 廖頻
關(guān)鍵詞: 級(jí)聯(lián)SVM; 人臉檢測(cè); 圖像識(shí)別; 質(zhì)量評(píng)價(jià)系統(tǒng); 分類性能; 噪聲退化
中圖分類號(hào): TN911.73?34; TM76 ? ? ? ? ? ? ? ? ?文獻(xiàn)標(biāo)識(shí)碼: A ? ? ? ? ? ? ? ?文章編號(hào): 1004?373X(2018)24?0098?03
Non?reference face image quality evaluation system based on cascaded SVM
LI Kunlun1, XIONG Ting1, ZHANG Xin1, LIAO Pin2
(1. School of Science and Technology, Nanchang University, Nanchang 330029, China;
2. School of Information Engineering, Nanchang University, Nanchang 330029, China)
Abstract: In allusion to the problem that the low?quality face image seriously affects face detection and classification accuracy, a non?reference face image quality evaluation system based on cascaded SVM is proposed. The datasets of face images with different degrees of blur, uneven illumination and noise degradation are used to train the cascaded SVM according to the classification performance of face images. The output of the SVM is taken as the evaluation score of the image quality. The simulation test and experimental results show that the proposed system can deal with various degradation situations well, and obtain more accurate evaluation scores in comparison with the traditional image quality evaluation method.
Keywords: cascaded SVM; face detection; image recognition; quality evaluation system; classification performance; noise degradation
隨著數(shù)字時(shí)代的到來和計(jì)算機(jī)技術(shù)的發(fā)展,人臉檢測(cè)與識(shí)別技術(shù)已被廣泛應(yīng)用于各種身份確認(rèn)場(chǎng)景[1]。然而實(shí)際應(yīng)用中,受拍攝、傳輸和保存環(huán)境的影響,難以有效控制人臉圖像的質(zhì)量,大幅降低了人臉識(shí)別的精度[2]。國(guó)內(nèi)外研究者為了在數(shù)據(jù)源頭上提升人臉檢測(cè)與識(shí)別系統(tǒng)的性能,通過加入圖像質(zhì)量評(píng)估環(huán)節(jié)來摒棄低質(zhì)量的圖像,確保僅有高質(zhì)量的圖像才能進(jìn)入檢測(cè)系統(tǒng)[3?4]。
目前,主要有基于主觀感受和基于客觀標(biāo)準(zhǔn)的圖像質(zhì)量評(píng)價(jià)方法[5]。其中,主觀質(zhì)量評(píng)估方法是通過觀測(cè)者直接觀看并對(duì)測(cè)試圖像進(jìn)行評(píng)判來給出具體分值的方法[6];客觀評(píng)估方法通過提取圖像的結(jié)構(gòu)、紋理和細(xì)節(jié)等特征,并使用計(jì)算機(jī)技術(shù)評(píng)判圖像質(zhì)量??陀^評(píng)價(jià)方法根據(jù)對(duì)原圖的依賴程度可以分為全參考圖像質(zhì)量評(píng)價(jià)、半?yún)⒖紙D像質(zhì)量評(píng)價(jià)和無參考圖像質(zhì)量評(píng)價(jià)3種類型[7]。全參考圖像質(zhì)量評(píng)價(jià)方法通過比較退化圖像與原始圖像間的相似程度對(duì)退化圖像評(píng)分;半?yún)⒖紙D像質(zhì)量評(píng)價(jià)方法通過模擬圖像的退化模型來評(píng)估圖像質(zhì)量,具有較差的通用性;無參考圖像質(zhì)量評(píng)價(jià)方法在無參考圖像的基礎(chǔ)上,利用圖像的統(tǒng)計(jì)信息將圖像的退化過程疊加為一個(gè)退化系統(tǒng)來評(píng)估退化圖像的質(zhì)量。
本文從人臉圖像分類性能出發(fā),提出一種基于級(jí)聯(lián)SVM[8?10]無參考人臉圖像質(zhì)量評(píng)價(jià)系統(tǒng)。根據(jù)人臉圖像的分類性能[11?12]對(duì)圖像進(jìn)行評(píng)分,并可較好地對(duì)不同程度的模糊、光照不均及含噪聲退化的人臉圖像進(jìn)行評(píng)價(jià)。
本文提出的基于級(jí)聯(lián)SVM的無參考人臉圖像質(zhì)量評(píng)價(jià)系統(tǒng)框架如圖1所示。首先從Multi?PIE數(shù)據(jù)庫中挑選出一個(gè)噪聲少、光照均勻、姿態(tài)端正和清晰的高質(zhì)量人臉圖像子集Q;然后分別合成模糊、光照不均、姿態(tài)變化和含噪聲的降質(zhì)人臉圖像;最后使用級(jí)聯(lián)SVM對(duì)人臉圖像進(jìn)行分類,將分類性能作為人臉圖像質(zhì)量評(píng)估值。
1.1 ?退化圖像合成
本文通過構(gòu)建不同類型的降質(zhì)圖像模型來獲得各種降質(zhì)程度的模糊、光照不均和含噪聲的人臉圖像數(shù)據(jù)集。下面分別介紹各種降質(zhì)模型及合成的人臉圖像。
1) 模糊降質(zhì)模型。運(yùn)動(dòng)模糊的圖像是由單次曝光時(shí)間內(nèi)不同位置傳感器在不同時(shí)刻的像素混疊形成的,其模糊范圍和領(lǐng)域形狀由運(yùn)動(dòng)屬性和曝光時(shí)間決定。運(yùn)動(dòng)模糊模型可以表示為:
[g(x,y)=0Tf(x-xm(t),y-ym(t))dt]
式中:[xm(t)]為原圖像在x方向上的運(yùn)動(dòng)分量;[ym(t)]為原圖像在y方向上的運(yùn)動(dòng)分量;T為曝光時(shí)間。對(duì)于勻速運(yùn)動(dòng)的圖像有[xm(t)=vxt],[ym(t)=vyt]。通過改變x方向和y方向的運(yùn)動(dòng)速度[vx,vy]可以得到不同模糊程度的運(yùn)動(dòng)模糊圖像。
如圖2所示為本文合成的模糊圖像。其中,圖2a)~圖2c)為原始圖像,圖2d)~圖2f)為對(duì)應(yīng)的運(yùn)動(dòng)模糊圖像。
2) 光照不均降質(zhì)模型。光照不均即光照角度和光照條件的變化造成的偏光現(xiàn)象。本文通過將圖像的灰度直方圖壓縮到較狹窄的范圍,得到不同亮度的人臉圖像。如圖3所示為本文合成的光照不均圖像。其中,圖3a)~圖3c)為原始圖像,圖3d)~圖3f)為對(duì)應(yīng)的光照不均圖像。
3) 噪聲降質(zhì)模型。本文通過在清晰人臉圖像中添加高斯噪聲,來合成噪聲降質(zhì)圖像。高斯噪聲模型如下:
[p(n)=12πσexp-n-μ22σ2]
式中:n為噪聲的幅值;[μ]和[σ]分別為噪聲期望與方差。如圖4所示為添加不同程度噪聲后得到的降質(zhì)圖像。
1.2 ?級(jí)聯(lián)SVM分類
級(jí)聯(lián)SVM通過重復(fù)訓(xùn)練多個(gè)SVM模型來提升目標(biāo)檢測(cè)和分類的性能,本文通過構(gòu)建級(jí)聯(lián)SVM對(duì)退化的人臉圖像進(jìn)行分類以獲得圖像的評(píng)估分?jǐn)?shù)。級(jí)聯(lián)SVM的訓(xùn)練、構(gòu)造流程如圖5所示。
本文首先分別測(cè)試了在不同程度模糊(B1~B5),光照不均(L1~L5)和含噪聲(N1~N5)的人臉圖像數(shù)據(jù)集上,人臉圖像的分類性能及圖像質(zhì)量評(píng)估值。其結(jié)果如表1所示。
從表1中可以看出,對(duì)于各種降質(zhì)圖像本文評(píng)估方法得到的評(píng)估分?jǐn)?shù)均較低。為了進(jìn)一步驗(yàn)證本文評(píng)估方法的有效性,本文使用下式所示的SROCC指標(biāo)來計(jì)算本文算法評(píng)估結(jié)果是否與人眼評(píng)估結(jié)果一致。SROCC指標(biāo)定義如下:
[SROCC=1-6i=1Nd2iN(N2-1)]
式中,d表示同一張人臉圖像使用不同評(píng)估方法得到的圖像質(zhì)量分?jǐn)?shù)的排名差。表2所示為使用PSNR,SSIM指標(biāo)與本文評(píng)估指標(biāo)的比較結(jié)果。從表中可看出,本文評(píng)估方法在各種數(shù)據(jù)集中均可獲得較高的評(píng)估精度。
本文提出一種基于級(jí)聯(lián)SVM的無參考人臉圖像質(zhì)量評(píng)價(jià)系統(tǒng)。該系統(tǒng)將級(jí)聯(lián)SVM的輸出作為人臉圖像質(zhì)量的評(píng)分依據(jù),對(duì)圖像的分類性能進(jìn)行評(píng)價(jià)。仿真測(cè)試與實(shí)驗(yàn)結(jié)果表明,所提出的系統(tǒng)能較好地處理不同程度的模糊、光照不均和含噪聲退化的人臉圖像,相比于傳統(tǒng)的圖像質(zhì)量評(píng)估方式能獲得更準(zhǔn)確的評(píng)估分?jǐn)?shù)。
參考文獻(xiàn)
[1] 王濤,王佰玲.非均勻光照條件下的彩色人臉圖像增強(qiáng)[J].計(jì)算機(jī)工程與應(yīng)用,2017,53(5):164?169.
WANG Tao, WANG Bailing. Enhancement method for color face image with non?uniform illumination [J]. Computer engineering and applications, 2017, 53(5): 164?169.
[2] 呂風(fēng)杰,信科.基于小波域峰態(tài)值的無參考噪聲圖像評(píng)價(jià)算法[J].計(jì)算機(jī)工程與應(yīng)用,2017,53(7):202?205.
L? Fengjie, XIN Ke. Blind noisy image quality assessment algorithm based on wavelet kurtosis [J]. Computer engineering and applications, 2017, 53(7): 202?205.
[3] 樓申龍,虞中捷.基于FSIM和不同顏色模型的彩色圖像評(píng)價(jià)方法研究[J].電腦知識(shí)與技術(shù),2017, 13(7):226?228.
LOU Shenlong, YU Zhongjie. The study of colored image quality assessment based on FSIM & diverse color models [J]. Computer knowledge and technology, 2017, 13(7): 226?228.
[4] 張文娟,張麗麗,王艷紅.基于非局部結(jié)構(gòu)張量的SSIM圖像質(zhì)量評(píng)價(jià)方法[J].計(jì)算機(jī)應(yīng)用研究,2017,34(10):3162?3164.
ZHANG Wenjuan, ZHANG Lili, WANG Yanhong. SSIM image quality assessment based on nonlocal structure tensor [J]. Application research of computers, 2017, 34(10): 3162?3164.
[5] 李紅麗,馬耀鋒.基于多特征融合和混合核SVM的目標(biāo)識(shí)別方法[J].沈陽工業(yè)大學(xué)學(xué)報(bào),2018,40(4):441?446.
LI Hongli, MA Yaofeng. Target recognition method based on multi?feature fusion and hybrid kernel SVM [J]. Journal of Shenyang University of Technology, 2018, 40(4): 441?446.
[6] 李俊峰,方建良,戴文戰(zhàn).基于色彩感知的無參考圖像質(zhì)量評(píng)價(jià)[J].儀器儀表學(xué)報(bào),2015,36(2):339?350.
LI Junfeng, FANG Jianliang, DAI Wenzhan. No?reference image quality assessment based on color perception [J]. Chinese journal of scientific instrument, 2015, 36(2): 339?350.
[7] 朱文斌,陳強(qiáng),楊曦晨.無參考圖像質(zhì)量評(píng)價(jià)[J].現(xiàn)代電子技術(shù),2015,38(18):81?88.
ZHU Wenbin, CHEN Qiang, YANG Xichen. No?reference assessment algorithms for image quality [J]. Modern electronics technique, 2015, 38(18): 81?88.
[8] 邊航,汪友生.基于遺傳算法和AdaboostSVM的人臉檢測(cè)算法[J].計(jì)算機(jī)與數(shù)字工程,2017,45(7):1407?1410.
BIAN Hang, WANG Yousheng. Face detection based on genetic algorithms and AdaboostSVM algorithm [J]. Computer and digital engineering, 2017, 45(7): 1407?1410.
[9] 朱偉,黃湘鵬,杜瀚宇,等.基于ORBP和級(jí)聯(lián)分類的實(shí)時(shí)行人檢測(cè)算法[J].指揮信息系統(tǒng)與技術(shù),2017,8(5):104?108.
ZHU Wei, HUANG Xiangpeng, DU Hanyu, et al. Real?time pedestrian detection algorithm based on ORBP and cascade classifier [J]. Command information system and technology, 2017, 8(5): 104?108.
[10] 李振雨,王好臣,王功亮,等.基于級(jí)聯(lián)Adaboost和神經(jīng)網(wǎng)絡(luò)主元分析算法的人臉檢測(cè)系統(tǒng)[J].科學(xué)技術(shù)與工程,2018,18(1):280?286.
LI Zhenyu, WANG Haochen, WANG Gongliang, et al. Face detection system based on cascade′s algorithm of Adaboost and principal component analysis [J]. Science technology and engineering, 2018, 18(1): 280?286.
[11] 翟社平,李煬,馬蒙雨,等.基于LBP和SVM的人臉檢測(cè)[J].計(jì)算機(jī)技術(shù)與發(fā)展,2017,27(9):44?47.
ZHAI Sheping, LI Yang, MA Mengyu, et al. Face detection based on LBP and SVM [J]. Computer technology and development, 2017, 27(9): 44?47.
[12] 黃超,薄華.基于卷積神經(jīng)網(wǎng)絡(luò)結(jié)合SVM的人臉識(shí)別研究[J].微型機(jī)與應(yīng)用,2017,36(15):56?58.
HUANG Chao, BO Hua. Study on face recognition based on CNN and SVM [J]. Microcomputer & its applications, 2017, 36(15): 56?58.