于 明，路倩倩，劉玉菲，王 妃

(河北工業(yè)大學(xué)計算機科學(xué)與軟件學(xué)院，天津 300401)

自適應(yīng)復(fù)雜天氣的車牌定位方法*

于 明，路倩倩，劉玉菲，王 妃

(河北工業(yè)大學(xué)計算機科學(xué)與軟件學(xué)院，天津 300401)

針對傳統(tǒng)的車牌定位算法受天氣、光照影響而造成的低定位率問題，提出了一種自適應(yīng)的車牌定位算法。算法根據(jù)車牌顏色特征和圖像清晰度判斷不同天氣及對比度，利用小波系數(shù)調(diào)整法調(diào)整圖像對比度，最后利用垂直投影和模板匹配相融合的方法進(jìn)行車牌定位。所提出的定位算法具有廣泛的適應(yīng)性和較高的車牌定位率，可以在晴天、陰雨天、霧天、傍晚等多種不同光照條件下，對不同對比度的圖像進(jìn)行車牌定位。實驗結(jié)果表明，該定位方法的車牌平均定位率達(dá)到93.4%。

對比度；色彩特征；小波系數(shù)增強；車牌定位

1 引言

車牌識別系統(tǒng)(License Plate Recognition System)中的車牌定位的準(zhǔn)確度和精確度直接影響了后繼的字符分割和識別環(huán)節(jié)的性能。當(dāng)前，國內(nèi)外學(xué)者已提出了很多種車牌定位的方法，主要有基于彩色圖像特征的車牌定位算法[1]和基于灰度圖像的定位算法[2]兩大類。其中后者又可以細(xì)化為基于紋理特征[3]、基于BP神經(jīng)網(wǎng)絡(luò)[4]、基于形態(tài)學(xué)方法[5]的車牌定位。彩色圖像需要空間轉(zhuǎn)換，受光照影響很大，在對比度較高的晴天條件下有較高的定位率?；谏窠?jīng)網(wǎng)絡(luò)和形態(tài)學(xué)方法的車牌定位算法受背景干擾較大，計算量很大。這些算法在一定的條件下都能定位車牌，但這些定位算法解決的都是含噪聲較少、無遮擋的晴天等理想條件下的定位，對光照不足的霧天、陰雨天和傍晚等低對比度條件下[6]的定位研究很少。

本文在前人研究的基礎(chǔ)上使車牌定位算法能夠自動適配多種天氣條件及不同的對比度。在對比度較高的晴天利用顏色特征處理，簡化算法；在其他天氣條件下，依據(jù)圖像清晰度自適應(yīng)選用適當(dāng)?shù)男〔ɑ头纸鈱訑?shù)，然后利用多層系數(shù)調(diào)整法適當(dāng)調(diào)整圖像的對比度，最后利用模板匹配算法精確定位出復(fù)雜環(huán)境下的車牌。

2 車牌定位的總體流程

由于智能交通系統(tǒng)的拍攝環(huán)境是在戶外，車牌定位的算法要廣泛適用于各種復(fù)雜的條件，為了能對晴天、陰雨天、霧天和傍晚等低比度條件下的車牌圖像進(jìn)行定位，本文將算法分為兩部分：晴天條件下的車牌定位算法和陰雨天、霧天、傍晚等天氣條件(這里定位為非晴天條件)下的車牌定位。在晴天條件下，利用HSI(Hue Saturation Intensity)空間的特點，判斷車牌顏色，再利用車牌底色二值化。在非晴天條件下的車牌定位根據(jù)圖像的清晰度判定圖像是否需要進(jìn)行小波增強，然后利用局部算法進(jìn)行Bernsen二值化。最后，利用垂直投影和模板匹配相融合的算法進(jìn)行車牌定位。具體流程如圖1所示。

Figure 1 Flow chart of location algorithm圖1 定位算法流程圖

3 晴天光照圖像判斷及處理

現(xiàn)在常用的圖像處理模型有RGB(Red Green Blue)、HSI等顏色模型?？紤]HSI顏色模型更加接近人眼視覺成像特性，同時由于HSI顏色空間的顏色分量具有相互獨立性，相比正常無陰影區(qū)域，陰影區(qū)域的色度和飽和度區(qū)別較小，但是亮度會有很大的變化，因此在HSI空間進(jìn)行車牌定位比在RGB空間定位更加準(zhǔn)確。在HSI色彩模型中，人們通過感知顏色的色調(diào)(H)、飽和度(S)和亮度(I)來區(qū)分物體。根據(jù)中華人民共和國機動車牌號 GA36292 標(biāo)準(zhǔn)，我國常用的車牌底色為黑、白、藍(lán)、黃。利用HSI空間中的車牌顏色特征能夠較好地定位晴天條件下對比度較高、色彩鮮亮的車牌圖像，算法相對簡潔。

3.1 統(tǒng)計四種常用車牌底色所占的比例

在車牌定位系統(tǒng)中攝像機拍攝到的圖像一般用RGB空間表示，首先將車牌圖像從RGB空間轉(zhuǎn)向HSI空間。在HSI空間中可以找到我國規(guī)定的四種車牌底色分布規(guī)律，如公式(1)～公式(4)所示，然后根據(jù)這些公式統(tǒng)計四種底色的像素總數(shù)在圖像總像素中的比例。

黑色在HSI空間的表達(dá)公式：

(1)

白色在HSI空間的表達(dá)公式：

(2)

藍(lán)色在HSI空間的表達(dá)公式：

(3)

黃色在HSI空間的表達(dá)公式：

(4)

3.2 判定車牌底色并二值化

由于車牌定位系統(tǒng)使用的圖片是通過智能交通系統(tǒng)全天候在室外環(huán)境中拍攝到的車牌圖片，目前我國用于智能交通系統(tǒng)的攝像機的參數(shù)為：1/3英寸的CCD傳感器，清晰度為450線，拍攝的有效距離為10～30米。在此參數(shù)下，攝像機拍攝到的車輛從進(jìn)入監(jiān)控范圍到行駛出監(jiān)控范圍，圖像中車牌的區(qū)域面積占拍攝到整個圖像面積的范圍不會超出[0.03,0.1]。最后，統(tǒng)計車牌圖像中我國規(guī)定的車牌底色的四種顏色占整幅圖像的顏色比例Pi(i=1,2,3,4,分別表示黑、白、藍(lán)、黃四種顏色)。根據(jù)比例判定車牌底色的步驟如下：

步驟1若P1∈[0.03,0.1],則判定車牌底色為黑色；否則，跳轉(zhuǎn)到步驟2繼續(xù)判定。

步驟2若P2∈[0.03,0.1],則判定車牌底色為白色；否則，跳轉(zhuǎn)到步驟3繼續(xù)判定。

步驟3若P3∈[0.03,0.1],則判定車牌底色為藍(lán)色；否則，跳轉(zhuǎn)到步驟4繼續(xù)判定。

步驟4若P4∈[0.03,0.1],則判定車牌底色為黃色；否則，認(rèn)定圖像的背景顏色與車牌底色區(qū)別不明顯或是在其他天氣條件下拍攝到的圖像。

根據(jù)上述步驟判定車牌底色，對車牌圖像像素逐行掃描進(jìn)行二值化：若像素的顏色為四種底色之一，則設(shè)定像素的值為255，否則設(shè)定為0。

4 非晴天光照車牌圖像判斷及補償

4.1 統(tǒng)計車牌圖像的清晰度

在晴天和非晴天光照條件下，一部分車牌圖像雖然顏色特征不明顯，但是圖像足夠清晰，不需要進(jìn)行圖像增強。如果所有圖像不加區(qū)別、全部進(jìn)行圖像增強處理，部分圖像處理后的效果不會特別好，而且還會增加系統(tǒng)的開銷。

圖像清晰度是指圖像上的紋理及其邊界的清晰程度。常見的評價圖像清晰度的方法函數(shù)[7]有基于頻域變換的方法、基于圖像統(tǒng)計的方法和基于圖像邊緣檢測的方法。本文選用相對簡單的相鄰像素灰度方差法SMD(Sum Modulus Difference)。計算公式為：

(5)

其中,f(x,y)對應(yīng)圖像中(x,y)位置像素的灰度值，n=M*N為圖像的像素總數(shù)。

為了對圖像是否清晰做個量化的標(biāo)準(zhǔn)，本文引入圖像清晰度閾值S。在理想的光照條件下將鏡頭對準(zhǔn)靜止的車輛，均勻而連續(xù)地改變鏡頭與車牌的距離，使拍攝的畫面經(jīng)歷“模糊-清晰-模糊”的過程，圖像的清晰度與距離的函數(shù)成拋物線狀，當(dāng)圖像最清晰時，利用SMD算法計算圖像的清晰度s=10.17，當(dāng)圖像最不清晰時，s=4.87。通過觀測，本文選定s=5為清晰度閾值。若圖像的清晰度s小于5，則判斷圖像不夠清晰，需要進(jìn)行小波圖像增強;否則,認(rèn)定圖像清晰，算法直接跳轉(zhuǎn)到Bernsen算法。

4.2 基于小波變換的對比度增強和去噪

在光照較暗的傍晚或者有霧的情況下采集到的車牌圖像含噪聲污染且對比度很低，傳統(tǒng)車牌定位算法對此部分圖片的處理不能達(dá)到很好的效果。而當(dāng)前小波變換在目標(biāo)識別領(lǐng)域中占有越來越重要的地位。首先對低對比度的車牌圖像使用小波多尺度分析，調(diào)整小波系數(shù)，濾波消除背景噪聲，拉伸對比度以增強圖像。

由于小波變換具有多分辨率特性，故而可以在不同尺度上描述信號的局部特點，基于小波的圖像增強就是對圖像細(xì)節(jié)的增強、對噪聲的壓縮。基于小波的圖像增強通常分為小波變換、系數(shù)調(diào)整和小波逆變換三步。

(1)小波變換。

小波變換中主要考慮小波系數(shù)和選用的小波基，當(dāng)小波分解級數(shù)較少時，分解級數(shù)和圖像增強呈類似正比增加。但是，當(dāng)圖像增強到一定的程度，隨著級數(shù)的增加，效果不會再增強，且算法復(fù)雜度會增加。綜合考慮小波基的正交性、支撐寬度和正則性，本文利用sym5的小波基進(jìn)行兩級小波變換。對車牌圖像進(jìn)行一級小波分解,其基本分解原理如圖2a所示。其中，Aj為輸入圖像，Aj+1、Hj+1、Vj+1和Dj+1為經(jīng)過一級小波變換后得到的四個子圖：平滑子圖、水平子圖、垂直子圖和斜向子圖。對車牌圖像經(jīng)過一級小波分解后的效果如圖2c所示。

Figure 2 Wavelet enhancement圖2 小波增強

(2)多層次小波系數(shù)調(diào)整。

(6)

(3)小波逆變換。

最后利用sym5經(jīng)過兩級小波逆變換得到增強后圖像，如圖2d所示。

4.3 二值化及邊緣檢測突顯低對比度條件下目標(biāo)細(xì)節(jié)

小波變換結(jié)合二值化，能夠檢測到真正的圖像的弱邊緣。一般此種技術(shù)只應(yīng)用于低對比度下的目標(biāo)檢測，本文為了突出低對比度條件下車牌的灰度特征，選用突出細(xì)節(jié)較好的局部化算法：Bernsen算子和Canny算子。

二值化是車牌定位算法中的關(guān)鍵步驟。如果二值化中閾值選取不當(dāng)，將喪失較多細(xì)節(jié)，就不能很好顯示目標(biāo)車牌區(qū)域的特征，給基于紋理特征車牌定位造成困難?，F(xiàn)有閾值的選取方式可以分為全局閾值法和局部閾值法。全局閾值法是指根據(jù)整幅車牌圖像確定一個閾值，車牌圖像的細(xì)節(jié)丟失較嚴(yán)重。局部閾值法中的Bernsen算法，不但可以保留圖像的較多細(xì)節(jié)，還對存在遮擋和陰影的圖像有較好的二值化效果。圖3a為經(jīng)過Bernsen算法的效果圖。

Figure 3 License plate location圖3 車牌定位

5 基于垂直投影和模板匹配相結(jié)合的定位算法

目前常用的基于灰度圖像的車牌定位算法有基于掃描線的定位算法、基于投影的算法、基于支持向量機(Support Vector Machine)的算法及這些算法的擴(kuò)展。這些算法有些受復(fù)雜背景影響較大，有些算法較為復(fù)雜。本文利用垂直投影算法首先定位車牌垂直方向的區(qū)域，得到車牌的寬度，根據(jù)我國車牌的幾何特征創(chuàng)建模板，利用模板匹配法掃描上一步利用垂直投影法分割出的車牌子圖像，找到符合車牌區(qū)域特征的水平區(qū)域完成車牌的分割。主要利用了以下兩個特征：底色為黃色、藍(lán)色的車牌二值化后為黑底白字車牌特征和車牌字符的跳變特征。車牌區(qū)域有七個連續(xù)的字符，字符與字符之間存在一定的距離。從字符到車牌背景或者從背景到字符都存在一個跳變。牌照區(qū)域相對于其他非車牌區(qū)域的跳變多，跳變次數(shù)大于或等于18(通常為18，包括七個字符和兩個邊框，每個字符和邊框都有近兩次以上的跳變)。由于車牌一般懸掛在車身較低的位置,其下方?jīng)]有明顯的邊緣密集區(qū)域，為了提高算法的運算速率，減少復(fù)雜背景的影響，只對車牌圖像的下2/3進(jìn)行垂直投影。水平掃描搜索車牌的時候自下往上搜索。具體步驟如下：

(1)對經(jīng)過邊緣檢測后的車牌圖像進(jìn)行垂直投影，掃描垂直投影后的車牌圖像，統(tǒng)計投影圖像中各相鄰兩列黑色像素點數(shù)的絕對差值，并記錄各個差值所對應(yīng)的前一列的坐標(biāo)。

(2)利用冒泡排序法排列上述絕對差值，對其相應(yīng)的坐標(biāo)也進(jìn)行排序，取差值最大的18個坐標(biāo)值，從小到大排序，利用最小二乘法，去除突兀的點，剩下的坐標(biāo)值對應(yīng)的區(qū)域(如圖3b白線標(biāo)記內(nèi)的區(qū)域)即為車牌在垂直方向的區(qū)域。

(3)經(jīng)過垂直定位后，得到了車牌長度wide，根據(jù)車牌固有的長度特征比10∶3，便可以得到車牌的寬度height=0.3*wide，并創(chuàng)建大小為height*wide的矩形匹配模板。

(4)從下而上掃描上述步驟中得到的子圖像，由于車牌圖像在水平方向上車牌區(qū)域與其他區(qū)域具有明顯不同的特征，該區(qū)域邊緣豐富，在水平方向灰度跳變率大，即水平差分的累加值大。當(dāng)匹配模板中各行像素的水平差分累加值C為最大時，便準(zhǔn)確找到了車牌的水平位置(如圖3c所示)。其中C的計算公式如下：

(7)

其中，f(m,n)為圖像像素點(m,n)的灰度值。height、wide分別為第(3)步中創(chuàng)建的模板的高度和寬度(對應(yīng)車牌區(qū)域的高和寬)。

6 實驗結(jié)果與分析

為了檢測本算法的有效性和魯棒性，本文做了如下定義：定位到車牌區(qū)域至少包括全部的字符，最多不超過邊框0.5厘米為定位準(zhǔn)確。

選用清晰度為450線、分辨率為1 024*728的攝像頭，由于我國車牌的第一個字符為我國各省的簡稱，為了驗證算法的有效性，本文選取了31個省，每個省又選取了晴天、傍晚、霧天、陰天四種光照條件下的交通路口作為拍攝環(huán)境，每個省每種光照條件下分別拍攝了不同車型的汽車圖像各60張，一共7 440張樣本圖像。利用Matlab對采集到的圖片進(jìn)行處理，晴天條件下車牌底色和車牌背景相差較大的圖像的平均定位時間為3.26 s；晴天條件下的其他部分或者非晴天條件下對比度較高的圖像的定位時間為4.59 s，加入小波變換圖像增強的定位時間為5.65 s。利用本文算法進(jìn)行車牌定位，7 440張圖像中定位準(zhǔn)確的有6 949張，在各種光照條件下的車牌定位率為98.4%。具體在不同光照條件下的定位效果如圖4所示。圖4中的四組圖像依次為晴天、傍晚、霧天和陰天條件下選取的實驗樣本的實驗結(jié)果。

Figure 4 License plate location in different condition圖4 不同條件下的車牌定位效果

本文提出的算法對各種光照條件下拍攝的汽車圖像都有較高的識別準(zhǔn)確率，克服了傳統(tǒng)的基于顏色的車牌定位算法對光照條件要求較高和傳統(tǒng)的基于灰度特征的定位算法在前景目標(biāo)灰度和背景灰度相近時定位率較低的的問題，使整個定位算法有了很高的適應(yīng)性和魯棒性。不同光照條件下對基于彩色特征定位算法、普通灰度特征定位算法和本文定位算法的定位準(zhǔn)確率進(jìn)行比較(采集圖像數(shù)均為60)，結(jié)果如表1所示。

Table 1 Statistics of experiment results表1 定位算法準(zhǔn)確率實驗結(jié)果統(tǒng)計表 %

7 結(jié)束語

針對光線變化對車牌定位系統(tǒng)穩(wěn)定性的影響，提出了一種自適應(yīng)算法，能夠自動識別各種天氣條件和不同的對比度，從而轉(zhuǎn)向最優(yōu)的算法分支，使整個算法能夠在相對短的時間內(nèi)達(dá)到較高的定位率。通過對實際圖像的測試不難看出，該算法對復(fù)雜背景和陰影等帶來的影響也都有較好的作用，而且在小波變換的圖像分解時能夠降低噪聲對定位造成的影響，使算法的復(fù)雜度和定位的精確度達(dá)到最好的匹配。但是，對于強光下的曝光過度的車牌圖像的定位不能達(dá)到很好的效果，有待進(jìn)一步研究。

[1] Zhou Dong-sheng, Xue Yan-bin, Deng Wen-hui, et al. License plate locating method based on multi-feature in color image[J]. Journal of the Hebei Academy of Sciences, 2010,27(4):9-11.(in Chinese)

[2] Tang Ling-jie, Hu Hong-ping. Vehicle plate location method based on mathematical morphology and projection[J]. Electronic Test, 2012(7):76-80.(in Chinese)

[3] Wu Jia-ming, Wu Yi-quan. License plate location based on texture features chaotic particle swarm optimization[J]. CAAI Transactions on Intelligent Systems, 2011,6(4):333-338. (in Chinese)

[4] Yue Zhao-xin, Zeng Huang-lin. A new license plate positioning method based on improved edge characteristics extraction and BP network[J]. Computer Application and Software, 2011,28(12):86-87.(in Chinese)

[5] Li Xiong, Pei Cheng-ming, Zheng Hua. Kesearch on geometry morphology license plate recognition system based on IabVIEW[J]. Computer Simulation, 2012,29(4):353-356.(in Chinese)

[6] Duan Qi-chang, Song Na. A method of vehicle license plate image de-noising and location in low light level[C]∥Proc of 2010 WASE International Conference on Information Engineering,2010:194-198.

[7] Zhang Ya-tao, Ji Shu-peng, Wang Qiang-feng, et al. Definition evaluation algorithm based on regional contrast[J]. Journal of Applied Optics, 2012,33(2):293-298.(in Chinese)

附中文參考文獻(xiàn)：

[1] 周東升,薛彥兵,鄧文慧,等.基于多種特征的彩色車牌定位方法研究[J].河北省科學(xué)院學(xué)報, 2010,27(4):9-11.

[2] 唐靈潔,胡紅萍，白艷萍.一種基于數(shù)學(xué)形態(tài)學(xué)和投影的車牌定位方法[J].電子測試, 2012(7):76-80.

[3] 吳加明,吳一全. 基于Tent映射CPSO和車牌紋理特征的車牌定位[J].智能系統(tǒng)學(xué)報, 2011,6(4):333-338.

[4] 岳兆新,曾黃麟.一種改進(jìn)的基于邊緣特征提取BP網(wǎng)絡(luò)車牌定位的新方法[J].計算機應(yīng)用與軟件, 2011,28(12):86-87.

[5] 李雄,裴承鳴,鄭華.幾何特征形態(tài)學(xué)車牌識別系統(tǒng)研究[J].計算機仿真, 2012,29(4):353-356.

[7] 張亞濤，吉書鵬，王強鋒,等.基于區(qū)域?qū)Ρ榷鹊膱D像清晰度評價算法[J].應(yīng)用光學(xué), 2012,33(2)293-298.

YUMing,born in 1964,PhD,professor,his research interests include image processing, and pattern recognition.

路倩倩(1985-),女,河北石家莊人，碩士生，研究方向為圖像處理和模式識別。E-mail:luqian_2010@163.com

LUQian-qian,born in 1985,MS candidate,her research interests include image processing, and pattern recognition.

劉玉菲(1984-),男,遼寧開原人，碩士生，研究方向為圖像處理、計算機網(wǎng)絡(luò)和嵌入式系統(tǒng)。E-mail:779290757@qq.com

LIUYu-fei,born in 1984,MS candidate,his research interests include image processing, computer network, and embedded system.

王妃(1987-),女,黑龍江哈爾濱人，碩士生，研究方向為圖像處理和模式識別。E-mail:1623657032@qq.com

WANGFei,born in 1987,MS candidate,her research interests include image processing, and pattern recognition.

Adaptivelicenseplatelocationincomplexweather

YU Ming，LU Qian-qian，LIU Yu-fei，WANG Fei

(School of Computer Science and Engineering,Hebei University of Technology,Tianjin 300401,China)

According to the problem that the traditional license plate algorithms have low location rate when the images are collected in the changing weather or insufficient light, an adaptive license plate location algorithm is proposed. The algorithm determines the different weather and the image contrast by the color characteristics and image definition. The wavelet transform coefficients are used to reduce noise and stretch the contrast, achieving the effect of image enhancement. At last, it combines vertical protection and template matching algorithms to locate the license plate. The tests show that the use of the algorithm can effectively remove the noise, and solve the different-contrast license plate location in the sun, rain, fog and dusk conditions. The average rate of license plate location is 93.4%.

image contrast;color characteristics;enhancement of wavelet coefficients;license plate location

2012-09-10;

：2012-12-04

河北省科技支撐計劃資助項目(11213518D)

1007-130X(2014)02-0292-06

TP391.4

：A

10.3969/j.issn.1007-130X.2014.02.017

于明(1964-),男,河北秦皇島人，博士，教授，研究方向為圖像處理和模式識別。E-mail:yueeming@qq.com

通信地址：032000 山西省介休市機修廠小區(qū)3號樓203路倩倩Address:Room 203,Building 3,Machine Repair Community,Jiexiu 032000,Shanxi,P.R.China