楊金鋒，李承尚，史玉坤

（中國民航大學天津市智能信號與圖像處理重點實驗室，天津 300300）

手指多模態(tài)生物特征偏振成像系統(tǒng)設計

楊金鋒，李承尚，史玉坤

（中國民航大學天津市智能信號與圖像處理重點實驗室，天津 300300）

獲得穩(wěn)定、清晰的生物特征圖像始終是生物特征識別技術(shù)需要解決的關(guān)鍵問題。手指多模態(tài)生物特征偏振成像系統(tǒng)能夠?qū)崿F(xiàn)手指紋、指靜脈、指節(jié)紋生物特征的同時采集，并具有如下優(yōu)點：自動調(diào)節(jié)指靜脈攝像頭和指節(jié)紋攝像頭的位置，使ROI（感興趣區(qū)域）位于采集圖像的中心位置；實現(xiàn)多光譜采集時對不同波段光束的順序控制和量化控制，利用偏振成像原理有效抑制成像噪聲。

手指；多模態(tài)生物特征；偏振成像；多光譜

近幾十年來，生物識別技術(shù)日益受到人們的關(guān)注，并已成為身份鑒別領域的一個核心方向。以單一生物特征為基礎的單模態(tài)生物特征識別已得到廣泛應用，但是單模態(tài)生物識別技術(shù)容易受到外界環(huán)境以及生物特征受損等內(nèi)在因素雙重影響，在很多應用情況下單模態(tài)生物識別技術(shù)都不能有效滿足身份鑒別的實際需求[1-2]。以多個生物特征融合為基礎的多模態(tài)生物識別技術(shù)能夠彌補單模態(tài)生物識別技術(shù)的許多不足，因此逐漸受到人們的重視。采集清晰可靠的生物特征圖像是生物識別技術(shù)需要解決的首要問題。本文提出的是一種利用偏振光成像原理同時采集指紋、指靜脈、指節(jié)紋三模態(tài)特征圖像的系統(tǒng)。

目前對指紋的研究已比較成熟[3-4]，應用較為廣泛，但指紋特征存在著易損傷、易污染以及易偽造等缺陷。指靜脈位于皮下，靜脈特征不易受損、污染而且不易復制[5-6]。但靜脈特征成像困難，采用傳統(tǒng)成像方式無法得到高質(zhì)量的特征圖像。指節(jié)紋位于手指背側(cè)，受污染和磨損的概率比較小，而且受關(guān)節(jié)活動的影響，指節(jié)紋也不易偽造[7-8]。但是指關(guān)節(jié)的活動以及指關(guān)節(jié)皮膚的粗糙度會給指節(jié)紋特征圖像帶來較大噪聲和類內(nèi)變化。手指3個模態(tài)生物特征各有優(yōu)缺點，將3個模態(tài)融合起來，發(fā)揮各模態(tài)的優(yōu)點，規(guī)避各自缺點將成為手指生物特征識別的一個重要方向。

綜合考慮生物組織的多光譜特性和偏振光成像特點，該系統(tǒng)采用以偏振光原理為基礎的成像方案。手指多模態(tài)生物特征偏振成像系統(tǒng)由采集裝置和計算機組成，如圖1所示。首先根據(jù)指紋、指靜脈和指節(jié)紋的生理特征，本文設計了采集裝置的構(gòu)架。從三模態(tài)特征成像原理設計了成像光路和控制電路。以硬件為基礎設計了成像采集軟件系統(tǒng)。

1 采集裝置設計

如圖1所示，采集裝置包括：單片機、LED選擇電路、滑動模塊、LED陣列、指紋采集儀、指靜脈攝像頭、指節(jié)紋攝像頭、0°起偏器、0°檢偏濾片、90°檢偏濾片、高通濾片、低通濾片。單片機與LED選擇電路和滑動模塊相連接，并通過串口與計算機相連接。

圖1 成像系統(tǒng)原理圖Fig.1 Schematic diagram of capturing system

1.1 成像光路設計

醫(yī)學研究表明，近紅外光容易被靜脈中的脫氧血紅蛋白吸收而能夠穿透其它生物組織[7]，所以采用近紅外發(fā)光二極管作為指靜脈成像的透射光源。手指指紋信息包含在皮膚表皮中，因此采用可見光發(fā)光二極管作為指節(jié)紋特征成像的反射光源。由于目前對指紋的研究已相當成熟，有很多現(xiàn)有指紋采集產(chǎn)品可以滿足學術(shù)或者實際需求，所以，本文對指紋的采集使用的是現(xiàn)有光學指紋采集模塊。這樣采集系統(tǒng)需要2組偏振光源，每組光源由2個波段的LED陣列構(gòu)成，即用于指節(jié)紋成像的470 nm和495 nm光源組和用于指靜脈成像的830 nm和850 nm近紅外光源組。

為得到偏振光，在LED光源下面加上一組0°偏振片作為起偏器，如圖1所示。偏振光照射手指皮膚會發(fā)生4種變化：反射、折射、漫反射和散射。反射光和折射光保持與入射光一樣的偏振角度，而漫反射光和散射光則無偏振特性。漫反射光中包含十分豐富的皮膚生物特征信息。指節(jié)紋成像過程中，在指節(jié)紋攝像頭前加90°偏振片作為檢偏器，如圖1所示，通過90°檢偏濾片消除偏振光束得到漫反射光束即可獲得清晰的生物組織表皮特征圖像。偏振光束進入手指內(nèi)部有3種狀態(tài)：吸收、散射和透射。透射光保持入射光的偏振特性，散射光則完全失去了偏振性，成為自然光。在手指靜脈成像中，散射正是降低靜脈圖像對比度的一個重要因素，因此，在指靜脈攝像頭前安裝0°檢偏器，消除散射光，十分有利于提高手指靜脈圖像的質(zhì)量。

指靜脈為近紅外光透視成像，可見光對靜脈成像的干擾非常大。靜脈成像光源波長為830 nm和850 nm，因此指靜脈攝像頭配以HB720濾光片，阻止730 nm以下的光波通過。指節(jié)紋成像單元的LB570短波通濾片阻止590 nm以上的光波通過，這樣基本杜絕了各成像單元之間的光源干擾，保證了各模態(tài)生物特征成像互不影響。

1.2 LED控制電路

醫(yī)學研究表明，活體組織在不同波段下具有不同的光學特性，變換光譜可探測到生物組織所蘊含的不同介質(zhì)的特征內(nèi)容[8-11]。為此，本文設計了LED控制電路，由單片機和LED選擇電路構(gòu)成，主要有2個功能：①實現(xiàn)雙波段光源發(fā)光的順序控制；②實現(xiàn)光源發(fā)光強度的量化控制。順序控制的目的是根據(jù)用戶選擇點亮不同波段的LED光源獲得不同波段下的生物特征圖像。量化控制的目的是使光源的發(fā)光強度適應不同采集者手指粗細不同的實際情況。光源的順序控制是通過單片機和LED選擇電路實現(xiàn)的。單片機接收到計算機發(fā)送的選擇信號，向LED選擇電路的相應接口輸入電壓，光路選擇電路上電后點亮對應的燈組。LED選擇電路的部分原理如圖2所示。燈組接口采用共陽極接法，這樣便于單片機引腳直接控制。

圖2 LED選擇電路的原理圖Fig.2 LED selective circuit

量化控制是通過單片機利用PWM（脈沖寬度調(diào)制）原理實現(xiàn)的。在一定頻率的方波中，調(diào)整高電平和低電平的占空比即可實現(xiàn)。如用低電平點亮一個LED燈，假設把一個頻率周期分為10個時間等份，如果方波中的高低電平占空比是9：1，也就是說一個電平輸出周期T內(nèi)只有1/10 T的時間是點亮LED的，當頻率超過100 Hz，由于人眼視覺殘留效果，就可讓人眼無法察覺到閃爍，感受到的只是亮度的變化，這時就是一個比較暗的亮度。本系統(tǒng)根據(jù)此原理設置了9個亮度級。

1.3 成像設備

為降低后續(xù)三模態(tài)ROI（感興趣區(qū)域）歸一化可能產(chǎn)生的特征形變，指節(jié)紋和指靜脈成像模塊采用相同分辨率的攝像頭模塊，根據(jù)各成像單元的需求配以不同焦距的光學鏡頭。如前文所述，指節(jié)紋為反射成像，特征信息主要包含在漫反射光中，光束不具有指向性。為降低光束能量的損失，需將指節(jié)紋攝像頭放置在指節(jié)紋位置較近處，故需給指節(jié)紋攝像頭配以微距鏡頭。指靜脈攝像頭成像范圍比指節(jié)紋攝像頭大，成像距離稍遠，配以高清近焦鏡頭。指紋采集儀采用中控公司的U4500光學指紋采集儀。

1.4 滑動模組

不同人手指長短不一，當手指放入采集裝置中時，手指的位置不一定是指紋、指靜脈、指節(jié)紋的最適合采集區(qū)。因此快速便捷地對3個攝像頭的位置進行調(diào)節(jié)就顯得十分重要。成像系統(tǒng)滑動模組的功能是實現(xiàn)指節(jié)紋攝像頭和指靜脈攝像頭位置的自動調(diào)節(jié)，其目的是確保同時采集到手指3個模態(tài)的ROI，并使ROI位于采集圖像的中心位置，有利于后期特征提取。其工作流程是當采集者的手指放入采集裝置中時，計算機通過分析指定幀的采集圖像判斷如何調(diào)整，然后將相應指令發(fā)送到采集裝置中的單片機，單片機驅(qū)動指節(jié)紋攝像頭和指靜脈攝像頭下的滑動模塊做出相應的動作。

將指紋采集儀固定，作為確定手指放置位置的標準，這樣只需移動指節(jié)紋采集攝像頭和指靜脈采集攝像頭。要解決的首要問題就是如何定位各模態(tài)的ROI區(qū)域。

如圖3（a）所示，人手指遠端指關(guān)節(jié)和近端指關(guān)節(jié)處的滑液透光率比周圍組織高。因此在手指靜脈圖像中，2個指關(guān)節(jié)的亮度要高于指關(guān)節(jié)間的靜脈圖像的亮度。本文就是通過定位這2個高亮區(qū)域確定手指靜脈圖像的ROI，即2個高亮區(qū)域中間的靜脈圖像[12-13]。

指節(jié)紋無明顯的特征標志，但是可以通過指靜脈ROI區(qū)域定位指節(jié)紋，如圖3（a）所示，近端指關(guān)節(jié)對應的手指背側(cè)即為指節(jié)紋區(qū)域。

計算機程序首先將手指靜脈圖像分成前后2部分，如圖3（b）（1）所示，在圖像中心附近預設一個范圍框，如圖3（b）（2）所示；按預設步長在范圍框內(nèi)逐列比較每列總像素值，找出像素值最大的列，如圖3（b）（3）所示；在像素值最大列的兩端分別找到像素值最大的定位點，如圖3（b）（4）所示；比較前半圖中的定位點到圖像上邊緣的距離與后半圖中的定位點到圖像下邊緣的距離；根據(jù)比較值，通過串口向單片機發(fā)送調(diào)節(jié)命令；單片機驅(qū)動電機，帶動與指靜脈和指節(jié)紋攝像頭相連的滑塊，調(diào)節(jié)位置；每隔10幀重復上述定位過程，直至兩定位點到對應圖像邊緣距離差小于閾值。下半圖中的高亮區(qū)對應指節(jié)紋ROI，通過預設初始位置，可使指靜脈定位調(diào)整結(jié)束時，指節(jié)紋ROI位于指節(jié)紋采集圖像中心位置。

圖3 手指ROI定位及提取示意圖Fig.3 Positioning and extraction of finger ROI

2 計算機軟件平臺

為實現(xiàn)硬件的功能，需要好的軟件支持。本文所提出的計算機平臺有注冊采集者信息、光源選擇、定位調(diào)整、特征圖像采集等功能，程序流程圖如圖4（a）所示。計算機操控界面如圖4（b）所示，界面上端為3個視頻顯示區(qū)，用于實時顯示3個成像模塊的成像視頻；界面中部為控制和信息錄入?yún)^(qū)域。界面下端為采集結(jié)果顯示區(qū)，用于顯示最近一次采集結(jié)果。計算機平臺的人機交互功能也比較好，在采集的各個階段如果出現(xiàn)問題，系統(tǒng)都會給使用者做出提示。雖然系統(tǒng)有ROI自動調(diào)節(jié)功能，但還是預留了對成像模塊位置進行手動調(diào)節(jié)的按鈕，這樣可在ROI自動調(diào)節(jié)閾值內(nèi)對成像模塊位置進行微調(diào)。保存特征圖像時，系統(tǒng)會根據(jù)錄入采集者的信息生成文檔名。

圖4 計算機軟件平臺Fig.4 Computer software platform

3 采集結(jié)果與分析

利用做出的實物采集系統(tǒng)（如圖5所示），采集一定數(shù)量樣本并做了偏振狀態(tài)下和非偏振狀態(tài)下采集結(jié)果的對比，總結(jié)了相應結(jié)論。任意抽取其中2組做示例，如圖6所示，圖中同一行兩幅圖為同一手指分別在非偏振狀態(tài)下和偏振狀態(tài)下的特征圖像。

圖5 采集系統(tǒng)實物圖Fig.5 Actual picture of collection system

圖6 采集結(jié)果對比Fig.6 Acquisition result contrast

從圖5和圖6中可以看出，本采集系統(tǒng)能夠完整地采集到指紋、指靜脈、指節(jié)紋3個模態(tài)的特征圖像。由于偏振片透光率的原因，裝有偏振系統(tǒng)得到的特征圖像要比沒有加裝偏振系統(tǒng)得到的特征圖像暗，但是裝有偏振系統(tǒng)得到的特征紋絡相比于沒有加裝偏振系統(tǒng)得到的特征紋絡要清晰的多。指紋采集模塊采用的是研究較為成熟、使用較為廣泛的獨立模塊，已經(jīng)可采集到清晰的特征圖像，故而沒有加裝偏振系統(tǒng)。

4 結(jié)語

本文從指紋、指靜脈、指節(jié)紋三模態(tài)的生理位置特征以及生物組織的光學特性出發(fā)，利用偏振成像原理設計了能夠同時采集指紋、指靜脈、指節(jié)紋三模態(tài)特征圖像的采集系統(tǒng)。本系統(tǒng)采集質(zhì)量比較高，為指紋、指靜脈和指節(jié)紋三模態(tài)生物特征識別技術(shù)的研究打下了基礎。

本系統(tǒng)的優(yōu)點突出，能夠自動調(diào)節(jié)指靜脈攝像頭和指節(jié)紋攝像頭的位置；能夠?qū)崿F(xiàn)多光譜采集時對不同波段光束的順序控制和量化控制；利用偏振成像原理減少成像噪聲。同時，本系統(tǒng)也存在一些明顯的不足，例如：成像光路依然需要改進以達到滿足采集尺寸要求下進一步減小采集裝置體積的目的，提高偏振狀態(tài)下特征圖像的亮度。

[1]FAUNDEZ-ZANUY M，F(xiàn)IERREZ-AGUILAR J，ORTEGA-GARCIA J，et al.Multimodal biometric databases：anoverview[J].IEEEAerospace and Electronic Systems Magazine，2006，21（8）：29-37.

[2]ORTEGA-GARCIA J，F(xiàn)IERREZ J，AIONSO-FERN ANDEZ F，et al. The multi-scenario multi-environment biosecrue multimodal database（BMDB）[J].IEEE Transaction on Pattern Analysis Machine Intelli－gence，2010，32（6）：1097-1111.

[3]ROWE R K，CORCORAN S P，NIXON S P，et al.Multispectral Imaging for Biometrics[C]//Proceedings of SPIE，2005（5694）：90-99.

[4]BOSSEN A，LEHMANN R，MEIER C.Internal fingerprint identification with optical coherence tomography[J].IEEE Photonics Technology Letters，2010，22（7）：507-509.

[5]LEE E C，PARK K R.Restoration method of skin scattering blurred vein image for finger vein recognition[J].Electronics Letters，2009，45（21）：1074-1076.

[6]LEE E C，LEE H C，PARK K R，F(xiàn)inger vein recognition using minutia-based alignment and local binary pattern-based feature extraction[J]. International Journal of Imaging Systems and Technology，2009，9（3）：179-186.

[7]YANG JINFENG，SHI YIHUA，YANG JINLI.Finger-vein Recognition Based on a Bank of Gabor Filters[C]//Asian Conference on Computer Vision，2009：374-383.

[8]BOYCE C，ROSS A，MONACO M，et al.Multispectral Iris Analysis：A Preliminary Study[C]//Int′l Conf on Computer Vision and Pattern Recognition Workshop，2006：51-59.

[9]ROWE R K，NIXON K A，CORCORAN S P.Multispectral Fingerprint Biometrics[C]//IEEE Workshop on Systems，Man and Cybernetics Information Assurance，2005：14-20.

[10]CHANG H，KOSCHAN A，ABIDI B，et al.Physics-based Fusion of Multispectral Data for Improved Face Recognition[C]//Int′l Conf on Patt Recog，2006：1083-1086.

[11]HAO Y，SUN Z，TAN T，et al.Multi-spectral Palm Image Fusion for Accurate Contact-free Palmprint Recognition[C]//Int′l Conf of Image Processing，2008：281-284.

[12]YANG JINFENG，SHI YIHUA，YANG JINLI，et al.A Novel Fingervein Recognition Method with Feature Combination[C]//Int′l Conf.on Image Processing，2009：2709-2712.

[13]楊金鋒，張海金.手指靜脈圖像感興趣區(qū)域提取方法研究[J].山東大學學報，2012，42（3）：6-12.

（責任編輯：劉智勇）

Polarized imaging system for multimodal finger-feature acquisition

YANG Jin-feng，Li Cheng-shang，Shi Yu-kun
（Intelligent Signal and Image Processing Key Lab of Tianjin，CAUC，Tianjin 300300，China）

How to obtain stable and clear biometric image is always the key issue in the field of biometric technology.The polarized imaging system for finger-feature acquisition can capture fingerprints，finger-vein and fingerknuckle-print biometric images simultaneously and has following advantages：a.this system can automatically adjust the locations of finger vein and finger-knuckle-print cameras to make the ROI（region of interest）at the center of imaging plane；b.the multispectral light beams can be controlled when acquiring multispectral image；c.the polarized light can effectively reduce image noise.

finger；multimodal finger-feature；polarized imaging；multispectral

TP391.41

：A

：1674－5590（2015）06－0028－04

2014-08-30；

：2014-10-10

：國家自然科學基金項目（61379102）

楊金鋒（1971—），男，河南淮陽人，教授，博士，研究方向為圖像處理、生物識別和計算機視覺.