傅志中， 趙宇飛， 周 寧， 李曉峰， 徐 進(jìn)

(電子科技大學(xué) 通信與信息工程學(xué)院， 成都 611731)

基于Matlab圖像采集工具箱的圖像處理實(shí)驗(yàn)平臺(tái)設(shè)計(jì)

傅志中， 趙宇飛， 周 寧， 李曉峰， 徐 進(jìn)

(電子科技大學(xué) 通信與信息工程學(xué)院， 成都 611731)

基于Matlab的圖像采集工具箱，設(shè)計(jì)了一套集圖像采集與處理的圖像數(shù)據(jù)處理軟硬件平臺(tái)。該平臺(tái)利用Matlab的圖像處理與采集函數(shù)，實(shí)時(shí)從圖像傳感器采集并處理圖像數(shù)據(jù)。較傳統(tǒng)的圖像處理平臺(tái)，該實(shí)驗(yàn)平臺(tái)能提供更多的實(shí)驗(yàn)項(xiàng)目和實(shí)際體驗(yàn)，提高學(xué)生的臨場(chǎng)實(shí)驗(yàn)效果，并使學(xué)生專注于圖像處理實(shí)驗(yàn)項(xiàng)目的創(chuàng)新思路與算法設(shè)計(jì)過(guò)程。

圖像處理； 圖像采集工具箱； 實(shí)驗(yàn)項(xiàng)目； 算法設(shè)計(jì)； 實(shí)驗(yàn)平臺(tái)設(shè)計(jì)

0 引 言

數(shù)字圖像處理技術(shù)的迅速發(fā)展得益于廣泛的應(yīng)用需求以及數(shù)學(xué)、電子技術(shù)和計(jì)算機(jī)技術(shù)的發(fā)展，其理論性和實(shí)踐性都很強(qiáng)。“百聞不如一見”凸顯了圖像在人類認(rèn)知與信息獲取方面的重要性?；诶碚撃Ｐ兔枋鲞M(jìn)行圖像處理算法的教學(xué)模式，學(xué)生不能深刻地理解、認(rèn)知圖像處理技術(shù)內(nèi)容，不能激發(fā)學(xué)生對(duì)圖像處理課程的學(xué)習(xí)興趣和對(duì)學(xué)生創(chuàng)新能力的培養(yǎng)。

Photoshop、Corel draw、美圖秀秀等軟件，側(cè)重于圖像編輯、美化與特效制作，與教材內(nèi)容切合度較差，不利于學(xué)生學(xué)習(xí)與理解圖像處理基本原理及算法。對(duì)此，許多教學(xué)工作者對(duì)圖像處理平臺(tái)和實(shí)驗(yàn)項(xiàng)目展開了廣泛研究與探索。

自INTEL公司推出OPENCV以來(lái)，基于C/C++的圖像處理實(shí)時(shí)應(yīng)用技術(shù)得到了快速發(fā)展，使得VC或VS開發(fā)環(huán)境成為圖像處理技術(shù)應(yīng)用的一個(gè)重要開發(fā)平臺(tái)?；赩C平臺(tái)數(shù)字圖像處理教學(xué)實(shí)驗(yàn)[1-3]，有助于學(xué)生通過(guò)實(shí)驗(yàn)直觀地認(rèn)識(shí)和掌握?qǐng)D像處理的原理和用途，但該實(shí)驗(yàn)系統(tǒng)對(duì)學(xué)生的C語(yǔ)言使用熟練程度要求較高，學(xué)生容易陷于繁雜的編程工作，而忽略了本該重視的圖像處理任務(wù)及算法設(shè)計(jì)問(wèn)題，不適合于課程教學(xué)實(shí)驗(yàn)。

MathWorks公司推出的用于算法開發(fā)、數(shù)據(jù)可視化、數(shù)據(jù)分析以及數(shù)值計(jì)算的商業(yè)數(shù)學(xué)軟件Matlab，在高校和業(yè)界都得到了廣泛的應(yīng)用，得到了教育者和業(yè)界技術(shù)開發(fā)人員的高度認(rèn)可和推崇[4-5]?；贛atlab的圖像處理實(shí)驗(yàn)軟件與實(shí)驗(yàn)項(xiàng)目[6-10]，為圖像處理技術(shù)實(shí)驗(yàn)開展提供了重要手段，降低了學(xué)生對(duì)C語(yǔ)言等的實(shí)踐環(huán)節(jié)難度，使學(xué)生專注于問(wèn)題發(fā)現(xiàn)、問(wèn)題解決和算法設(shè)計(jì)過(guò)程，提高了學(xué)生對(duì)課程內(nèi)容的學(xué)習(xí)興趣。但這些實(shí)驗(yàn)還是基于Matlab或VC平臺(tái)環(huán)境的軟仿真，還僅停留在軟件仿真方面，學(xué)生沒有接觸到實(shí)際的圖像獲取與處理系統(tǒng)，缺乏真實(shí)的實(shí)際體驗(yàn)。

基于DSP或FPGA的圖像處理實(shí)驗(yàn)[11-13]，有助于學(xué)生從算法設(shè)計(jì)到嵌入式系統(tǒng)的應(yīng)用，但需要耗費(fèi)學(xué)生較多的精力去學(xué)習(xí)并掌握DSP相關(guān)技術(shù)或過(guò)多的硬件實(shí)現(xiàn)細(xì)節(jié)，不利于學(xué)生專注于圖像算法設(shè)計(jì)過(guò)程，不利于培養(yǎng)學(xué)生在算法設(shè)計(jì)方面的創(chuàng)新能力。采用LabVIEW和Matlab混合編程模型[14]，實(shí)現(xiàn)了在線“信號(hào)與線性系統(tǒng)”教學(xué)的交互性實(shí)驗(yàn)。該模型提供了一種較好的圖像處理實(shí)驗(yàn)平臺(tái)，但是，由于LabVIEW是基于圖形化的編程語(yǔ)言，Matlab編程處于協(xié)處理器地位，不利于充分發(fā)揮Matlab靈活及強(qiáng)大的數(shù)值計(jì)算能力。

另外，上述實(shí)驗(yàn)平臺(tái)或項(xiàng)目，側(cè)重在圖像復(fù)原與重構(gòu)、圖像增強(qiáng)、圖像分割、圖像編解碼及圖像分析等內(nèi)容，缺失數(shù)字圖像采集等預(yù)處理過(guò)程。

本實(shí)驗(yàn)平臺(tái)基于Matlab圖像采集工具箱，在產(chǎn)學(xué)研科研項(xiàng)目研究基礎(chǔ)上，開發(fā)一套集數(shù)字圖像采集和處理的圖像處理平臺(tái)。① 為產(chǎn)學(xué)研項(xiàng)目提供技術(shù)支撐[15]，② 為實(shí)驗(yàn)教學(xué)提供真實(shí)、現(xiàn)場(chǎng)的圖像處理數(shù)據(jù)，提升學(xué)生的實(shí)驗(yàn)臨場(chǎng)體驗(yàn)，激發(fā)學(xué)生在現(xiàn)場(chǎng)發(fā)現(xiàn)問(wèn)題，解決實(shí)際問(wèn)題的能力，加強(qiáng)學(xué)生創(chuàng)新能力的培養(yǎng)。

1 實(shí)驗(yàn)平臺(tái)設(shè)計(jì)

考慮到實(shí)驗(yàn)平臺(tái)的可擴(kuò)展性和經(jīng)濟(jì)性，同時(shí)提供圖像預(yù)處理實(shí)驗(yàn)并緊跟業(yè)界發(fā)展，實(shí)驗(yàn)平臺(tái)擬采用USB攝像頭和自制圖像成像與圖像采集模塊相結(jié)合的圖像采集混合系統(tǒng)結(jié)構(gòu)，滿足不同實(shí)驗(yàn)經(jīng)費(fèi)額度和實(shí)驗(yàn)項(xiàng)目需求。

1.1 實(shí)驗(yàn)平臺(tái)架構(gòu)

該實(shí)驗(yàn)平臺(tái)由圖像成像、圖像采集和圖像處理3個(gè)模塊構(gòu)成，實(shí)驗(yàn)平臺(tái)結(jié)構(gòu)如圖1所示：

圖1 圖像處理實(shí)驗(yàn)平臺(tái)硬件結(jié)構(gòu)

圖像處理模塊內(nèi)裝Matlab軟件的通用計(jì)算機(jī)，完成圖像數(shù)據(jù)的采集與處理，提供實(shí)驗(yàn)教學(xué)的相關(guān)實(shí)驗(yàn)項(xiàng)目的軟硬件實(shí)驗(yàn)環(huán)境。

圖像成像與采集模塊的設(shè)計(jì)基于兩種情況：① 圖像成像與采集模塊采用USB攝像頭，則這兩個(gè)模塊都包含在USB攝像頭內(nèi)部，USB攝像頭與圖像處理模塊直接用USB數(shù)據(jù)鏈路連接。② 采用分離的圖像成像與圖像采集模塊方式。

1.2 圖像成像模塊設(shè)計(jì)

圖像成像模塊包括圖像傳感器、電源管理和圖像傳輸接口和輔助控制電路等單元構(gòu)成，實(shí)時(shí)將場(chǎng)景信息轉(zhuǎn)換為電信號(hào)并以一定的傳輸協(xié)議傳輸至圖像處理模塊。其實(shí)現(xiàn)框圖如圖2所示。輔助控制電路完成模塊的基本控制及傳輸信號(hào)驅(qū)動(dòng)，電源管理實(shí)現(xiàn)模塊的電源電壓管理。

圖2 圖像成像模塊結(jié)構(gòu)

圖像傳感器采用TRUESENSE的KAI0340，該圖像傳感器在640X480像素分辨率時(shí)可達(dá)200幀/s，在縮小視場(chǎng)時(shí)，最高可達(dá)3 400幀/s。圖像傳輸接口由通用的FPGA實(shí)現(xiàn)，F(xiàn)PGA采用Lattice公司的非易失性器件LFXP2系列芯片，該型號(hào)體積小、功耗低、邏輯及IP資源豐富，完全滿足圖像成像模塊的資源需求。該單元接收來(lái)至圖像傳感器的圖像數(shù)據(jù)，實(shí)時(shí)將圖像數(shù)據(jù)以CameraLink傳輸協(xié)議進(jìn)行傳輸。

1.3 圖像采集模塊設(shè)計(jì)

圖像采集模塊實(shí)現(xiàn)將圖像成像模塊的基于CameraLink傳輸協(xié)議的圖像數(shù)據(jù)流轉(zhuǎn)換為圖像處理模塊可識(shí)別的數(shù)據(jù)格式，緩存并及時(shí)通知圖像處理模塊。采集卡可以采用貨架產(chǎn)品如Siiconsoftware公司的MicroEnable IV VD4-CL圖像采集卡，該采集卡可實(shí)時(shí)采集兩路基于CameraLink傳輸協(xié)議的圖像數(shù)據(jù)流，也可基于如PLX公司的PCIe的低成本接口芯片如PEX8114，Lattice的LFXP2系列FPGA芯片和存儲(chǔ)器構(gòu)成，PLX提供了全套的系統(tǒng)開發(fā)工具，能快速實(shí)現(xiàn)采集卡的開發(fā)。圖像采集卡模塊結(jié)構(gòu)如圖3所示。

圖3 圖像采集卡模塊結(jié)構(gòu)

1.4 實(shí)驗(yàn)軟件結(jié)構(gòu)設(shè)計(jì)

圖像成像模塊與圖像采集模塊連接后，圖像成像模塊將圖像傳感器獲取的數(shù)據(jù)實(shí)時(shí)傳輸至圖像采集模塊。此時(shí)，需要設(shè)計(jì)基于Matlab圖像采集工具箱的圖像采集、處理與顯示平臺(tái)。

圖像采集工具箱是Matlab計(jì)算環(huán)境能力擴(kuò)展的一個(gè)功能集合，其提供了一系列函數(shù)，允許用戶將各種相機(jī)連接至Matlab或Simulink數(shù)值計(jì)算環(huán)境。同時(shí)，該工具箱允許用戶交互式地檢測(cè)與配置硬件環(huán)境、實(shí)現(xiàn)了在線圖像處理、硬件觸發(fā)圖像采集、圖像后臺(tái)采集、多相機(jī)同步采集等功能。該工具箱對(duì)主流的硬件廠家，如USB3 Vision、 GigE Vision等提供了驅(qū)動(dòng)支持。同時(shí)，為擴(kuò)展系統(tǒng)的硬件支持能力，工具箱提供了高級(jí)適配器定制能力，使得用戶可以將第三方設(shè)備連接至工具箱?；贛atlab圖像采集工具箱的圖像實(shí)驗(yàn)平臺(tái)軟件結(jié)構(gòu)如圖4所示。

圖4 圖像實(shí)驗(yàn)平臺(tái)軟件結(jié)構(gòu)

其中平臺(tái)硬件環(huán)境是如圖1所示的實(shí)驗(yàn)平臺(tái)硬件，圖像采集卡驅(qū)動(dòng)動(dòng)態(tài)庫(kù)是基于采集卡硬件廠商或自制采集卡提供的硬件驅(qū)動(dòng)程序，Matlab的Adapter適配器是連接Matlab圖像采集工具箱與硬件廠商驅(qū)動(dòng)的標(biāo)準(zhǔn)適配器接口，以動(dòng)態(tài)庫(kù)形式供Matlab動(dòng)態(tài)加載或卸載。該動(dòng)態(tài)庫(kù)基于C++框架，用戶可以根據(jù)該框架創(chuàng)建適合于任意采集卡硬件的適配動(dòng)態(tài)庫(kù)軟件。通過(guò)該適配器，實(shí)現(xiàn)了Matlab圖像采集工具箱與采集硬件環(huán)境的連接。通過(guò)Matlab圖像采集工具箱提供的豐富函數(shù)接口，實(shí)時(shí)從現(xiàn)場(chǎng)采集圖像數(shù)據(jù)，從而在Matlab或Simulink環(huán)境下實(shí)現(xiàn)各類圖像處理實(shí)驗(yàn)項(xiàng)目。

2 實(shí)驗(yàn)項(xiàng)目設(shè)計(jì)

根據(jù)圖像處理教學(xué)任務(wù)和創(chuàng)新性實(shí)驗(yàn)的需求，本實(shí)驗(yàn)平臺(tái)可支撐的實(shí)驗(yàn)項(xiàng)目如表1所示。

表1 平臺(tái)可支撐的實(shí)驗(yàn)項(xiàng)目

3 實(shí)驗(yàn)平臺(tái)實(shí)現(xiàn)

根據(jù)本文設(shè)計(jì)的實(shí)驗(yàn)平臺(tái)如圖5所示。該平臺(tái)采用自制的圖像成像模塊，見圖5(a)，該模塊除傳輸圖像的CameraLink接口外，還有一個(gè)串口控制接口，用于控制成像模塊的參數(shù)。圖像采集模塊采用商用的圖像采集卡IV VD4-CL，插入到通用計(jì)算機(jī)的圖像處理模塊，見圖5(b)。圖像成像模塊與圖像采集模塊之間采用CameraLink電纜連接。

圖6是基于該實(shí)驗(yàn)平臺(tái)采集的圖像。圖6(a)是采集的畫報(bào)上人物圖像，圖6(b)是采集標(biāo)準(zhǔn)測(cè)試圖像。圖像采集至Matlab環(huán)境中后，可充分利用Matlab強(qiáng)大的數(shù)值計(jì)算能力，進(jìn)行相關(guān)項(xiàng)目的實(shí)驗(yàn)任務(wù)。該實(shí)驗(yàn)平臺(tái)達(dá)到了設(shè)計(jì)要求，能支撐表1所列的實(shí)驗(yàn)項(xiàng)目。同時(shí)，基于該實(shí)驗(yàn)平臺(tái)，也可以開展相關(guān)的科研項(xiàng)目。

(a)成像模塊(b)插入有采集卡的計(jì)算機(jī)

圖5 實(shí)現(xiàn)的圖像實(shí)驗(yàn)平臺(tái)

(a)采集的畫報(bào)圖(b)采集的標(biāo)準(zhǔn)測(cè)試圖

圖6 Matlab環(huán)境下的采集圖像

4 經(jīng)濟(jì)性分析

本實(shí)驗(yàn)平臺(tái)硬件環(huán)境由圖像成像模塊、圖像采集模塊和圖像處理模塊3個(gè)部分構(gòu)成?；诓煌布h(huán)境構(gòu)成的實(shí)驗(yàn)平臺(tái)，其價(jià)格存在較大差異，將實(shí)驗(yàn)平臺(tái)分為最小系統(tǒng)和基本系統(tǒng)兩類實(shí)驗(yàn)平臺(tái)，其構(gòu)成類型見表2。用戶可根據(jù)實(shí)驗(yàn)室經(jīng)費(fèi)建設(shè)額度和擬開展的實(shí)驗(yàn)項(xiàng)目，對(duì)實(shí)驗(yàn)平臺(tái)硬件環(huán)境和進(jìn)行增減配置。

表2 實(shí)驗(yàn)平臺(tái)構(gòu)成類型

最小系統(tǒng)由1臺(tái)通用計(jì)算機(jī)和1個(gè)USB攝像頭構(gòu)成，其需求的經(jīng)費(fèi)最少。因?yàn)閁SB攝像頭的輸出是經(jīng)過(guò)預(yù)處理后的圖像，所以最小系統(tǒng)不能開展圖像預(yù)處理類的相關(guān)實(shí)驗(yàn)項(xiàng)目。

基本系統(tǒng)是在最小系統(tǒng)基礎(chǔ)上，增加自制成像模塊和圖像采集卡。除計(jì)算機(jī)外，基本系統(tǒng)的成像模塊和CameraLink采集卡的自制成本可控制在3 000元以內(nèi)。由于自制的成像模塊能提供圖像傳感器的原始成像數(shù)據(jù)，因此，相對(duì)于最小系統(tǒng)，可以進(jìn)行所有實(shí)驗(yàn)，滿足現(xiàn)有圖像處理課程教學(xué)的所有實(shí)現(xiàn)項(xiàng)目需求。同時(shí)，也可用于相關(guān)產(chǎn)學(xué)研項(xiàng)目的前期研究。最小系統(tǒng)和基本系統(tǒng)的軟件實(shí)驗(yàn)系統(tǒng)是相同的，沒有差異。

5 結(jié) 語(yǔ)

本文提出了一種基于Matlab圖像采集工具箱的圖像處理實(shí)驗(yàn)平臺(tái)。該平臺(tái)擴(kuò)展性強(qiáng)，可根據(jù)實(shí)驗(yàn)室建設(shè)經(jīng)費(fèi)額度，構(gòu)建不同成本的圖像處理實(shí)驗(yàn)平臺(tái)。也可根據(jù)實(shí)驗(yàn)項(xiàng)目差異，構(gòu)建不同結(jié)構(gòu)的實(shí)驗(yàn)平臺(tái)?；谠搶?shí)驗(yàn)平臺(tái)開展實(shí)驗(yàn)，使得學(xué)生能更好地理解相關(guān)技術(shù)理論，增強(qiáng)學(xué)生的動(dòng)手能力，提高學(xué)生的現(xiàn)場(chǎng)實(shí)際體驗(yàn)，調(diào)動(dòng)學(xué)生的學(xué)習(xí)積極性和創(chuàng)造性，培養(yǎng)在工程實(shí)踐中發(fā)現(xiàn)問(wèn)題、解決問(wèn)題的創(chuàng)新型技術(shù)人才。

[1] 鄒煥新,周石琳.“數(shù)字圖像處理”實(shí)驗(yàn)教學(xué)系統(tǒng)的構(gòu)建[J].電氣電子教學(xué)學(xué)報(bào),2012,34(6): 48-51.

[2] 印 月. 基于VC++6.0的數(shù)字圖像處理綜合性設(shè)計(jì)實(shí)驗(yàn)[J]. 實(shí)驗(yàn)科學(xué)與技術(shù), 2011,9(3): 10-11.

[3] 汪 沛. 基于OpenCV庫(kù)的C語(yǔ)言編程學(xué)習(xí)方法[J]. 電氣電子教學(xué)學(xué)報(bào), 2012, 34(4): 93-95.

[4] Gonzalez R C, Woods R E， Eddins S L. Digital Image Processing Using Matlab Third Edition[M].阮秋琦等譯(數(shù)字圖像處理Matlab版).北京：電子工業(yè)出版社,2013.

[5] 易 婷. 基于圖像處理的綜合性實(shí)驗(yàn)[J]. 電氣電子教學(xué)學(xué)報(bào), 2014(3): 71-73.

[6] 黎 寧,徐曉波,牛 征. Matlab平臺(tái)下圖像處理實(shí)驗(yàn)教學(xué)軟件的實(shí)現(xiàn)[J].電氣電子教學(xué)學(xué)報(bào),2001, 23(5):55-58.

[7] 柏 均,閆紅梅,張 鳴. Matlab在“數(shù)字圖像處理”課程教學(xué)中的利弊分析[J]. 電氣電子教學(xué)學(xué)報(bào) ，2010,32(4):82-86.

[8] 杜云明,王 全,徐建東.基于Matlab的“數(shù)字圖像處理”教學(xué)[J].電氣電子教學(xué)學(xué)報(bào),2015, 37(4):111-114.

[9] 安 平,王朔中.建立在Matlab平臺(tái)上的數(shù)字圖像處理教學(xué)實(shí)驗(yàn)系統(tǒng)[J].實(shí)驗(yàn)室研究與探索,2001(1):61-62.

[10] 吳全玉,劉曉杰,潘玲佼,等.“數(shù)字圖像處理”課程實(shí)驗(yàn)教學(xué)研究與探索[J].電氣電子教學(xué)學(xué)報(bào),2016,38(1):121-124.

[11] 魯億方,藍(lán)金輝,遲健男.基于DSP的數(shù)字圖像處理實(shí)驗(yàn)的探究[J].實(shí)驗(yàn)技術(shù)與管理,2014, 31(3):109-113.

[12] 周冬躍,王 博,陳 麗.基于DSP實(shí)驗(yàn)平臺(tái)的“光電圖像處理”課程探索[J].電氣電子教學(xué)學(xué)報(bào), 2011,33(1):17-18.

[13] 范哲意,周治國(guó),劉志文.基于FPGA和模型化設(shè)計(jì)的圖像處理實(shí)驗(yàn)平臺(tái)[J].實(shí)驗(yàn)室研究與探索, 2013,32(4):63 - 66.

[14] 董 玲,曾 佳,楊晶晶,等.基于LABVIEW和Matlab混合編程的在線信號(hào)與線性系統(tǒng)實(shí)驗(yàn)[J].實(shí)驗(yàn)室研究與探索,2014,33(12):113-116.

[15] 曹江中,戴青云,何家峰.產(chǎn)學(xué)研背景下工科院校實(shí)驗(yàn)教學(xué)的改革探索[J].實(shí)驗(yàn)室研究與探索, 2011,30(6):287-290.

Platform Design for Image Processing Experiments Based on Matlab Image Acquisition Toolbox

FU Zhizhong， ZHAO Yufei， ZHOU Ning， LI Xiaofeng， XU Jin

(School of Communication and Information Engineering, University of Electronic Science and Technology of China， Chengdu 611731, China)

Based on Matlab image acquisition toolbox, an image data processing software and hardware platform is proposed in this paper. With the help of Matlab image processing and acquisition functions, real-time image can be captured from the image sensor and processed at once. Compared with the state-of-art image processing platform, the proposed experimental platform can provide more experimental projects and experimental experience, improve the effect of students' on-the-spot experiment, and make students focus on the innovative ideas and algorithm design in processing experiment projects.

image processing; image acquisition toolbox; experiment project; algorithm design; experimental platform design

2016-11-15

國(guó)家自然科學(xué)基金項(xiàng)目(61075013,61671126)

傅志中(1970-)，男，重慶人，博士，副教授，現(xiàn)主要從事信號(hào)檢測(cè)、圖像處理與實(shí)時(shí)實(shí)現(xiàn)技術(shù)研究及相關(guān)教學(xué)工作。

Tel.：18010625062； E-mail：fuzz@uestc.edu.cn

TP 334

A

1006-7167(2017)08-0100-04