劉 牮,夏敏芳
(上海理工大學(xué)光電信息與計算機(jī)工程學(xué)院,上海200093)
模擬電路軟故障與LM算法的結(jié)合應(yīng)用研究
劉 牮,夏敏芳
(上海理工大學(xué)光電信息與計算機(jī)工程學(xué)院,上海200093)
在模擬電路故障診斷中,由于標(biāo)準(zhǔn)的BP神經(jīng)網(wǎng)絡(luò)算法在訓(xùn)練樣本時存在著收斂速度慢、分布不均勻、效率不高等缺點,導(dǎo)致電路的整體診斷性能下降。提出了一種將Levenberg-Marquardt(LM)算法與神經(jīng)網(wǎng)絡(luò)相結(jié)合的方法,對電路的脈沖信號進(jìn)行多尺度分解,提取故障特征作為神經(jīng)網(wǎng)絡(luò)的輸入對網(wǎng)絡(luò)進(jìn)行訓(xùn)練。實驗仿真表明,Pspice與Matlab相結(jié)合的樣本訓(xùn)練方法的穩(wěn)定性高于傳統(tǒng)方法,證明了該方法的實用性與可行性。
模擬電路;BP神經(jīng)網(wǎng)絡(luò);LM算法;Matlab
模擬電路的故障診斷技術(shù)自20世紀(jì)60年代開始便一直受到許多研究學(xué)者的青睞,也取得了眾多成就[1]。由于模擬電路的復(fù)雜度和密集度的不斷增長,故障類型的多樣性以及元件容差等因素的存在,直接制約著電子設(shè)備的可靠性[2]。
隨著人工智能的快速發(fā)展,促使神經(jīng)網(wǎng)絡(luò)方法在模擬電路的故障診斷中的應(yīng)用變得越為廣泛[3]。當(dāng)前雖然BP神經(jīng)網(wǎng)絡(luò)作為應(yīng)用最多的一種模型,但由于其自身存在如訓(xùn)練時間過長、診斷效率低、輸入數(shù)目多等缺點,因此在實際電路中很難勝任。為了克服這些缺陷,現(xiàn)提出一種快速穩(wěn)定的Levenberg-Marquardt算法[4]與神經(jīng)網(wǎng)絡(luò)相結(jié)合的方法來改進(jìn)標(biāo)準(zhǔn)的BP算法。通過實驗仿真分析,LM算法不但有效縮短了訓(xùn)練時間,并且具有較高的診斷準(zhǔn)確率。
BP神經(jīng)網(wǎng)絡(luò)是一種多層前饋型神經(jīng)網(wǎng)絡(luò),其網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)的模型主要包括輸入層(input layer)、輸出層(output layer)和隱含層(hide layer)。由于BP算法具有良好的逼近能力和成熟的訓(xùn)練方法而受到廣泛的應(yīng)用[5]。
仿真成敗的關(guān)鍵主要取決于隱層節(jié)點的個數(shù),Sigmoid為BP網(wǎng)絡(luò)隱層中的神經(jīng)元所采用的傳遞函數(shù)。由于隱層節(jié)點數(shù)的確立相對比較復(fù)雜[6],一般的選擇原則是:在能有效反映網(wǎng)絡(luò)訓(xùn)練準(zhǔn)確率的基礎(chǔ)上,網(wǎng)絡(luò)結(jié)構(gòu)應(yīng)盡量簡單,隱層節(jié)點數(shù)越少越好。而輸出層的神經(jīng)元則由logsig傳遞函數(shù)擔(dān)當(dāng),整個網(wǎng)絡(luò)的輸出則任意。
傳統(tǒng)的BP神經(jīng)網(wǎng)絡(luò)作為一種按梯度下降的算法,誤差函數(shù)梯度下降的原理是其重要組成部分,由于收斂速度慢,誤差函數(shù)值易收斂于極值附近,而得不到全局最優(yōu)等缺點,使得BP神經(jīng)網(wǎng)絡(luò)在實際應(yīng)用中的局限性有增無減。
LM算法應(yīng)用了近似的二階導(dǎo)數(shù)信息,比BP神經(jīng)網(wǎng)絡(luò)穩(wěn)定且收斂速度快[7],避免了矩陣求逆的計算量。其原則是通過誤差不斷減小來調(diào)整網(wǎng)絡(luò)權(quán)值及閾值,從而實現(xiàn)最優(yōu)目標(biāo)的一個過程。
設(shè)誤差指標(biāo)函數(shù)為:
式中:ti,oi為期望輸出與實際輸出;N為輸出向量的維數(shù),若設(shè)E(ω)=[E1(ω)E2(ω)…EN(ω)]T,則有:
式中:▽2E(w)表示誤差指標(biāo)函數(shù)E(w)的Hessian矩陣;▽E(w)表示梯度;J(w)表示Jacobian矩陣,即
對于牛頓法則有:
當(dāng)接近一個解時,通常有S(w)?0,這時得到高斯—牛頓法的計算規(guī)則:
而LM算法是一種改進(jìn)的高斯—牛頓法,它的形式為:
式中:單位矩陣為I;比例系數(shù)μ為大于0的常數(shù)。
當(dāng)權(quán)值近似于高斯—牛頓法時,μ逐漸減小,此時接近一個解;當(dāng)權(quán)值近似于梯度下降法時,μ逐漸增大,此時遠(yuǎn)離一個解。LM作為一種近似二階導(dǎo)的算法比梯度下降法快,因此在具體操作中,μ成了一個試探性參數(shù),若μ已給定,求得的Δw能夠使誤差指示函數(shù)E(w)降低,則μ減??;反之,μ增加。實驗仿真表明,LM算法不但具有高斯—牛頓法的局部收斂性,而且還有梯度下降法的全局特性。
本文以圖1的Sallen-Key帶通濾波器為診斷電路,在Pspice仿真軟件中搭建電路原理圖。表1為各元器件的故障值及其標(biāo)稱值,其中故障狀態(tài)為偏離標(biāo)稱值的±50%,電阻容差為5%,電容容差為10%,且為單軟故障。經(jīng)靈敏度測試,當(dāng)R2、R3、C1、C2發(fā)生變化時,對輸出點的電壓波形影響較為明顯,因此將這4個元器件作為故障元件進(jìn)行分析。
圖1 Sallen—Key帶通濾波器
表1 電路中元器件的標(biāo)稱值與故障值
利用PSpice中的蒙特卡羅分析可以獲得各類故障類型的輸出脈沖響應(yīng),其中電路正常時的30次蒙特卡羅輸出響應(yīng)分析如圖2所示。
圖2 電路正常情況下30次蒙特卡羅分析
對作為沖激信號的被測電路和激勵進(jìn)行5層Haar小波分解[8],產(chǎn)生低頻系數(shù)和高頻系數(shù)。其中高頻部分代表信號的細(xì)微差別,低頻部分為信號本身的特征。然后采用同樣的方法,將分解所得的低頻部分再次分解,其特征向量為各層小波系數(shù)的最大值。
由于神經(jīng)網(wǎng)絡(luò)的輸入和輸出個數(shù)與所提取特征向量的維數(shù)和故障類型有關(guān)[9],因此,令故障類型有n種,對采樣信號進(jìn)行m層小波分解。則(m+1)與log2n就為神經(jīng)網(wǎng)絡(luò)的輸入和輸出數(shù)目。隱層數(shù)目為M+N +a(M為輸入數(shù)目,N為輸出數(shù)目,a則取1到10之間的自然數(shù))。在本文中,當(dāng)輸入層數(shù)為6,輸出層數(shù)為4,隱層神經(jīng)元數(shù)目為13時訓(xùn)練誤差最小,電路的分辨率最高。
若要對神經(jīng)網(wǎng)絡(luò)的權(quán)值、閾值和誤差進(jìn)行存儲[10],需要利用測得的樣本對神經(jīng)網(wǎng)絡(luò)進(jìn)行訓(xùn)練,直到誤差小于等于期望誤差即可。本文將各種故障模式所對應(yīng)的30次樣本輸入神經(jīng)網(wǎng)絡(luò)進(jìn)行訓(xùn)練,網(wǎng)絡(luò)經(jīng)過303次訓(xùn)練達(dá)到目標(biāo)要求,如圖3所示。
圖3 神經(jīng)網(wǎng)絡(luò)的訓(xùn)練曲線
神經(jīng)網(wǎng)絡(luò)訓(xùn)練樣本的輸出回歸直線如圖4所示,其中網(wǎng)絡(luò)模型經(jīng)訓(xùn)練后計算所要得到的輸出值為Y,網(wǎng)絡(luò)訓(xùn)練所要達(dá)到的目標(biāo)值為T。由圖可知,其相關(guān)系數(shù)為0.978 2,非常接近于1,回歸直線與斜率為1的直線幾乎重合,說明網(wǎng)絡(luò)的輸出能很好地逼近目標(biāo)值,網(wǎng)絡(luò)是極其有效的。
圖4 訓(xùn)練樣本網(wǎng)絡(luò)輸出回歸直線
本文在Pspice的蒙特卡羅仿真完成的基礎(chǔ)上,將LM算法與神經(jīng)網(wǎng)絡(luò)相結(jié)合,有效發(fā)揮了神經(jīng)網(wǎng)絡(luò)的非線性映射和學(xué)習(xí)推理的能力,基本能夠?qū)崿F(xiàn)模擬電路故障狀態(tài)的診斷。
LM算法在網(wǎng)絡(luò)的結(jié)構(gòu)規(guī)模合理、訓(xùn)練樣本大小合適時具有較高的分類精度和穩(wěn)定性,不但有效提高了網(wǎng)絡(luò)的學(xué)習(xí)速度、減少了運行次數(shù),并且其分類精度在一定程度上高于傳統(tǒng)方法,適用于神經(jīng)網(wǎng)絡(luò)。
[1] 張蓉暉.小波神經(jīng)網(wǎng)絡(luò)及其在模擬電路故障診斷中的應(yīng)用[D].武漢:華中科技大學(xué),2008.
[2] Pease R A.模擬電路故障診斷[M].王希勤,譯.北京:人民郵電出版社,2007.
[3] 曾濤,趙嵐.基于人工蜂群支持向量機(jī)的模擬電路故障診斷[J].電力科學(xué)與工程,2013,29(8): 16-19.
[4] 陳悅,張少白.LM算法在神經(jīng)網(wǎng)絡(luò)腦電信號分類中的研究[J].計算機(jī)技術(shù)與發(fā)展,2013,23(2):119-122.
[5] 張德豐.MATLAB神經(jīng)網(wǎng)絡(luò)應(yīng)用設(shè)計[M].北京:機(jī)械工業(yè)出版社,2009.
[6] 閻平凡,張長水.人工神經(jīng)網(wǎng)絡(luò)與模擬進(jìn)化計算[M].北京:清華大學(xué)出版社,2005.
[7] 李慧玲,李春明.一種基于遺傳算法和神經(jīng)網(wǎng)絡(luò)的故障診斷方法[J].電力科學(xué)與工程,2011,27(4):43-47.
[8] Liu X,Decun D,Luo Y F.Fault diagnosis of trainground wireless communication unit based on Fuzzy Neural Network[C].ICIEA 2009 4th IEEE Conference on Industrial Electronics and Applications,Xi’an,China, 25-27 May,2009:348-352.
[9] 李璐怡,李志華.一種基于小波預(yù)處理的模擬電路故障診斷方法[J].電子設(shè)計工程,2014,22(14):146-148.
[10] 亢少將.螢火蟲優(yōu)化算法的研究與改進(jìn)[D].廣州:廣東工業(yè)大學(xué),2013:4-15.
Research on the Combined Application of Analog Circuits Soft Faults and LM Algorithm
Liu Jian,Xia Minfang
(Department of Electrical Engineering School of Optical-Electrical and Computer Engineering,University of Shanghai for Science&Technology,Shanghai 200093,China)
When analog circuit faults are diagnosed,the disadvantages concerning the standard BP neural network algokithm such as slow convergence,uneven distribution and lower efficiency when training sample result in decreased overall diagnostic performance of the circuit.This paper proposed a method combining neural network algorithm and the Levenberg-marquardt(LM)algorithm to decompose the pulse signal of the circuit from multiple scales and extract fault features as the input of neural network to train the network.The simulation results showed that the stability of sample training method combining Pspice and Matlab was higher than traditional methods,and that the practicability and feasibility of this method were verified.
analog circuit;BP neural network;LM algorithm;Matlab
TP183
A DOI:10.3969/j.issn.1672-0792.2015.05.008
2015-03-03。
劉牮(1961-),男,副教授,研究方向為電子技術(shù)及計算機(jī)控制。通信作者:夏敏芳,E-mail:xmf6211 @sina.com。