圣文順 孫艷文

摘? 要：隨著醫(yī)學(xué)成像技術(shù)的不斷發(fā)展，病理識(shí)別在醫(yī)學(xué)診斷過(guò)程中的作用越來(lái)越重要。人工智能領(lǐng)域的機(jī)器學(xué)習(xí)可以幫助完成醫(yī)學(xué)圖像診斷的自動(dòng)識(shí)別，數(shù)字化地輔助醫(yī)學(xué)診斷過(guò)程，同時(shí)降低醫(yī)務(wù)工作者的工作量。卷積神經(jīng)網(wǎng)絡(luò)（CNN）是近年發(fā)展起來(lái)的一種非常有效的機(jī)器學(xué)習(xí)方法，屬于深度學(xué)習(xí)的范疇，它能夠完整地模擬人類(lèi)的圖像識(shí)別過(guò)程，并且已經(jīng)在圖像識(shí)別領(lǐng)域取得了優(yōu)異的成績(jī)。本文將卷積神經(jīng)網(wǎng)絡(luò)應(yīng)用于病理圖像的識(shí)別中，同時(shí)對(duì)病理圖片進(jìn)行了采集、整理和智能學(xué)習(xí)，完成并分析了算法對(duì)比實(shí)驗(yàn)，最終實(shí)現(xiàn)了對(duì)病理圖像的優(yōu)化識(shí)別，提高了病理圖像的識(shí)別率，驗(yàn)證了算法的有效性。

關(guān)鍵詞：卷積神經(jīng)網(wǎng)絡(luò);病理圖像;深度學(xué)習(xí);醫(yī)學(xué)成像

中圖分類(lèi)號(hào)：TP391.4? ? ?文獻(xiàn)標(biāo)識(shí)碼：A

Application of Convolutional Neural Network in Image Recognition

SHENG Wenshun，SUN Yanwen

（Pujiang Institute，Nanjing Tech University，Nanjing 211222，China）

Abstract：With the continuous development of medical imaging technology，pathological identification plays an increasingly important role in the process of medical diagnosis.Machine learning in the field of artificial intelligence can help complete the automatic recognition of medical image diagnosis，digitally assisting the process of medical diagnosis，and reducing the workload of medical workers.Convolutional neural network （CNN） is a very effective machine learning method developed in recent years.It belongs to the category of deep learning.It can completely simulate the human image recognition process，and has achieved excellent results in the field of image recognition.In this paper，the convolutional neural network is applied to the recognition of pathological images.At the same time，the pathological images are collected，sorted and intelligently learned.The comparative experiments of the algorithms are completed and analyzed.Finally，the optimal recognition of pathological images is realized，the recognition rate of pathological images is improved，and the validity of the algorithm is verified.

Keywords：convolution neural network;pathological image;deep learning;medical imaging

1? ?引言（Introduction）

圖像識(shí)別技術(shù)是人工智能的一個(gè)重要領(lǐng)域。在導(dǎo)航、地圖與地形配準(zhǔn)、自然資源分析、天氣預(yù)報(bào)、環(huán)境監(jiān)測(cè)、生理病變研究等許多領(lǐng)域有著重要的研究和應(yīng)用價(jià)值。

醫(yī)生以前通過(guò)自己的肉眼來(lái)觀察病人的病理圖像，消耗人力、財(cái)力，再加上外界因素的影響，判斷的準(zhǔn)確性也會(huì)受到影響。隨著計(jì)算機(jī)的數(shù)據(jù)吞吐能力與計(jì)算能力不斷增長(zhǎng)，科研工作者對(duì)人類(lèi)視覺(jué)模式的研究不斷深入。依靠高效的算法設(shè)計(jì)，借助大量數(shù)據(jù)進(jìn)行學(xué)習(xí)訓(xùn)練，因此將機(jī)器學(xué)習(xí)算法與病理圖像結(jié)合成為可能。自從深度學(xué)習(xí)算法的提出后，給圖像識(shí)別帶來(lái)了新活力。卷積神經(jīng)網(wǎng)絡(luò)的研究及其在圖像識(shí)別領(lǐng)域的應(yīng)用，就是將卷積神經(jīng)網(wǎng)絡(luò)應(yīng)用于病理圖像識(shí)別[1]中，以期望能夠通過(guò)機(jī)器學(xué)習(xí)的方式自動(dòng)化識(shí)別，從而減少病理醫(yī)生的任務(wù)量，同時(shí)為臨床醫(yī)生提供更加客觀的分析結(jié)果。

2? ?相關(guān)理論（Correlated theory）

在圖像識(shí)別中，對(duì)圖像的處理尤為關(guān)鍵。采用深度學(xué)習(xí)算法[2]，可以減少人為因素的影響。卷積神經(jīng)網(wǎng)絡(luò)（Convolutional Neural Network，簡(jiǎn)稱(chēng)CNN）作為深度學(xué)習(xí)算法的代表之一，結(jié)構(gòu)較為簡(jiǎn)單，適用性比較強(qiáng)。在這幾年的發(fā)展中，應(yīng)用范圍較廣，尤其在圖像處理和模式識(shí)別中。

圖像識(shí)別的常用方法有：貝葉斯分類(lèi)法、模板匹配法、核方法等。這幾種方法在處理圖像時(shí)會(huì)帶來(lái)不同的麻煩。自引進(jìn)深度學(xué)習(xí)算法之后，使復(fù)雜的特征提取工作簡(jiǎn)單化、抽象化，具有學(xué)習(xí)速度快、耗時(shí)小、識(shí)別率高的優(yōu)點(diǎn)。

3? ?卷積神經(jīng)網(wǎng)絡(luò)原理（CNN principle）

卷積神經(jīng)網(wǎng)絡(luò)是對(duì)貓的視覺(jué)皮層電生理研究啟發(fā)而開(kāi)始的一個(gè)研究，由Hubel和Wiesel最早在實(shí)驗(yàn)中發(fā)現(xiàn)。這幾年來(lái)，卷積神經(jīng)網(wǎng)絡(luò)作為最重要的網(wǎng)絡(luò)模型之一，已經(jīng)在多個(gè)領(lǐng)域被廣泛應(yīng)用，比如光學(xué)字符識(shí)別、人臉識(shí)別、圖像分類(lèi)、身份識(shí)別、交通標(biāo)志識(shí)別、飛行器圖像識(shí)別甚至圖譜特征分析等。

相對(duì)于淺層網(wǎng)絡(luò)，卷積神經(jīng)網(wǎng)絡(luò)屬于深層結(jié)構(gòu)，其基本組成包括輸入層、卷積層、池化層、全連接層，其中卷積層、池化層、全連接層可以是多個(gè)，如圖1所示。

3.1? ?輸入層

卷積神經(jīng)網(wǎng)絡(luò)的輸入層可以直接處理多維數(shù)據(jù)。它的主要任務(wù)是讀取圖像信息，該層的神經(jīng)元個(gè)數(shù)與圖像的維度[3]緊密相關(guān)。與其他神經(jīng)網(wǎng)絡(luò)算法類(lèi)似，卷積神經(jīng)網(wǎng)絡(luò)的輸入特征需要進(jìn)行標(biāo)準(zhǔn)化處理。輸入特征的標(biāo)準(zhǔn)化可以提高算法的運(yùn)行效率和學(xué)習(xí)表現(xiàn)。

3.2? ?卷積層

卷積層在卷積神經(jīng)網(wǎng)絡(luò)中用于特征提取。由于卷積神經(jīng)網(wǎng)絡(luò)是通過(guò)每次對(duì)圖像中的一個(gè)特征首先進(jìn)行局部感知，然后更高層次地對(duì)局部特征進(jìn)行綜合的操作，從而得到想要的全局信息。卷積神經(jīng)網(wǎng)絡(luò)中的卷積層是由多個(gè)卷積單元組成的，目的就是為了實(shí)現(xiàn)卷積操作。

同時(shí)為了提高計(jì)算效率，卷積神經(jīng)網(wǎng)絡(luò)引入了局部感知和參數(shù)共享兩個(gè)操作。

（1）局部感知

局部感知就是網(wǎng)絡(luò)的部分連通。每個(gè)神經(jīng)元只與上一層的部分神經(jīng)元相連，只感知局部，而不是整幅圖像。局部像素關(guān)系密切，較遠(yuǎn)像素相關(guān)性弱。因此只需要局部感知，在更高層將局部信息綜合起來(lái)就得到了全局的信息。

（2）權(quán)值共享

權(quán)值共享[5]即是從一個(gè)局部區(qū)域?qū)W習(xí)到的信息，應(yīng)用到圖像的其他地方去。即用一個(gè)相同的卷積核去卷積整幅圖像，相當(dāng)于對(duì)圖像做一個(gè)全圖濾波。一個(gè)卷積核對(duì)應(yīng)的特征比如邊緣，那么用該卷積核去對(duì)圖像做全圖濾波，即使將圖像各個(gè)位置的邊緣都濾出來(lái)。不同的特征靠不同的卷積核實(shí)現(xiàn)。

3.3? ?池化層

對(duì)輸入的特征圖進(jìn)行壓縮，一方面使特征圖變小，簡(jiǎn)化網(wǎng)絡(luò)計(jì)算復(fù)雜度;一方面進(jìn)行特征壓縮，提取主要特征。在某些方面，比如：平移、旋轉(zhuǎn)、尺度，可以保持某種特征不變。常用的有mean-pooling和max-pooling。池化層的輸入來(lái)源于卷積層，該操作即可減少數(shù)據(jù)量，同時(shí)也能保留有效信息，減少計(jì)算時(shí)間。

例如對(duì)一小塊取最大值，假設(shè)pooling的窗大小為2×2的，如果對(duì)不重疊的4個(gè)2×2區(qū)域分別max-pooling，則運(yùn)算過(guò)程如圖3所示。

3.4? ?全連接層

在CNN結(jié)構(gòu)中，經(jīng)過(guò)多個(gè)卷積層和池化層后，連接著1個(gè)或1個(gè)以上的全鏈接層。全連接層中的每個(gè)神經(jīng)元與其前一層的所有神經(jīng)元進(jìn)行全連接。全連接層可以整合卷積層或者池化層具有類(lèi)別區(qū)分性的局部信息。全連接層是連接所有特征，將輸出值送給分類(lèi)器[6]（如softmax分類(lèi)器），如圖4所示。

其中，x1、x2、x3為全連接層的輸入，a1、a2、a3為輸出，則全連接層的核心運(yùn)算就是矩陣向量乘積：

a1=W11*x1+W12*x2+W13*x3+b1? ? ? ? ?（2）

a2=W21*x1+W22*x2+W23*x3+b2? ? ? ? ?（3）

a3=W31*x1+W32*x2+W33*x3+b3? ? ? ? ?（4）

4? ?實(shí)驗(yàn)數(shù)據(jù)分析（Experimental data analysis）

4.1? ?實(shí)驗(yàn)數(shù)據(jù)

在進(jìn)行此次實(shí)驗(yàn)前，為了有一個(gè)標(biāo)準(zhǔn)的訓(xùn)練及檢測(cè)數(shù)據(jù)集，且本實(shí)驗(yàn)的應(yīng)用背景是將深度學(xué)習(xí)算法應(yīng)用于病理醫(yī)學(xué)中，所以提前在醫(yī)院完成了采集甲狀腺淋巴結(jié)轉(zhuǎn)移癌癥病理樣本工作。全部圖像為全掃描文件，全部數(shù)據(jù)都為顯微鏡下40倍數(shù)據(jù)，并且將樣本分為正常和癌變細(xì)胞兩類(lèi)。如圖5和圖6所示。

本文運(yùn)用卷積神經(jīng)網(wǎng)絡(luò)的算法，實(shí)現(xiàn)圖像的識(shí)別。在處理過(guò)程中，通過(guò)讀取圖片、樣本隨機(jī)分配、網(wǎng)絡(luò)設(shè)計(jì)、訓(xùn)練和驗(yàn)證四個(gè)步驟實(shí)現(xiàn)該算法。

pool4=tf.layers.max_pooling2d（inputs=conv4，pool_size=[2，2]，strides=2）

re1=tf.reshape（pool4，[-1，6*6*128]）

dense1=tf.layers.dense（inputs=re1，units=1024，activation=tf.nn.relu，

kernel_initializer=tf.truncated_normal_initializer（stddev=0.01），

kernel_regularizer=tf.contrib.layers.l2_regularizer（0.003））

dense2=tf.layers.dense（inputs=dense1，units=512，activation=tf.nn.relu，

kernel_initializer=tf.truncated_normal_initializer（stddev=0.01），kernel_regularizer=tf.contrib.layers.l2_regularizer（0.003））

logits=tf.layers.dense（inputs=dense2，units=2，activation=None，

kernel_initializer=tf.truncated_normal_initializer（stddev=0.01），kernel_regularizer=tf.contrib.layers.l2_regularizer（0.003））

4.2? ?數(shù)據(jù)結(jié)果與分析

本次實(shí)驗(yàn)的實(shí)驗(yàn)環(huán)境為Ubuntu系統(tǒng)[7]+TensorFlow+

python3.6+Anaconda+spyder，為了體現(xiàn)卷積神經(jīng)網(wǎng)絡(luò)的有效性，所以引用了同為深度學(xué)習(xí)算法的深度置信網(wǎng)絡(luò)算法（DBN）進(jìn)行了對(duì)比試驗(yàn)。在實(shí)驗(yàn)中，兩種算法的層數(shù)一致，并分別做了10次實(shí)驗(yàn)取平均值作為實(shí)驗(yàn)結(jié)果，如表1所示。

通過(guò)對(duì)比實(shí)驗(yàn)，可以看出卷積神經(jīng)網(wǎng)絡(luò)的識(shí)別性能高于深度置信網(wǎng)絡(luò)算法，顯示了算法的優(yōu)越性。因此采用卷積神經(jīng)網(wǎng)絡(luò)算法應(yīng)用于病理醫(yī)學(xué)的圖像處理中。

5? ?結(jié)論（Conclusion）

在此次實(shí)驗(yàn)中，運(yùn)用卷積神經(jīng)網(wǎng)絡(luò)在圖像中的識(shí)別功能，對(duì)病理醫(yī)學(xué)圖像進(jìn)行有效的處理。通過(guò)研究表明，只要通過(guò)大量的數(shù)據(jù)學(xué)習(xí)訓(xùn)練，卷積神經(jīng)網(wǎng)絡(luò)對(duì)病理圖像的識(shí)別效率高，準(zhǔn)確度高。

本文針對(duì)病理醫(yī)學(xué)圖像處理效率過(guò)低，采用了卷積神經(jīng)網(wǎng)絡(luò)進(jìn)行病理特征的判斷，且準(zhǔn)確率與效率高于傳統(tǒng)方法的平均準(zhǔn)確率和平均效率。本文對(duì)卷積神經(jīng)網(wǎng)絡(luò)的原理進(jìn)行了深入的研究，對(duì)網(wǎng)絡(luò)的參數(shù)進(jìn)行了深刻的學(xué)習(xí)，并將其應(yīng)用于甲狀腺的病理圖像識(shí)別中。由于時(shí)間有限，本文只是完成了卷積神經(jīng)網(wǎng)絡(luò)的基礎(chǔ)研究，后續(xù)期望能夠?qū)矸e神經(jīng)網(wǎng)絡(luò)進(jìn)行改進(jìn)，并能夠進(jìn)一步提高網(wǎng)絡(luò)的識(shí)別率。

參考文獻(xiàn)（References）

[1] 薛迪秀.基于卷積神經(jīng)網(wǎng)絡(luò)的醫(yī)學(xué)圖像癌變識(shí)別研究[D].合肥：中國(guó)科學(xué)技術(shù)大學(xué)，2017.

[2] 蔣濤.深度學(xué)習(xí)在醫(yī)學(xué)圖像分析中的應(yīng)用[D].成都：電子科技大學(xué)，2017.

[3] 魏存超.基于卷積神經(jīng)網(wǎng)絡(luò)的醫(yī)學(xué)圖像分類(lèi)的研究[D].哈爾濱：哈爾濱工業(yè)大學(xué)，2017.

[4] H Chen，Q Dou，X Wang.Mitosis Detection in Breast Cancer Histology Images via Deep Cascaded Networks[C].Proceedings of the Thirtieth AAAI Conference on Artificial Intelligence 2016：1160-1166.

[5] Janowczyk A，Doyle S，Gilmore H，et al.A resolution adaptive deep hierarchical learning scheme applied to nuclear segmentation of digital pathology images[J].Computer Methods in Biomechanics and Biomedical Engineering：Imaging & Visualization，2016：1-7.

[6] Janowczyk A，Madabhushi A.Deep learning for digital pathology image analysis：A comprehensive tutorial with selected use cases[J].Journal of Pathology Informatics，2016，7（1）：29.

[7] 李雪燕.緊耦合Ubuntu系統(tǒng)的衛(wèi)星導(dǎo)航接收機(jī)設(shè)計(jì)[D].石家莊：河北科技大學(xué)，2016.