馮菲

摘要?介紹了南海鳶烏賊（Sthenoteuthis oualaniensis）的資源調(diào)查現(xiàn)狀，分析了大數(shù)據(jù)技術(shù)在南海鳶烏賊資源調(diào)查中的應(yīng)用情況，總結(jié)出大數(shù)據(jù)技術(shù)在鳶烏賊資源調(diào)查中的應(yīng)用框架，為南海鳶烏賊資源的生產(chǎn)和評估提供重要的科學(xué)依據(jù)。

關(guān)鍵詞?大數(shù)據(jù);漁業(yè)大數(shù)據(jù);鳶烏賊;漁業(yè)資源

中圖分類號?S951.2文獻(xiàn)標(biāo)識碼?A文章編號?0517-6611（2018）33-0012-02

隨著我國經(jīng)濟(jì)和人口的快速發(fā)展，南海海域漁業(yè)資源過度捕撈，漁業(yè)生態(tài)環(huán)境不斷惡化，導(dǎo)致近海區(qū)漁業(yè)資源枯竭[1]，南海鳶烏賊又稱紅魷魚或南魷，屬于鞘亞綱，槍形目，鳶烏賊屬，柔魚科，其生命周期較短，生長率高，產(chǎn)量十分豐富，是具有較高開發(fā)潛力的物種，是我國南海重要的漁業(yè)資源之一[2-4]。通過聲學(xué)評估分析，南海鳶烏賊的資源量達(dá)到2.36×106 t[5]。因此對南海鳶烏賊的資源調(diào)查極具價(jià)值。

2003年，我國首次對印度洋海域鳶烏賊進(jìn)行資源調(diào)查[6-7]。2017年，范江濤等[8]依據(jù)漁業(yè)聲學(xué)調(diào)查數(shù)據(jù)，用傳統(tǒng)的數(shù)據(jù)處理軟件對南沙海域鳶烏賊資源進(jìn)行分析，表明漁場有空間自相關(guān)性。由于信息化技術(shù)剛起步，結(jié)合大數(shù)據(jù)技術(shù)對鳶烏賊資源的調(diào)查極少。隨著復(fù)雜的調(diào)查數(shù)據(jù)管理需求增加和信息化技術(shù)的突飛猛進(jìn)，基于大數(shù)據(jù)技術(shù)下的資源調(diào)查已經(jīng)成為高效存儲和共享資源調(diào)查數(shù)據(jù)進(jìn)行預(yù)測分析評估的必要手段之一[9-11]。受不同的環(huán)境因子、資源密度、捕獲量、漁民需求等因素影響，使用大數(shù)據(jù)技術(shù)對南海鳶烏賊進(jìn)行觀測分析越發(fā)必要。利用各種傳感節(jié)點(diǎn)和無線通信網(wǎng)絡(luò)對南海鳶烏賊資源進(jìn)行采集，結(jié)合大數(shù)據(jù)分析技術(shù)進(jìn)行傳輸、存儲和處理等，正廣泛運(yùn)用到鳶烏賊資源調(diào)查的各個方面[12]。

相比傳統(tǒng)的調(diào)查分析技術(shù)而言，大數(shù)據(jù)技術(shù)背景下鳶烏賊資源調(diào)查規(guī)模大、質(zhì)量高，能獲得海量、全方位的數(shù)據(jù)，且包括所有能收集到的信息，利用大數(shù)據(jù)理念和技術(shù)對資源進(jìn)行整合、分析，可有效推動鳶烏賊資源的發(fā)展[13]。

該研究介紹了鳶烏賊資源現(xiàn)狀和大數(shù)據(jù)技術(shù)應(yīng)用現(xiàn)狀，將大數(shù)據(jù)技術(shù)與鳶烏賊資源調(diào)查相結(jié)合，有望促進(jìn)漁業(yè)領(lǐng)域的可持續(xù)發(fā)展。

1?南海鳶烏賊資源研究現(xiàn)狀

1.1?大數(shù)據(jù)技術(shù)發(fā)展現(xiàn)狀

我國經(jīng)濟(jì)發(fā)展進(jìn)入新常態(tài)，信息化技術(shù)已經(jīng)成為促進(jìn)改革創(chuàng)新，推翻傳統(tǒng)漁業(yè)模式的決定性因素，信息化技術(shù)是衡量一個國家科技發(fā)展水平高低的重要標(biāo)志。信息化技術(shù)在發(fā)展的同時(shí)產(chǎn)生了爆炸式的大數(shù)據(jù)。據(jù)《中國大數(shù)據(jù)產(chǎn)業(yè)發(fā)展水平評估報(bào)告（2017）》指出，大數(shù)據(jù)浪潮正在席卷全球，我國也正在向著“數(shù)據(jù)強(qiáng)國”的目標(biāo)不斷前進(jìn)[14]。據(jù)Winter Corp調(diào)查，數(shù)據(jù)量正以每兩年3倍的速率快速增加[15]。

大數(shù)據(jù)的簡單定義就是無法利用傳統(tǒng)的數(shù)據(jù)處理軟件在一定的時(shí)間內(nèi)對這些數(shù)據(jù)進(jìn)行采集，分析存儲和處理并且獲取大量信息的數(shù)據(jù)集合[16]。大數(shù)據(jù)的特點(diǎn)包括4個方面：數(shù)據(jù)容量海量性、數(shù)據(jù)處理的高速性、數(shù)據(jù)類型多樣性和商業(yè)價(jià)值性[17]。大數(shù)據(jù)技術(shù)包括海量數(shù)據(jù)的收集、存儲、傳輸、建模和分析等一系列活動形成的產(chǎn)業(yè)鏈，同時(shí)和其他行業(yè)結(jié)合在一起，從而獲得巨大的效益[18]。

大數(shù)據(jù)技術(shù)在各行各業(yè)都有了廣泛的發(fā)展，比如近年來，劉海英[19]將大數(shù)據(jù)技術(shù)與共享鏈結(jié)合共同促進(jìn)共享經(jīng)濟(jì)的發(fā)展。郭少青[20]利用大數(shù)據(jù)技術(shù)治理氣候變化問題，促進(jìn)城市的可持續(xù)發(fā)展。蔣鵬飛等[21]把空間遙感大數(shù)據(jù)技術(shù)應(yīng)用在農(nóng)業(yè)“防災(zāi)減災(zāi)”領(lǐng)域，從而獲得更加準(zhǔn)確的參數(shù)信息。但是，大數(shù)據(jù)技術(shù)在南海鳶烏賊資源方面的應(yīng)用較少，加上漁業(yè)活動較為分散等原因，導(dǎo)致漁業(yè)信息化水平較低。

將大數(shù)據(jù)應(yīng)用于漁業(yè)領(lǐng)域，有利于提升漁業(yè)科學(xué)研究和生產(chǎn)水平的創(chuàng)新能力，提高漁業(yè)資源政策的科學(xué)性，創(chuàng)新其發(fā)展模式，促進(jìn)漁業(yè)從跟跑到領(lǐng)跑式的發(fā)展[22]。其原理是利用大數(shù)據(jù)和相關(guān)技術(shù)的思想架構(gòu)，結(jié)合數(shù)學(xué)模型處理漁業(yè)信息化產(chǎn)生的大量數(shù)據(jù)，并根據(jù)需要對有用的結(jié)果進(jìn)行分析和渲染，進(jìn)而處理漁業(yè)資源領(lǐng)域出現(xiàn)的問題[23]。隨著水產(chǎn)養(yǎng)殖和捕撈業(yè)的快速發(fā)展和應(yīng)用，使得鳶烏賊資源獲得的數(shù)據(jù)量也不斷擴(kuò)大，其數(shù)據(jù)資源多種多樣、結(jié)構(gòu)復(fù)雜、分布較廣，使得大數(shù)據(jù)技術(shù)在南海鳶烏賊資源管理方面的應(yīng)用較為復(fù)雜。

1.2?國內(nèi)外南海鳶烏賊資源調(diào)查研究現(xiàn)狀

早在20世紀(jì)70年代，南海鳶烏賊資源就已經(jīng)出現(xiàn)，但因?yàn)閭鹘y(tǒng)漁業(yè)資源豐富，且鳶烏賊的經(jīng)濟(jì)價(jià)值較低，所以鳶烏賊資源未被重視。如今，傳統(tǒng)漁業(yè)資源的逐漸衰退使得南海鳶烏賊資源成為我國南海最重要的漁業(yè)資源之一，在我國引起很大的關(guān)注[24]。目前國內(nèi)外對南海鳶烏賊資源的研究大多集中在其生長繁殖、種群結(jié)構(gòu)遺傳結(jié)構(gòu)[25-29]等生物學(xué)特性方面，對鳶烏賊的資源量調(diào)查大多集中在燈光罩探捕調(diào)查[30]以及資源量的水聲學(xué)評估[5]等方面，將大數(shù)據(jù)技術(shù)用于南海鳶烏賊資源調(diào)查的研究少之又少，再加上數(shù)據(jù)混亂、數(shù)據(jù)分析人才的缺乏，導(dǎo)致大數(shù)據(jù)技術(shù)的應(yīng)用更為復(fù)雜。

1.3?大數(shù)據(jù)技術(shù)應(yīng)用在南海鳶烏賊資源管理中的意義

由于我國漁業(yè)的信息化程度普遍較低，而探索大數(shù)據(jù)技術(shù)在漁業(yè)中的應(yīng)用處于剛起步階段[22]。當(dāng)前，漁業(yè)仍沿用大量消耗資源和粗放經(jīng)營的傳統(tǒng)方式[10]，對鳶烏賊資源的調(diào)查也仍然采用傳統(tǒng)的數(shù)據(jù)處理軟件對抽樣所獲得的數(shù)據(jù)進(jìn)行分析評估，分析效率低，資源浪費(fèi)，預(yù)測評估不及時(shí)，存儲的數(shù)據(jù)量少，導(dǎo)致分析結(jié)果精準(zhǔn)度低。

利用大數(shù)據(jù)技術(shù)，可以提高漁業(yè)信息的綜合利用率，發(fā)掘隱藏在其中的信息，并產(chǎn)生新知識用于漁業(yè)資源市場的預(yù)期。南海鳶烏賊有著豐富的資源量，更需要大數(shù)據(jù)技術(shù)的支持。比如從不同的地區(qū)和不同年齡的漁民的購買數(shù)據(jù)中分析出鳶烏賊的需求量，根據(jù)需求情況調(diào)配資源和管理，從而開拓更大的市場。另外大數(shù)據(jù)平臺的眾多外部資源可以對南海鳶烏賊所處的環(huán)境進(jìn)行分析，查找影響其生長繁殖和捕獲量的各種因素，對大規(guī)模數(shù)據(jù)進(jìn)行分析，關(guān)注整體動向，預(yù)測其變化規(guī)律[31]。

2?大數(shù)據(jù)技術(shù)在鳶烏賊資源調(diào)查中的應(yīng)用框架

2.1?數(shù)據(jù)的采集和傳輸

采用傳感器測量南海鳶烏賊資源環(huán)境中的各種變量，將采集的信息轉(zhuǎn)化為可讀的信號，通過無線網(wǎng)絡(luò)載體，將信息傳播到數(shù)據(jù)采集點(diǎn)以待處理[32]。其傳感器的原理是由電池供電，微小傳感器收集所感知的數(shù)據(jù)，基站在節(jié)點(diǎn)部署完成之后發(fā)布收集命令，這樣不同節(jié)點(diǎn)產(chǎn)生的感知數(shù)據(jù)將會被匯集，之后轉(zhuǎn)發(fā)到基站以待處理[33]。例如傳統(tǒng)的鳶烏賊資源調(diào)查航次分析主要依靠人工錄入捕撈日志等信息來確定和判斷航次，而基于大數(shù)據(jù)下的鳶烏賊資源調(diào)查可以快速提取每搜漁船的捕撈航次信息，能夠直觀地看出每年出海捕撈情況，可以協(xié)助進(jìn)行漁船的精準(zhǔn)化管理。另外采集方式還有信息系統(tǒng)數(shù)據(jù)、互聯(lián)網(wǎng)數(shù)據(jù)等[32]。

2.2?數(shù)據(jù)的存儲與處理

所收集到南海鳶烏賊資源的各種數(shù)據(jù)，包括每年探捕的鳶烏賊量，每年度中每季度的鳶烏賊的資源量以及其分布的區(qū)域的經(jīng)緯度等信息數(shù)據(jù)，通過Haddoop體系進(jìn)行存儲計(jì)算。Haddoop體系包括HDFS（ Hadoop Distributed File System）和 Map Reduce兩部分。HDFS將調(diào)查鳶烏賊資源獲得的大數(shù)據(jù)切分成大小相同的小數(shù)據(jù)塊進(jìn)行存儲，存于多個數(shù)據(jù)節(jié)點(diǎn)上，并進(jìn)行校對、負(fù)載等。一般用HDFS存儲數(shù)據(jù)，不容易丟失，且容量大。Map Reduce將海量數(shù)據(jù)分為不同的數(shù)據(jù)塊進(jìn)行過濾處理，每個數(shù)據(jù)塊都對應(yīng)一個任務(wù)，將所得中間結(jié)果保存在本地，將中間結(jié)果傳輸?shù)礁鱾€Reduce節(jié)點(diǎn)進(jìn)行最終的Reduce聚集處理，最后將最終結(jié)果輸入到分布式存儲文件系統(tǒng)[34]。另外它可以存儲離線數(shù)據(jù)，Map節(jié)點(diǎn)和Reduce節(jié)點(diǎn)相互配合，以最快的速度完成計(jì)算，從而提高運(yùn)算效率。另外其存儲技術(shù)還包括分布式文件系統(tǒng)，分布式數(shù)據(jù)庫等。與傳統(tǒng)的關(guān)系型數(shù)據(jù)管理系統(tǒng)比較，基于大數(shù)據(jù)技術(shù)背景下非關(guān)系型數(shù)據(jù)管理系統(tǒng)具有擴(kuò)展性好、存儲性能好且運(yùn)算效率高等特點(diǎn)。

ETL對南海鳶烏賊資源調(diào)查過程中收集到的分散數(shù)據(jù)進(jìn)行提取、轉(zhuǎn)換、清洗并加載至數(shù)據(jù)倉庫中，使得這些數(shù)據(jù)成為智能化有用的數(shù)據(jù)[35]。

2.3?數(shù)據(jù)的分析

通過ETL數(shù)據(jù)清洗得到標(biāo)準(zhǔn)化的鳶烏賊資源數(shù)據(jù)，從不同的業(yè)務(wù)中提取數(shù)據(jù)的特征，利用局部區(qū)域近十年的數(shù)據(jù)進(jìn)行統(tǒng)計(jì)，并構(gòu)建棲息地指數(shù)模型或者廣義可加模型（GAM），根據(jù)模型對整個南海鳶烏賊資源數(shù)據(jù)進(jìn)行預(yù)測和分析[36]。在鳶烏賊資源管理過程中，會涉及多個過程，包括養(yǎng)殖、捕撈、運(yùn)輸、加工等過程，其間包含環(huán)境因子、各種生物成分，以及安全問題、生產(chǎn)效益、漁民需求等因素。此外利用BI分析平臺，將復(fù)雜難懂的數(shù)據(jù)配合多維專業(yè)工具轉(zhuǎn)化為簡單、易理解的圖形方式體現(xiàn)，對需要的指標(biāo)進(jìn)行多角度分析，并且生成分析報(bào)告，從中得到有用的信息[37]。

3?展望

傳統(tǒng)的鳶烏賊資源調(diào)查大多要經(jīng)歷幾個環(huán)節(jié)，并且需要不同的人員相互配合共同完成，多以現(xiàn)場采樣、統(tǒng)計(jì)以及記錄的方式采集數(shù)據(jù)，并對數(shù)據(jù)簡單處理，通過Excel進(jìn)行分析數(shù)據(jù)得到有用的信息，這個過程比較繁瑣，稍有失誤將會影響整個調(diào)查結(jié)果。基于大數(shù)據(jù)技術(shù)下的鳶烏賊資源調(diào)查可以提供標(biāo)準(zhǔn)化的數(shù)據(jù)結(jié)構(gòu)，同時(shí)具有數(shù)據(jù)備份系統(tǒng)以免數(shù)據(jù)丟失，從而保護(hù)數(shù)據(jù)的安全性，還能提供數(shù)據(jù)共享[11]。另外大數(shù)據(jù)技術(shù)可以幫助構(gòu)建漁業(yè)云平臺，向相關(guān)的漁民提供在線查詢、數(shù)據(jù)分析、共享交流等服務(wù)[38]。將大數(shù)據(jù)技術(shù)應(yīng)用于漁業(yè)資源管理中，有望為將來的漁業(yè)資源領(lǐng)域開辟一條新的道路。

參考文獻(xiàn)

[1] 余景，胡啟偉，李純厚，等.西沙-中沙海域春季鳶烏賊資源與海洋環(huán)境的關(guān)系[J].海洋學(xué)報(bào)，2017，39（6）：62-73.

[2] 江淼，馬勝偉，吳洽兒.南海鳶烏賊資源探捕與開發(fā)[J].中國漁業(yè)經(jīng)濟(jì)，2018，36（2）：65-70.

[3] 馬靜蓉，楊慶賢，馬海霞，等.南海鳶烏賊肌原纖維蛋白的熱穩(wěn)定性研究[J].食品與發(fā)酵工程，2015，41（5）：80-84.

[4] 吳靜，胡曉，楊慶賢，等.鳶烏賊酶解產(chǎn)物的抗氧化穩(wěn)定性與功能特性[J].南方水產(chǎn)科學(xué)，2016，12（5）：105-111.

[5] 李斌，陳國寶，郭禹，等.南海中部海域漁業(yè)資源時(shí)空分布和資源量的水聲學(xué)評估[J].南方水產(chǎn)科學(xué)，2016，12（4）：28-37.

[6] 陳新軍，錢衛(wèi)國.印度洋西北部海域鳶烏賊資源密度分布的初步分析[J].上海水產(chǎn)大學(xué)學(xué)報(bào)，2004，13（3）：218-223.

[7] 余為，陳新軍.印度洋西北海域鳶烏賊9-10月棲息地適宜指數(shù)研究[J].廣東海洋大學(xué)學(xué)報(bào)，2012，32（6）：74-80.

[8] 范江濤，張俊，馮雪，等.基于地統(tǒng)計(jì)學(xué)的南沙海域鳶烏賊漁場分析[J].生態(tài)學(xué)雜志，2017，36（2）：442-446.

[9] 馮波，顏云榕，張宇美，等.南海鳶烏賊（Sthenoteuthis oualaniensis）資源評估的新方法[J].漁業(yè)科學(xué)進(jìn)展，2014，35（4）：1-6.

[10] 郭少雅.物聯(lián)網(wǎng)支撐現(xiàn)代漁業(yè)發(fā)展[N].農(nóng)民日報(bào)，2016-04-08（04）.

[11] 劉子健.基于開源GIS技術(shù)的新疆漁業(yè)資源數(shù)據(jù)平臺設(shè)計(jì)與開發(fā)[D].武漢：華中農(nóng)業(yè)大學(xué)，2017：1-58.

[12] 謝潤梅.農(nóng)業(yè)大數(shù)據(jù)的獲取和利用[J].安徽農(nóng)業(yè)科學(xué)，2015，43（30）：383-385.

[13] 李俊清，宋長青，周虎.大數(shù)據(jù)背景下農(nóng)業(yè)數(shù)據(jù)資源分類及應(yīng)用前景淺析[J].農(nóng)業(yè)圖書情報(bào)學(xué)刊，2018，30（4）：23-27.

[14] 中國大數(shù)據(jù)產(chǎn)業(yè)發(fā)展水平評估報(bào)告[J].軟件和集成電路，2017（12）：22-23.

[15] WinterCorp.The large scale Data Management Expert[EB/OL].[2018-05-28.]http：//www.wintercorp.com.

[16] MANYIKA J，CHUI M，BROWN B，et al.Big data：The next frontier for innovation，competition，and protuctivity[R].McKinsey Global Institute，2011.

[17] MAYERSCHONBERGER V，CUKIER K.Big data：A revolution that will transform how we live，work，and think [M].New York：Eamon Dolan/Houghton Mifflin Harcourt，2013：174-180.

[18] 尹衍雨，白春明，柴多梅，等.大數(shù)據(jù)與農(nóng)業(yè) 大數(shù)據(jù)在農(nóng)業(yè)領(lǐng)域的應(yīng)用[J].蔬菜，2018（3）：1-7.

[19] 劉海英.“大數(shù)據(jù)+區(qū)塊鏈”共享經(jīng)濟(jì)發(fā)展研究：基于產(chǎn)業(yè)融合理論 [J].技術(shù)經(jīng)濟(jì)與管理研究，2018（1）：91-95.

[20] 郭少青.基于大數(shù)據(jù)治理對氣候變化背景下城市可持續(xù)發(fā)展的對策研究[J].西南民族大學(xué)學(xué)報(bào)（人文社會科學(xué)版），2018（3）：205-213.

[21] 蔣鵬飛，姜水晶，韓雪.空間遙感大數(shù)據(jù)技術(shù)在農(nóng)業(yè)防災(zāi)減災(zāi)領(lǐng)域中的應(yīng)用[J].農(nóng)村·農(nóng)業(yè)·農(nóng)民（B版），2018（3）：49-51.

[22] 周詢.大數(shù)據(jù)技術(shù)與中國漁業(yè)[J].中國水產(chǎn)，2015（8）：31-33.

[23] 于喆.漁業(yè)大數(shù)據(jù)綜述[J].安徽農(nóng)業(yè)科學(xué)，2017，45（9）：211-213.

[24] 張鵬，楊吝，張旭豐，等.南海金槍魚和鳶烏賊資源開發(fā)現(xiàn)狀及前景[J].南方水產(chǎn)，2010，6（1）：68-74.

[25] 粟麗，陳作志，張鵬.南海中南部海域春秋季鳶烏賊繁殖生物學(xué)特征研究[J].南方水產(chǎn)科學(xué)，2016，12（4）：96-102.

[26] 招春旭，陳昭澎，何雄波，等.基于耳石微結(jié)構(gòu)的南海春季鳶烏賊日齡、生長與種群結(jié)構(gòu)的研究[J].水生生物學(xué)報(bào)，2017，41（4）：884-890.

[27] 劉連為，周永東，陸化杰，等.西北太平洋鳶烏賊種群遺傳結(jié)構(gòu)[J].水產(chǎn)學(xué)報(bào)，2017，41（9）：1355-1364.

[28] NESIS K N.Population structure of oceanic ocmastrephids with particular reference to Sthenoteuthis oualaniensis：A review[M] //OKUTANI T，ODOR ?R K，KUBODERA T.Recent advances in fisheries biology.Tokyo：Tokai University Press，1993：375-383.

[29] SUZUKI T，YAMAMOTO S，ISHI I K，et al.On the flying squid sthenoteuthis oualaniensis（Lesson）in Hawaiian waters[J].Bulletin of the Faculty of Fisheries Hokkaido University，1986，37（2）：111-123.

[30] 張鵬，張俊，李淵，等.秋季南海中南部海域的一次燈光罩網(wǎng)探捕調(diào)查[J].南方水產(chǎn)科學(xué)，2016，12（2）：67-74.

[31] 張婷.大數(shù)據(jù)技術(shù)在企業(yè)內(nèi)部審計(jì)中的應(yīng)用[J].電子技術(shù)與軟件工程，2018（1）：149.

[32] 李學(xué)龍，龔海剛.大數(shù)據(jù)系統(tǒng)綜述[J].中國科學(xué)：信息科學(xué)，2015，45（1）：1-44.

[33] WANG F，LIU J C.Networked wireless sensor data collection：Issues，challenges，and approaches[J].IEEE Commun Surv Tutor，2011，13（4）：673-687.

[34] 徐華.基于云的大數(shù)據(jù)處理系統(tǒng)性能優(yōu)化問題研究[D].合肥：中國科學(xué)技術(shù)大學(xué)，2018：1-11.

[35] 徐俊剛，裴瑩.數(shù)據(jù)ETL研究綜述[J].計(jì)算機(jī)科學(xué)，2011，38（4）：15-20.

[36] 邱耀儒，沈明.淺談大數(shù)據(jù)的數(shù)據(jù)處理[J].電子世界，2018（10）：100.

[37] 孟祥寶，謝秋波，劉海峰，等.農(nóng)業(yè)大數(shù)據(jù)應(yīng)用體系架構(gòu)和平臺建設(shè)[J].廣東農(nóng)業(yè)科學(xué)，2014，41（14）：173-178.

[38] 李杰.農(nóng)業(yè)大數(shù)據(jù)應(yīng)用-農(nóng)業(yè)云平臺[J].農(nóng)民致富之友，2018（4）：20.