王曙霞 焦家林 黃志武

（湖北工程學(xué)院計(jì)算機(jī)與信息科學(xué)學(xué)院，湖北 孝感 432000）

移動(dòng)互聯(lián)終端的海量云數(shù)據(jù)挖掘技術(shù)研究

王曙霞 焦家林 黃志武

（湖北工程學(xué)院計(jì)算機(jī)與信息科學(xué)學(xué)院，湖北 孝感 432000）

在如今的計(jì)算機(jī)管理技術(shù)不斷發(fā)展的過(guò)程中，用戶在使用過(guò)程中更加注重信息挖掘速度。傳統(tǒng)數(shù)據(jù)挖掘技術(shù)已經(jīng)不能滿足實(shí)際需要，對(duì)移動(dòng)互聯(lián)終端的海量云數(shù)據(jù)挖掘技術(shù)成為研究熱點(diǎn)。本文通過(guò)對(duì)移動(dòng)互聯(lián)終端的海量云數(shù)據(jù)挖掘服務(wù)架構(gòu)的研究，提出云數(shù)據(jù)挖掘技術(shù)建模流程以及云數(shù)據(jù)挖掘模型體系結(jié)構(gòu)，從而有效提高了移動(dòng)互聯(lián)終端的海量云數(shù)據(jù)挖掘的實(shí)用性與速度。

移動(dòng)互聯(lián)終端；云數(shù)據(jù)；數(shù)據(jù)挖掘

1 引言

隨著計(jì)算機(jī)信息管理技術(shù)的不斷發(fā)展，對(duì)于數(shù)據(jù)管理要求水平也在不斷提高。在計(jì)算機(jī)信息管理過(guò)程中，用戶對(duì)于信息提取速度更加關(guān)注。在互聯(lián)網(wǎng)移動(dòng)終端，客戶在使用過(guò)程中的信息挖掘速度是影響計(jì)算機(jī)信息管理效率非常重要的一個(gè)指標(biāo)[1]。目前，海量云數(shù)據(jù)挖掘技術(shù)已經(jīng)成為了人們關(guān)注的熱點(diǎn)研究問(wèn)題。算法包括基于馬爾科夫算法的數(shù)據(jù)挖掘方法、基于K均值聚類算法的數(shù)據(jù)挖掘方法以及基于集中式云數(shù)據(jù)計(jì)算的海量云數(shù)據(jù)挖掘方法。其中，基于集中式云數(shù)據(jù)計(jì)算是最常見(jiàn)的計(jì)算方法。海量云數(shù)據(jù)挖掘方法的應(yīng)用十分廣泛，作為最實(shí)用的研究課題，受到許多有關(guān)專家和學(xué)者的重視，未來(lái)的發(fā)展前景十分廣闊。在移動(dòng)互聯(lián)終端的海量云數(shù)據(jù)信息管理過(guò)程中，數(shù)據(jù)對(duì)象差異比較大并且具有復(fù)雜性較大等特點(diǎn)。

目前，移動(dòng)互聯(lián)終端海量云數(shù)據(jù)具有超大規(guī)模的存儲(chǔ)以及計(jì)算能力，云數(shù)據(jù)具有結(jié)構(gòu)與資源動(dòng)態(tài)的伸縮性，同時(shí)通過(guò)虛擬化的技術(shù)與龐大的資源提供服務(wù)?；谝苿?dòng)互聯(lián)終端的海量云數(shù)據(jù)特點(diǎn)讓數(shù)據(jù)分析、儲(chǔ)存和應(yīng)用具有商業(yè)化發(fā)展的特點(diǎn)，讓云數(shù)據(jù)挖掘成為一個(gè)非常具有應(yīng)用價(jià)值的研究領(lǐng)域。在業(yè)務(wù)的不斷增長(zhǎng)中，企業(yè)數(shù)據(jù)庫(kù)對(duì)于商業(yè)數(shù)據(jù)的積累數(shù)量在不斷增加，傳統(tǒng)的移動(dòng)互聯(lián)終端海量云數(shù)據(jù)挖掘技術(shù)已經(jīng)無(wú)法滿足如此大量數(shù)據(jù)對(duì)計(jì)算能力的需求。且傳統(tǒng)的集中式海量云數(shù)據(jù)計(jì)算法在對(duì)數(shù)據(jù)進(jìn)行挖掘處理的時(shí)候，會(huì)使算法陷入一個(gè)無(wú)窮對(duì)比的情況，存在時(shí)間復(fù)雜度高、算法不收斂等弊端，大大降低了信息管理的效率。所以需要建立一個(gè)高性能計(jì)算能力的移動(dòng)互聯(lián)終端海量數(shù)據(jù)挖掘模式[3]。同時(shí)為了適應(yīng)數(shù)據(jù)數(shù)量的不斷增長(zhǎng)以及滿足實(shí)際的跨地區(qū)服務(wù)需要，企業(yè)的數(shù)據(jù)儲(chǔ)存要分布儲(chǔ)存在數(shù)據(jù)中心，構(gòu)建一個(gè)能夠處理分布式執(zhí)行數(shù)據(jù)、分布式數(shù)據(jù)儲(chǔ)存的數(shù)據(jù)挖掘模式。

2 服務(wù)架構(gòu)

現(xiàn)在大多數(shù)的數(shù)據(jù)挖掘解決方案都是以系統(tǒng)為中心，更加注重系統(tǒng)工程以及算法，但是往往忽略了從用戶角度出發(fā)的數(shù)據(jù)挖掘技術(shù)應(yīng)用，增加了用戶在使用系統(tǒng)過(guò)程中的難度。使得一些數(shù)據(jù)挖掘工具只能針對(duì)技術(shù)人員使用，如果對(duì)于算法不了解，很難得出好的模型，這對(duì)于企業(yè)縱向開發(fā)數(shù)據(jù)挖掘技術(shù)平臺(tái)不僅增加了難度，同時(shí)也增加了企業(yè)成本。移動(dòng)互聯(lián)終端的海量云技術(shù)從面向服務(wù)的方面為數(shù)據(jù)挖掘提供更好的解決方案。在移動(dòng)互聯(lián)終端的海量云數(shù)據(jù)的存儲(chǔ)、應(yīng)用等過(guò)程中都是可以共享的資源[4]。作為一種商業(yè)計(jì)算模式，能夠?qū)⒁苿?dòng)互聯(lián)終端的海量云數(shù)據(jù)挖掘作為一種服務(wù)按需出售，同時(shí)降低了一些中小企業(yè)的數(shù)據(jù)挖掘成本，為移動(dòng)終端的海量云數(shù)據(jù)挖掘商業(yè)應(yīng)用提供更好的平臺(tái)。移動(dòng)互聯(lián)終端的海量云數(shù)據(jù)挖掘的功能集合包括分析、挖掘、數(shù)據(jù)選擇、數(shù)據(jù)集成等，并通過(guò)對(duì)這些功能的混合搭配形成新的復(fù)合應(yīng)用。并且通過(guò)虛擬化、接口、集成等技術(shù)[5]，將軟硬件封裝打包成為相對(duì)應(yīng)的服務(wù)模塊，相應(yīng)基礎(chǔ)設(shè)施、平臺(tái)應(yīng)用等不同的服務(wù)請(qǐng)求，從而形成一整套完整的服務(wù)模式，因此在移動(dòng)互聯(lián)網(wǎng)終端的海量數(shù)據(jù)挖掘下，能夠?yàn)橛脩籼峁┏鲆徽琢己玫慕鉀Q方案，根據(jù)數(shù)據(jù)挖掘的行為和需要，結(jié)合云計(jì)算的系統(tǒng)體系，設(shè)計(jì)一套完整的數(shù)據(jù)挖掘服務(wù)結(jié)構(gòu)，如下圖1所示。

圖1 基于移動(dòng)互聯(lián)終端的海量云數(shù)據(jù)挖掘服務(wù)結(jié)構(gòu)

3 建模流程

實(shí)現(xiàn)移動(dòng)互聯(lián)終端的海量云數(shù)據(jù)挖掘，最重要的是通過(guò)對(duì)上述的系統(tǒng)框架進(jìn)行分析，建立一個(gè)數(shù)據(jù)挖掘組件模型。通過(guò)對(duì)于實(shí)際服務(wù)應(yīng)用的數(shù)據(jù)、識(shí)別、描述的關(guān)聯(lián)，構(gòu)建出一個(gè)完整的組件模型。具體的組建流程如圖2所示。

圖2 移動(dòng)互聯(lián)終端的海量云數(shù)據(jù)挖掘技術(shù)服務(wù)創(chuàng)建流程

在問(wèn)題領(lǐng)域中理解并且收集數(shù)據(jù)挖掘服務(wù)的相關(guān)信息，對(duì)于其核心功能定位同時(shí)支撐所需服務(wù)數(shù)據(jù)的產(chǎn)出。通過(guò)對(duì)于獲取數(shù)據(jù)挖掘的相關(guān)業(yè)務(wù)形成服務(wù)數(shù)據(jù)挖掘項(xiàng)目中的候選項(xiàng)目。同時(shí)在功能和數(shù)據(jù)組成的數(shù)據(jù)挖掘服務(wù)中，對(duì)于相關(guān)數(shù)據(jù)建立關(guān)聯(lián)。通過(guò)對(duì)于整體方法和服務(wù)的數(shù)據(jù)綁定，實(shí)現(xiàn)服務(wù)定義的功能。通過(guò)對(duì)服務(wù)結(jié)構(gòu)的統(tǒng)一，實(shí)現(xiàn)獨(dú)立的服務(wù)組件。

4 模型體系結(jié)構(gòu)

為了實(shí)現(xiàn)上述移動(dòng)互聯(lián)終端的海量云數(shù)據(jù)服務(wù)創(chuàng)建流程，在模型中的體系結(jié)構(gòu)如表1所示。

表1 移動(dòng)互聯(lián)終端海量數(shù)據(jù)挖掘模型體系結(jié)構(gòu)

在移動(dòng)互聯(lián)終端海量數(shù)據(jù)挖掘模型體系結(jié)構(gòu)中，基礎(chǔ)設(shè)施層主要提供數(shù)據(jù)挖掘服務(wù)所需的存儲(chǔ)資源。基礎(chǔ)設(shè)施層通過(guò)終端接口將各種物理資源接入到網(wǎng)絡(luò)中，實(shí)現(xiàn)互聯(lián)網(wǎng)與現(xiàn)實(shí)物理資源的共享，并且為虛擬化的服務(wù)過(guò)程提供接口[6]。同時(shí)虛擬化層通過(guò)虛擬化工具的利用，將移動(dòng)互聯(lián)終端的海量云數(shù)據(jù)下的分布式資源相匯聚，并且進(jìn)行集中、統(tǒng)一的資源管理，從而實(shí)現(xiàn)移動(dòng)互聯(lián)終端的海量云數(shù)據(jù)挖掘中資源的合理分配，將封裝資源統(tǒng)一提供給平臺(tái)層進(jìn)行開發(fā)應(yīng)用。而平臺(tái)層作為數(shù)據(jù)挖掘服務(wù)中的核心服務(wù)層，為數(shù)據(jù)挖掘服務(wù)的實(shí)施和管理提供各種核心的功能，用于任務(wù)實(shí)施的管理、計(jì)算以及調(diào)度等等。最終的結(jié)果由應(yīng)用層來(lái)進(jìn)行處理，應(yīng)用層由接口層和終端層兩部分組成，是提供用戶認(rèn)證、管理、請(qǐng)求的主要服務(wù)端口。用戶可以通過(guò)PC機(jī)、頁(yè)面、移動(dòng)終端等等實(shí)現(xiàn)訪問(wèn)與云數(shù)據(jù)挖掘。

5 結(jié)束語(yǔ)

在移動(dòng)互聯(lián)終端的海量云數(shù)據(jù)挖掘技術(shù)中，仍存在研究和應(yīng)用上的不足。根據(jù)海量云數(shù)據(jù)的需信息資源服務(wù)模式，本文提出了數(shù)據(jù)挖掘模型的結(jié)構(gòu)與流程，幫助搭建一個(gè)完整的數(shù)據(jù)挖掘服務(wù)體系，并且闡述了數(shù)據(jù)挖掘的整個(gè)過(guò)程，從而有效提高了移動(dòng)互聯(lián)終端的海量云數(shù)據(jù)挖掘的實(shí)用性與速度。

[1]黃潮．云計(jì)算環(huán)境下的海量光纖通信故障數(shù)據(jù)挖掘算法研究[J].激光雜志，2017(1)：96-100．

[2]陳炎龍，段紅玉．基于改進(jìn)Hadoop云平臺(tái)的海量文本數(shù)據(jù)挖掘[J]．湖南師范大學(xué)自然科學(xué)學(xué)報(bào)，2016，39(3)：84-88．

[3]米允龍，米春橋，劉文奇．海量數(shù)據(jù)挖掘過(guò)程相關(guān)技術(shù)研究進(jìn)展[J]．計(jì)算機(jī)科學(xué)與探索，2015，9(06)：641-659．

[4]胡敏，王鵬，于京杰．基于移動(dòng)互聯(lián)網(wǎng)和數(shù)據(jù)挖掘技術(shù)的門診排隊(duì)流程設(shè)計(jì)[J]．醫(yī)學(xué)研究生學(xué)報(bào)，2015(2)：192-194．

[5]萬(wàn)祥，胡念蘇，韓鵬飛，等．大數(shù)據(jù)挖掘技術(shù)應(yīng)用于汽輪機(jī)組運(yùn)行性能優(yōu)化的研究[J]．中國(guó)電機(jī)工程學(xué)報(bào)，2016，36(2)：459-467．

[6]曾志華，李聰．云計(jì)算環(huán)境下頻繁出現(xiàn)異常數(shù)據(jù)挖掘方法研究[J]．計(jì)算機(jī)仿真，2016(03)：339-342．

[7]鄧仲華，劉偉偉，陸穎雋．基于云計(jì)算的大數(shù)據(jù)挖掘內(nèi)涵及解決方案研究[J]．情報(bào)理論與實(shí)踐，2015，38(7)：103-108．

Research on the Massive Cloud Data Mining Technology for Mobile Internet Terminal

Wang Shuxia Jiao Jialin Huang Zhiwu
(Hubei Engineering University,Xiaogan 432000,Hubei)

In the development of computer management technology,users pay more attention to the speed of information mining.The traditional data mining technology has been unable to meet the actual needs,the massive cloud data mining technology for mobile Internet terminal becomes a hot research topic.This paper studies on the massive cloud data mining service architecture for mobile terminal,puts forward the modeling process and the structure of cloud data mining,effectively improving the practicability and speed of massive cloud data mining for mobile terminal.

mobile internet terminal;cloud data;data mining

T9311

A

1008-6609(2017)10-0026-03

王曙霞（1975-），女，湖北荊門人，碩士，副教授，研究方向?yàn)榇髷?shù)據(jù)、智能計(jì)算、網(wǎng)絡(luò)安全等。

湖北工程學(xué)院科學(xué)研究計(jì)劃項(xiàng)目，項(xiàng)目編號(hào)：201615。