文/駱彬

大數(shù)據(jù)的發(fā)展及應(yīng)用

文/駱彬

大數(shù)據(jù)時(shí)代已經(jīng)正式到來(lái)，相應(yīng)地，大數(shù)據(jù)管理人才的培養(yǎng)的問(wèn)題也已經(jīng)擺在我們面前。本文結(jié)合企業(yè)對(duì)大數(shù)據(jù)人才需求的實(shí)際情況，分析了不同類型大數(shù)據(jù)管理人才應(yīng)該具備的專業(yè)知識(shí)和專業(yè)能力，并針對(duì)本科層次大數(shù)據(jù)專業(yè)的建設(shè)情況，提出了一些有建設(shè)性的意見(jiàn)和建議。

大數(shù)據(jù)發(fā)展 大數(shù)據(jù)管理 應(yīng)用

1 引言

大數(shù)據(jù)浪潮已經(jīng)席卷全球，勢(shì)不可擋。大數(shù)據(jù)已經(jīng)不再是一個(gè)簡(jiǎn)單的概念，它已經(jīng)滲透到普通人的日常生活，同樣的，大數(shù)據(jù)也已經(jīng)改變了企業(yè)的行為，為企業(yè)帶來(lái)了巨大的挑戰(zhàn)和無(wú)限的商機(jī)。為了更好地開(kāi)發(fā)和利用大數(shù)據(jù)的價(jià)值，不僅需要大量的數(shù)據(jù)支持，同樣還需要擁有對(duì)應(yīng)技術(shù)的、熟悉公司業(yè)務(wù)的專業(yè)人員。

為了滿足市場(chǎng)對(duì)大數(shù)據(jù)管理專業(yè)人才的需求，我國(guó)一些高等院校已經(jīng)開(kāi)設(shè)了本科層次的大數(shù)據(jù)管理專業(yè)，本文結(jié)合我國(guó)對(duì)大數(shù)據(jù)人才需求的實(shí)際情況，針對(duì)本科層次大數(shù)據(jù)專業(yè)的建設(shè)情況，提出一些意見(jiàn)和建議，以期為我國(guó)高校建設(shè)大數(shù)據(jù)管理本科專業(yè)提供參考。

2 大數(shù)據(jù)的發(fā)展現(xiàn)狀

現(xiàn)有的大數(shù)據(jù)解決方案基本上都是基于Hadoop的。Hadoop是由Apache開(kāi)源軟件基金會(huì)開(kāi)發(fā)的運(yùn)行于大規(guī)模普通服務(wù)器上的用于大數(shù)據(jù)存儲(chǔ)、計(jì)算和分析的分布式系統(tǒng)基礎(chǔ)架構(gòu)，它由兩個(gè)部分組成：分布式文件系統(tǒng)HDFS(Hadoop Distributed File System)和分布式運(yùn)算框架（MapReduce）。由于Hadoop項(xiàng)目本身是開(kāi)源免費(fèi)的，因此Hadoop是部署在Linux環(huán)境下的，同時(shí)基于Hadoop開(kāi)發(fā)的其他項(xiàng)目也都是開(kāi)源免費(fèi)的，這不但為企業(yè)節(jié)約了成本，同時(shí)也為學(xué)校的教學(xué)活動(dòng)提供了方便。

3 大數(shù)據(jù)特點(diǎn)

Hadoop從誕生至今已經(jīng)發(fā)展成為一個(gè)大數(shù)據(jù)相關(guān)的龐大的軟件生態(tài)系統(tǒng)。為了能夠維持這個(gè)龐大的軟件生態(tài)系統(tǒng)順利運(yùn)轉(zhuǎn)，并基于這個(gè)生態(tài)系統(tǒng)開(kāi)發(fā)出符合特定企業(yè)需求的各種應(yīng)用，需要許多相關(guān)的專業(yè)人才。根據(jù)不同專業(yè)人員所需知識(shí)結(jié)構(gòu)的特點(diǎn)，可以將其分為三類：大數(shù)據(jù)運(yùn)維，大數(shù)據(jù)應(yīng)用開(kāi)發(fā)，大數(shù)據(jù)信息分析與數(shù)據(jù)挖掘。

3.1 大數(shù)據(jù)運(yùn)維

大數(shù)據(jù)運(yùn)維人員不但要熟悉Hadoop本身的所有系統(tǒng)及軟件知識(shí)，還要熟悉網(wǎng)絡(luò)設(shè)備的軟硬件知識(shí)和服務(wù)器設(shè)備的軟硬件知識(shí)，對(duì)于人才的綜合能力要求較高，本科層次一般很難培養(yǎng)出符合要求的專門(mén)人才。

3.2 大數(shù)據(jù)應(yīng)用開(kāi)發(fā)

大數(shù)據(jù)應(yīng)用開(kāi)發(fā)人員需要熟悉相關(guān)的軟件編程語(yǔ)言，熟練使用相關(guān)的開(kāi)發(fā)工具，同時(shí)還應(yīng)該熟悉公司的業(yè)務(wù)，清楚公司的需求，掌握相關(guān)的算法和數(shù)據(jù)模型。

3.3 大數(shù)據(jù)信息分析與數(shù)據(jù)挖掘

從事大數(shù)據(jù)信息分析或數(shù)據(jù)挖掘工作的人員應(yīng)該具備較強(qiáng)的信息分析能力，熟悉數(shù)據(jù)挖掘技術(shù)和算法，擁有用戶建模、業(yè)務(wù)建模、數(shù)據(jù)建模能力，最好還具備一定的軟件開(kāi)發(fā)能力，以便能夠更好地與大數(shù)據(jù)應(yīng)用開(kāi)發(fā)人員合作。

4 數(shù)據(jù)管理專業(yè)建設(shè)的幾點(diǎn)建議

通過(guò)上面的分析可以看出，與大數(shù)據(jù)相關(guān)的工作內(nèi)容有很多，對(duì)應(yīng)的具體工作崗位也有很多，不同的崗位又有不同的具體要求，大數(shù)據(jù)管理專業(yè)就是要培養(yǎng)能夠從事與大數(shù)據(jù)相關(guān)的管理人才。為了實(shí)現(xiàn)這一培養(yǎng)目標(biāo)，下面給出關(guān)于大數(shù)據(jù)管理專業(yè)建設(shè)的幾點(diǎn)建議。

4.1 明確專業(yè)培養(yǎng)方向

就本科層次的學(xué)生而言，一般情況下通過(guò)四年的學(xué)習(xí)無(wú)法掌握全部大數(shù)據(jù)管理所需的知識(shí)，因此必須明確本專業(yè)希望培養(yǎng)的具體方向。

（1）大數(shù)據(jù)運(yùn)維方向應(yīng)該重點(diǎn)培養(yǎng)學(xué)生對(duì)計(jì)算機(jī)、網(wǎng)絡(luò)軟硬件知識(shí)的綜合掌握，尤其是要對(duì)網(wǎng)絡(luò)設(shè)備的軟硬件十分熟悉，并且需要有足夠豐富的實(shí)踐經(jīng)驗(yàn)。綜合來(lái)看，大數(shù)據(jù)運(yùn)維方向與傳統(tǒng)的網(wǎng)絡(luò)工程專業(yè)相關(guān)度較高，需要在傳統(tǒng)網(wǎng)絡(luò)工程專業(yè)基礎(chǔ)上增加分布式集群計(jì)算、Hadoop相關(guān)軟件部署等方面的內(nèi)容。

（2）大數(shù)據(jù)應(yīng)用開(kāi)發(fā)方向應(yīng)重視軟件開(kāi)發(fā)能力，與傳統(tǒng)的軟件工程專業(yè)相比，大數(shù)據(jù)應(yīng)用開(kāi)發(fā)需要熟練掌握J(rèn)ava、Python等語(yǔ)言，同時(shí)還應(yīng)該對(duì)信息分析、數(shù)據(jù)挖掘等方面的數(shù)據(jù)建模有所了解。當(dāng)然，對(duì)熟悉Hadoop的要求是必不可少的，因?yàn)樵陂_(kāi)發(fā)過(guò)程中，必須隨時(shí)考慮到分布式計(jì)算的特點(diǎn)，避免因?yàn)樗惴ǖ瘸霈F(xiàn)錯(cuò)誤而導(dǎo)致整個(gè)集群崩潰的情況。

（3）大數(shù)據(jù)信息分析與數(shù)據(jù)挖掘方向則應(yīng)該培養(yǎng)學(xué)生對(duì)數(shù)據(jù)價(jià)值的敏感性，與傳統(tǒng)的信息管理專業(yè)相關(guān)度較高。從名稱上來(lái)看，信息分析與數(shù)據(jù)挖據(jù)的概念早已有之，但由于量變而引發(fā)的質(zhì)變，大數(shù)據(jù)環(huán)境下的信息分析與數(shù)據(jù)挖掘已經(jīng)與我們所熟悉的概念有了本質(zhì)的區(qū)別，相應(yīng)的一些理論、方法也發(fā)生了改變，這些都是大數(shù)據(jù)管理與傳統(tǒng)信息管理的不同之處。

大數(shù)據(jù)管理專業(yè)相關(guān)的崗位較多，不同崗位的需求也不盡相同，不同學(xué)?？梢愿鶕?jù)各自的專業(yè)基礎(chǔ)和專業(yè)特色選擇不同的專業(yè)培養(yǎng)方向，以滿足人才市場(chǎng)對(duì)不同專業(yè)人才的需求。

4.2 合理設(shè)置專業(yè)課程

在設(shè)計(jì)專業(yè)課程體系時(shí)，一定要充分考慮專業(yè)培養(yǎng)目標(biāo)和企業(yè)相關(guān)崗位需求，體現(xiàn)專業(yè)方向的培養(yǎng)特色，突出專業(yè)方向的核心能力。

不同學(xué)校的學(xué)生有較大的差異，例如文理科背景的差異，自主學(xué)習(xí)能力的差異，邏輯思維能力的差異等，同時(shí)不同的學(xué)校在設(shè)置大數(shù)據(jù)管理專業(yè)時(shí)的專業(yè)背景也有所不同，所以在專業(yè)課程設(shè)置上肯定會(huì)有所不同。

4.3 厚基礎(chǔ)，寬口徑，因材施教

大數(shù)據(jù)相關(guān)技術(shù)是當(dāng)前較為前沿的技術(shù)，相關(guān)的應(yīng)用也在探索當(dāng)中，其真正的價(jià)值還沒(méi)有體現(xiàn)出來(lái)，所以在現(xiàn)階段的大數(shù)據(jù)專業(yè)建設(shè)過(guò)程中，不應(yīng)該拘泥于某一專業(yè)領(lǐng)域，而應(yīng)該使學(xué)生在掌握扎實(shí)的專業(yè)理論基礎(chǔ)的同時(shí)，根據(jù)自己的興趣愛(ài)好和專長(zhǎng)，寬口徑培養(yǎng)學(xué)生的多項(xiàng)不同技能，從而使的同一專業(yè)的學(xué)生也可以具有并不完全相同的專業(yè)能力。

5 結(jié)論

大數(shù)據(jù)管理專業(yè)是一個(gè)比較新的本科專業(yè)，開(kāi)設(shè)這一專業(yè)的學(xué)校還很少，其專業(yè)建設(shè)也才剛剛開(kāi)始，相關(guān)的理論和實(shí)踐都在構(gòu)建和探索中，但大數(shù)據(jù)管理領(lǐng)域的發(fā)展?jié)摿薮?，前景十分廣闊，相應(yīng)的人才需求量也非常大，因此開(kāi)展相關(guān)專業(yè)的建設(shè)工作是一項(xiàng)非常緊迫的工作。本文針對(duì)本科層次大數(shù)據(jù)專業(yè)的建設(shè)情況，提出了自己的一些意見(jiàn)和建議，希望能給大家提供一定的參考。

[1]孟小峰,慈祥.大數(shù)據(jù)管理：概念、技術(shù)與挑戰(zhàn)[J].計(jì)算機(jī)研究與發(fā)展,2013:146-169.

[2]蘇玉召.大數(shù)據(jù)時(shí)代信息管理專業(yè)課程建設(shè)[J].大學(xué)教育2013:5-6.

[3]閆娜.大數(shù)據(jù)視角下信息管理與信息系統(tǒng)專業(yè)建設(shè)研究[J].圖書(shū)館學(xué)研究,2013(11):9-12.

作者單位北京城市學(xué)院 北京市 100000

駱彬（1973-），男，蒙古族，河北省邯鄲市人。碩士學(xué)歷。研究方向?yàn)樾畔⒐芾恚娮由虅?wù)，大數(shù)據(jù)。