大數(shù)據(jù)技術(shù)環(huán)境漸趨成熟

普元信息技術(shù)股份有限公司大數(shù)據(jù)產(chǎn)品總經(jīng)理 王軒

“現(xiàn)在，國內(nèi)IT服務(wù)商的技術(shù)和產(chǎn)品已經(jīng)有了很大的提升，技術(shù)上越來越成熟，在價(jià)格上相比國外產(chǎn)品也更具競爭力?！?/p>

大數(shù)據(jù)雖然是一個(gè)新概念，但數(shù)據(jù)一直都存在。事實(shí)上，對數(shù)據(jù)進(jìn)行分析、挖掘，為企業(yè)的運(yùn)營、業(yè)務(wù)提供決策支撐，是很多企業(yè)一直所希望的，但在傳統(tǒng)的IT環(huán)境下，企業(yè)對數(shù)據(jù)進(jìn)行分析挖掘的成本太高，這使得很多企業(yè)只能望數(shù)據(jù)而興嘆。不過，經(jīng)過近幾年的發(fā)展，如今大數(shù)據(jù)分析的IT環(huán)境已經(jīng)日趨成熟，這也為大數(shù)據(jù)應(yīng)用的落地和普及提供了基礎(chǔ)的支撐條件。

Hadoop落地傳統(tǒng)行業(yè)

自2006年誕生以來,Hadoop就被視為是支撐大數(shù)據(jù)存儲的最佳技術(shù)之一。不過，在Hadoop誕生之初，其技術(shù)架構(gòu)和生態(tài)環(huán)境等方面都存在著一定的問題，例如技術(shù)人員比較缺乏、系統(tǒng)存在安全性和穩(wěn)定性問題等，使得很多企業(yè)對此心存疑慮。

但經(jīng)過幾年的發(fā)展，無論是Hadoop技術(shù)架構(gòu)還是生態(tài)環(huán)境都已趨于完善。首先，各大廠商爭相擁抱Hadoop,并推出了Hadoop的發(fā)行版和商業(yè)版，這使得Hadoop的穩(wěn)定性和安全性得到了很好的改善。另外，很多軟硬件廠商也在通過向自己的產(chǎn)品中加入Hadoop元素，或通過Hadoop一體機(jī)實(shí)現(xiàn)Hadoop商業(yè)化過程，提升Hadoop相關(guān)產(chǎn)品的易用性。

其次，Hadoop的行業(yè)應(yīng)用案例逐步增加。在Hadoop誕生初期，更多是被互聯(lián)網(wǎng)企業(yè)所采用。但最近兩年，隨著Hadoop生態(tài)環(huán)境的完善，已經(jīng)有越來越多的傳統(tǒng)行業(yè)用戶開始采用Hadoop。這些成功的傳統(tǒng)行業(yè)應(yīng)用，也給其他行業(yè)用戶帶來了很好的借鑒和足夠的信心。

公有云開始普及

大數(shù)據(jù)對計(jì)算能力的高要求，使很多用戶“望而生畏”。事實(shí)上，即便是隨著Hadoop的成熟，但對于絕大多數(shù)中小企業(yè)而言，成本依然很高。

另外，大數(shù)據(jù)對于計(jì)算能力的擴(kuò)展性要求也非常高，企業(yè)即便是自建數(shù)據(jù)中心，也很難滿足大數(shù)據(jù)對于系統(tǒng)性能的要求。

不過過去一年公有云的迅猛發(fā)展，使得這一難題有望得到解決。事實(shí)上，目前已經(jīng)有很多用戶開始采用公有云來實(shí)現(xiàn)大數(shù)據(jù)的分析和挖掘。

“公有云的普及將會有力地推動(dòng)大數(shù)據(jù)在國內(nèi)用戶中的落地?！备抵救A說道。

數(shù)據(jù)集成技術(shù)逐漸成熟

除了硬件基礎(chǔ)架構(gòu)層面的完善，數(shù)據(jù)集成和治理技術(shù)的發(fā)展也為大數(shù)據(jù)應(yīng)用的落地提供了有力的支撐。

大數(shù)據(jù)應(yīng)用的核心是數(shù)據(jù)，但對于很多企業(yè)而言，過去很長時(shí)間，一直困擾他們的問題是，數(shù)據(jù)的質(zhì)量存在很大的問題，這也使得大數(shù)據(jù)的應(yīng)用效果打了很大的折扣?！艾F(xiàn)在大數(shù)據(jù)環(huán)境也好，傳統(tǒng)數(shù)據(jù)環(huán)境也好，大家面臨很嚴(yán)重的問題在哪兒？我們做了很多數(shù)據(jù)分析和挖掘，這種分析挖掘到底對不對？靠什么來衡量？有的企業(yè)是基于數(shù)據(jù)分析做出了一些營銷的趨勢性結(jié)論，但如果你的數(shù)據(jù)本身是錯(cuò)的，分析出來的結(jié)論未必有用?！逼赵畔⒓夹g(shù)股份有限公司大數(shù)據(jù)產(chǎn)品總經(jīng)理王軒表示，保證數(shù)據(jù)質(zhì)量是大數(shù)據(jù)為企業(yè)帶來價(jià)值的先決條件。

不過，在以往，并沒有太好的技術(shù)和產(chǎn)品，能夠?qū)Υ髷?shù)據(jù)進(jìn)行很好地治理：國外產(chǎn)品價(jià)格比較高，而國內(nèi)的產(chǎn)品則在功能和效果上不甚理想。

“現(xiàn)在，國內(nèi)IT服務(wù)商的技術(shù)和產(chǎn)品已經(jīng)有了很大的提升，技術(shù)上越來越成熟，在價(jià)格上相比國外產(chǎn)品也更具競爭力?！蓖踯幷f。