眾所周知，數(shù)據(jù)只有流動起來才能產生價值……企業(yè)的數(shù)據(jù)可以總結為兩個方面，第一個方面被稱之為“企業(yè)內循環(huán)”，主要涉及到所從事的工作有助于加速企業(yè)提高經營效率，完成開源節(jié)流；另一方面叫做“企業(yè)外循環(huán)”，可以理解為通過企業(yè)產品讓用戶形成互動，進而產生海量數(shù)據(jù)?！叭绻麑⒄麄€企業(yè)的外循環(huán)與內循環(huán)有機結合起來，就形成了企業(yè)的數(shù)據(jù)循環(huán)的一個體系?！奔t象云騰創(chuàng)始人童小軍對《中國信息化周報》記者表示。

循環(huán)、優(yōu)化、流轉一氣呵成

具體來說，對于數(shù)據(jù)分析的基本理念可以理解為“循環(huán)、優(yōu)化、流轉”，這是來自對于數(shù)據(jù)統(tǒng)計分析的一個理解。童小軍說：“我覺得一個企業(yè)可以被看作一個生命體，具有自調整能力，將下層的產品統(tǒng)計、運維測試等統(tǒng)籌起來實現(xiàn)了一個在測的內循環(huán)，這是來自互聯(lián)網公司的內循環(huán)。在外部，我們的產品與用戶形成了企業(yè)的外循環(huán)。例如如果要優(yōu)化產品，我們會記錄用戶數(shù)、活躍度等，這些數(shù)據(jù)會源源不斷地更新到我們的產品中，或者我們的系統(tǒng)如果給一個用戶發(fā)出一個搜索引擎或者一個需求，這時候企業(yè)給他們一個適時推薦，這個也可以稱之為外循環(huán)?！?/p>

同樣類似的案例在企業(yè)的質量管理中也存在，例如我們經常提到的戴明環(huán)等，其中也提到了循環(huán)質量優(yōu)化的觀點；還有一個自動控制領域也涉及到閉環(huán)控制理論。

在我們的理解中，其實大數(shù)據(jù)所起到的作用在反饋這個層面，只有整個的大數(shù)據(jù)體系形成閉環(huán)的模式才能更好地服務企業(yè)。

“我們所理解的智能應該是一種結構，很簡單地被認為是一種閉環(huán)的反饋結構，而這種結構本身具備了一系列的制度。我們企業(yè)數(shù)據(jù)循環(huán)系統(tǒng)可以釋放整個數(shù)據(jù)的想象力，關鍵大數(shù)據(jù)系統(tǒng)要打開關于數(shù)據(jù)的釋放響應空間。其中數(shù)據(jù)循環(huán)、持續(xù)優(yōu)化，高速流轉，系統(tǒng)穩(wěn)定、開源開放等都是客戶所提出的需求?！蓖≤娧a充道。

如今大家經常提起大數(shù)據(jù)Hadoop，分別涉及到化整為零、分片存儲、移動計算、分片處理。因為分片存儲以及化整為零的技術，每臺機器都可以用，這樣就形成了移動計算分塊處理。因為數(shù)據(jù)分散的動能，就可以將其移動到機器的本地化處理，所以整個系統(tǒng)會表現(xiàn)得非常高效。

另外本地化處理與并行可以極大地解決IO問題，帶寬問題以及計算問題，在集中式機構時就會面臨這樣的問題。因為作為集中式架構根本性的一個性能缺陷在于無法移動計算，就需要把數(shù)據(jù)從集中式的存儲拖拽到擁有計算的資源中進行再次計算，從而產生了一個IO瓶頸、帶寬瓶頸以及磁盤瓶頸等。

童小軍在分析大數(shù)據(jù)Hadoop時說：“通過對分布式計算的移動計算、化整為零等體系的全面了解，逐漸形成了一整套基于開源的系統(tǒng)，這是我們以前基于gedis架構的系統(tǒng)。我們可以看到Hadoop生態(tài)圈就像原始森林一樣，從底層的Hadoop等出發(fā)，我們可以把它總結成幾個層面。

首先是平臺層，其次是結構層、計算層、展現(xiàn)層以及管理層。其實開源大數(shù)據(jù)到底是大數(shù)據(jù)推動了Hadoop發(fā)展，還是Hadoop推動了大數(shù)據(jù)發(fā)展并沒有一致的絕對性，其中都是互相推動的過程。我們可以看到整個Hadoop生態(tài)圈已經龐大，其實開源本身也產生了標準的力量，對大數(shù)據(jù)標準產生帶來了助力?！?/p>

極致性能 生態(tài)化才是王牌

商務方面，紅象云騰提出了生態(tài)化的戰(zhàn)略，其中+Hadoop是公司提出的觀點，目標是服務更多的集成商，成為生態(tài)一部分。以“+Hadoop”為核心形成整個生態(tài)圈，進而達到服務器、各種中間鍵以及相應的多角度、全方位服務。

在大數(shù)據(jù)領域，通過軟硬件一體化，企業(yè)更需要打造極致的性能，紅象云騰在這方面有很多合作伙伴，第一個是紅旗，另一個是中太服務器，組成了紅色數(shù)據(jù)高鐵的紅象?！斑@個項目我們完成了將近幾萬億數(shù)據(jù)的快速檢索，當然這里還有其他的核心作用，我們叫做china Redoop，紅象的超級數(shù)據(jù)，形成了整個優(yōu)化的產品站、128線程，紅象云騰今后的目標是對更多的CPU進行更進一步的加速，進而形成打造極致的性能?！蓖≤娬雇鷳B(tài)化戰(zhàn)略時表示。

企業(yè)通過與硬件廠商的合作，可以提煉成一個庫，叫做Hadoop處理加速庫，同時加速庫也可以提煉為一個觀點，叫做HPU。

其關鍵的作用主要是實現(xiàn)在Hadoop框架下多種項目的加速，例如EC、SORT等都可以通過這個方式來完成加速。其中涉及幾個性能指標，通過與Java、X86、IBM相比，提速將近有30倍以上。

童小軍認為在加速庫的角度，紅象云騰早已進行了極致的分析，目前通過全面合作的策略，已與兩款國內的大數(shù)據(jù)軟件，分別是YDB和kylin完成合作，哪怕是在kylin檢索上千億數(shù)據(jù)也是可以完成的。這個打破了Hadoop在高速檢索速度慢的怪圈，原因在于這其中所有的數(shù)據(jù)庫并不是直接拷貝到硬盤上。

應用案例 不勝枚舉

說到數(shù)據(jù)循環(huán)的成功案例，也是不勝枚舉。例如，聯(lián)想電商，這套系統(tǒng)其實非常符合數(shù)據(jù)循環(huán)系統(tǒng)的理念。在聯(lián)想主要包含兩套循環(huán)，一個是內循環(huán)，一個是外循環(huán)。特別的是，內循環(huán)已經優(yōu)化到分鐘級，在進行關鍵業(yè)務的廣告投放時，或者進行關鍵活動的決策時，都依賴這個系統(tǒng)，另外在穩(wěn)定性，系統(tǒng)穩(wěn)定性檢測也依賴這個系統(tǒng)。

另外，中國航天如今已經有5個PB的上線，這也是紅象云騰提供的機房整套建設，一百多個節(jié)點的部署情況的展現(xiàn)。整個平臺性能指標主要在IO密度上需要衛(wèi)星的數(shù)據(jù)傳輸過來，通過Hadoop可以做什么呢？對于簡單的做圖，以前第一期投入就需要八千多萬，這套系統(tǒng)投入才兩千多萬，而且數(shù)據(jù)提速到十幾分鐘就可以得到，效率大大提升。

另外，目前紅象云騰正在跟蹤包含交通部門、公安部門等在內的相關數(shù)據(jù)，其中涉及大量數(shù)據(jù)分析場景。例如公安部門有一整套關于快速結合算法，快速計算同行和同住人員以及大情報的數(shù)據(jù)分析架構收效顯著。

對于“大數(shù)據(jù)+交通”的理解，核心的需求是這樣的。審計交通部門需要路面的數(shù)據(jù)，以及GPS信息數(shù)據(jù)甚至包括橋梁數(shù)據(jù)。

在這個過程中需要檢測某些大型車輛是否進入安全區(qū)，對于橋梁的承載載重問題，是否需要設置車輛靠近時進行報警，提示是否需要進入該區(qū)，或者已經進入危險區(qū)域等。

另外基于橋梁的數(shù)據(jù)，橋梁的各種各樣傳感器，包括溫度傳感器、壓力傳感器來識別這個橋梁是不是正常等情況，這其實是一種創(chuàng)新。

面對未來的大數(shù)據(jù)發(fā)展以及企業(yè)數(shù)據(jù)循環(huán)，童小軍說：“我們在設想將虛擬世界中的某些嘗試拉入現(xiàn)實世界，在大數(shù)據(jù)平臺上是不是可以增加虛擬因素？將以前用的三維、多維引擎植入數(shù)據(jù)中，形成對大數(shù)據(jù)系統(tǒng)的三維后臺式模擬。這也是我們提出來的一套關于大數(shù)據(jù)的基礎架構，更是基于內循環(huán)、外循環(huán)、高速數(shù)據(jù)交換的理念?！?/p>

在人才的戰(zhàn)略部署方面，紅象云騰有一個極致人才戰(zhàn)略，叫做“百校千企”。具體內容是面向一百所高校提供大數(shù)據(jù)的課程以及平臺，同時面向Hadoop，面向有關企業(yè)提供大數(shù)據(jù)人才，并做到運營開放實驗室。借此希望把開源技術、開放技術推向更多的大數(shù)據(jù)系統(tǒng)，進而完成各種方面的加速工作。