2014年11月19日，全球領(lǐng)先的存儲解決方案提供商希捷科技公司（NASDAQ：STX）日前宣布推出ClusterStor Hadoop工作流加速設(shè)備，該新型解決方案提供各種工具、服務(wù)和支持，適用于高性能計算（HPC）客戶，可滿足他們通過最佳性能的存儲系統(tǒng)實現(xiàn)大數(shù)據(jù)分析的需求。Hadoop工作流加速設(shè)備包含全套Hadoop優(yōu)化工具、服務(wù)和支持，可以利用和增強ClusterStor的性能；ClusterStor是市場領(lǐng)先的橫向擴展型存儲系統(tǒng)，專門用于大數(shù)據(jù)分析。計算密集型的高性能數(shù)據(jù)分析（HPDA）環(huán)境可以利用Hadoop工作流加速設(shè)備大幅度縮短數(shù)據(jù)傳輸時間。該解決方案還帶有Hadoop on Lustre連接器，因此無須在文件系統(tǒng)或存儲設(shè)備之間移動數(shù)據(jù)，Hadoop和HPC Lustre兩種集群便能夠使用完全相同的數(shù)據(jù)。

IDC公司高性能計算研究副總裁Steve Conway表示：“數(shù)據(jù)密集型計算長期以來都是HPC的一部分，但是采用Hadoop等方法的最新分析方式，如圖形分析方式，將促進高性能數(shù)據(jù)分析的強勁增長，這便是需要HPC的大數(shù)據(jù)市場。Hadoop工作流加速設(shè)備可服務(wù)于這個不斷融合的大數(shù)據(jù)HPC市場的技術(shù)計算和商業(yè)層面，IDC預(yù)計該市場將于2018年超過40億美元。IDC研究顯示，29%的HPC站點已經(jīng)采用了Hadoop。能夠提升Hadoop性能和效率的工具將在這個市場找到用武之地?！?/p>

Hadoop工作流加速設(shè)備支持基于開源Apache Hadoop的Hadoop產(chǎn)品。希捷攜手各領(lǐng)先的Hadoop廠商，為HPC客戶提供同類最佳的解決方案，并且未來還將實現(xiàn)Hadoop工作流加速設(shè)備和其它Hadoop產(chǎn)品之間更加緊密的集成。

希捷公司云系統(tǒng)和解決方案部門ClusterStor業(yè)務(wù)副總裁Ken Claffey表示：“企業(yè)不僅希望管理好他們從各種渠道收集的海量數(shù)據(jù)，而且還希望能夠從中獲取新的分析結(jié)論，從而得到有用的信息并提高運營效率?，F(xiàn)在有了Hadoop工作流加速設(shè)備的協(xié)助，希捷屢獲殊榮的ClusterStor橫向擴展型HPC解決方案便可使企業(yè)能夠優(yōu)化其大數(shù)據(jù)工作流程，并將數(shù)據(jù)存儲集中化，最終實現(xiàn)各種高性能數(shù)據(jù)分析解決方案。TeraSort基準(zhǔn)測試結(jié)果顯示，基于相同的硬件時，Hadoop工作流加速設(shè)備的性能超過Hadoop分布式文件系統(tǒng)（HDFS）上的Hadoop產(chǎn)品高達38%。Hadoop工作流加速設(shè)備能夠滿足客戶的性能需求，并可以優(yōu)化Hadoop系統(tǒng)部署設(shè)備的性能，因此能夠幫助客戶迅速獲得數(shù)據(jù)密集型工作負(fù)載和硬件配置的分析結(jié)果。”

希捷ClusterStor系統(tǒng)創(chuàng)新的橫向擴展型HPC架構(gòu)能夠?qū)崿F(xiàn)一個集中的數(shù)據(jù)庫，使得HPC和Hadoop兩種分析工具能夠同時利用ClusterStor的相同數(shù)據(jù)集。Hadoop工作流加速設(shè)備從每項任務(wù)伊始便立即開展Hadoop數(shù)據(jù)處理，從而極大地縮短了獲得分析結(jié)果的時間，并且還可以減少從獨立數(shù)據(jù)庫批量拷貝大量數(shù)據(jù)的冗長步驟。有了這個加速設(shè)備，Hadoop環(huán)境便能夠獨立擴展計算和存儲資源，從而提高優(yōu)化分析資源的靈活性，同時還支持100PB級存儲容量的集中化高性能數(shù)據(jù)庫。endprint