夏添

作為數(shù)據(jù)洞察產(chǎn)生過(guò)程中最重要的一環(huán)，數(shù)據(jù)分析的速度、精準(zhǔn)度、可擴(kuò)展度，以及數(shù)據(jù)分析應(yīng)用的普適度都是企業(yè)衡量數(shù)據(jù)分析平臺(tái)的重要標(biāo)準(zhǔn)。而英特爾與Cloudera則計(jì)劃在這一領(lǐng)域攜手并進(jìn)，從硬件和軟件全面加速數(shù)據(jù)分析應(yīng)用。

“目前90%的數(shù)據(jù)量，都是過(guò)去兩三年時(shí)間產(chǎn)生的，尤其是到2020年的時(shí)候會(huì)有500億互聯(lián)設(shè)備，他們會(huì)產(chǎn)生10000ZB的數(shù)據(jù)量?！?英特爾公司軟件與服務(wù)事業(yè)部副總裁、系統(tǒng)技術(shù)和優(yōu)化部門(mén)大數(shù)據(jù)技術(shù)總監(jiān)馬子雅女士表示，“大數(shù)據(jù)的價(jià)值就是通過(guò)對(duì)大量數(shù)據(jù)進(jìn)行分析，可以給我們帶來(lái)更好的商業(yè)洞察力。英特爾在這方面已經(jīng)做了很多年，我們最終目標(biāo)是希望任何大數(shù)據(jù)用戶能夠在英特爾的平臺(tái)上，他們的數(shù)據(jù)洞察力最好，數(shù)據(jù)分析速度最快捷也最方便?！?/p>

為了實(shí)現(xiàn)大數(shù)據(jù)目的，英特爾在硬件層面—無(wú)論從網(wǎng)絡(luò)、存儲(chǔ)還是運(yùn)算—做了大量的創(chuàng)新，英特爾對(duì)很多大數(shù)據(jù)項(xiàng)目進(jìn)行了優(yōu)化，保證他們能夠在英特爾的平臺(tái)上實(shí)現(xiàn)性能的大幅度提升。此外，英特爾也持續(xù)和Hadoop和Spark等大數(shù)據(jù)開(kāi)源項(xiàng)目開(kāi)展合作，希望推動(dòng)開(kāi)源未來(lái)的技術(shù)進(jìn)一步提升和英特爾的黏和度。

“英特爾也推出了一些開(kāi)源項(xiàng)目，比如TAP，Trusted Analytics Platform等用來(lái)加速基于云的分析應(yīng)用程序開(kāi)發(fā)的項(xiàng)目。英特爾和很多業(yè)界同行、客戶有很多的合作關(guān)系，來(lái)幫助他們加速大數(shù)據(jù)和數(shù)據(jù)分析以及機(jī)器學(xué)習(xí)在英特爾平臺(tái)上的部署，實(shí)現(xiàn)商業(yè)價(jià)值?！瘪R子雅表示。

由于硬件性能和軟件優(yōu)化對(duì)大數(shù)據(jù)應(yīng)用生態(tài)的發(fā)展有重要作用，在數(shù)字服務(wù)經(jīng)濟(jì)時(shí)代，要借助數(shù)據(jù)分析技術(shù)更快地完成大規(guī)模機(jī)器學(xué)習(xí)與深度學(xué)習(xí)，從而更好、更精準(zhǔn)地指導(dǎo)商業(yè)決策，仍需進(jìn)一步的軟、硬件創(chuàng)新與優(yōu)化。為此，作為全球計(jì)算力創(chuàng)新的引領(lǐng)者，英特爾在加強(qiáng)至強(qiáng)處理器、至強(qiáng)融核處理器以及固態(tài)盤(pán)、FPGA等技術(shù)和產(chǎn)品創(chuàng)新的同時(shí)，也一直支持開(kāi)源社區(qū)的創(chuàng)新和發(fā)展、并與Cloudera這樣業(yè)界領(lǐng)先的Hadoop數(shù)據(jù)管理軟件與服務(wù)提供商進(jìn)行深入合作，在英特爾開(kāi)放架構(gòu)硬件產(chǎn)品技術(shù)上進(jìn)行不斷優(yōu)化，使系統(tǒng)平臺(tái)運(yùn)算、分析能力實(shí)現(xiàn)不斷提升。

而英特爾面向?qū)崟r(shí)數(shù)據(jù)分析最快的處理器至強(qiáng)E7 v4、面向大數(shù)據(jù)應(yīng)用橫向擴(kuò)展的最新處理器至強(qiáng)E5 v4，以及最新的非易失性存儲(chǔ)技術(shù)3D XPoint等工作，都為大數(shù)據(jù)應(yīng)用帶來(lái)新的價(jià)值。有的客戶通過(guò)遷移到新一代的英特爾的硬件技術(shù)，大數(shù)據(jù)的機(jī)組性能提高7倍。

英特爾在未來(lái)希望把物聯(lián)網(wǎng)和終端的數(shù)據(jù)分析進(jìn)行更多的結(jié)合，尤其是物聯(lián)網(wǎng)越來(lái)越發(fā)展的情況下，英特爾將關(guān)注如何把數(shù)據(jù)收集和商業(yè)決定實(shí)時(shí)結(jié)合在一起，以及如何提升機(jī)器學(xué)習(xí)模塊的可擴(kuò)展性，如何縮短機(jī)器學(xué)習(xí)的周期等領(lǐng)域。

在深度學(xué)習(xí)方面，英特爾也做了大量的努力—包括至強(qiáng)處理器的優(yōu)化、機(jī)遇至強(qiáng)融核（Xeon Phi）的計(jì)算密集型的工作及FPGA等其他的硬件創(chuàng)新，有些工作目前已經(jīng)有了非常好的進(jìn)展。目前，英特爾深度學(xué)習(xí)解決方案在系統(tǒng)的擴(kuò)展性方面相較競(jìng)爭(zhēng)對(duì)手有較大的領(lǐng)先性，在京東、奇虎等互聯(lián)網(wǎng)用戶中已經(jīng)有豐富的案例。馬子雅介紹，在未來(lái)的18個(gè)月中，英特爾會(huì)推出至強(qiáng)融核（Xeon Phi）和FPGA的最新版解決方案，為機(jī)器學(xué)習(xí)用戶提供更好的體驗(yàn)。

英特爾對(duì)于當(dāng)下數(shù)據(jù)分析技術(shù)發(fā)展與應(yīng)用現(xiàn)狀的洞察，以及對(duì)自身大數(shù)據(jù)創(chuàng)新策略的解析，與Hadoop之父、Cloudera公司首席架構(gòu)師Doug Cutting的想法不謀而合。“當(dāng)越來(lái)越多的大數(shù)據(jù)應(yīng)用在數(shù)據(jù)中心部署的今天，英特爾和Cloudera雙方的合作非常成功，在許多的領(lǐng)域，我們的工程師共同合作，保證Hadoop能夠非常好地在英特爾的硬件上運(yùn)行?！彼榻B。

目前Cloudera的業(yè)務(wù)主要涵蓋在電信、金融、制造、基礎(chǔ)設(shè)施、零售等行業(yè)。在主要的免費(fèi)發(fā)行版本中，基于Apache Hadoop的Cloudera商業(yè)發(fā)行版已經(jīng)占據(jù)70%以上的市場(chǎng)占有率。而在商業(yè)版本方面，在過(guò)去的18個(gè)月中，Cloudera在大型企業(yè)、電信、金融、制造以及零售等方面也有非常好的進(jìn)展。

在Doug Cutting看來(lái)，Hadoop技術(shù)誕生、發(fā)展至今已有十年之久。而在這個(gè)不斷發(fā)展、快速發(fā)展的生態(tài)系統(tǒng)中，每一年開(kāi)源社區(qū)中都會(huì)出現(xiàn)Spark、Impala那樣能夠提供更好功能的項(xiàng)目以替代原有的技術(shù)模塊。

“我們?nèi)砸獔?jiān)持技術(shù)創(chuàng)新與開(kāi)源分享，攜手英特爾這樣的合作伙伴一同推動(dòng)、支持整個(gè)生態(tài)系統(tǒng)的發(fā)展，為機(jī)器學(xué)習(xí)、深度學(xué)習(xí)等數(shù)據(jù)分析應(yīng)提供性能最好、最穩(wěn)定安全的大數(shù)據(jù)應(yīng)用環(huán)境，以滿足金融、電信、制造、零售等不同行業(yè)用戶的特定應(yīng)用需求。”他表示。