圍繞當(dāng)前制約大數(shù)據(jù)應(yīng)用發(fā)展的共性關(guān)鍵技術(shù),特別是適合大數(shù)據(jù)特點(diǎn)的高性能、高可用的系統(tǒng)計(jì)算與分析技術(shù),大數(shù)據(jù)系統(tǒng)計(jì)算技術(shù)國家工程實(shí)驗(yàn)室開展成體系的技術(shù)攻關(guān),以研發(fā)建設(shè)“高性能大數(shù)據(jù)計(jì)算平臺”為核心任務(wù)與目標(biāo),建設(shè)國內(nèi)領(lǐng)先、國際一流的大數(shù)據(jù)技術(shù)創(chuàng)新平臺,同時聚焦時空大數(shù)據(jù)、智能制造大數(shù)據(jù)、視頻流媒體大數(shù)據(jù)、社交網(wǎng)絡(luò)大數(shù)據(jù)等前沿重點(diǎn)領(lǐng)域,開展大數(shù)據(jù)應(yīng)用案例研發(fā)與示范應(yīng)用,積極促進(jìn)大數(shù)據(jù)“產(chǎn)學(xué)研”協(xié)同創(chuàng)新與產(chǎn)業(yè)化發(fā)展,力爭形成具有自主知識產(chǎn)權(quán)的成體系的大數(shù)據(jù)技術(shù)成果、高端人才團(tuán)隊(duì)、公共服務(wù)平臺,成為我國領(lǐng)先的大數(shù)據(jù)創(chuàng)新創(chuàng)業(yè)生態(tài)圈的智力支撐和技術(shù)服務(wù)基地。
大數(shù)據(jù)系統(tǒng)計(jì)算技術(shù)國家工程實(shí)驗(yàn)室法人單位是深圳大學(xué),共建單位有國家信息中心、中興通訊股份有限公司、清華大學(xué)、騰訊科技(深圳)有限公司。
深圳大學(xué)大數(shù)據(jù)團(tuán)隊(duì)具有國內(nèi)領(lǐng)先優(yōu)勢和特色的大數(shù)據(jù)學(xué)科布局,已建成的主要科研平臺包括:廣東省大數(shù)據(jù)協(xié)同創(chuàng)新中心、廣東省普及型高性能計(jì)算機(jī)重點(diǎn)實(shí)驗(yàn)室、廣東高校大數(shù)據(jù)分析工程技術(shù)研究中心、國家信息中心深圳大數(shù)據(jù)研究院、深圳大數(shù)據(jù)智能信息處理工程實(shí)驗(yàn)室、深圳物聯(lián)網(wǎng)專用芯片設(shè)計(jì)工程實(shí)驗(yàn)室。
深圳大學(xué)大數(shù)據(jù)團(tuán)隊(duì)目前有87名研究人員,其中教授20名、副教授36名、中國科學(xué)院院士1名、國際歐亞科學(xué)院院士1名、“千人計(jì)劃”專家1名、“國家杰出青年”1名、“國家優(yōu)秀青年”1名、廣東省領(lǐng)軍人才2名、“青年千人計(jì)劃”1名、教育部新世紀(jì)人才3名、廣東省“杰出青年”1名、IEEE Fellow 1名、廣東省“千百十工程”省級培養(yǎng)對象4名、鵬城學(xué)者1名、海外高層次人才“孔雀計(jì)劃”20多名。
具備自主芯片設(shè)計(jì)能力,研發(fā)了國際上首顆MV T(multi-value team)信號處理芯片,并成功流片。研制成功基于國產(chǎn)龍芯處理器的全國產(chǎn)普及型高性能計(jì)算機(jī):KD60、KD90以及SD1、SD2、SD3、SD4、SD30。在大數(shù)據(jù)處理軟件方面,自主研發(fā)了大數(shù)據(jù)軟件平臺A lpha Miner,該平臺是國際上重要的大數(shù)據(jù)處理開源軟件之一。
國家信息中心是國家發(fā)展和改革委員會直屬事業(yè)單位,自1987年成立以來,積極服務(wù)于國家信息化建設(shè),在重大戰(zhàn)略問題研究、重點(diǎn)信息化工程建設(shè)、信息資源開發(fā)利用等方面做了很多卓有成效的工作,是我國電子政務(wù)的重要支撐和服務(wù)力量,也是我國信息化理論創(chuàng)新和工程實(shí)踐的先行者。國家信息中心作為實(shí)驗(yàn)室共建單位,主要具備3個方面的優(yōu)勢,即具有較強(qiáng)的電子政務(wù)云業(yè)務(wù)研究和技術(shù)集成研究能力;具有較好的項(xiàng)目配套條件;作為電子政務(wù)云計(jì)算領(lǐng)域重要的應(yīng)用部門,有利于建立應(yīng)用導(dǎo)向型的“產(chǎn)學(xué)研用”合作機(jī)制。
中興通訊股份有限公司是全球領(lǐng)先的綜合通訊解決方案及行業(yè)信息通信技術(shù)(information communication technology)解決方案提供商,擁有芯片設(shè)計(jì)和系統(tǒng)制造能力,是擁有完全自主知識產(chǎn)權(quán)的高科技企業(yè)。
中興通訊股份有限公司基于數(shù)據(jù)流并行執(zhí)行模型、數(shù)據(jù)流運(yùn)行時系統(tǒng)及數(shù)據(jù)流抽象機(jī)等成熟理論,在大數(shù)據(jù)場景下自研創(chuàng)新,推出數(shù)據(jù)流大數(shù)據(jù)計(jì)算引擎Yita,大幅提高了大數(shù)據(jù)計(jì)算速度、計(jì)算資源利用率及系統(tǒng)數(shù)據(jù)吞吐量。
清華大學(xué)是中國乃至世界著名的高等學(xué)府之一,清華大學(xué)的計(jì)算機(jī)科學(xué)與技術(shù)專業(yè)在最新的國際排名中位于世界前列。鄭緯民教授和武永衛(wèi)教授帶領(lǐng)的大數(shù)據(jù)團(tuán)隊(duì)研發(fā)的“面向Map Reduce的HDD-SSD混合存儲構(gòu)建和異構(gòu)集群優(yōu)化”項(xiàng)目,相對于標(biāo)準(zhǔn)的Ha doop分布式文件系統(tǒng) (Hadoop distributed file system,HDFS),能夠取得平均2.09倍的加速比;相對于最新的內(nèi)存緩存方法PAC Man,也能夠取得平均1.79倍的加速比。
騰訊科技(深圳)有限公司是目前中國領(lǐng)先的互聯(lián)網(wǎng)綜合服務(wù)提供商之一,騰訊QQ、微信、QQ空間、微博等海量用戶業(yè)務(wù)積累了大量數(shù)據(jù)。騰訊科技(深圳)有限公司一直持續(xù)投入大數(shù)據(jù)計(jì)算平臺研發(fā),已有超過7年的累積經(jīng)驗(yàn),相關(guān)開發(fā)人員超過200人。目前騰訊科技(深圳)有限公司大數(shù)據(jù)計(jì)算平臺支持超過萬臺單集群調(diào)度能力,積累了超過200 PB的數(shù)據(jù),每天掃描數(shù)據(jù)量超過16.5 PB,日接入消息數(shù)達(dá)56000億條,日接入數(shù)據(jù)量達(dá)1.8 PB。在大數(shù)據(jù)應(yīng)用方面優(yōu)勢明顯。