楊光
第十一屆開源中國(guó)開源世界高峰論壇近日在京舉辦。論壇有力促進(jìn)開源社區(qū)、企業(yè)、院校、科研機(jī)構(gòu)、用戶之間的相互交流與合作,推動(dòng)開源軟件在中國(guó)及全球的發(fā)展。聯(lián)想創(chuàng)投集團(tuán)大數(shù)據(jù)業(yè)務(wù)在此次高峰論壇上展示了聯(lián)想大數(shù)據(jù)平臺(tái)如何協(xié)助企業(yè)應(yīng)對(duì)全球化挑戰(zhàn)和復(fù)雜的開源技術(shù),探索出一條制造企業(yè)全球大數(shù)據(jù)方案之路,并運(yùn)用開源大數(shù)據(jù)技術(shù)助力全球智能制造。聯(lián)想集團(tuán)副總裁、首席研究員田日輝受邀參加開源高峰論壇圓桌會(huì)議,聯(lián)想大數(shù)據(jù)業(yè)務(wù)高級(jí)總監(jiān)、首席研究員于辰濤在論壇上發(fā)表了主題演講“開源大數(shù)據(jù)技術(shù)助力全球智能制造”。
推動(dòng)聯(lián)想的大數(shù)據(jù)轉(zhuǎn)型
聯(lián)想在2011年8月啟動(dòng)聯(lián)想企業(yè)級(jí)大數(shù)據(jù)分析平臺(tái)(Lenovo Enterprise Analytics Platform,簡(jiǎn)稱LEAP)的建設(shè),5年時(shí)間內(nèi)基于開源技術(shù)推動(dòng)聯(lián)想的大數(shù)據(jù)轉(zhuǎn)型,持續(xù)投入了300多名研發(fā)人員,并且在全球范圍內(nèi)部署超大規(guī)模集群,經(jīng)過(guò)多年錘煉,現(xiàn)在已完全具備海量數(shù)據(jù)分析與持續(xù)性業(yè)務(wù)支撐的能力。
5年來(lái)聯(lián)想大數(shù)據(jù)深度整合聯(lián)想內(nèi)部數(shù)千個(gè)來(lái)源和上萬(wàn)個(gè)不同類型的數(shù)據(jù),包括消費(fèi)者數(shù)據(jù)、零售商數(shù)據(jù)、運(yùn)營(yíng)和分銷數(shù)據(jù)。
此外,聯(lián)想大數(shù)據(jù)平臺(tái)致力于推動(dòng)大數(shù)據(jù)作為工具,推動(dòng)聯(lián)想以用戶為中心提升整體業(yè)務(wù)效率。大數(shù)據(jù)技術(shù)幫助聯(lián)想集團(tuán)移動(dòng)業(yè)務(wù)在發(fā)展中國(guó)家實(shí)現(xiàn)了快速擴(kuò)張,僅一年時(shí)間從默默無(wú)聞進(jìn)而成長(zhǎng)為印度第三大移動(dòng)設(shè)備供應(yīng)商,而且打入了東南亞,非洲和拉美多個(gè)區(qū)域市場(chǎng)。
全球化大數(shù)據(jù)方案部署
聯(lián)想大數(shù)據(jù)平臺(tái)在全球多個(gè)國(guó)家與城市擁有中心部署,如德國(guó)、美國(guó)、以及中國(guó)的北京和香港等地,擁有12PB的總?cè)萘?。?lián)想大數(shù)據(jù)不僅具備支撐全球化業(yè)務(wù)同步運(yùn)營(yíng)的豐富實(shí)戰(zhàn)經(jīng)驗(yàn),而且大數(shù)據(jù)運(yùn)營(yíng)體系完全合規(guī)各國(guó)數(shù)據(jù)保護(hù)和隱私保護(hù)法律。
不僅如此,聯(lián)想大數(shù)據(jù)平臺(tái)積極進(jìn)行全球深度設(shè)備優(yōu)化,支持全球1.5億設(shè)備,包括產(chǎn)品退化、軟件開發(fā)、質(zhì)量保證等方面都得到深度優(yōu)化,進(jìn)而提升設(shè)備滿意度。同時(shí),聯(lián)想大數(shù)據(jù)平臺(tái)改善全球服務(wù)效率,并縮減成本,提升服務(wù)滿意度。包括聯(lián)想呼叫中心的優(yōu)化和偽造維修單據(jù)識(shí)別,譬如可節(jié)約單個(gè)用戶客訴20%的呼叫時(shí)間或智能化預(yù)測(cè)用戶投訴問(wèn)題,分析維修站的備件計(jì)劃和準(zhǔn)確識(shí)別偽造維修單據(jù),為聯(lián)想每年在發(fā)展中國(guó)家的維修系統(tǒng)節(jié)約了數(shù)百萬(wàn)至上千萬(wàn)美元,并且提升了客服效率和用戶滿意度。
基于開源技術(shù)的實(shí)戰(zhàn)
聯(lián)想大數(shù)據(jù)平臺(tái)基于開源技術(shù)探索了一條制造企業(yè)全球大數(shù)據(jù)方案之路,大數(shù)據(jù)技術(shù)幫助聯(lián)想各個(gè)業(yè)務(wù)價(jià)值鏈條帶來(lái)數(shù)千萬(wàn)美金的成本節(jié)約,譬如設(shè)備分析方面進(jìn)行了設(shè)備激活,用戶行為跟蹤,系統(tǒng)優(yōu)化和設(shè)備畫像;在輿情分析方面利用市場(chǎng)矩陣、渠道優(yōu)化、公眾情緒從各個(gè)評(píng)論網(wǎng)站獲取手機(jī)的正面及負(fù)面評(píng)價(jià);在市場(chǎng)分析方面從手機(jī)出貨到渠道,渠道到客戶,實(shí)現(xiàn)客戶開機(jī)激活的監(jiān)控;并對(duì)用戶畫像、設(shè)備畫像、聯(lián)系分析、用戶反饋等方面進(jìn)行收集。按照用戶需求進(jìn)行產(chǎn)品定制。
對(duì)于聯(lián)想這樣的復(fù)雜平臺(tái),開源技術(shù)僅僅是個(gè)開始,開源項(xiàng)目直接安裝,其普遍性能和穩(wěn)定性較差。如何優(yōu)化部署和數(shù)據(jù)結(jié)構(gòu),并跟進(jìn)補(bǔ)丁和引入創(chuàng)新,以及業(yè)務(wù)整合和數(shù)據(jù)整合都是開源技術(shù)所需解決的問(wèn)題。
田日輝表示:“聯(lián)想大數(shù)據(jù)平臺(tái)基于開源技術(shù)規(guī)劃出三個(gè)步驟,首先理解和吃透開源平臺(tái),從第一個(gè)開源版本開始,建立完備的性能評(píng)估和穩(wěn)定性評(píng)價(jià)體系,并跟蹤開源補(bǔ)丁,打入評(píng)測(cè)發(fā)現(xiàn)問(wèn)題對(duì)應(yīng)的開源補(bǔ)丁,開發(fā)提升平臺(tái)穩(wěn)定性的組件;其次,優(yōu)化開源平臺(tái)發(fā)揮硬件效能,保證其SQL的兼容性、編譯與執(zhí)行和資源分配的優(yōu)化;最后,聯(lián)想大數(shù)據(jù)積極擴(kuò)展開源平臺(tái)實(shí)現(xiàn)業(yè)務(wù)需求,發(fā)展一站式的大數(shù)據(jù)開發(fā)環(huán)境,建立了新的ETL工具、數(shù)據(jù)字典、SQL執(zhí)行器、任務(wù)調(diào)度、可視化工具以及深度學(xué)習(xí)模塊?!?/p>
未來(lái)聯(lián)想大數(shù)據(jù)愿與中外開源社區(qū)和產(chǎn)業(yè)界同盟共同助力全球智能制造,深化開源交流,共同探討全球合作之道,壯大開源平臺(tái),共建大數(shù)據(jù)技術(shù)與商業(yè)合作的全價(jià)值生態(tài)圈。