□ 本刊記者 徐天寶/通訊員 陳峰 田兆燕 傅瑩
本刊訊 10月30日,山東能源集團(tuán)旗下云鼎科技股份有限公司(以下簡(jiǎn)稱“云鼎科技”)研發(fā)的工業(yè)互聯(lián)網(wǎng)數(shù)據(jù)中臺(tái)V1.0成功發(fā)布,并在山東能源集團(tuán)調(diào)度信息化項(xiàng)目中實(shí)際部署應(yīng)用,邁出了云鼎科技工業(yè)互聯(lián)網(wǎng)平臺(tái)建設(shè)的關(guān)鍵一步。
據(jù)介紹,數(shù)據(jù)中臺(tái)是前臺(tái)和后臺(tái)之間的數(shù)據(jù)橋梁,是創(chuàng)新性應(yīng)用與傳統(tǒng)數(shù)據(jù)之間的紐帶,是解決應(yīng)用開發(fā)和數(shù)據(jù)開發(fā)不協(xié)同問題的工具。云鼎科技工業(yè)互聯(lián)網(wǎng)數(shù)據(jù)中臺(tái)是一系列數(shù)據(jù)整合產(chǎn)品集合,包含數(shù)據(jù)采集、數(shù)據(jù)交換、數(shù)據(jù)轉(zhuǎn)換清洗、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)比對(duì)、統(tǒng)一數(shù)據(jù)服務(wù)、數(shù)據(jù)資產(chǎn)、應(yīng)用數(shù)據(jù)連接等功能。數(shù)據(jù)中臺(tái)支持使用系統(tǒng)的方法來解決企業(yè)面臨的信息整合難題,提供一體化的解決方案,透明地管理各類系統(tǒng)中龐雜的數(shù)據(jù);支持各種類型業(yè)務(wù)系統(tǒng)數(shù)據(jù)的整合、交換和共享,形成一套準(zhǔn)確、干凈、完整的數(shù)據(jù)產(chǎn)品集合。
數(shù)據(jù)轉(zhuǎn)換與清洗平臺(tái)是所有集成方案的數(shù)據(jù)集成基礎(chǔ),包括數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)遷移、數(shù)據(jù)同步等,通過單一方式訪問、轉(zhuǎn)換、清洗和加載數(shù)據(jù),支持海量數(shù)據(jù)的分布式并行處理。通過圖形化拖拽方式配置數(shù)據(jù)清洗過程,提供類型轉(zhuǎn)換、字段拆分、字段合并、字符串處理、日期轉(zhuǎn)換、算術(shù)運(yùn)算、碼表轉(zhuǎn)換等方式實(shí)現(xiàn)特色的數(shù)據(jù)轉(zhuǎn)換處理。
數(shù)據(jù)質(zhì)量平臺(tái)通過大量?jī)?nèi)置的數(shù)據(jù)質(zhì)量規(guī)則模型,及時(shí)發(fā)現(xiàn)數(shù)據(jù)的完整性、一致性、準(zhǔn)確性等質(zhì)量問題。支持多種校驗(yàn)邏輯,提供表級(jí)及表間的復(fù)雜校驗(yàn);采用多線程并行處理技術(shù),充分利用資源,基于并行查詢與處理技術(shù),實(shí)現(xiàn)分鐘級(jí)處理千萬級(jí)數(shù)據(jù)量;通過智能記憶和掃描已配置規(guī)則,依據(jù)業(yè)務(wù)相似度智能匹配和推薦校驗(yàn)規(guī)則,大大提高規(guī)則定義效率,提升開發(fā)人員生產(chǎn)力。
數(shù)據(jù)比對(duì)工具通過可視化方式及時(shí)發(fā)現(xiàn)、修復(fù)交互雙防的數(shù)據(jù)差異,保證數(shù)據(jù)一致。通過比對(duì)的方式分析兩個(gè)數(shù)據(jù)源的差異性,生產(chǎn)差異分析報(bào)告,同時(shí)支持?jǐn)?shù)據(jù)的合并。支持生成動(dòng)態(tài)以及靜態(tài)比對(duì)報(bào)告,以可視化的方式展現(xiàn)數(shù)據(jù)差異結(jié)果;支持查看差異數(shù)據(jù),基于報(bào)告結(jié)果,通過配置策略對(duì)差異數(shù)進(jìn)行補(bǔ)齊;提供多種比對(duì)方式,支持基于表結(jié)構(gòu)比對(duì)識(shí)別結(jié)構(gòu)化差異、數(shù)據(jù)量比對(duì)識(shí)別數(shù)量差異、數(shù)據(jù)項(xiàng)比對(duì)識(shí)別信息內(nèi)容差異,支持表、視圖、自定義SQL。
數(shù)據(jù)資產(chǎn)為數(shù)據(jù)提供方和數(shù)據(jù)需求方提供一套自服務(wù)的數(shù)據(jù)共享和交換平臺(tái),提供統(tǒng)一的注冊(cè)、發(fā)現(xiàn)、查詢、定位、獲取數(shù)據(jù)資源的入口。基于元數(shù)據(jù)管理技術(shù),支持多項(xiàng)核心元數(shù)據(jù)和業(yè)務(wù)元數(shù)據(jù)的定義和描述;支持集中式與分布式的部署模式,構(gòu)建完善的信息資源目錄體現(xiàn),滿足多部門、多用戶、跨平臺(tái)的數(shù)據(jù)訪問需求。
據(jù)了解,云鼎科技數(shù)據(jù)中臺(tái)通過對(duì)企業(yè)內(nèi)、外部多元異構(gòu)的數(shù)據(jù)進(jìn)行采集、治理、建模、分析、應(yīng)用,對(duì)內(nèi)優(yōu)化管理、賦能業(yè)務(wù),對(duì)外開展數(shù)據(jù)合作,釋放數(shù)據(jù)價(jià)值,是企業(yè)數(shù)據(jù)資產(chǎn)管理和服務(wù)中樞。
數(shù)據(jù)中臺(tái)的成功上線,是云鼎科技在工業(yè)互聯(lián)網(wǎng)平臺(tái)建設(shè)方面繼續(xù)前行的一大步,平臺(tái)的成功建設(shè)與發(fā)布進(jìn)一步提升了公司工業(yè)互聯(lián)網(wǎng)平臺(tái)的服務(wù)化支撐能力;提升了工業(yè)互聯(lián)網(wǎng)平臺(tái)技術(shù)優(yōu)勢(shì)和市場(chǎng)競(jìng)爭(zhēng)能力;提升了公司數(shù)據(jù)治理能力,加強(qiáng)了各業(yè)務(wù)板塊生產(chǎn)現(xiàn)場(chǎng)、服務(wù)過程等數(shù)據(jù)動(dòng)態(tài)采集;建立起覆蓋全業(yè)務(wù)鏈條的數(shù)據(jù)采集、傳輸和匯聚體系。加快數(shù)據(jù)中臺(tái)建設(shè),創(chuàng)新數(shù)據(jù)融合分析與共享交換機(jī)制,為公司研究和探索工業(yè)互聯(lián)網(wǎng)平臺(tái)架構(gòu)體系與工業(yè)機(jī)理提供了強(qiáng)力支持。