鐵路數(shù)據(jù)服務(wù)平臺是面向鐵路企業(yè)的一站式大數(shù)據(jù)解決方案。平臺包括了海量結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)接入,PB級數(shù)據(jù)離線分析、TB級數(shù)據(jù)實時分析、數(shù)據(jù)多維分析、自助分析、數(shù)據(jù)可視化等功能。該產(chǎn)品根據(jù)鐵路應(yīng)用的特點進行了個性化定制,加入了鐵路數(shù)據(jù)分類體系,能夠?qū)予F路主數(shù)據(jù)平臺,在自助分析模塊中內(nèi)置了若干鐵路專業(yè)分析算法,適合鐵路企業(yè)的多種大數(shù)據(jù)分析場景。
鐵路數(shù)據(jù)服務(wù)平臺主要包括數(shù)據(jù)集成、數(shù)據(jù)共享、大數(shù)據(jù)存儲與分析、數(shù)據(jù)治理、系統(tǒng)管理等五大功能。
主要提供結(jié)構(gòu)化數(shù)據(jù)集成、實時流數(shù)據(jù)集成、非結(jié)構(gòu)化數(shù)據(jù)集成等功能,滿足各類型數(shù)據(jù)采集需求。
主要面向全類型數(shù)據(jù)(結(jié)構(gòu)化、半結(jié)構(gòu)化、非結(jié)構(gòu)化)的存儲、查詢,以海量規(guī)模存儲、快速查詢讀取為特征。通過關(guān)系型數(shù)據(jù)庫存儲技術(shù)融合高效低成本的大數(shù)據(jù)存儲計算技術(shù),完成結(jié)構(gòu)化數(shù)據(jù)及非結(jié)構(gòu)化數(shù)據(jù)的存儲計算,并可以對數(shù)據(jù)表進行申請、授權(quán)等管理,可以針對不同用戶生成不同的數(shù)據(jù)共享策略,粒度控制到字段級。
主要提供統(tǒng)計分析、數(shù)據(jù)挖掘服務(wù)、可視化服務(wù)等功能,利用數(shù)據(jù)倉庫和數(shù)據(jù)集市等構(gòu)建面向業(yè)務(wù)人員使用的統(tǒng)計分析功能組件,同時,增加對大數(shù)據(jù)挖掘分析的支持,提供拖拉拽的分析和可視化環(huán)境,用戶根據(jù)業(yè)務(wù)需求選擇封裝后的算法組件和可視化組件,即可得出分析結(jié)果。
主要實現(xiàn)對平臺中數(shù)據(jù)質(zhì)量的管理,包括對數(shù)據(jù)從獲取、存儲、共享、維護、應(yīng)用到消亡的整個生命周期中,每個階段可能遇到的各類數(shù)據(jù)質(zhì)量問題進行識別、度量、監(jiān)控、預(yù)警等一系列功能,并通過對接主數(shù)據(jù)平臺來保證平臺中主數(shù)據(jù)的規(guī)范性。
主要提供集群管理、用戶管理、大數(shù)據(jù)各組件服務(wù)狀態(tài)監(jiān)控、平臺審計等功能。
平臺支持橫向擴展,PB級數(shù)據(jù)的離線分析以及TB級數(shù)據(jù)的實時在線分析。
具有鐵路自主知識產(chǎn)權(quán),對鐵路的應(yīng)用場景進行了深度定制和個性化改造,滿足鐵路人員的使用偏好和需求。擁有獨立的軟件著作權(quán)證書及平臺基礎(chǔ)能力測試證書。
同多家硬件提供商進行合作,數(shù)據(jù)服務(wù)平臺針對不同品牌所提供的X86服務(wù)器,分別進行了深度優(yōu)化,為用戶提供軟硬件集成的一體化解決方案,大大節(jié)省了系統(tǒng)部署時間,也能夠有效降低采購成本。
目前,該平臺已經(jīng)部署在北京局、廣鐵集團等多個鐵路局,作為鐵路局安全大數(shù)據(jù)、運營資源管理大數(shù)據(jù)等應(yīng)用的基礎(chǔ)支撐,為各應(yīng)用系統(tǒng)提供歷史數(shù)據(jù)存儲、大數(shù)據(jù)挖掘以及數(shù)據(jù)可視化展現(xiàn)的能力。