鐵路數據服務平臺是面向鐵路企業(yè)的一站式大數據解決方案。平臺包括了海量結構化與非結構化數據接入,PB級數據離線分析、TB級數據實時分析、數據多維分析、自助分析、數據可視化等功能。該產品根據鐵路應用的特點進行了個性化定制,加入了鐵路數據分類體系,能夠對接鐵路主數據平臺,在自助分析模塊中內置了若干鐵路專業(yè)分析算法,適合鐵路企業(yè)的多種大數據分析場景。
鐵路數據服務平臺主要包括數據集成、數據共享、大數據存儲與分析、數據治理、系統(tǒng)管理等五大功能。
主要提供結構化數據集成、實時流數據集成、非結構化數據集成等功能,滿足各類型數據采集需求。
主要面向全類型數據(結構化、半結構化、非結構化)的存儲、查詢,以海量規(guī)模存儲、快速查詢讀取為特征。通過關系型數據庫存儲技術融合高效低成本的大數據存儲計算技術,完成結構化數據及非結構化數據的存儲計算,并可以對數據表進行申請、授權等管理,可以針對不同用戶生成不同的數據共享策略,粒度控制到字段級。
主要提供統(tǒng)計分析、數據挖掘服務、可視化服務等功能,利用數據倉庫和數據集市等構建面向業(yè)務人員使用的統(tǒng)計分析功能組件,同時,增加對大數據挖掘分析的支持,提供拖拉拽的分析和可視化環(huán)境,用戶根據業(yè)務需求選擇封裝后的算法組件和可視化組件,即可得出分析結果。
主要實現對平臺中數據質量的管理,包括對數據從獲取、存儲、共享、維護、應用到消亡的整個生命周期中,每個階段可能遇到的各類數據質量問題進行識別、度量、監(jiān)控、預警等一系列功能,并通過對接主數據平臺來保證平臺中主數據的規(guī)范性。
主要提供集群管理、用戶管理、大數據各組件服務狀態(tài)監(jiān)控、平臺審計等功能。
平臺支持橫向擴展,PB級數據的離線分析以及TB級數據的實時在線分析。
具有鐵路自主知識產權,對鐵路的應用場景進行了深度定制和個性化改造,滿足鐵路人員的使用偏好和需求。擁有獨立的軟件著作權證書及平臺基礎能力測試證書。
同多家硬件提供商進行合作,數據服務平臺針對不同品牌所提供的X86服務器,分別進行了深度優(yōu)化,為用戶提供軟硬件集成的一體化解決方案,大大節(jié)省了系統(tǒng)部署時間,也能夠有效降低采購成本。
目前,該平臺已經部署在北京局、廣鐵集團等多個鐵路局,作為鐵路局安全大數據、運營資源管理大數據等應用的基礎支撐,為各應用系統(tǒng)提供歷史數據存儲、大數據挖掘以及數據可視化展現的能力。