國(guó)家信息技術(shù)安全研究中心副主任 李京春
新形勢(shì)下的電子政務(wù)大數(shù)據(jù)體系架構(gòu)
國(guó)家信息技術(shù)安全研究中心副主任 李京春
計(jì)算機(jī)誕生的時(shí)候有三種應(yīng)用,一種是通信處理,一種是科學(xué)計(jì)算、一種是自動(dòng)控制,這三個(gè)領(lǐng)域都在快速的發(fā)展,按照自己的要求(功能性,安全性,企業(yè)信息化等)在發(fā)展。隨著互聯(lián)網(wǎng)的發(fā)展,這三個(gè)領(lǐng)域開(kāi)始關(guān)聯(lián)起來(lái),逐漸發(fā)展成為國(guó)家的關(guān)鍵基礎(chǔ)設(shè)施,一個(gè)是電信,信息系統(tǒng)的關(guān)鍵基礎(chǔ)設(shè)施;一個(gè)是云計(jì)算,超級(jí)計(jì)算基礎(chǔ)設(shè)施;再一個(gè)就是工業(yè)控制系統(tǒng)的基礎(chǔ)設(shè)施。
互聯(lián)網(wǎng)的IP泛在化,使這三大領(lǐng)域相互融合,交織在這一起,產(chǎn)生了新一代互聯(lián)網(wǎng)技術(shù),這些新技術(shù)又催生了數(shù)據(jù)技術(shù)的快速發(fā)展。現(xiàn)在,大數(shù)據(jù)的應(yīng)用需求越來(lái)越多,以后還會(huì)向智慧地球、智慧城市、智能機(jī)器人的方向發(fā)展。
從歷史不同階段看到,計(jì)算機(jī)設(shè)備經(jīng)歷了革命性的變革之后,體積越來(lái)越小,集成電路越來(lái)越發(fā)達(dá)。而在網(wǎng)絡(luò)方面,經(jīng)歷了局域網(wǎng)、互聯(lián)網(wǎng)、移動(dòng)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、電視、工電控制系統(tǒng)、家庭wifi整個(gè)城市全覆蓋等等,將來(lái)還有其他革命性的變革。
在整個(gè)IT發(fā)展的過(guò)程中,產(chǎn)生了大量的數(shù)據(jù),從紙帶存儲(chǔ)到光盤(pán)、硬盤(pán),閃存、U盤(pán)。還有現(xiàn)在的大數(shù)據(jù),這些都是革命性的變革。今天的數(shù)據(jù)面臨爆炸式增長(zhǎng),大數(shù)據(jù)和云計(jì)算的關(guān)系非常密切,這些數(shù)據(jù)集合已經(jīng)無(wú)法在規(guī)定的時(shí)間里用常規(guī)的軟件工具進(jìn)行捕獲、管理和處理的數(shù)據(jù)集合;需要新的云計(jì)算(或云計(jì)算與服務(wù)器集群組合)分布式處理模式對(duì)該類數(shù)據(jù)集合加工,才能具備更強(qiáng)的決策力、洞察力、流程化、可視化能力,發(fā)現(xiàn)新的價(jià)值來(lái)適應(yīng)海量、高增長(zhǎng)率和多樣化的信息資產(chǎn)。
互聯(lián)網(wǎng)與傳統(tǒng)業(yè)務(wù)有機(jī)結(jié)合形成新的發(fā)展業(yè)態(tài),構(gòu)成新的生產(chǎn)力,這就是十三五規(guī)劃需要推進(jìn)的“互聯(lián)網(wǎng)+”行動(dòng)計(jì)劃?;ヂ?lián)網(wǎng)的“網(wǎng)絡(luò)”覆蓋是基礎(chǔ)和條件,而“數(shù)據(jù)”服務(wù)是核心和關(guān)鍵?!熬W(wǎng)絡(luò)”覆蓋包含:移動(dòng)互聯(lián)網(wǎng)(3G、4G、5G)、物聯(lián)網(wǎng)、工控網(wǎng)、電視網(wǎng)、WIFI覆蓋等各類互聯(lián)網(wǎng);“數(shù)據(jù)”服務(wù)其實(shí)就是大數(shù)據(jù)應(yīng)用。
由此可見(jiàn),“互聯(lián)網(wǎng)+”離不開(kāi)大數(shù)據(jù),大數(shù)據(jù)離不開(kāi)云計(jì)算。
對(duì)于電子政務(wù)大數(shù)據(jù)系統(tǒng)建設(shè)工程,我們更應(yīng)該關(guān)注三個(gè)方面,第一個(gè)是匯聚融合,主要是解決數(shù)據(jù)有序共享,查詢要有規(guī)則;第二個(gè)是解決監(jiān)管審查,要防止數(shù)據(jù)的濫用;第三個(gè)是決策支撐,大數(shù)據(jù)最終還是要回到應(yīng)用層面。面對(duì)這些挑戰(zhàn),我們有哪些應(yīng)對(duì)思路?現(xiàn)在的問(wèn)題是業(yè)務(wù)運(yùn)行無(wú)法停止,各單位,各信息中心的數(shù)據(jù)可以利用,在匯聚之后再進(jìn)行綜合利用。
新形勢(shì)下的電子政務(wù)大數(shù)據(jù)體系架構(gòu)主要包括整體架構(gòu)、數(shù)據(jù)采集交換、數(shù)據(jù)存儲(chǔ)管理、數(shù)據(jù)查詢?cè)L問(wèn)等多個(gè)方面。
在整體架構(gòu)方面,主要涵蓋數(shù)據(jù)的采集存儲(chǔ)、分析計(jì)算、服務(wù)管理以及服務(wù)交付等模塊,為數(shù)據(jù)時(shí)代的電子政務(wù)建設(shè)提供有利支撐。
在數(shù)據(jù)采集交換方面,業(yè)務(wù)系統(tǒng)無(wú)需更改,完全不影響生產(chǎn)系統(tǒng)的正常運(yùn)行;支持異構(gòu)數(shù)據(jù)庫(kù)的數(shù)據(jù)同步復(fù)制;支持多源及多目標(biāo)數(shù)據(jù)庫(kù)之間的數(shù)據(jù)同步復(fù)制;通過(guò)高效的群組通訊機(jī)制,保證在多節(jié)點(diǎn)情況下的實(shí)時(shí)同步速度;支持并行方式導(dǎo)入海量數(shù)據(jù);可直接擴(kuò)展導(dǎo)入服務(wù)器節(jié)點(diǎn);系統(tǒng)導(dǎo)入速度與導(dǎo)入服務(wù)器數(shù)量成正比,與分布式存儲(chǔ)能力的線性擴(kuò)展對(duì)應(yīng)。
在數(shù)據(jù)存儲(chǔ)管理方面,實(shí)現(xiàn)海量結(jié)構(gòu)化、半結(jié)構(gòu)化及非結(jié)構(gòu)化數(shù)據(jù)的高效存儲(chǔ);在使用多數(shù)據(jù)副本情況下,多節(jié)點(diǎn)失效時(shí),數(shù)據(jù)、系統(tǒng)仍可使用;整體構(gòu)建成本低,使用通用X 86服務(wù)器,無(wú)需對(duì)硬件有特殊要求。
在數(shù)據(jù)查詢?cè)L問(wèn)方面,數(shù)據(jù)查詢?cè)L問(wèn)模塊,實(shí)現(xiàn)跨源異構(gòu)數(shù)據(jù)的統(tǒng)一查詢?cè)L問(wèn);兼容SQL標(biāo)準(zhǔn),支持跨表跨源關(guān)聯(lián)查詢;服務(wù)封裝及權(quán)限管控;通過(guò)統(tǒng)一的訪問(wèn)入口使用后臺(tái)的各種數(shù)據(jù)庫(kù),在應(yīng)用和數(shù)據(jù)庫(kù)之間建立了隔離,應(yīng)用不需關(guān)心物理數(shù)據(jù)庫(kù)的信息,只需關(guān)心訪問(wèn)平臺(tái)提供的數(shù)據(jù)庫(kù)服務(wù)即可。