濟(jì)南大學(xué)商學(xué)院 楊 振
大數(shù)據(jù)環(huán)境下高校信息系統(tǒng)開發(fā)模式探討
濟(jì)南大學(xué)商學(xué)院 楊 振
當(dāng)今時代,隨著信息技術(shù)和管理科學(xué)的不斷發(fā)展,在云計算、物聯(lián)網(wǎng)、數(shù)據(jù)挖掘等技術(shù)興起的環(huán)境下,高校的信息量、數(shù)據(jù)量正以指數(shù)倍劇增,其形式也由最初的結(jié)構(gòu)化數(shù)據(jù)向非結(jié)構(gòu)化、半結(jié)構(gòu)化轉(zhuǎn)變。這對于高校的信息管理工作帶來不少挑戰(zhàn)。因此,本文就大數(shù)據(jù)的含義、當(dāng)下高校信息管理系統(tǒng)建設(shè)的缺陷以及必要性進(jìn)行闡述,并就在當(dāng)下形勢對高校信息系統(tǒng)建設(shè)提出建議。
大數(shù)據(jù);信息管理
一般來說,大數(shù)據(jù)是指涉及信息、資料規(guī)模龐大,以至于目前的主流信息處理軟件或數(shù)據(jù)庫系統(tǒng)無法實現(xiàn)對其內(nèi)容做有效地摘取、分析、處理、規(guī)整等行為的數(shù)據(jù)。他的特點(diǎn)最早由IBM公司整理歸納為4V。
海量(volume):即大數(shù)據(jù)的體積是龐大的。傳統(tǒng)數(shù)據(jù)量一般達(dá)到MB或者GB級,而大數(shù)據(jù)的數(shù)據(jù)量可以達(dá)到TB、PB乃至EB級別,可見其體積之龐大是前所未有的。
多態(tài)(variety):大數(shù)據(jù)的表現(xiàn)形式是多種多樣的。在日常應(yīng)用中,傳統(tǒng)數(shù)據(jù)通常以結(jié)構(gòu)化數(shù)據(jù)為主,即:存儲于數(shù)據(jù)庫中,可以通過二維表展示的數(shù)據(jù)。而大數(shù)據(jù)通常都是半結(jié)構(gòu)(根據(jù)字段要求具有擴(kuò)充性)以及非結(jié)構(gòu)化數(shù)據(jù)(圖像、音頻、HTML等),因此其形式是多樣化的。
高速(velocity):大數(shù)據(jù)的處理速度極快,它遵循秒級定律,即數(shù)據(jù)處理結(jié)果所需時間要控制在秒級范圍內(nèi)。而這也是與傳統(tǒng)數(shù)據(jù)的最大差別。
價值(value):在大數(shù)據(jù)環(huán)境下,數(shù)據(jù)海量,資源眾多,但其中真正有價值的信息相較于龐大的數(shù)據(jù)量確是少之又少,這就導(dǎo)致了大數(shù)據(jù)的價值密度較低,高效率的數(shù)據(jù)挖掘工具的開發(fā)與應(yīng)用就成為亟待解決的問題。
不斷發(fā)展的社會以及復(fù)雜多變?nèi)祟愋袨槭惯@個世界上的數(shù)據(jù)每天都在呈爆炸式地增長。據(jù)國際數(shù)據(jù)公司(IDC)統(tǒng)計,2010年全球產(chǎn)生的數(shù)據(jù)量為為1.2ZB,2011年的數(shù)量增長到高達(dá)1.82ZB,相當(dāng)于全球每人產(chǎn)生了200GB的數(shù)據(jù)量。同樣,IBM的研究報告也顯示,整個人類文明所獲得的全部數(shù)據(jù)中,有90%是過去兩年內(nèi)產(chǎn)生的。而到了2020年,全世界所產(chǎn)生的數(shù)據(jù)規(guī)模將達(dá)到今天的44倍。具體到高校來說,亦然。通過挖掘這些海量的數(shù)據(jù)中有價值的信息,高??梢愿痈咝实赝瓿筛黜椚粘?蒲?、招生以及人事管理等方方面面的工作。例如:在學(xué)生信息管理方面,通過挖掘?qū)W生的戶口所在地、年齡、畢業(yè)去向、專業(yè)班級等信息,可以在招生計劃和專業(yè)設(shè)置等方面做出合理決策。可見完善高校信息管理系統(tǒng)這一信息的主要載體,使之與當(dāng)下的大數(shù)據(jù)時代更加契合的任務(wù),是義不容辭的。
在技術(shù)層面上,大數(shù)據(jù)首先要有足夠的存儲空間,隨著分布式存儲系統(tǒng)以及存儲虛擬化等技術(shù)的不斷發(fā)展完善,存儲成本相對不斷降低,存儲效率也在不斷提高,這為大量數(shù)據(jù)集的儲備奠定基礎(chǔ)。其次,挖掘有價值的信息作為大數(shù)據(jù)時代的核心,也伴隨著數(shù)據(jù)挖掘技術(shù)的進(jìn)步逐漸可行。當(dāng)前大數(shù)據(jù)的主流處理方式是通過谷歌的mapreduce框架結(jié)構(gòu)實現(xiàn)對數(shù)據(jù)集的大規(guī)模操作,同樣,Hadhoop、Bigtable等也推動了大數(shù)據(jù)分析處理的發(fā)展。
1.各部門各自為戰(zhàn),形成信息孤島,數(shù)據(jù)冗余
當(dāng)前高校信息系統(tǒng)建設(shè)大多依舊是各部門自行建設(shè),沒有統(tǒng)籌的規(guī)劃和共享信息的平臺,這就容易形成一個個信息孤島。再加之?dāng)?shù)據(jù)量龐大,所造成的信息冗余、資金浪費(fèi)逐漸成為高校發(fā)展的累贅,而改善或重建又需耗費(fèi)大量資金和精力,可謂積重難返。
2.部分系統(tǒng)利用率較低,信息更新滯后,維護(hù)不及時
當(dāng)下有的高校的部分引進(jìn)的系統(tǒng),存在利用率低的問題,系統(tǒng)功能繁多,真正用的上的卻只有一小部分,這就進(jìn)一步導(dǎo)致了信息更新滯后,維護(hù)不及時的問題,這樣的系統(tǒng)基本形同空殼,維護(hù)之,白白浪費(fèi)金錢;丟棄之,未免可惜。
3.新舊系統(tǒng)更替時拖泥帶水,系統(tǒng)間兼容性差,造成經(jīng)濟(jì)浪費(fèi)以及服務(wù)效果不佳
很多學(xué)校為應(yīng)對大數(shù)據(jù)的環(huán)境,引進(jìn)或開發(fā)了新的信息管理系統(tǒng),但新舊系統(tǒng)間由于開發(fā)語言或數(shù)據(jù)結(jié)構(gòu)等方面的差異,導(dǎo)致原數(shù)據(jù)無法導(dǎo)入新數(shù)據(jù)庫,或出現(xiàn)新舊系統(tǒng)無法兼容的問題。導(dǎo)致新舊系統(tǒng)并用,信息無法在系統(tǒng)間共享等現(xiàn)象,有的甚至在不同系統(tǒng)間使用不同登錄數(shù)據(jù)庫,給用戶的使用帶來諸多不便。
4.可擴(kuò)展性差,不利于二次開發(fā)
由于信息量地不斷擴(kuò)增,以及數(shù)據(jù)類型向半結(jié)構(gòu)化甚至非結(jié)構(gòu)化轉(zhuǎn)變,信息系統(tǒng)的數(shù)據(jù)庫亟待做出擴(kuò)展,這就可能由于原信息系統(tǒng)沒有預(yù)見未來出現(xiàn)的問題而導(dǎo)致當(dāng)前的可擴(kuò)展性差的問題。
1.通過獨(dú)立因子分析法,全面衡量信息系統(tǒng)建設(shè)或修繕的價值性
獨(dú)立因子分析方法是通過對原始數(shù)據(jù)的相關(guān)系數(shù)矩陣進(jìn)行分析,從而盡可能將多個評價指標(biāo)轉(zhuǎn)化為相互獨(dú)立的,主要的幾個綜合評價指標(biāo)的一種統(tǒng)計方法。[1]一般來說的評價指標(biāo)有:前期評價指標(biāo)、經(jīng)濟(jì)效益評價指標(biāo)、技術(shù)質(zhì)量評價指標(biāo)等。
2.從戰(zhàn)略角度出發(fā),校內(nèi)負(fù)責(zé)人要和技術(shù)人員緊密聯(lián)系,結(jié)合自身需求,個性化開發(fā)系統(tǒng)
由于缺乏校內(nèi)領(lǐng)導(dǎo)與技術(shù)人員的溝通導(dǎo)致系統(tǒng)無法實現(xiàn)校方的期望,而技術(shù)團(tuán)隊又不得不一次次改動,造成大量的人力、財力的浪費(fèi)。在當(dāng)下的大數(shù)據(jù)時代,信息量龐大,系統(tǒng)結(jié)構(gòu)復(fù)雜,功能多樣,這種問題就更加凸顯。因此,項目領(lǐng)導(dǎo)需要與技術(shù)團(tuán)隊做到密切的溝通,立足學(xué)校自身實際情況,切實地提出各種信息以及信息處理的各種需求。并在日后的使用過程中,也要不斷發(fā)現(xiàn)問題,漸進(jìn)地,不斷地完善系統(tǒng)。
3.各部門統(tǒng)一構(gòu)建,減少冗余和浪費(fèi),統(tǒng)籌管理
技術(shù)工作在高校信息系統(tǒng)構(gòu)建中固然重要,但縱覽全局的立足于戰(zhàn)略角度的管理才是關(guān)鍵的前提。高校在構(gòu)建信息管理系統(tǒng)時,應(yīng)從宏觀角度出發(fā),通過建立信息共享平臺,統(tǒng)一數(shù)據(jù)結(jié)構(gòu)、編程語言,集中信息與公共數(shù)據(jù)庫,提高系統(tǒng)的可擴(kuò)展性與開放性,實現(xiàn)“綜合的全面的信息服務(wù)平臺”。
綜上所述,在大數(shù)據(jù)環(huán)境下,高校信息管理系統(tǒng)不僅要在技術(shù)上實現(xiàn)突破,更要在管理上,從宏觀角度入手,縱覽全局,統(tǒng)籌規(guī)劃,并立足高校自身個性化需求,才能切實構(gòu)建起高效、實用、利好用戶的高校信息管理系統(tǒng)。
[1]成雨含.高校新型信息系統(tǒng)建設(shè)方案和評測體系的研究[J].計算機(jī)技術(shù)與發(fā)展.2016.26(5):156-161