基于大數(shù)據(jù)平臺的自動化運維及監(jiān)控技術(shù)研究

汪紅剛 彭莎莎 黃蕓

關(guān)鍵詞：大數(shù)據(jù)平臺;自動化運維;監(jiān)控技術(shù)

近些年來大數(shù)據(jù)技術(shù)發(fā)展迅猛，帶動了很多行業(yè)的發(fā)展與進步，但大數(shù)據(jù)行業(yè)也面臨著一些挑戰(zhàn)，如采集類問題、儲存問題等仍有著更大的發(fā)展空間。通過技術(shù)的革新和優(yōu)化，獲得有意義、有價值的內(nèi)容和數(shù)據(jù)，并借助大數(shù)據(jù)平臺來分析和搜集信息，這對于各領(lǐng)域的發(fā)展有著重要的推動作用。

1 大數(shù)據(jù)平臺下自動化運維技術(shù)的分析

1.1 自動化運維功能設(shè)計

自動化運維技術(shù)的發(fā)展能夠為企業(yè)提供便利和服務(wù)，對企業(yè)改革及提高管理效率有著重要意義。在企業(yè)運營過程中，要靈活運用自動化運維功能，對企業(yè)運營管理中產(chǎn)生的所有數(shù)據(jù)進行分析和檢測，并將有用的信息篩選出來，有機的整合在一起?；诖?，大數(shù)據(jù)自動化運維功能能夠?qū)崿F(xiàn)具象化，通過多種圖表等多種形式展示出來。同時，這一運維系統(tǒng)有著強大的功能，企業(yè)應(yīng)該結(jié)合實際情況，對不同的功能進行設(shè)置，之后，再結(jié)合運維目標的特點和形式，將技術(shù)進一步細化，對照企業(yè)業(yè)務(wù)將運維系統(tǒng)劃分為多個功能區(qū)域[1]。一般來說，根據(jù)企業(yè)的需求，功能區(qū)可以劃分為尋常管理區(qū)、運維監(jiān)控區(qū)、設(shè)備管理區(qū)、第三方平臺接入?yún)^(qū)和信息管理中心，在企業(yè)管理過程中，需要派遣專門的人員來管理不同的功能區(qū)域，采用填寫表格的模式，對數(shù)據(jù)進行記錄并存檔，方便與其他工作人員做交接。運維監(jiān)控區(qū)域的關(guān)鍵就在于“可視化”，工作人員可以根據(jù)自身工作性質(zhì)，以表格、圖像等多種形式將數(shù)據(jù)展示出來，并結(jié)合自身需求利用大數(shù)據(jù)技術(shù)進行整合和分析，這樣各部門在工作中，對數(shù)據(jù)的變化和規(guī)律一目了然。而知識管理區(qū)的主要受眾是運維對象，需要將需要用到的知識、操作手段、注意事項等進行總結(jié)和歸納，以便工作人員在有需求時能夠隨時調(diào)閱數(shù)據(jù)，以便縮短對企業(yè)數(shù)據(jù)熟悉的時間，盡快進入到工作狀態(tài)中。

1.2 數(shù)據(jù)質(zhì)量管理體系

基于大數(shù)據(jù)平臺的自動化運維有著組成復(fù)雜、配合要求高等特點，在運行中需要多個系統(tǒng)中的數(shù)據(jù)相互配合，再結(jié)合算法對數(shù)據(jù)進行處理，達到預(yù)想中的目標。在系統(tǒng)運行中，要嚴格監(jiān)管數(shù)據(jù)，保證它們的完整性、唯一性和真實性，以此來與大數(shù)據(jù)平臺相結(jié)合。而對于這一系統(tǒng)來講，要遵守系統(tǒng)定義的標準，將收集到的數(shù)據(jù)進行二次整合和管理，通過統(tǒng)一的校對和處理，使數(shù)據(jù)信息前后保持一致性。另外，大數(shù)據(jù)平臺的核心組成部分是多個服務(wù)器集群，傳統(tǒng)的信息系統(tǒng)組成部分則是一臺或多臺服務(wù)器，相對于傳統(tǒng)信息系統(tǒng)來說，基于大數(shù)據(jù)平臺的自動運維系統(tǒng)，在工作中效率更高，準確性也更高[2]。以硬件設(shè)備故障為例，往往會對信息系統(tǒng)造成嚴重的損害，一旦某個硬件設(shè)備出現(xiàn)故障，信息系統(tǒng)將無法正常運行，而在檢修過程中需要耗費大量的時間和精力，嚴重影響了企業(yè)的運營效率。而大數(shù)據(jù)平臺自動化運維系統(tǒng)的建立，能夠有效解決這一問題，工作人員只需要密切監(jiān)控系統(tǒng)的運行情況，發(fā)生故障后系統(tǒng)會有示警，將出現(xiàn)的問題時及時上報，維修人員則要根據(jù)示警對出現(xiàn)故障的應(yīng)硬件設(shè)備進行維修和更換即可，只需耗費較短的時間就可以解決問題，且避免了搶修的麻煩，使大數(shù)據(jù)平臺可以穩(wěn)定有效的運行。

1.3 數(shù)據(jù)深度挖掘和優(yōu)化

一般來說，在自動化運維平臺中，需要結(jié)合企業(yè)的運行狀況對數(shù)據(jù)進行采集和儲存，同時還要根據(jù)不同部門的需求對這些數(shù)據(jù)進行深度整合，結(jié)合每個部門的特點，將不需要的數(shù)據(jù)篩選出來，留下需要的數(shù)據(jù)信息，再基于保留數(shù)據(jù)進行深入挖掘。工作人員可以根據(jù)數(shù)據(jù)的規(guī)律和趨勢來規(guī)劃企業(yè)的運營方向，以便加強企業(yè)工作效率和監(jiān)管水平。另外，大數(shù)據(jù)平臺的自動化運維技術(shù)能夠有效記錄事件發(fā)生的時間及用戶反饋時間，并通過數(shù)據(jù)分析掌握事件與用戶之間的關(guān)系，進而及時解決問題，使企業(yè)的應(yīng)對能力更上一個臺階[3]。與此同時，大數(shù)據(jù)平臺自動運維技術(shù)還能夠分析設(shè)備的各類故障，并實時監(jiān)測設(shè)備各項指標，當(dāng)數(shù)據(jù)發(fā)生異常時會及時示警，并準確記錄細故障時間，從而幫助企業(yè)有效的預(yù)防和規(guī)避風(fēng)險。除此之外，相對于傳統(tǒng)的信息系統(tǒng)，大數(shù)據(jù)的自動化運維技術(shù)還可以運用在多種場合中，大大提高了系統(tǒng)的適用范圍。

2 大數(shù)據(jù)平臺的自動化監(jiān)控技術(shù)分析

自動化監(jiān)控技術(shù)的運用能夠有效保證數(shù)據(jù)的完整性、真實性和技術(shù)性，在企業(yè)運營管理的過程中，所產(chǎn)生的數(shù)據(jù)有著較大的商業(yè)價值，關(guān)系到很多企業(yè)的發(fā)展，因此，企業(yè)也格外重視工作信息的保密性。在信息技術(shù)快速發(fā)展的今天，企業(yè)網(wǎng)絡(luò)系統(tǒng)安全性受到了高度的重視，盡管如此仍有不法分子通過信息化手段，企圖竊取企業(yè)或個人數(shù)據(jù)，通過破壞或盜取等手段達到獲利的目的。但這卻會對企業(yè)發(fā)展造成嚴重的傷害，本質(zhì)上也屬于犯罪行為。因此，企業(yè)在傳輸重要數(shù)據(jù)時，不僅要重視做好加密保護措施，還要對傳遞過程進行實時監(jiān)控，一旦數(shù)據(jù)傳遞發(fā)生異常，就能夠及時對異常數(shù)據(jù)進行追蹤和定位，以保證數(shù)據(jù)傳遞的安全性。而自動化監(jiān)控技術(shù)的運用，能夠通過監(jiān)測數(shù)據(jù)可視化有效實現(xiàn)這一目的，在擴展監(jiān)控覆蓋范圍的同時，對數(shù)據(jù)傳遞狀態(tài)進行實時的監(jiān)控和分析。另外，傳統(tǒng)信息系統(tǒng)處理信息的過程過于復(fù)雜，導(dǎo)致信息傳遞效率慢，消耗時間長，且在傳遞的過程中會因壓縮、解壓等而產(chǎn)生大量的垃圾數(shù)據(jù)，甚至是出現(xiàn)亂碼等問題。而自動化監(jiān)控技術(shù)有著超強的整合能力，在傳遞信息過程中能夠?qū)π畔⑦M行優(yōu)化，避免無效數(shù)據(jù)的產(chǎn)生，保證監(jiān)控數(shù)據(jù)處理的準確性，避免數(shù)據(jù)錯誤或亂碼等問題。

結(jié)束語

總的來說，大數(shù)據(jù)技術(shù)的發(fā)展有效替代了傳統(tǒng)數(shù)據(jù)計算方法，相較以往，大數(shù)據(jù)技術(shù)處理信息的速度更快，能夠有效提高計算和信息處理工作效率，避免了投入大量人力篩選有用信息。與此同時，大數(shù)據(jù)儲存技術(shù)和研究更是通過傳輸、加密、保存等手段，為現(xiàn)代化信息處理工作提供了極大的便利。

參考文獻：

[1]金光濤，豐德偉，馬小亮，王韜.數(shù)據(jù)中心自動化運維設(shè)計與應(yīng)用[J].信息技術(shù)與信息化，2020（11）：68-71.

[2]唐振營，徐景龍，鄒繼斌，王晨飛，李慧芹.自動化運維在電力企業(yè)信息系統(tǒng)中的應(yīng)用[J].自動化技術(shù)與應(yīng)用，2020，39（08）：154-158+163.

[3]景騰飛.信息系統(tǒng)自動化運維管理探析[J].網(wǎng)絡(luò)安全技術(shù)與應(yīng)用，2020（08）：116-118.