基于大數(shù)據(jù)的網(wǎng)絡(luò)輿情監(jiān)控系統(tǒng)設(shè)計(jì)探析

雒辛芃

摘 要：我國地大物博，人口數(shù)量眾多，尤其是網(wǎng)絡(luò)輿情比較復(fù)雜，所以網(wǎng)絡(luò)輿情危機(jī)發(fā)生的概率比較高。如今，大數(shù)據(jù)背景下的網(wǎng)絡(luò)輿情更是發(fā)生了巨大的變化，基于此，本文試圖設(shè)計(jì)一款基于大數(shù)據(jù)的網(wǎng)絡(luò)輿情監(jiān)控系統(tǒng)，以期望能夠及時(shí)監(jiān)管以及感知輿情發(fā)展態(tài)勢(shì)，為輿情危機(jī)治理提供有價(jià)值的參考依據(jù)，進(jìn)而保障網(wǎng)絡(luò)環(huán)境健康發(fā)展。

關(guān)鍵詞：大數(shù)據(jù) 網(wǎng)絡(luò)輿情 監(jiān)控系統(tǒng)

中圖分類號(hào)：TP311.13;C912.63 文獻(xiàn)標(biāo)識(shí)碼：A 文章編號(hào)：1003-9082（2020）05-000-01

引言

隨著互聯(lián)網(wǎng)的快速普及，我國移動(dòng)網(wǎng)民數(shù)量已經(jīng)超過11億，隨著數(shù)量的提升，網(wǎng)絡(luò)輿情傳傳播速度也越來越快。雖然互聯(lián)網(wǎng)為人們提供了極大的便捷，但是也為負(fù)面信息傳播提供了渠道。尤其是在大數(shù)據(jù)時(shí)代背景下，各種數(shù)據(jù)信息可以說是唾手可得，這也就意味著網(wǎng)絡(luò)輿情監(jiān)控難度越來越大，因此，有必要設(shè)計(jì)一款基于大數(shù)據(jù)的網(wǎng)絡(luò)輿情監(jiān)控系統(tǒng)，將能夠?yàn)楣矙C(jī)關(guān)和輿情防控部門開展輿情監(jiān)控與引導(dǎo)奠定堅(jiān)實(shí)的基礎(chǔ)。

一、基于大數(shù)據(jù)的網(wǎng)絡(luò)輿情監(jiān)控系統(tǒng)總體架構(gòu)分析

基于大數(shù)據(jù)的網(wǎng)絡(luò)輿情監(jiān)控系統(tǒng)，能夠?qū)⒈姸嘈畔R集到系統(tǒng)數(shù)據(jù)庫之中，通過全文索引功能對(duì)數(shù)據(jù)庫中的數(shù)據(jù)信息的威脅度進(jìn)行評(píng)估，并對(duì)其威脅等級(jí)進(jìn)行劃分，最后依托繪制圖表的形式進(jìn)行可視化展示?；诖髷?shù)據(jù)的網(wǎng)絡(luò)輿情監(jiān)控系統(tǒng)總體架構(gòu)如圖1所示。其中，通過HDFS分布式系統(tǒng)實(shí)現(xiàn)數(shù)據(jù)獲取以及存儲(chǔ)功能，而數(shù)據(jù)存儲(chǔ)的結(jié)構(gòu)為HBase;同時(shí)，能夠嚴(yán)格按照實(shí)際輿情管理的需求，進(jìn)而自動(dòng)生成對(duì)應(yīng)的表格。

二、數(shù)據(jù)庫設(shè)計(jì)分析

在基于大數(shù)據(jù)的網(wǎng)絡(luò)輿情監(jiān)控系統(tǒng)中數(shù)據(jù)庫極為重要，因?yàn)閿?shù)據(jù)的管理、檢索、匯總、分析等工作均在數(shù)據(jù)庫中完成。因此，在設(shè)計(jì)過程中應(yīng)嚴(yán)格按照實(shí)際需求進(jìn)行，這樣才能實(shí)現(xiàn)對(duì)輿情的有效監(jiān)控，并對(duì)惡意輿情進(jìn)行及時(shí)管控。監(jiān)控系統(tǒng)能夠?qū)⒕W(wǎng)民的基本信息以及言論發(fā)布時(shí)間、內(nèi)容等進(jìn)行儲(chǔ)存，利用關(guān)鍵詞搜索功能，可以檢索獲得相關(guān)內(nèi)容。Hadoop是數(shù)據(jù)庫系統(tǒng)的核心，通過Hadoop能夠?qū)⑷蝿?wù)分布到每一個(gè)數(shù)據(jù)節(jié)點(diǎn)上并使其穩(wěn)定運(yùn)行。同時(shí)，所監(jiān)控到的數(shù)據(jù)可以進(jìn)行隨時(shí)備份與調(diào)用，從而能夠保障數(shù)據(jù)的完整性和安全性。

三、系統(tǒng)功能模塊設(shè)計(jì)分析

1.數(shù)據(jù)信息采集模塊設(shè)計(jì)

該模塊的作用是提升采集效率與精準(zhǔn)度，因此，通常是利用網(wǎng)絡(luò)爬蟲技術(shù)在Web頁面上有針對(duì)性的采集數(shù)據(jù)，也就是通過關(guān)鍵詞進(jìn)行搜索，這樣就能夠獲得對(duì)應(yīng)的信息，同時(shí)也可以將無關(guān)的信息數(shù)據(jù)過濾掉，使其采集范圍縮小，以此實(shí)現(xiàn)采集速度的提升。在對(duì)網(wǎng)絡(luò)輿情監(jiān)控過程中，通過數(shù)據(jù)信息采集模塊可針對(duì)某一個(gè)特定領(lǐng)域進(jìn)行數(shù)據(jù)采集，將有利于提升監(jiān)控的效率以及精準(zhǔn)性。

利用網(wǎng)絡(luò)爬蟲技術(shù)可以在Web頁面上有針對(duì)性的采集數(shù)據(jù)，通過輸入關(guān)鍵詞，可快速獲得與關(guān)鍵詞有關(guān)聯(lián)的信息數(shù)據(jù)，同時(shí)無關(guān)的數(shù)據(jù)會(huì)被排除。為了能夠提升網(wǎng)絡(luò)輿情信息采集的效率與精準(zhǔn)性，還需完善以下功能：第一，根據(jù)需求建立網(wǎng)絡(luò)輿情關(guān)鍵詞庫，并需要對(duì)每一個(gè)關(guān)鍵詞進(jìn)行循環(huán)檢索，目的是保留有效數(shù)據(jù)，將無關(guān)數(shù)據(jù)清除;結(jié)合實(shí)際需求通過自定義的方式，可以有效采集與特定關(guān)注領(lǐng)域和話題相關(guān)的網(wǎng)絡(luò)輿情信息數(shù)據(jù)。第二，對(duì)個(gè)人信息進(jìn)行采集，例如，個(gè)人基本信息、發(fā)送信息內(nèi)容與時(shí)間等。第三，網(wǎng)絡(luò)爬蟲技術(shù)可以在某一個(gè)特定時(shí)間內(nèi)發(fā)揮其價(jià)值，例如快速獲取發(fā)表言論用戶的各項(xiàng)信息，并將結(jié)果以結(jié)構(gòu)化數(shù)據(jù)進(jìn)行存儲(chǔ)，從而為輿情防控以及后續(xù)輿情引導(dǎo)、治理工作提供有價(jià)值的參考依據(jù)。

2.信息分析處理模塊設(shè)計(jì)分析

完成信息采集后，需要對(duì)其進(jìn)行深入分析，這樣才能及時(shí)掌握某些觀點(diǎn)或某些傾向性評(píng)價(jià)是否對(duì)網(wǎng)絡(luò)輿情產(chǎn)生威脅以及其具體的威脅程度?；ヂ?lián)網(wǎng)環(huán)境開放且復(fù)雜，用戶所發(fā)布的觀點(diǎn)往往比較多元，且內(nèi)容繁多，這就可能會(huì)影響網(wǎng)絡(luò)輿情監(jiān)控的效率與質(zhì)量。因此，為了避免這個(gè)問題，通常采用的是語義方法對(duì)其進(jìn)行情感分析，主要是提取情感詞，常用的是詞典分析法與詞語分析法，從實(shí)際來看，任何一種方法單方面來使用都存在局限性，所以常常將兩種方法進(jìn)行綜合使用，可及時(shí)感知并明確用戶發(fā)布內(nèi)容的情感分值，根據(jù)分值的不同，主要有高、中、低三個(gè)輿論威脅等級(jí)。

3.信息交互模塊設(shè)計(jì)

基于大數(shù)據(jù)的網(wǎng)絡(luò)輿情監(jiān)控系統(tǒng)的頁面是對(duì)信息獲取的主要窗口，基于實(shí)際需求，系統(tǒng)頁面需要體現(xiàn)人機(jī)交互，因此通常會(huì)采用前臺(tái)技術(shù)（HTML+CSS+Jquery+JSP）對(duì)系統(tǒng)頁面進(jìn)行設(shè)計(jì)。要實(shí)現(xiàn)網(wǎng)絡(luò)輿情監(jiān)控系統(tǒng)人機(jī)交互的目的，其方法比較多，其中報(bào)告文檔生成、報(bào)表統(tǒng)計(jì)交互、圖譜關(guān)聯(lián)交互、表單查詢交互等是常用的方法。例如表單查詢交互，能夠?qū)λ杉男畔?shù)據(jù)進(jìn)行直觀展示，同時(shí)能夠以Excel或Word形式進(jìn)行呈現(xiàn)。

但是從實(shí)際網(wǎng)絡(luò)環(huán)境來看，網(wǎng)民之間的關(guān)系往往更為復(fù)雜，其中，有個(gè)人信息的發(fā)布，也有互相@的關(guān)系以及各種轉(zhuǎn)發(fā)的關(guān)系，所以信息交互的復(fù)雜度高，僅僅依靠表單查詢交互無法將網(wǎng)民之間關(guān)系精準(zhǔn)呈現(xiàn)，所以可通過關(guān)系圖譜形態(tài)呈現(xiàn)網(wǎng)民與網(wǎng)民之間的關(guān)系和權(quán)重。具體來講，就是將用戶實(shí)體作為表達(dá)節(jié)點(diǎn)，例如，將關(guān)注數(shù)量很多的這類用戶作為一個(gè)節(jié)點(diǎn)，然后再進(jìn)行延伸擴(kuò)展到其他成員，以此類推就能夠形成一個(gè)有一定關(guān)聯(lián)的人物關(guān)系圖，從而為公安機(jī)關(guān)和輿情防控部門開展輿情監(jiān)控與引導(dǎo)提供有價(jià)值的參考依據(jù)。

參考文獻(xiàn)

[1]賈夢(mèng)久.基于大數(shù)據(jù)可視化的網(wǎng)絡(luò)意見領(lǐng)袖特征研究[J].信息技術(shù)與信息化，2020（02）：15-18.

[2]雷凱.大數(shù)據(jù)時(shí)代重大網(wǎng)絡(luò)輿情事件治理研究[J].中國報(bào)業(yè)，2020（02）：92-93.