垃圾短信治理方案及技術(shù)實(shí)現(xiàn)

王研

摘 要：近年來，垃圾短信愈發(fā)泛濫，這種行為不但極大危害了用戶的切身利益，而且對于聯(lián)通的品牌打造也制造了很大的障礙。因此，對運(yùn)營商的監(jiān)管提出了更高的要求。該文綜合比對了主流的垃圾短信攔截方案，最后明確了所采用的基于發(fā)端短信中心實(shí)時控制的垃圾短信攔截方案。通過采用系統(tǒng)自動處理和人工審核相結(jié)合的方式，垃圾短信治理工作取得了顯著的成果。最后，該文結(jié)合目前垃圾短信治理的形勢，對最新的基于可疑度的垃圾短信攔截機(jī)制進(jìn)行了介紹，對后期的治理工作提出了展望。

關(guān)鍵詞：發(fā)端短信中心實(shí)時控制 垃圾短信被舉報(bào)率 關(guān)鍵字?jǐn)r截機(jī)制

中圖分類號：TN929 文獻(xiàn)標(biāo)識碼：A 文章編號：1672-3791（2015）02（a）-0024-02

2012年以來，垃圾短信又有重新抬頭之勢，并有了新的變種，主要包括偽基站垃圾短信、iMessage垃圾信息及智能手機(jī)中毒后成為“肉機(jī)”發(fā)送的垃圾短信，其內(nèi)容大多涉及反動、詐騙、買賣非法物品等違法信息。這種行為不但極大危害了用戶的切身利益，而且對于聯(lián)通的品牌打造也制造了很大的障礙，因此對垃圾短信進(jìn)行治理刻不容緩。

針對此種情況，集團(tuán)公司于2012年起將垃圾短信的治理納入KPI考核，按月對未達(dá)到考核指標(biāo)的省份進(jìn)行通報(bào)及收入扣減；于2013年優(yōu)化考核標(biāo)準(zhǔn)，開展“凈網(wǎng)”活動，對全網(wǎng)和地方端口短信進(jìn)行清理，對不符合條件的端口進(jìn)行關(guān)停處理；于2014年執(zhí)行行業(yè)端口省間結(jié)算，完成國際垃圾短信攔截系統(tǒng)擴(kuò)容，組織開展打擊偽基站專項(xiàng)行動，啟動建設(shè)集中攔截系統(tǒng)。

1 垃圾短信治理方案分析

垃圾短信監(jiān)控，按照攔截位置的不同可以分為發(fā)端控制、收端控制和其他控制三種模式。其中又根據(jù)短信數(shù)據(jù)處理網(wǎng)元的不同分為短信中心控制模式和信令控制模式，下面分別加以介紹。

1.1 發(fā)端短信中心實(shí)時控制模式

垃圾短信信息安全監(jiān)管系統(tǒng)與短信中心（SMSC）連接，SMSC將MO/AO短信暫存并實(shí)時傳遞副本給垃圾短信信息安全監(jiān)管系統(tǒng)，由垃圾短信管理系統(tǒng)根據(jù)設(shè)定的判別規(guī)則對MO/AO短信實(shí)時進(jìn)行垃圾短信甄別，并將判別結(jié)果通知SMSC進(jìn)行攔截或下發(fā)處理。

垃圾短信管理系統(tǒng)對SMSC上報(bào)的短信數(shù)據(jù)進(jìn)行甄別分析，對符合垃圾短信判別規(guī)則的短信通知SMSC進(jìn)行攔截處理；對不符合垃圾短信判別規(guī)則的短信通知SMSC進(jìn)行下發(fā)處理。

發(fā)端實(shí)時短信中心控制模式網(wǎng)絡(luò)結(jié)構(gòu)與準(zhǔn)實(shí)時短信中心控制模式網(wǎng)絡(luò)結(jié)構(gòu)類似，其中接口機(jī)可以采用與現(xiàn)有信息安全匯聚網(wǎng)關(guān)復(fù)用。

1.2 發(fā)端信令實(shí)時控制模式

垃圾短信管理系統(tǒng)與信令處理機(jī)連接，信令處理機(jī)串接在LSTP與SMSC之間的信令鏈路中；如果建設(shè)的是HSTP，信令處理機(jī)串接在HSTP與SMSC之間的信令鏈路中，由信令處理機(jī)根據(jù)設(shè)定的判別規(guī)則，對提交給SMSC的MO短信和SMSC發(fā)出的MT短信數(shù)據(jù)進(jìn)行比對，對符合判別條件的MO/MT短信進(jìn)行實(shí)時攔截，同時將MO/MT短信記錄副本上報(bào)至垃圾短信管理系統(tǒng)做進(jìn)一步分析處理以及數(shù)據(jù)存儲。

垃圾短信管理系統(tǒng)對各個信令處理機(jī)上報(bào)的短信數(shù)據(jù)進(jìn)行匯總分析，根據(jù)分析結(jié)果更新垃圾短信判別規(guī)則并同步至各信令處理機(jī)執(zhí)行。

1.3 收端信令實(shí)時控制模式

垃圾短信管理系統(tǒng)與信令處理機(jī)連接，信令處理機(jī)串接在LSTP與MSC之間的信令鏈路中；如果建設(shè)的是HSTP，信令處理機(jī)串接在HSTP與MSC之間的信令鏈路中，由信令處理機(jī)根據(jù)設(shè)定的判別規(guī)則，對下發(fā)至MSC的MT短信數(shù)據(jù)進(jìn)行比對，對符合判別條件的MT短信進(jìn)行實(shí)時攔截，同時將MT短信記錄副本上報(bào)至垃圾短信管理系統(tǒng)做進(jìn)一步分析處理以及數(shù)據(jù)存儲。注：MT短信記錄應(yīng)包括發(fā)送方號碼、接收方號碼、消息內(nèi)容、發(fā)送時間等信息。

垃圾短信管理系統(tǒng)對各個信令處理機(jī)上報(bào)的短信數(shù)據(jù)進(jìn)行匯總分析，根據(jù)分析結(jié)果更新垃圾短信判別規(guī)則并同步至各信令處理機(jī)執(zhí)行。

1.4 治理方案比較

對于垃圾短信治理的發(fā)端方案和收端方案，從監(jiān)控范圍，攔截策略，維護(hù)要求進(jìn)行比對可以發(fā)現(xiàn)：全網(wǎng)發(fā)端方案和收端方案的監(jiān)控范圍和攔截策略基本相同，但發(fā)端方案可以采用短信中心方案和信令方案，監(jiān)控的設(shè)備投入較小，相比收端，發(fā)端的性價比更高，因此天津聯(lián)通垃圾短信平臺采用的是發(fā)端短信中心實(shí)時方式的方案。

2 天津聯(lián)通垃圾短信治理成果

通過新建垃圾短信信息安全監(jiān)管系統(tǒng)，采用發(fā)端短信中心實(shí)時控制方式，實(shí)現(xiàn)天津本地發(fā)端垃圾短信治理功能，較之之前通過短信中心自帶模塊離線分析短信中心話單后生成黑名單的攔截方式，攔截短信數(shù)量和范圍有了很大幅度的提高。

另一方面，針對通過大量號碼池低頻發(fā)送垃圾短信的行為，如果單純依靠垃圾短信監(jiān)控系統(tǒng)的話，采用嚴(yán)格單一的攔截策略，容易造成正常短信的誤攔，遺漏垃圾短信。因此，采用關(guān)鍵字+流量控制、系統(tǒng)自動處理+人工審核相結(jié)合的方式，重點(diǎn)啟用組合關(guān)鍵字和連續(xù)低頻次規(guī)則精確攔截。具體包括以下幾方面。

（1）降低可疑短信的門限值，盡可能多的收集可疑短信，對內(nèi)容雷同的可疑短信進(jìn)行內(nèi)容分析提純，通過“與或”邏輯組合及時添加攔截策略，對垃圾短信進(jìn)行精準(zhǔn)攔截。

（2）增加了臨時關(guān)鍵字、關(guān)鍵句功能，通過人工審核將確認(rèn)為垃圾短信的聯(lián)系電話、網(wǎng)址、QQ號、銀行賬號等加入臨時關(guān)鍵字，發(fā)送3條即加入黑名單，有效提高攔截率。

（3）人工審核團(tuán)隊(duì)堅(jiān)持對可疑信息進(jìn)行100%人工審核，發(fā)現(xiàn)一例封堵一例，進(jìn)行100%封堵；及時制作、更新監(jiān)控?cái)r截關(guān)鍵字，堅(jiān)持人工和智能化系統(tǒng)相結(jié)合，確保不良信息7×24h審核處理的及時有效。

在多種治理舉措的共同實(shí)施下，天津地區(qū)的垃圾短信發(fā)送量大幅度降低，垃圾短信被舉報(bào)量也明顯減少。通過12321和10010垃圾短信舉報(bào)處理平臺數(shù)據(jù)顯示，2012年天津地區(qū)點(diǎn)對點(diǎn)垃圾短信被投訴量顯著下降（其中垃圾短信被舉報(bào)率=來自于10010和12321平臺的垃圾短信舉報(bào)數(shù)/本地短信用戶數(shù)（千萬數(shù)量級）該文中本地短信用戶數(shù)以2012年在網(wǎng)用戶數(shù)均值430萬來進(jìn)行計(jì)算），如圖1所示。

3 技術(shù)發(fā)展與展望

雖然天津聯(lián)通已經(jīng)建設(shè)了基于短信中心發(fā)端控制的垃圾短信監(jiān)控系統(tǒng)，并通過系統(tǒng)自動處理與人工審核相結(jié)合的方式取得了較好的成果，但是單純依靠“關(guān)鍵字+頻次”實(shí)現(xiàn)垃圾短信一次過濾的方式仍有不足，并且人工審核工作無法做到垃圾短信的事前處理。隨著垃圾短信治理工作的深入，垃圾短信也呈現(xiàn)出新的發(fā)送特征。

（1）發(fā)送者采用同音、形近、近義等方式，規(guī)避關(guān)鍵字方式的攔截，同時在其中混淆一些無意義的字符，用來欺騙攔截算法。例如：“fa-瞟”、“貨（貸）款”等拼音詞匯變形，嵌入特殊字符等使得目前的關(guān)鍵字和關(guān)鍵字組合失效。需要針對此類進(jìn)行語義特征提取，自動過濾關(guān)鍵字。

（2）發(fā)送者采用頻繁換號的方式，每個號碼都是低頻發(fā)送，模擬正常用戶的發(fā)送行為進(jìn)行發(fā)送，以躲開針對發(fā)送者的異常行為進(jìn)行流量探測的方法。

針對此類問題，集團(tuán)公司總部在部分省市進(jìn)行試點(diǎn)，開展基于可疑度計(jì)算的垃圾短信過濾方案的運(yùn)行測試工作，在垃圾短信的過濾過程中首次引入了可疑度的概念，使用多種特征過濾及內(nèi)容過濾算法對一條短信的可疑度進(jìn)行估算，命中一個算法，給當(dāng)前短信累加一個分值，并且賦予每種算法不同的權(quán)值，當(dāng)短信的可疑度累積增加到一定閥值時，可疑短信被視為垃圾短信。

下一步，集團(tuán)公司計(jì)劃于2014年內(nèi)啟動的基于收端控制的垃圾短信集中攔截系統(tǒng)的建設(shè)，該平臺實(shí)現(xiàn)關(guān)鍵字和攔截策略的統(tǒng)一部署，從而能大幅度減少垃圾短信在省際間的流動泛濫問題，同時結(jié)合天津本地現(xiàn)有垃圾短信平臺的優(yōu)化擴(kuò)容，為用戶打造了綠色誠信的網(wǎng)絡(luò)文化環(huán)境，實(shí)現(xiàn)了經(jīng)濟(jì)效益和社會效益的雙豐收。

參考文獻(xiàn)

[1] 張永忠，王江.垃圾短信監(jiān)管系統(tǒng)方案分析與實(shí)現(xiàn)[J].硅谷，2012（7）：128-129.

[2] 張燕，傅建明.垃圾短信的識別與追蹤研究[J].計(jì)算機(jī)應(yīng)用研究，2006，23（3）：245-247.

[3] 李愷明.廣東移動通信垃圾信息分析與治理方案設(shè)計(jì)[D].北京：北京郵電大學(xué)，2011.