基于網(wǎng)絡(luò)智能的互聯(lián)網(wǎng)大數(shù)據(jù)采集和應(yīng)用

互聯(lián)網(wǎng)大數(shù)據(jù)以信息傳遞和交換的形式反映網(wǎng)絡(luò)空間和數(shù)字社會(huì)的行為，讓?xiě)?yīng)用場(chǎng)景更廣泛，讓“連接”更緊密，讓網(wǎng)絡(luò)更智能。

—北京浩瀚深度信息技術(shù)股份有限公司副總經(jīng)理竇伊男

在數(shù)字經(jīng)濟(jì)時(shí)代，數(shù)據(jù)已經(jīng)成為關(guān)鍵生產(chǎn)要素，發(fā)揮數(shù)據(jù)的生產(chǎn)要素作用，有利于促進(jìn)國(guó)民經(jīng)濟(jì)高質(zhì)量發(fā)展。挖掘數(shù)據(jù)信息能夠驅(qū)動(dòng)各行各業(yè)的變革并進(jìn)行升級(jí)改造，國(guó)民經(jīng)濟(jì)和產(chǎn)業(yè)的進(jìn)展會(huì)通過(guò)數(shù)據(jù)的應(yīng)用體現(xiàn)出指數(shù)效應(yīng)。

今天給大家分享的是一個(gè)細(xì)分領(lǐng)域——網(wǎng)絡(luò)大數(shù)據(jù)的采集和應(yīng)用。我將從網(wǎng)絡(luò)智能的角度來(lái)介紹我們?cè)谶@方面的實(shí)踐應(yīng)用。網(wǎng)絡(luò)智能化能幫助我們從浩如煙海的網(wǎng)絡(luò)數(shù)據(jù)中提取相關(guān)的信息，并且能發(fā)揮出這些信息的價(jià)值。

從我們的角度來(lái)看，新基建和大數(shù)據(jù)之間是相互促進(jìn)、相得益彰的關(guān)系。新基建中涉及的5G、工業(yè)互聯(lián)網(wǎng)等新型基礎(chǔ)設(shè)施建設(shè)領(lǐng)域的發(fā)展，為大數(shù)據(jù)的采集提供了更為廣泛的數(shù)據(jù)類(lèi)型和更大體量的數(shù)據(jù)源。我們通過(guò)將這些業(yè)務(wù)、數(shù)據(jù)和產(chǎn)業(yè)進(jìn)行交叉鏈接，能夠創(chuàng)造出新業(yè)態(tài)和新的行業(yè)模式。

技術(shù)中心、數(shù)據(jù)中心這些基礎(chǔ)設(shè)施為我們的數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)處理和數(shù)據(jù)應(yīng)用提供了堅(jiān)實(shí)的技術(shù)基礎(chǔ)。大數(shù)據(jù)的應(yīng)用也能夠進(jìn)一步促進(jìn)新基建相關(guān)領(lǐng)域的發(fā)展和建設(shè)。在新基建方面的大部分進(jìn)展來(lái)自于我們對(duì)數(shù)據(jù)的應(yīng)用，新基建和數(shù)據(jù)應(yīng)用是互相促進(jìn)的關(guān)系。我們從各個(gè)方面看到了這些進(jìn)展，如數(shù)據(jù)的應(yīng)用和新基建促進(jìn)了各個(gè)產(chǎn)業(yè)的發(fā)展和升級(jí)換代。技術(shù)中心、數(shù)據(jù)中心已經(jīng)成為數(shù)字化轉(zhuǎn)型的有力武器。

我認(rèn)為網(wǎng)絡(luò)智能化的概念是：互聯(lián)網(wǎng)能夠像人一樣，對(duì)它所承載的網(wǎng)絡(luò)業(yè)務(wù)和流量有認(rèn)知，能夠?qū)α髁亢蜆I(yè)務(wù)進(jìn)行感知、識(shí)別、計(jì)量，在感知、識(shí)別、計(jì)量的基礎(chǔ)上還可以做優(yōu)化、管理、控制、分發(fā)，并且可以從不同的業(yè)務(wù)上提取信息、采集數(shù)據(jù)。

網(wǎng)絡(luò)智能化的應(yīng)用就相當(dāng)于我們?cè)趯?shí)體世界的攝像頭、錄像機(jī)、照相機(jī)、紅綠燈。我們把網(wǎng)絡(luò)智能化的技術(shù)稱(chēng)為DPI技術(shù)，也叫做深度報(bào)文檢測(cè)，它是對(duì)于網(wǎng)絡(luò)流量二層到七層的流量全面檢測(cè)分析和提取的技術(shù)。通過(guò)對(duì)網(wǎng)絡(luò)流量的分析，我們可以了解網(wǎng)絡(luò)流量所承載的業(yè)務(wù)是什么，是哪些用戶在使用，訪問(wèn)什么樣的資源，數(shù)據(jù)的流通過(guò)程是怎樣的。在這個(gè)基礎(chǔ)之上，我們可以提取相關(guān)的信息，并提供這類(lèi)系統(tǒng)的研制、開(kāi)發(fā)和應(yīng)用服務(wù)。

智能化解決方案分成三層，最下層是對(duì)流量進(jìn)行處理的平臺(tái)，負(fù)責(zé)對(duì)流量的實(shí)時(shí)處理、分類(lèi)、感知、管理、管控、防護(hù)，該平臺(tái)主要負(fù)責(zé)對(duì)惡意流量的阻斷和對(duì)各類(lèi)業(yè)務(wù)信息的提取;中間層基于流量處理平臺(tái)對(duì)從流量里提取的互聯(lián)網(wǎng)大數(shù)據(jù)做相關(guān)的關(guān)聯(lián)、存儲(chǔ)、共享、應(yīng)用分析;最上層是應(yīng)用層，針對(duì)應(yīng)用場(chǎng)景提供數(shù)據(jù)應(yīng)用措施。

整個(gè)解決方案里有兩個(gè)突出特點(diǎn)：第一個(gè)是流量平臺(tái)涉及國(guó)家級(jí)的運(yùn)營(yíng)商運(yùn)營(yíng)的網(wǎng)絡(luò)，如國(guó)內(nèi)的網(wǎng)絡(luò)跟國(guó)外互聯(lián)互通的接口、三大運(yùn)營(yíng)商之間的互聯(lián)互通接口、省級(jí)的網(wǎng)絡(luò)接口等信息，網(wǎng)絡(luò)規(guī)模和流量規(guī)模非常大。在這樣的流量規(guī)模、網(wǎng)絡(luò)范圍下，實(shí)現(xiàn)“業(yè)務(wù)有認(rèn)知、流量能管理、信息能夠?qū)崟r(shí)提取”相對(duì)來(lái)說(shuō)比較困難，但通過(guò)技術(shù)積累和專(zhuān)用的硬件設(shè)備，我們實(shí)現(xiàn)了這樣的功能。

互聯(lián)網(wǎng)大數(shù)據(jù)采集是網(wǎng)絡(luò)智能化的重點(diǎn)，通過(guò)技術(shù)手段，我們從互聯(lián)網(wǎng)流量里提取相關(guān)的信息?；ヂ?lián)網(wǎng)里的業(yè)務(wù)繁雜，要提取相關(guān)的信息我們就要對(duì)流量和模式進(jìn)行識(shí)別。我們可以將不同的業(yè)務(wù)信息，通過(guò)提取，形成結(jié)構(gòu)化或者非結(jié)構(gòu)化的信息數(shù)據(jù)。我們的信息采集點(diǎn)分布在各個(gè)運(yùn)營(yíng)商主要的網(wǎng)絡(luò)點(diǎn)上，我們可以提取國(guó)內(nèi)網(wǎng)絡(luò)在運(yùn)營(yíng)商一方與國(guó)外互連的鏈路信息，包括運(yùn)營(yíng)商之間互連的流量點(diǎn)、每個(gè)省流量匯聚以后在出口處的采集點(diǎn)、大型IDC的出口、移動(dòng)網(wǎng)絡(luò)的核心網(wǎng)絡(luò)采集到的信息。因此，我們采集信息的范圍非常廣泛，采集到的信息非常全面。將這種提取信息模式與提取信息廣度結(jié)合，我們可以在很大的程度上配合運(yùn)營(yíng)商采集到詳細(xì)的互聯(lián)網(wǎng)數(shù)據(jù)。

互聯(lián)網(wǎng)大數(shù)據(jù)在采集上對(duì)技術(shù)要求較高。但大數(shù)據(jù)的應(yīng)用離我們并不遙遠(yuǎn)，并和我們每個(gè)人息息相關(guān)。新冠肺炎疫情中最常用的位置信息及其關(guān)聯(lián)的信息也是互聯(lián)網(wǎng)大數(shù)據(jù)的一種，它實(shí)際上是通過(guò)提取我們手機(jī)移動(dòng)核心網(wǎng)的位置信息生成的。

互聯(lián)網(wǎng)大數(shù)據(jù)有這樣幾個(gè)特點(diǎn)：一是全景的，我們?cè)谳^大網(wǎng)絡(luò)范圍采集到的信息包括了幾乎所有的用戶、資源、網(wǎng)絡(luò)業(yè)務(wù)、互聯(lián)網(wǎng)業(yè)務(wù)的交互信息等;二是全息的，我們要將這些數(shù)據(jù)提取出來(lái)，它是可記錄的。因?yàn)榇髷?shù)據(jù)的這些特點(diǎn)，數(shù)據(jù)具有很高的價(jià)值，我們?cè)诜?wù)運(yùn)營(yíng)商時(shí)所做的應(yīng)用實(shí)踐只是其中很小的一部分，數(shù)據(jù)的價(jià)值還遠(yuǎn)遠(yuǎn)沒(méi)有被挖掘和呈現(xiàn)出來(lái)。

在大數(shù)據(jù)應(yīng)用這一方面，首先，我們希望大數(shù)據(jù)能夠應(yīng)用到更多應(yīng)用場(chǎng)景中，因?yàn)槲覀冏钕瓤吹搅肆髁亢蛿?shù)據(jù)的價(jià)值。其次，我們認(rèn)為數(shù)據(jù)應(yīng)該被理解為更好的連接方式，互聯(lián)網(wǎng)最近十幾年的商業(yè)創(chuàng)新更多來(lái)自于連接的方式，是信息在供給端和需求端連接方式上的創(chuàng)新，這些創(chuàng)新不僅激活了很多新的業(yè)務(wù)形態(tài)，還對(duì)原來(lái)的業(yè)務(wù)形態(tài)進(jìn)行了全面的升級(jí)改造。最后，我們希望數(shù)據(jù)應(yīng)用所搭建起來(lái)的體系成為新基建里另外一類(lèi)基礎(chǔ)設(shè)施，使企業(yè)、個(gè)人都可以便捷高效地利用這些數(shù)據(jù)。

（根據(jù)演講內(nèi)容整理，未經(jīng)本人審核）