• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于凝聚層次聚類算法的ATT&CK 模型改進(jìn)?

    2024-04-17 07:29:08徐明迪
    關(guān)鍵詞:假設(shè)檢驗(yàn)度量聚類

    徐明迪 崔 峰

    (武漢數(shù)字工程研究所 武漢 430205)

    1 引言

    隨著網(wǎng)絡(luò)空間中攻防博弈日趨激烈,攻擊者滲透目標(biāo)系統(tǒng)的路徑變得更加復(fù)雜和隱蔽[1],僅依靠人工進(jìn)行分析和識(shí)別將難以應(yīng)對(duì)。ATT&CK模型[2]作為網(wǎng)絡(luò)攻防知識(shí)的一種“固化”,將其與網(wǎng)絡(luò)安全工具結(jié)合,例如蜜罐系統(tǒng)、態(tài)勢(shì)感知系統(tǒng),能夠提高網(wǎng)絡(luò)安全威脅分析的自動(dòng)化程度[3],提高安全威脅捕獲的效率。

    ATT&CK 模型由MITRE 組織發(fā)布,在網(wǎng)絡(luò)安全防御方面有諸多應(yīng)用。國(guó)內(nèi)外對(duì)與ATT&CK 模型也開展了許多研究,其中楊萍等[4]通過對(duì)大量惡意代碼的詳細(xì)分析,總結(jié)惡意代碼各種行為事件實(shí)現(xiàn)的模式特征,基于ATT&CK 模型提出m-ATT&CK 模 型;潘 亞 峰 等[5]設(shè) 計(jì) 并 實(shí) 現(xiàn) 了 基 于ATT&CK的APT攻擊語(yǔ)義規(guī)則模型,用于識(shí)別和標(biāo)記攻擊行為;文獻(xiàn)[6]中對(duì)ATT&CK 模型中攻擊技術(shù)之間的關(guān)聯(lián)關(guān)系進(jìn)行研究。

    上述研究都是圍繞ATT&CK模型展開,但沒有對(duì)模型應(yīng)用中的復(fù)雜性進(jìn)行考慮。本文針對(duì)ATT&CK 模型的應(yīng)用問題,提出一種基于凝聚層次的改進(jìn)聚類算法,對(duì)ATT&CK 技術(shù)集進(jìn)行聚類簡(jiǎn)化,提出一種將ATT&CK 技術(shù)集合量化的方法,并考慮到如何確定最佳聚類數(shù)據(jù)量的問題,將統(tǒng)計(jì)假設(shè)檢驗(yàn)與聚類算法結(jié)合,由統(tǒng)計(jì)假設(shè)確定最佳聚類數(shù)量。

    2 問題描述

    應(yīng)用ATT&CK 模型進(jìn)行攻擊行為識(shí)別和標(biāo)記時(shí),從戰(zhàn)術(shù)層面和攻擊手法層面都不適合直接應(yīng)用。首先,ATT&CK 模型中戰(zhàn)術(shù)的抽象層次較高,在ATT&CK的企業(yè)版中包括的戰(zhàn)術(shù)有訪問初始化、執(zhí)行、常駐、提權(quán)、防御規(guī)避、訪問憑證、發(fā)現(xiàn)、橫向移動(dòng)、收集、數(shù)據(jù)獲取、命令和控制,可以看出上述的戰(zhàn)術(shù)作為網(wǎng)絡(luò)攻擊階段性的抽象描述,僅以戰(zhàn)術(shù)階段作為攻擊行為的標(biāo)簽不利于對(duì)攻擊行為的具體分析;其次ATT&CK 模型提供了一個(gè)包含440 項(xiàng)技術(shù)的集合,這個(gè)集合是作為不同類型攻擊所涉及技術(shù)的超集,但MITRE 僅為模型中部分技術(shù)提供了檢測(cè)規(guī)則描述,如果應(yīng)用ATT&CK模型進(jìn)行攻擊行為識(shí)別將無(wú)法做到全部覆蓋。因此本文在ATT&CK 模型的戰(zhàn)術(shù)和技術(shù)層之間增加一層劃分,解決戰(zhàn)術(shù)層過于抽象和技術(shù)層無(wú)法全覆蓋的問題。

    在對(duì)ATT&CK 模型的技術(shù)集合應(yīng)用聚類算法進(jìn)行劃分前,需要研究解決三個(gè)問題。首先,如何將ATT&CK 技術(shù)集合量化為特征向量;其次,聚類數(shù)量如何確定,如何為ATT&CK的技術(shù)集合找到最佳的聚類數(shù)量;最后,在聚類算法將樣本聚類成k個(gè)簇后,如何確定得到的聚類結(jié)果具有意義。

    3 方法概述

    針對(duì)上述的問題,本文提出一種基于凝聚層次聚類算法的改進(jìn),用于對(duì)ATT&CK模型的技術(shù)集合進(jìn)行聚類。算法改進(jìn)部分是,在聚類流程中加入統(tǒng)計(jì)假設(shè)檢驗(yàn)步驟,借助統(tǒng)計(jì)假設(shè)檢驗(yàn)結(jié)果完成對(duì)聚類結(jié)果的有效性檢驗(yàn),同時(shí)確定最佳聚類數(shù)量。本節(jié)中對(duì)ATT&CK 模型技術(shù)集合的聚類研究按照?qǐng)D1所示的流程進(jìn)行。

    圖1 模型改進(jìn)流程

    3.1 ATT&CK技術(shù)集量化

    首先對(duì)聚類對(duì)象ATT&CK技術(shù)集合進(jìn)行量化,為聚類算法提供數(shù)據(jù)基礎(chǔ)。ATT&CK 模型中的技術(shù)均為文本數(shù)據(jù),需要將其轉(zhuǎn)化為向量數(shù)據(jù)集后才能應(yīng)用于聚類算法,MITRE 對(duì)于技術(shù)按照表1 中提供相關(guān)字段的組織技術(shù)的文本介紹(表中僅列出部分字段),雖然技術(shù)的介紹在整體上看是具有結(jié)構(gòu)的,但在不同字段內(nèi)文本內(nèi)容是非結(jié)構(gòu),受作者的寫作風(fēng)格等因素影響。

    表1 ATT&CK模型中技術(shù)介紹

    參考表1,可以看出與技術(shù)相關(guān)的數(shù)據(jù)大部分由文本組成。因此在考慮量化方法時(shí),首先考慮直接對(duì)于文本數(shù)據(jù)的量化,采用自然語(yǔ)言處理領(lǐng)域中常用的處理步驟,對(duì)文本數(shù)據(jù)進(jìn)行分詞、量化等處理[7],采用上述方法進(jìn)行量化存在兩方面的不足,首先不同技術(shù)描述文本受其作者的主觀因素影響較大;其次直接進(jìn)行分詞量化,因不同文本長(zhǎng)度不同得到的特征向量維度也不同,如果在實(shí)現(xiàn)過程中對(duì)不同向量維度進(jìn)行截?cái)嗷蛱畛?,可能?huì)丟失部分信息??紤]到上述不足,直接采用自然語(yǔ)言處理領(lǐng)域中的文本量化方式是不合適的。通過查閱文獻(xiàn),在本文中使用同樣由MITRE 提供Groups 知識(shí)庫(kù),完成對(duì)技術(shù)數(shù)據(jù)集的量化。

    Groups 是一個(gè)用于整理網(wǎng)上公開入侵情報(bào)的知識(shí)庫(kù),其作用和貢獻(xiàn)主要是,在安全社區(qū)中確定一個(gè)通用、統(tǒng)一的名稱進(jìn)行入侵活動(dòng)的跟蹤,分析人員使用各種分析方法和術(shù)語(yǔ)跟蹤活動(dòng)集群,例如威脅組、威脅參與者、入侵集和活動(dòng)。

    在量化過程中,本文主要使用表2中的技術(shù)/子技術(shù)字段,在Groups 知識(shí)庫(kù)中,每個(gè)APT 記錄視被為攻擊實(shí)例,并將每種技術(shù)均作為攻擊實(shí)例的組成屬性,其形式化表達(dá)如式(1)所示,式中tn代表ATT&CK模型中的技術(shù),T代表技術(shù)集合。

    表2 Groups中攻擊實(shí)例描述

    本文采用特征工程中的二值編碼方法。二值編碼是常用且易操作的量化方式,它只依據(jù)某個(gè)特征決定是否存在,來(lái)決定特征向量中對(duì)應(yīng)位置是1或0,而不是量化出現(xiàn)次數(shù)。借助Groups 知識(shí)庫(kù),將ATT&CK 模型中的技術(shù)統(tǒng)一映射為81 維向量,映射策略為向量中每個(gè)維度代表一個(gè)Groups 中的攻擊實(shí)例,如果該技術(shù)在攻擊實(shí)例中被使用,則該維度的值為1,反之則為0。經(jīng)過上述的映射方法處理后,數(shù)據(jù)集由離散的高維向量組成,特征的結(jié)果為0 或1,分別表示攻擊實(shí)例中某個(gè)技術(shù)的負(fù)面或正面發(fā)生。

    在利用Groups知識(shí)庫(kù)量化的過程中,為了避免并產(chǎn)生誤導(dǎo)性的技術(shù)關(guān)聯(lián),本文中使用至少包含五種不同技術(shù)的攻擊實(shí)例進(jìn)行量化,在本節(jié)接下來(lái)的部分中對(duì)于ATT&CK 技術(shù)集合量化得到的向量數(shù)據(jù)集,均簡(jiǎn)稱為ATT&CK數(shù)據(jù)集。

    3.2 聚類趨勢(shì)評(píng)估

    對(duì)ATT&CK數(shù)據(jù)集進(jìn)行聚類趨勢(shì)評(píng)估,判斷其是否具備聚類的基礎(chǔ),保證聚類結(jié)果的合理性。聚類趨勢(shì)評(píng)估用于檢驗(yàn)樣本分布的空間隨機(jī)性,從而判斷數(shù)據(jù)是否可以聚類,進(jìn)行聚類趨勢(shì)評(píng)估的必要性是因?yàn)榧词乖跀?shù)據(jù)集中沒有顯著的組時(shí),聚類方法也經(jīng)??梢苑祷鼐垲惤Y(jié)果,無(wú)論類別下的樣本是否相關(guān)[8]。

    在聚類趨勢(shì)評(píng)估中使用霍普金斯統(tǒng)計(jì)(Hopkins statistic)[9]方法,Hopkins 統(tǒng)計(jì)由Brian Hopkins和John Gordon Skellam 提出,是一種空間統(tǒng)計(jì)量,檢驗(yàn)空間分布的變量的空間隨機(jī)性,可以看作是對(duì)于給定的數(shù)據(jù)集D,它由隨機(jī)分布生成的概率。具體操作是將數(shù)據(jù)集D中的點(diǎn)之間的距離與從隨機(jī)模擬的數(shù)據(jù)集DR中得出的點(diǎn)之間的距離進(jìn)行比較。具體計(jì)算步驟如下所示,

    1)隨機(jī)從D中抽取n個(gè)點(diǎn)p1,p2,…,pn,對(duì)每個(gè)點(diǎn)pi(1 ≤i≤n),找出pi在D中的最近鄰樣本點(diǎn),并令xi為pi與它在D中的最近鄰之間的距離。

    2)隨機(jī)從DR中抽取n個(gè)點(diǎn)q1,q2,…,qn,對(duì)每個(gè)點(diǎn)qi(1 ≤i≤n),找出qi在DR中的最近鄰樣本點(diǎn),并令yi為qi與它在DR中的最近鄰之間的距離。

    3)根據(jù)步驟1)、2)得到的結(jié)果,計(jì)算霍普金斯統(tǒng)計(jì)量。

    在上述步驟中,D表示對(duì)ATT&CK 模型技術(shù)集合量化后得到的數(shù)據(jù)集,dist()為計(jì)算樣本間距離的函數(shù),函數(shù)中分別使用Jaccard 距離[10]和Phi系數(shù)[11]進(jìn)行計(jì)算得到不同距離,關(guān)于距離度量的選取說(shuō)明在3.3 節(jié)中進(jìn)一步進(jìn)行分析。在步驟1)、2)中,隨機(jī)數(shù)據(jù)集使用伯努利分布生成,結(jié)合數(shù)據(jù)集的性質(zhì)能保證是在樣本空間中均勻取點(diǎn)。對(duì)于式(4)的計(jì)算結(jié)果H,假設(shè)D是均勻分布的,缺乏聚類趨勢(shì)那么,H將約等于0.5。因此,如果H為0.5可以得出數(shù)據(jù)是均勻分布的、沒有任何有意義的聚類;假設(shè)D不是隨機(jī)分布且具有聚類趨勢(shì),那么H將約等于1;對(duì)于H約等于0 的情況,此時(shí)D可以被認(rèn)為既不是隨機(jī)也沒有聚類趨勢(shì)。

    對(duì)ATT&CK 數(shù)據(jù)集使用Jaccard 距離和Phi 系數(shù)計(jì)算霍普金斯統(tǒng)計(jì)量,Jaccard 距離得到的HJ為0.59 和Phi 系數(shù)得到的HΦ為0.63。HΦ值高于HJ表明使用Phi 系數(shù)可以使ATT&CK 數(shù)據(jù)集具有更好的聚類趨勢(shì)。

    3.3 基于凝聚層次聚類的改進(jìn)算法

    凝聚分層聚類算法適用于查找具有最大相似性的集合,因?yàn)楸举|(zhì)上該算法是貪心策略的一種實(shí)現(xiàn),在聚類決策過程中,每一次聚類都是將目前最相似的兩個(gè)簇合并,直至聚類結(jié)束,從而保證得到聚類結(jié)果是最相似的。凝聚層次聚類算法首先得到樣本數(shù)據(jù)的多級(jí)分層,然后通過指定聚類數(shù)量k或截?cái)喔叨鹊玫阶罱K聚類結(jié)果。

    在獲得ATT&CK數(shù)據(jù)集之后,可以使用層次聚類算法獲得最終樹狀圖,但仍然不能推斷出技術(shù)之間關(guān)聯(lián),因?yàn)樾枰_定樹的截?cái)喔叨龋醋詈蟮木垲悢?shù)量)。因此本文提出一種基于凝聚層次聚類算法的改進(jìn),在聚類流程中加入統(tǒng)計(jì)假設(shè)檢驗(yàn)步驟,借助統(tǒng)計(jì)假設(shè)檢驗(yàn)結(jié)果進(jìn)行聚類數(shù)量的選擇。

    在統(tǒng)計(jì)假設(shè)檢驗(yàn)步驟中采用的零假設(shè)驗(yàn)證,通常是數(shù)據(jù)分析實(shí)驗(yàn)的一部分,指進(jìn)行統(tǒng)計(jì)檢驗(yàn)時(shí)預(yù)先建立假設(shè),零假設(shè)成立時(shí)有關(guān)統(tǒng)計(jì)量應(yīng)服從已知的某種概率分布,當(dāng)統(tǒng)計(jì)量的計(jì)算值落入否定域時(shí),可知發(fā)生了小概率事件,應(yīng)否定原假設(shè)[12]。

    將統(tǒng)計(jì)假設(shè)檢驗(yàn)與聚類算法進(jìn)行結(jié)合,將ATT&CK 數(shù)據(jù)集產(chǎn)生的樹狀結(jié)構(gòu)與零分布產(chǎn)生的樹進(jìn)行比較來(lái)分析聚類的有效性,并允許在所需的置信度水平上推斷出統(tǒng)計(jì)上顯著的結(jié)果,統(tǒng)計(jì)假設(shè)檢驗(yàn)所用的數(shù)據(jù)集由隨機(jī)伯努利分布生成,產(chǎn)生的數(shù)據(jù)與ATT&CK數(shù)據(jù)集具有相同方差,隨機(jī)數(shù)據(jù)集上產(chǎn)生的空樹表示為T0。如果在指定的階段高度TD中的簇?cái)?shù)與T0的簇?cái)?shù)明顯不同,則聚類產(chǎn)生的結(jié)果將具有統(tǒng)計(jì)意義。具有統(tǒng)計(jì)意義的層次結(jié)構(gòu)樹的結(jié)果可以得出這樣的結(jié)論,即所產(chǎn)生的關(guān)聯(lián)不同于隨機(jī)產(chǎn)生的結(jié)果,從而為技術(shù)關(guān)聯(lián)提供了有效性基礎(chǔ)?;谀蹖哟尉垲惖母倪M(jìn)算法流程如下。

    應(yīng)用聚類分析ATT&CK 數(shù)據(jù)集的過程是根據(jù)每個(gè)數(shù)據(jù)之間的相異度進(jìn)行劃分,因此選擇相異度的度量標(biāo)準(zhǔn)對(duì)于聚類結(jié)果有較大影響。在應(yīng)用中,聚類算法多使用特征空間中的歐式距離作為度量標(biāo)準(zhǔn)計(jì)算不同樣本之間的相異度[13]。當(dāng)使用歐式距離作為相異度測(cè)量時(shí),樣本之間的距離越小,則說(shuō)明兩者之間越相似,越有可能被劃分到同一個(gè)簇。聚類使用的相似性度量(或稱為距離度量)是在樣本數(shù)據(jù)上執(zhí)行,因此相似性度量方法隨樣本集性質(zhì)的不同而不同。因此必須對(duì)本文中使用的數(shù)據(jù)集中的變量使用合適的距離度量。歐式距離度量標(biāo)準(zhǔn)通常應(yīng)用于連續(xù)變量,而本文中的ATT&CK數(shù)據(jù)集具有離散性,因此需要考慮歐式距離以外的度量方法。

    對(duì)于ATT&CK數(shù)據(jù)集的數(shù)據(jù)由二元變量組成,通過查閱文獻(xiàn)[6]確定Jaccard距離和Phi系數(shù)相關(guān)距離是最合適的。Jaccard 距離是用來(lái)衡量?jī)蓚€(gè)集合差異性的一種指標(biāo),Jaccard 距離是Jaccard 相似系數(shù)的補(bǔ)集,被定義為1減去Jaccard相似系數(shù),Jaccard 相似系數(shù)是用來(lái)衡量?jī)蓚€(gè)集合相似度的一種指標(biāo)。在用于本文中計(jì)算任何兩個(gè)技術(shù)Ti和Tj之間的Jaccard相似系數(shù)時(shí),定義如式(5)所示。

    其中,需要n的下標(biāo)為兩個(gè)數(shù)字,從左至右分別代表Ti和Tj是否出現(xiàn),n11代表Ti和Tj出現(xiàn)在同一個(gè)APT 攻擊實(shí)例中的頻次,n01代表Ti不出現(xiàn)在某個(gè)APT 攻擊實(shí)例而Tj出現(xiàn)的頻次,n10與n01定義相反,在式(5)中Jaccard相似系數(shù)的計(jì)算不考慮n00的值。Jaccard距離度量技術(shù)Ti和Tj之間的不相似度,并定義為Jaccard 相似系統(tǒng)的補(bǔ)碼,即1-Js(Ti,Tj)。Jaccard 距離可以解釋為,Ti和Tj涉及的攻擊實(shí)例的交集除以它們的并集之比。

    Phi 系數(shù)是一個(gè)經(jīng)驗(yàn)的非參數(shù)相關(guān)度量,專門用于二進(jìn)制數(shù)據(jù)。在使用Phi 系數(shù)度量不同技術(shù)時(shí),首先將待度量的技術(shù)排成2×2 表,具體排列情況見表4。Phi系數(shù)的基本概念是,兩個(gè)二元變量的觀察值若大多落在2×2 列聯(lián)表的主對(duì)角線字段,則這兩個(gè)技術(shù)呈正相關(guān)。反之,若兩個(gè)二元變量的觀察值大多落在非對(duì)角線字段,則這兩個(gè)變量呈負(fù)相關(guān)。任意兩種技術(shù)之間Phi 系數(shù)與計(jì)算方如式(6)所示。

    式(5)、式(6)中出現(xiàn)n的定義見表3。

    表3 Jaccard距離和Phi系數(shù)中n值定義

    在確定樣本間的距離度量方式基礎(chǔ)上,在本文中使用Ward鏈接[14]作為簇間距計(jì)算方式。因?yàn)橄啾扔赪ard鏈接,單鏈接方法會(huì)創(chuàng)建松散的簇;全鏈接方法會(huì)創(chuàng)建緊密的簇,但異常點(diǎn)對(duì)聚類結(jié)果影響較大。

    4 實(shí)驗(yàn)結(jié)果分析

    在本節(jié)實(shí)驗(yàn)部分通過數(shù)據(jù)預(yù)處理、選取評(píng)價(jià)指標(biāo)、算法實(shí)現(xiàn)和設(shè)計(jì)對(duì)比驗(yàn)證凝聚分層的改進(jìn)聚類算法的效果。

    4.1 聚類結(jié)果對(duì)比

    在實(shí)驗(yàn)對(duì)比中,本文對(duì)ATT&CK數(shù)據(jù)集采用模糊聚類算法[15]中的PAM 算法進(jìn)行[16]聚類,將模糊聚類得到結(jié)果與凝聚層次聚類算法得到的結(jié)果進(jìn)行比較。

    圖2 每種劃分的聚類方法的聚類圖和相應(yīng)的數(shù)據(jù)集用不同的顏色表示,其中橫縱坐標(biāo)軸為ATT&CK 數(shù)據(jù)集的維度1 和維度2,圖像中的輪廓為數(shù)據(jù)集在維度1和維度2組成平面上的投影。模糊聚類算法對(duì)ATT&CK 數(shù)據(jù)集的結(jié)果如圖2 所示,從指定維度上的投影可以看出,得到的技術(shù)聚類之間相互重疊和包含,難以區(qū)分任何潛在的技術(shù)關(guān)聯(lián)。

    圖2 模糊聚類結(jié)果

    對(duì)于ATRT&CK 數(shù)據(jù)集,學(xué)習(xí)到的層次聚類樹的結(jié)果如圖3 所示,通過基于凝聚層次的改進(jìn)聚類算法最終得到54 個(gè)簇,每個(gè)簇在樹中以不同的顏色表示。由于層次聚類算法的特點(diǎn),聚類結(jié)果不會(huì)出現(xiàn)簇間的交集,因此需要對(duì)改進(jìn)聚類算法的結(jié)果進(jìn)一步分析,驗(yàn)證得到聚類結(jié)果是有效的。

    圖3 基于凝聚層次改進(jìn)的聚類算法結(jié)果

    4.2 結(jié)果分析

    通過選取部分聚類結(jié)果進(jìn)行原理分析說(shuō)明聚類結(jié)果的合理性,對(duì)聚類得到的子集合{T1494,T1115,T1485,T1486,T1487}進(jìn)行分析,集合中的元素按照順序分別代表端口監(jiān)控、運(yùn)行數(shù)據(jù)操縱、發(fā)送數(shù)據(jù)操縱、剪貼板數(shù)據(jù)獲取、數(shù)據(jù)破壞、破壞性數(shù)據(jù)加密、磁盤數(shù)據(jù)結(jié)構(gòu)擦除。由包含的攻擊技術(shù)可以看出,該子集代表了一種竊取或破壞數(shù)據(jù)的攻擊模式。該模式下,攻擊者可以通過運(yùn)行數(shù)據(jù)操縱、發(fā)送數(shù)據(jù)操縱來(lái)間接影響目標(biāo)進(jìn)程的正常運(yùn)行,或者進(jìn)行數(shù)據(jù)收集、竊取信息,然后在下一步中可以選擇數(shù)據(jù)破壞也可以進(jìn)行加密勒索。上述的順序關(guān)系只是舉例說(shuō)明,實(shí)際環(huán)境下可能是竊取、加密勒索等同時(shí)出現(xiàn)。

    攻擊技術(shù)的子集對(duì)于ATT&CK 模型的改進(jìn)主要體現(xiàn)在兩方面,首先,提高蜜罐監(jiān)控的針對(duì)性,可針對(duì)ATT&CK模型的技術(shù)子集進(jìn)行數(shù)據(jù)監(jiān)控;其次提高關(guān)聯(lián)分析的能力,當(dāng)捕獲到子集中一個(gè)攻擊技術(shù)時(shí),應(yīng)該關(guān)聯(lián)考慮子集中其他攻擊技術(shù),這些攻擊技術(shù)出現(xiàn)的可能性較高。

    針對(duì)網(wǎng)絡(luò)攻擊模型應(yīng)用于蜜罐系統(tǒng),分析應(yīng)用過程存在的問題,并提出一種基于凝聚層次聚類的改進(jìn)算法,用于對(duì)ATT&CK模型的技術(shù)集合進(jìn)行聚類。改進(jìn)算法在聚類流程中加入統(tǒng)計(jì)假設(shè)檢驗(yàn)步驟,借助統(tǒng)計(jì)假設(shè)檢驗(yàn)結(jié)果對(duì)聚類結(jié)果的有效性檢驗(yàn),同時(shí)確定最佳聚類數(shù)量k。對(duì)比不同聚類算法分析和分析聚類結(jié)果,驗(yàn)證改進(jìn)聚類算法能夠?qū)TT&CK模型的技術(shù)集合產(chǎn)生有效聚類結(jié)果。

    5 結(jié)語(yǔ)

    本文針對(duì)ATT&CK模型的應(yīng)用的復(fù)雜性問題,提出了一種基于聚類算法的ATT&CK 模型改進(jìn)方法,首先使用Groups 知識(shí)庫(kù)對(duì)ATT&CK 技術(shù)集合進(jìn)行量化,在量化得到的特征向量數(shù)據(jù)集上使用Jaccard 距離和Phi 系數(shù)相關(guān)距離進(jìn)行聚類趨勢(shì)度量,驗(yàn)證量化后的數(shù)據(jù)集具有聚類趨勢(shì),最后在凝聚層次聚類算法中加入統(tǒng)計(jì)假設(shè)驗(yàn)證用于確定最佳聚類數(shù)量,并通過實(shí)驗(yàn)和分析驗(yàn)證聚類結(jié)果的有效性。

    猜你喜歡
    假設(shè)檢驗(yàn)度量聚類
    有趣的度量
    模糊度量空間的強(qiáng)嵌入
    迷向表示分為6個(gè)不可約直和的旗流形上不變愛因斯坦度量
    基于DBSACN聚類算法的XML文檔聚類
    統(tǒng)計(jì)推斷的研究
    雙冪變換下正態(tài)線性回歸模型參數(shù)的假設(shè)檢驗(yàn)
    Primary Question and Hypothesis Testing in Randomized Controlled Clinical Trials
    統(tǒng)計(jì)學(xué)教學(xué)中關(guān)于假設(shè)檢驗(yàn)問題探討
    地質(zhì)異常的奇異性度量與隱伏源致礦異常識(shí)別
    基于改進(jìn)的遺傳算法的模糊聚類算法
    午夜福利视频1000在线观看| 精品人妻1区二区| 国产成人aa在线观看| 别揉我奶头~嗯~啊~动态视频| 久久久久国内视频| 国产精品女同一区二区软件 | 国产精品一区二区免费欧美| 人人妻人人看人人澡| 无限看片的www在线观看| 国产黄片美女视频| 久久国产精品影院| 老熟妇仑乱视频hdxx| 日本黄大片高清| 婷婷精品国产亚洲av在线| 人人妻人人澡欧美一区二区| 一a级毛片在线观看| 19禁男女啪啪无遮挡网站| 香蕉丝袜av| 国模一区二区三区四区视频| 可以在线观看的亚洲视频| 国产视频内射| 级片在线观看| 可以在线观看毛片的网站| 熟妇人妻久久中文字幕3abv| 亚洲专区国产一区二区| 久久久久久九九精品二区国产| 18禁黄网站禁片免费观看直播| 精品久久久久久,| a级毛片a级免费在线| 少妇的逼水好多| 国产99白浆流出| 国产私拍福利视频在线观看| 好男人在线观看高清免费视频| 九色国产91popny在线| 三级男女做爰猛烈吃奶摸视频| 欧美bdsm另类| 中国美女看黄片| 日韩欧美在线二视频| 老熟妇乱子伦视频在线观看| 一进一出好大好爽视频| 最近在线观看免费完整版| 国产成人a区在线观看| 99视频精品全部免费 在线| 国产蜜桃级精品一区二区三区| 啪啪无遮挡十八禁网站| 最近最新中文字幕大全电影3| 色老头精品视频在线观看| 啦啦啦免费观看视频1| 性色av乱码一区二区三区2| 国产97色在线日韩免费| 日韩精品中文字幕看吧| 色吧在线观看| 成人性生交大片免费视频hd| 国产熟女xx| 国产三级在线视频| 欧美成人a在线观看| 内地一区二区视频在线| 精品国产亚洲在线| 久久久久亚洲av毛片大全| 亚洲国产精品999在线| 3wmmmm亚洲av在线观看| АⅤ资源中文在线天堂| 久久久久久久午夜电影| 国产精品自产拍在线观看55亚洲| 51午夜福利影视在线观看| 久久久久九九精品影院| 亚洲人与动物交配视频| 久久伊人香网站| 日韩欧美在线乱码| 亚洲专区国产一区二区| 嫩草影视91久久| 男女做爰动态图高潮gif福利片| 国产一区二区激情短视频| 国产高清有码在线观看视频| 给我免费播放毛片高清在线观看| 99热6这里只有精品| 欧美大码av| 久久精品亚洲精品国产色婷小说| 精品国产超薄肉色丝袜足j| 亚洲欧美日韩无卡精品| 一边摸一边抽搐一进一小说| 天堂av国产一区二区熟女人妻| 精品人妻偷拍中文字幕| 亚洲七黄色美女视频| 亚洲av电影不卡..在线观看| 动漫黄色视频在线观看| 国产一区二区三区在线臀色熟女| 熟女少妇亚洲综合色aaa.| 精品福利观看| 男女床上黄色一级片免费看| 精品无人区乱码1区二区| 美女被艹到高潮喷水动态| 看黄色毛片网站| 一级作爱视频免费观看| 美女 人体艺术 gogo| 久久精品国产99精品国产亚洲性色| 亚洲avbb在线观看| 99久久精品一区二区三区| 亚洲av五月六月丁香网| 久久精品人妻少妇| 色综合亚洲欧美另类图片| 天美传媒精品一区二区| 日韩有码中文字幕| 久久伊人香网站| 亚洲一区二区三区不卡视频| 12—13女人毛片做爰片一| 精品国产三级普通话版| 欧美性感艳星| 亚洲人成电影免费在线| 夜夜躁狠狠躁天天躁| 白带黄色成豆腐渣| 日韩欧美精品v在线| 国产一区二区亚洲精品在线观看| 两人在一起打扑克的视频| 757午夜福利合集在线观看| 一区福利在线观看| 欧美色视频一区免费| 中文字幕高清在线视频| 精品国产三级普通话版| 国产成人aa在线观看| 国产熟女xx| 午夜福利欧美成人| av女优亚洲男人天堂| 亚洲午夜理论影院| 18禁国产床啪视频网站| 黄色片一级片一级黄色片| 搡老熟女国产l中国老女人| 少妇人妻一区二区三区视频| 欧美成人一区二区免费高清观看| 成人一区二区视频在线观看| 男人舔女人下体高潮全视频| 久久性视频一级片| 人人妻人人看人人澡| 美女免费视频网站| 99在线视频只有这里精品首页| 午夜日韩欧美国产| 他把我摸到了高潮在线观看| 一级作爱视频免费观看| 精品福利观看| 精品久久久久久久毛片微露脸| 又爽又黄无遮挡网站| 国语自产精品视频在线第100页| 久久亚洲精品不卡| 国产精华一区二区三区| 99国产精品一区二区三区| 国产蜜桃级精品一区二区三区| 1024手机看黄色片| 婷婷亚洲欧美| 国产一区二区亚洲精品在线观看| 国产精品永久免费网站| 老汉色∧v一级毛片| 成人特级av手机在线观看| 亚洲精品456在线播放app | 中文在线观看免费www的网站| av在线蜜桃| 一个人免费在线观看的高清视频| 色综合欧美亚洲国产小说| 亚洲人成网站在线播放欧美日韩| 国产一区二区亚洲精品在线观看| 成年女人毛片免费观看观看9| 国产黄片美女视频| 亚洲狠狠婷婷综合久久图片| 男女那种视频在线观看| 91av网一区二区| a在线观看视频网站| 成人精品一区二区免费| 色综合亚洲欧美另类图片| 成人性生交大片免费视频hd| 在线十欧美十亚洲十日本专区| 香蕉av资源在线| bbb黄色大片| 国产探花极品一区二区| 久久中文看片网| 99热6这里只有精品| 白带黄色成豆腐渣| 国产亚洲欧美在线一区二区| 欧美中文综合在线视频| 1000部很黄的大片| 观看美女的网站| 午夜久久久久精精品| 精品电影一区二区在线| 欧美xxxx黑人xx丫x性爽| 国产av麻豆久久久久久久| 亚洲精品日韩av片在线观看 | www日本在线高清视频| 丰满人妻一区二区三区视频av | 日本黄色视频三级网站网址| 欧美性猛交╳xxx乱大交人| 欧美中文综合在线视频| 男女午夜视频在线观看| 亚洲最大成人手机在线| 婷婷亚洲欧美| 国产精品精品国产色婷婷| 亚洲avbb在线观看| 日本免费一区二区三区高清不卡| 亚洲18禁久久av| 亚洲国产色片| 久久久久国产精品人妻aⅴ院| 国产男靠女视频免费网站| 欧美zozozo另类| 国内精品久久久久精免费| 日韩欧美精品v在线| 国产精华一区二区三区| 少妇高潮的动态图| 久久精品影院6| 亚洲第一欧美日韩一区二区三区| 中文字幕av成人在线电影| 亚洲国产精品成人综合色| 国产激情欧美一区二区| 九九久久精品国产亚洲av麻豆| 日韩有码中文字幕| 亚洲国产高清在线一区二区三| 国产精品精品国产色婷婷| 老师上课跳d突然被开到最大视频 久久午夜综合久久蜜桃 | 亚洲成人精品中文字幕电影| 在线观看日韩欧美| 亚洲国产高清在线一区二区三| 欧美一区二区亚洲| 可以在线观看毛片的网站| 午夜a级毛片| tocl精华| 欧美区成人在线视频| av在线天堂中文字幕| 中文字幕人妻熟人妻熟丝袜美 | 内地一区二区视频在线| 午夜影院日韩av| 久久午夜亚洲精品久久| 波野结衣二区三区在线 | 欧美最黄视频在线播放免费| 国产伦精品一区二区三区视频9 | 中文字幕av成人在线电影| 一个人观看的视频www高清免费观看| av专区在线播放| 日韩精品青青久久久久久| 深爱激情五月婷婷| 亚洲精品456在线播放app | 岛国视频午夜一区免费看| 午夜福利视频1000在线观看| 级片在线观看| 亚洲人成网站在线播放欧美日韩| 国产主播在线观看一区二区| 日本a在线网址| 欧美日韩亚洲国产一区二区在线观看| 亚洲国产精品合色在线| 五月伊人婷婷丁香| 欧美黑人巨大hd| 精品久久久久久久久久久久久| 亚洲成人免费电影在线观看| 99精品欧美一区二区三区四区| 亚洲国产色片| 丁香六月欧美| 人人妻人人澡欧美一区二区| av女优亚洲男人天堂| 国产精品98久久久久久宅男小说| 俄罗斯特黄特色一大片| 亚洲中文日韩欧美视频| 日本精品一区二区三区蜜桃| 国产av一区在线观看免费| 午夜福利18| 别揉我奶头~嗯~啊~动态视频| 亚洲av二区三区四区| 一个人免费在线观看的高清视频| 夜夜躁狠狠躁天天躁| 热99在线观看视频| 午夜福利成人在线免费观看| 在线视频色国产色| 亚洲成a人片在线一区二区| 麻豆成人av在线观看| 在线观看美女被高潮喷水网站 | 亚洲va日本ⅴa欧美va伊人久久| 床上黄色一级片| 精品人妻一区二区三区麻豆 | 亚洲成a人片在线一区二区| 国产一区二区三区视频了| 欧美成人a在线观看| 国产精品99久久久久久久久| 一个人免费在线观看的高清视频| 天堂av国产一区二区熟女人妻| 91麻豆精品激情在线观看国产| 99久久综合精品五月天人人| 久久人人精品亚洲av| 亚洲国产色片| 九九在线视频观看精品| 少妇裸体淫交视频免费看高清| 99精品在免费线老司机午夜| 亚洲av成人av| 高潮久久久久久久久久久不卡| x7x7x7水蜜桃| 国产精品一区二区三区四区久久| 国产私拍福利视频在线观看| 精品熟女少妇八av免费久了| 国产免费男女视频| www.999成人在线观看| 蜜桃亚洲精品一区二区三区| 三级国产精品欧美在线观看| 日日干狠狠操夜夜爽| 日日夜夜操网爽| 婷婷六月久久综合丁香| 国产单亲对白刺激| 日韩精品青青久久久久久| 男插女下体视频免费在线播放| 国产成+人综合+亚洲专区| 亚洲av成人av| 久久久久久久亚洲中文字幕 | 97超级碰碰碰精品色视频在线观看| 精品国产亚洲在线| 免费看十八禁软件| 婷婷精品国产亚洲av| 黄色视频,在线免费观看| 国产色婷婷99| 国产成年人精品一区二区| 校园春色视频在线观看| 日本五十路高清| 日本一二三区视频观看| 三级男女做爰猛烈吃奶摸视频| 国内毛片毛片毛片毛片毛片| 波多野结衣巨乳人妻| 国产精品,欧美在线| 色综合欧美亚洲国产小说| 婷婷精品国产亚洲av在线| 桃红色精品国产亚洲av| 午夜两性在线视频| 国产成人影院久久av| 成年版毛片免费区| 69av精品久久久久久| 韩国av一区二区三区四区| 少妇的逼好多水| 老师上课跳d突然被开到最大视频 久久午夜综合久久蜜桃 | 成人三级黄色视频| 国产视频内射| 亚洲精品在线观看二区| 中文字幕精品亚洲无线码一区| 身体一侧抽搐| 国产亚洲精品久久久com| 国产精品久久久久久久久免 | av国产免费在线观看| 精品无人区乱码1区二区| 身体一侧抽搐| 欧美乱妇无乱码| 在线观看66精品国产| 精品免费久久久久久久清纯| 久久精品国产亚洲av涩爱 | 国产视频内射| 亚洲乱码一区二区免费版| 无人区码免费观看不卡| 日韩欧美 国产精品| 美女cb高潮喷水在线观看| 网址你懂的国产日韩在线| 亚洲av第一区精品v没综合| 国产熟女xx| a级毛片a级免费在线| 午夜精品一区二区三区免费看| 久久精品国产清高在天天线| 内地一区二区视频在线| 日本 av在线| 亚洲欧美精品综合久久99| 中文亚洲av片在线观看爽| 欧美成人a在线观看| 精品人妻一区二区三区麻豆 | 日日夜夜操网爽| 在线观看av片永久免费下载| 天堂动漫精品| 天天躁日日操中文字幕| 首页视频小说图片口味搜索| 成人国产综合亚洲| 久久精品人妻少妇| 国产主播在线观看一区二区| av在线蜜桃| 日本与韩国留学比较| 欧美一区二区国产精品久久精品| 真人一进一出gif抽搐免费| 天堂影院成人在线观看| 国内精品久久久久精免费| 麻豆久久精品国产亚洲av| 波多野结衣高清作品| 最近最新免费中文字幕在线| 色尼玛亚洲综合影院| 麻豆成人av在线观看| 宅男免费午夜| 久久久国产成人免费| 国产精品电影一区二区三区| 九九在线视频观看精品| 欧美av亚洲av综合av国产av| 国产国拍精品亚洲av在线观看 | 亚洲七黄色美女视频| 无人区码免费观看不卡| 可以在线观看毛片的网站| 国产极品精品免费视频能看的| 99精品欧美一区二区三区四区| 色播亚洲综合网| www.熟女人妻精品国产| 免费无遮挡裸体视频| 亚洲,欧美精品.| 亚洲欧美日韩高清专用| 可以在线观看毛片的网站| 亚洲精品一区av在线观看| 制服丝袜大香蕉在线| 桃色一区二区三区在线观看| 天天一区二区日本电影三级| 99久久精品热视频| 一级作爱视频免费观看| 真人做人爱边吃奶动态| 亚洲美女黄片视频| 亚洲精华国产精华精| 午夜久久久久精精品| 99国产精品一区二区三区| 免费人成在线观看视频色| 亚洲精品在线观看二区| 日韩高清综合在线| 国产欧美日韩精品一区二区| 婷婷精品国产亚洲av在线| 成人无遮挡网站| 国产精品野战在线观看| 亚洲精品亚洲一区二区| 搡老妇女老女人老熟妇| 国产精品一区二区免费欧美| 国产爱豆传媒在线观看| 在线观看美女被高潮喷水网站 | 欧美+亚洲+日韩+国产| 精品免费久久久久久久清纯| 日本三级黄在线观看| 中文亚洲av片在线观看爽| or卡值多少钱| 成熟少妇高潮喷水视频| 又紧又爽又黄一区二区| 亚洲精品美女久久久久99蜜臀| 久久九九热精品免费| 国内久久婷婷六月综合欲色啪| 亚洲成a人片在线一区二区| 搡老熟女国产l中国老女人| 欧洲精品卡2卡3卡4卡5卡区| 内射极品少妇av片p| 亚洲精品一区av在线观看| 欧美在线一区亚洲| 欧美另类亚洲清纯唯美| 国产极品精品免费视频能看的| 欧美日韩中文字幕国产精品一区二区三区| 久久久国产成人精品二区| 波野结衣二区三区在线 | 亚洲欧美日韩卡通动漫| 国产在线精品亚洲第一网站| 男女午夜视频在线观看| 十八禁人妻一区二区| 国产精品野战在线观看| avwww免费| 成年人黄色毛片网站| 日韩欧美在线乱码| 欧美在线黄色| 国模一区二区三区四区视频| 亚洲天堂国产精品一区在线| 我的老师免费观看完整版| 偷拍熟女少妇极品色| 日本黄色视频三级网站网址| 高清日韩中文字幕在线| 亚洲人成电影免费在线| 亚洲无线观看免费| 黄片小视频在线播放| 色视频www国产| 99久久九九国产精品国产免费| 国产精品一及| 男人和女人高潮做爰伦理| 欧美国产日韩亚洲一区| 国内精品美女久久久久久| 男女之事视频高清在线观看| 中文字幕人妻熟人妻熟丝袜美 | 香蕉丝袜av| 亚洲天堂国产精品一区在线| 色在线成人网| tocl精华| 婷婷亚洲欧美| a级毛片a级免费在线| 国产高清videossex| 人人妻人人澡欧美一区二区| 久久久久九九精品影院| 久久精品国产综合久久久| 他把我摸到了高潮在线观看| 国产麻豆成人av免费视频| 国产99白浆流出| 非洲黑人性xxxx精品又粗又长| 在线视频色国产色| 国产又黄又爽又无遮挡在线| 女生性感内裤真人,穿戴方法视频| 欧美日韩国产亚洲二区| 天天躁日日操中文字幕| 成人特级黄色片久久久久久久| 久久久久久大精品| 青草久久国产| 嫁个100分男人电影在线观看| 特大巨黑吊av在线直播| 人妻夜夜爽99麻豆av| 久久久久九九精品影院| 波野结衣二区三区在线 | 成年免费大片在线观看| 久久久久亚洲av毛片大全| 国产美女午夜福利| 久久久久久人人人人人| 欧美色视频一区免费| 国产乱人视频| 三级毛片av免费| 久久久久久人人人人人| 国产精品美女特级片免费视频播放器| 不卡一级毛片| 精品一区二区三区视频在线 | 亚洲av免费高清在线观看| 又紧又爽又黄一区二区| 欧美xxxx黑人xx丫x性爽| av天堂中文字幕网| 在线观看午夜福利视频| 在线观看66精品国产| 最后的刺客免费高清国语| 一级黄色大片毛片| 日韩高清综合在线| 国产视频一区二区在线看| 午夜老司机福利剧场| 97碰自拍视频| 国内久久婷婷六月综合欲色啪| 琪琪午夜伦伦电影理论片6080| 国产精品国产高清国产av| 精品一区二区三区视频在线 | 人妻久久中文字幕网| 国产成年人精品一区二区| 欧美日韩国产亚洲二区| 午夜福利视频1000在线观看| 亚洲自拍偷在线| 国产高清三级在线| 观看美女的网站| 日本黄色视频三级网站网址| 成人无遮挡网站| 精品国产亚洲在线| 亚洲欧美日韩高清专用| x7x7x7水蜜桃| 欧美三级亚洲精品| 美女cb高潮喷水在线观看| 免费看光身美女| 免费看美女性在线毛片视频| 成人永久免费在线观看视频| 国产伦人伦偷精品视频| 久久精品国产亚洲av涩爱 | 一级a爱片免费观看的视频| 欧美一级毛片孕妇| 热99在线观看视频| 中文在线观看免费www的网站| 88av欧美| 精品国内亚洲2022精品成人| 亚洲精品国产精品久久久不卡| 看黄色毛片网站| 国产精品爽爽va在线观看网站| 欧美日韩国产亚洲二区| 99国产精品一区二区蜜桃av| 又紧又爽又黄一区二区| 欧美成狂野欧美在线观看| 午夜福利高清视频| 成年免费大片在线观看| 欧美bdsm另类| av片东京热男人的天堂| 一a级毛片在线观看| 成人欧美大片| 夜夜爽天天搞| 此物有八面人人有两片| 观看免费一级毛片| 日本a在线网址| 两个人的视频大全免费| 精品日产1卡2卡| 亚洲内射少妇av| 色老头精品视频在线观看| bbb黄色大片| 久久精品国产清高在天天线| 欧美+日韩+精品| 欧美乱妇无乱码| 中文字幕人成人乱码亚洲影| av专区在线播放| 欧美激情在线99| 男人舔奶头视频| 九色国产91popny在线| 国产黄色小视频在线观看| 老汉色∧v一级毛片| 色综合欧美亚洲国产小说| 亚洲内射少妇av| av福利片在线观看| 亚洲一区高清亚洲精品| 亚洲精品美女久久久久99蜜臀| 亚洲av五月六月丁香网| 国产日本99.免费观看| 99热只有精品国产| 久久久久国产精品人妻aⅴ院| 黄色片一级片一级黄色片| 国产精品免费一区二区三区在线| 伊人久久精品亚洲午夜| 熟女人妻精品中文字幕| 丰满的人妻完整版| 国产熟女xx| 久9热在线精品视频| 国产蜜桃级精品一区二区三区| 欧美日本视频| 99在线视频只有这里精品首页| 九九久久精品国产亚洲av麻豆| 韩国av一区二区三区四区| 最近在线观看免费完整版| 国内揄拍国产精品人妻在线| 欧美日本视频| 亚洲国产色片| 91麻豆精品激情在线观看国产| 亚洲va日本ⅴa欧美va伊人久久| 久99久视频精品免费| 欧美午夜高清在线| 亚洲最大成人中文| 一级黄片播放器| 男女床上黄色一级片免费看| 欧美日韩精品网址| 首页视频小说图片口味搜索| 国产精品三级大全| 九九在线视频观看精品| 色av中文字幕| 久久久精品欧美日韩精品| av在线蜜桃|