• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于改進(jìn)蟻群算法的SDN數(shù)據(jù)中心流調(diào)度研究

    2022-05-10 23:31:53朱素霞,龍翼飛,孫廣路,李純鋒
    關(guān)鍵詞:軟件定義網(wǎng)絡(luò)蟻群算法

    朱素霞,龍翼飛,孫廣路,李純鋒

    摘要:目前在軟件定義數(shù)據(jù)中心網(wǎng)絡(luò)中,基于蟻群算法的流調(diào)度策略在對路徑進(jìn)行選擇時(shí)存在收斂過慢和搜索停滯等缺點(diǎn),容易導(dǎo)致數(shù)據(jù)中心網(wǎng)絡(luò)時(shí)延過高和資源利用率低等問題。為此,提出一種基于蟻群改進(jìn)的流調(diào)度算法。該算法以最大化平均鏈路帶寬利用率為優(yōu)化目標(biāo),將流調(diào)度問題抽象為整數(shù)線性規(guī)劃模型,通過重定義蟻群算法中的信息素更新方式對大流的重路由路徑進(jìn)行求解。仿真實(shí)驗(yàn)表明,該算法與傳統(tǒng)的經(jīng)典流調(diào)度算法和基于蟻群算法的流調(diào)度策略相比,能夠更有效地提升網(wǎng)絡(luò)平均對分帶寬,同時(shí)降低網(wǎng)絡(luò)傳輸時(shí)延和丟包率,充分利用網(wǎng)絡(luò)資源。

    關(guān)鍵詞:軟件定義網(wǎng)絡(luò);流調(diào)度;數(shù)據(jù)中心網(wǎng)絡(luò);蟻群算法;信息素

    DOI:10.15938/j.jhust.2022.01.001

    中圖分類號: TP391.4? ? 文獻(xiàn)標(biāo)志碼: A? ? 文章編號: 1007-2683(2022)01-0001-07

    Improved Ant Colony Algorithm for Network Flow

    Scheduling in SDN Data Center

    ZHU Suxia,LONG Yifei,SUN Guanglu,LI Chunfeng

    (School of Computer Science and Technology, Harbin University of Science and Technology, Harbin 150080, China)

    Abstract:At present, in the software defined data center network, the flow scheduling strategy based on ant colony algorithm has the disadvantages of too slow convergence and search stagnation in path selection, which easily leads to the problems of excessively high data center network delay and low resource utilization. Therefore, this paper proposes an improved flow scheduling algorithm based on ant colony. In this algorithm, the flow scheduling problem is abstracted as an integer linear programming model to maximize the average link bandwidth utilization, and the reroute path is solved by redefining pheromone updating mode in ant colony algorithm. The simulation results show that this algorithm can effectively improve the average bandwidth of the network, reduce the transmission delay and packet loss rate, and make full use of the network resources, compared with the traditional classical flow scheduling algorithm and the flow scheduling strategy based on ant colony algorithm.

    Keywords:software defined network; flow scheduling; data center network; ant colony algorithm; pheromone

    0引言

    隨著互聯(lián)網(wǎng)業(yè)務(wù)的不斷擴(kuò)展,數(shù)據(jù)中心作為其內(nèi)容的承載體,承載著巨大的網(wǎng)絡(luò)流量,對帶寬的需求日益攀升。由于傳統(tǒng)的網(wǎng)絡(luò)拓?fù)錈o法滿足其對帶寬的需求[1],為此,諸如FatTree[2]、DCell[3]、PortLand[4]等新型數(shù)據(jù)中心網(wǎng)絡(luò)拓?fù)湎嗬^被提出。其中,F(xiàn)atTree網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)在當(dāng)今應(yīng)用尤為廣泛。另外,通過對數(shù)據(jù)中心網(wǎng)絡(luò)流量特征的研究,Benson等人發(fā)現(xiàn)在數(shù)據(jù)中心網(wǎng)絡(luò)里大流數(shù)量占比雖然不足網(wǎng)絡(luò)流總數(shù)量的10%,但其卻占了網(wǎng)絡(luò)流量總帶寬的80%[5]。由此可以得出大流是影響數(shù)據(jù)中心網(wǎng)絡(luò)性能的主要因素。因此,如何對網(wǎng)絡(luò)中的大流進(jìn)行合理又高效的路由不僅是保障數(shù)據(jù)中心內(nèi)各類應(yīng)用服務(wù)質(zhì)量的前提,也是當(dāng)今數(shù)據(jù)中心流量調(diào)度領(lǐng)域研究的熱點(diǎn)問題[6]。

    傳統(tǒng)網(wǎng)絡(luò)在配置和管理等方面缺乏靈活性,無法適應(yīng)現(xiàn)代化數(shù)據(jù)中心發(fā)展的需求。針對這一問題,新興的網(wǎng)絡(luò)體系架構(gòu)—軟件定義網(wǎng)絡(luò)(software defined network,SDN)應(yīng)運(yùn)而生[7],它將網(wǎng)絡(luò)數(shù)據(jù)的控制和轉(zhuǎn)發(fā)進(jìn)行解耦,使其具有集中式架構(gòu)的特性,能夠從全局的角度更加靈活地對網(wǎng)絡(luò)流量進(jìn)行調(diào)度。雖然SDN架構(gòu)相比傳統(tǒng)網(wǎng)絡(luò)架構(gòu)在流量調(diào)度方面具有很大優(yōu)勢,但其仍然存在流量負(fù)載分配不合理的問題,無法充分利用網(wǎng)絡(luò)資源[8]。

    蟻群算法作為一種啟發(fā)式算法,已被廣泛應(yīng)用于離散域路徑規(guī)劃中的網(wǎng)絡(luò)路由問題及其他應(yīng)用場合[9-11]。目前已有的基于蟻群的流調(diào)度算法在對鏈路信息素更新時(shí),沒有明顯差異化地更新鏈路信息素。這不僅會(huì)致使算法收斂速度過慢,導(dǎo)致網(wǎng)絡(luò)傳輸時(shí)延過高,而且也無法很好地解決路徑搜索產(chǎn)生的停滯問題。為此,本文針對鏈路信息素更新規(guī)則進(jìn)行改進(jìn),提出了一種基于蟻群改進(jìn)的流調(diào)度算法(ant colony improvement flow scheduling,ACIFS)。

    本文的主要貢獻(xiàn)如下:

    1)根據(jù)網(wǎng)絡(luò)鏈路負(fù)載,差異化地初始全網(wǎng)鏈路信息素,使得空閑鏈路獲得更高的信息素初值,從而有效地降低蟻群算法在初期對鏈路選擇的隨機(jī)性,使其更加偏向于選擇負(fù)載更低的鏈路。

    2)針對鏈路信息素?fù)]發(fā)系數(shù),設(shè)計(jì)了一種階段性信息素?fù)]發(fā)系數(shù)。在迭代初期,其值相對較大,以提高螞蟻初期對新路徑的探索能力,隨著迭代次數(shù)的增加,逐漸降低其值,進(jìn)而改善算法的收斂速度。

    3)針對鏈路信息素更新規(guī)則,結(jié)合獎(jiǎng)懲制度,提出了一種最優(yōu)最差全局信息素更新規(guī)則。僅對本輪迭代最優(yōu)和最差路徑上的鏈路信息素進(jìn)行額外的“獎(jiǎng)勵(lì)”和“懲罰”,淘汰較差路徑的同時(shí)突出較優(yōu)路徑。

    1相關(guān)工作

    針對數(shù)據(jù)中心網(wǎng)絡(luò)的流量調(diào)度問題,目前主流方法主要分為確定性方法和非確定性方法兩大類[12]。確定性方法針對特定的輸入產(chǎn)生相同的輸出,非確定性方法對于相同的輸入可能會(huì)有不同的輸出。

    在確定性算法中,傳統(tǒng)的等價(jià)多路徑算法(equalcost multipath,ECMP)[13]是將多條數(shù)據(jù)流按照靜態(tài)散列的方式分配到多條等價(jià)路徑上,這可能導(dǎo)致多條大流被分到同一路徑,進(jìn)而引發(fā)碰撞,造成網(wǎng)絡(luò)擁塞。Li J等[14]是利用多屬性綜合模糊評估機(jī)制,提出了模糊綜合評估算法(fuzzy synthetic evaluation mechanism,F(xiàn)SEM),通過對候選路徑上各屬性值的加權(quán)評估,選擇最優(yōu)路徑對流量進(jìn)行路由。然而當(dāng)流量過大導(dǎo)致?lián)砣?,該算法并沒有解決辦法。Yang X 等[15]提出了一種基于 KDijkstra的負(fù)載均衡算法。該算法先是利用KDijkstra算法計(jì)算出主機(jī)間若干條備選路徑,之后則通過高響應(yīng)率優(yōu)先算法(high response ratio first,HRRF)在備選路徑中選出最佳路徑作為流調(diào)度路徑。雖然這樣可以提高網(wǎng)絡(luò)流量傳輸效率,但總體鏈路利用率偏低。

    在非確定性算法中,AlFares M等[16]針對數(shù)據(jù)中心網(wǎng)絡(luò)流調(diào)度問題提出了Hedera動(dòng)態(tài)流量調(diào)度系統(tǒng)。其中,提出的全局最先匹配算法(global first fit,GFF)雖然將大流調(diào)度到滿足其需求的路徑上,緩解了網(wǎng)絡(luò)擁塞,但由于其是采用貪心的思想對路徑進(jìn)行選擇,因此所選路徑可能不是全局最優(yōu)路徑。Wang C等[17]提出了一種基于蟻群優(yōu)化的鏈路負(fù)載均衡算法(link load balancing ant colony optimization,LLBACO),該算法針對蟻群優(yōu)化算法的路徑搜索規(guī)則,將鏈路負(fù)載、時(shí)延和丟包率作為影響螞蟻選擇下一節(jié)點(diǎn)的因素,讓螞蟻選擇最寬和最短的路徑,雖然算法能夠有效地平衡網(wǎng)絡(luò)鏈路負(fù)載,但收斂速度過慢。曲樺等[18]提出了一種基于蟻群優(yōu)化的負(fù)載均衡算法(ant colony optimizationbased load balancing,LBACO)。該算法對所有到達(dá)目的節(jié)點(diǎn)的螞蟻進(jìn)行信息素更新,雖然加快了算法的收斂速度,但是會(huì)導(dǎo)致路徑搜索的停滯,使其陷入局部最優(yōu)。Xue H等[19]提出了一種基于遺傳蟻群優(yōu)化的動(dòng)態(tài)負(fù)載均衡算法(geneticant colony optimization,GACO)。該算法將遺傳算法和蟻群算法進(jìn)行了融合,在蟻群算法生成的路徑基礎(chǔ)上,利用遺傳算法中的交叉和變異操作產(chǎn)生新的路徑,有效地?cái)U(kuò)大了路徑的搜索范圍,避免了搜索的停滯,但是相應(yīng)地存在一個(gè)問題就是產(chǎn)生的新路徑可能并不存在。

    2ACIFS算法設(shè)計(jì)

    2.1流調(diào)度處理流程

    本文對進(jìn)入數(shù)據(jù)中心的網(wǎng)絡(luò)流量默認(rèn)采用ECMP的方式進(jìn)行路由。根據(jù)全網(wǎng)狀態(tài)信息,計(jì)算當(dāng)前全網(wǎng)負(fù)載均衡度,并判斷其是否大于指定閾值,若小于,則說明當(dāng)前網(wǎng)絡(luò)處于相對均衡狀態(tài),無需采取任何措施,否則,采用ACIFS算法對流經(jīng)邊緣交換機(jī)的大流進(jìn)行重調(diào)度。

    2.2流調(diào)度問題數(shù)學(xué)建模

    流調(diào)度問題實(shí)質(zhì)是根據(jù)路徑信息選擇合適的路徑將流從源節(jié)點(diǎn)調(diào)度到目的節(jié)點(diǎn)。本文將流調(diào)度問題抽象化為整數(shù)線性規(guī)劃模型進(jìn)行求解。問題的具體建模描述如下:

    對于經(jīng)典的FatTree數(shù)據(jù)中心網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu),可以將其抽象為一個(gè)有向圖G=(H∪S,E)。其中,H與S分別代表主機(jī)節(jié)點(diǎn)集合和交換機(jī)節(jié)點(diǎn)集合,E則代表鏈路集合。網(wǎng)絡(luò)中共有m條鏈路,其中,鏈路可表示為lij,i,j∈H∪S,另外,定義鏈路的最大負(fù)載為Cij。網(wǎng)絡(luò)中共有n條流,流的集合可以表示為F={f1,f2,…,fn},定義其中一條流fk為一個(gè)三元組(sk,dk,bk),k∈{1,2,…,n},sk∈H表示源主機(jī)節(jié)點(diǎn),dk∈H表示目的主機(jī)節(jié)點(diǎn),bk表示流fk的所占帶寬。

    本文的優(yōu)化目標(biāo)是最大化平均鏈路帶寬利用率,即在避免網(wǎng)絡(luò)擁塞的同時(shí)將網(wǎng)絡(luò)資源利用率最大化。對目標(biāo)函數(shù)的具體定義如式(1)所示:

    Max∑{(i,j)∈E}(∑1≤k≤nbkij/Cij)m(1)

    其中:∑1≤k≤nbkij表示鏈路lij的實(shí)際負(fù)載;bkij表示流fk在鏈路lij上實(shí)際占用帶寬。

    其約束條件如下:

    ∑1≤k≤nbkij≤Cij,(i,j)∈E(2)

    0≤bkij≤Cij,i,j∈H∪S,k∈{1,2,…,n}(3)

    ∑{j:(sk,j)∈E}bkskj-∑{j:(j,sk)∈E}bkjsk=bk,k=1,2,…,n(4)

    ∑{j:(dk,j)∈E}bkdkj-∑{j:(j,dk)∈E}bkjdk=-bk,k=1,2,…,n(5)

    ∑{j:(i,j)∈E,i≠sk,dk}bkij=∑{j:(j,i)∈E,i≠sk,dk}bkji,k=1,2,…,n(6)

    式(2)代表流容量約束,即任意一條鏈路上的總流量應(yīng)小于等于鏈路容量。式(3)代表流所占帶寬約束,即流fk的所占帶寬應(yīng)大于等于0,不能為負(fù)值,且小于鏈路容量。式(4)~(6)定義了流守恒約束,表示流fk從源主機(jī)流出到流入目的主機(jī)期間途經(jīng)的任意節(jié)點(diǎn)流入和流出的流量相等。

    在對流調(diào)度問題建模后,本文將其映射到蟻群算法中,為獲得具體大流調(diào)度方案,這里采用ACIFS算法對上述模型進(jìn)行求解。

    2.3全網(wǎng)負(fù)載均衡度的設(shè)定

    在網(wǎng)絡(luò)流量處于高峰期時(shí),為避免因網(wǎng)絡(luò)擁塞而導(dǎo)致的鏈路負(fù)載不均。本文為此設(shè)定一個(gè)全網(wǎng)負(fù)載均衡度δ,用于判斷當(dāng)前網(wǎng)絡(luò)是否處于負(fù)載均衡狀態(tài)。這里引用數(shù)學(xué)中的標(biāo)準(zhǔn)差概念,使用離散程度反應(yīng)均衡度,同時(shí)為避免其因短期的極值而導(dǎo)致不必要的重路由,本文采用一段時(shí)間內(nèi)的均值作為其結(jié)果,以消除短時(shí)間內(nèi)網(wǎng)絡(luò)波動(dòng)產(chǎn)生的影響。具體全網(wǎng)負(fù)載均衡度定義如式(7)所示:

    δ(t)=1P∑Tt=T-P1m∑ml=1(load(t)-loadl(t))2(7)

    其中:P代表統(tǒng)計(jì)周期;T代表當(dāng)前時(shí)間;load(t)表示在t時(shí)刻所有的鏈路平均負(fù)載;loadl(t)表示在t時(shí)刻鏈路l的實(shí)時(shí)負(fù)載。

    針對全網(wǎng)負(fù)載均衡度,這里設(shè)置一個(gè)閾值δ*用來衡量當(dāng)前網(wǎng)絡(luò)負(fù)載情況。其中δ*的值通過實(shí)驗(yàn)來確定。

    2.4ACIFS大流調(diào)度算法

    蟻群算法作為一種啟發(fā)式算法[9],被廣泛應(yīng)用于路徑尋優(yōu)問題,其核心思想是根據(jù)蟻群在覓食過程中釋放在路徑上的信息素去引導(dǎo)其找到最優(yōu)路徑。本文利用蟻群算法的思想對上述模型進(jìn)行求解。將螞蟻經(jīng)過的路徑轉(zhuǎn)化為大流調(diào)度的可行解,相應(yīng)整個(gè)蟻群所組成的路徑集合即為大流調(diào)度的解空間。其中,引導(dǎo)螞蟻選擇路徑的啟發(fā)信息可以抽象為網(wǎng)絡(luò)狀態(tài)信息,隨著迭代次數(shù)的增加,路徑越優(yōu)信息素含量就越高。最終,在正反饋的作用下整個(gè)蟻群將收斂到最優(yōu)路徑上,即此時(shí)得到的路徑為大流調(diào)度的最優(yōu)路徑。

    本文提出的ACIFS算法對蟻群算法的信息素更新方式還有相關(guān)參數(shù)進(jìn)行了重定義,算法具體執(zhí)行步驟如下:

    1)為了避免ACO算法中初期鏈路信息素的匱乏,這里根據(jù)鏈路負(fù)載情況,對全網(wǎng)鏈路信息素進(jìn)行差異化初始。具體方法如下:首先,將所有鏈路按照負(fù)載進(jìn)行升序排列;然后,將負(fù)載最低的前20%鏈路信息素初始化為τmax;最后,將剩余的鏈路信息素初始化為0.8τmax。這樣可以在搜索初期,有效減輕螞蟻搜索的盲目性,使其更加傾向于選擇空閑的鏈路。

    2)設(shè)定算法最大迭代次數(shù)為Imax,螞蟻尋找目的節(jié)點(diǎn)最多途經(jīng)跳數(shù)為Nmax,螞蟻數(shù)量為x,同時(shí)將所有螞蟻放置在源節(jié)點(diǎn)。其中,對于每只螞蟻Ak(k=1,2,…,x)都有一個(gè)禁忌表,避免其重復(fù)訪問同一個(gè)節(jié)點(diǎn)。

    3)在規(guī)定跳數(shù)Nmax內(nèi),螞蟻Ak根據(jù)轉(zhuǎn)移概率Pkij選擇下一跳交換機(jī)節(jié)點(diǎn)。具體轉(zhuǎn)移概率如式(8)所示:

    Pkij=[τij(t)]α·[ηij(t)]β∑z∈allowedk[τiz(t)]α·[ηiz(t)]βj∈allowedk

    0others(8)

    其中:Pkij表示螞蟻Ak從節(jié)點(diǎn)i轉(zhuǎn)移到節(jié)點(diǎn)j的概率;α代表信息素的重要程度;β代表啟發(fā)信息的重要程度;τij(t)表示在t時(shí)刻鏈路lij上的信息素含量。ηij(t)為啟發(fā)函數(shù),表示在t時(shí)刻鏈路lij上的啟發(fā)信息,具體計(jì)算方式如式(9)所示:

    ηij(t)=1∑1≤k≤nbkij(t)(9)

    其中∑1≤k≤nbkij(t)表示在t時(shí)刻鏈路lij的實(shí)際負(fù)載。鏈路負(fù)載越低時(shí),被選擇的概率就越高。

    4)當(dāng)所有螞蟻都完成一次迭代后,采用最優(yōu)最差全局信息素更新規(guī)則對鏈路信息素進(jìn)行更新。相比ACO算法中對所有到達(dá)目的節(jié)點(diǎn)的螞蟻所經(jīng)過路徑上的信息素進(jìn)行更新,這里則通過進(jìn)一步沉積信息素的方式獎(jiǎng)勵(lì)最優(yōu)路徑,進(jìn)一步揮發(fā)信息素的方式懲罰最差路徑。這樣有利于更快地排除相對較差的路徑,同時(shí)突出較好的路徑,進(jìn)而提高算法的收斂速度,具體最優(yōu)最差全局信息素更新規(guī)則如式(10)所示:

    τgbij(t+1)=(1-ρphase)·τij(t)+Δτij(t)(10)

    其中:τgbij(t+1)表示本輪迭代后鏈路lij上的信息素含量;ρphase為階段性信息素?fù)]發(fā)系數(shù),具體計(jì)算方式如式(11)所示。

    ρphase=0.5if Icur<0.3Imax and pcur=pall

    0.4others

    0.3if Icur>0.7Imax(11)

    其中:Icur代表算法當(dāng)前迭代次數(shù);pcur代表本輪迭代最優(yōu)路徑;pall代表至今為止最優(yōu)路徑。Δτij(t)表示本輪迭代鏈路lij上的信息素增量,具體計(jì)算方式如式(12)和(13)所示。

    Δτij(t)=∑xk=1Δτkij(t)(12)

    Δτkij(t)=1/LbestAk is best ant

    1/Lworst-1/LbestAk is worst ant

    0others(13)

    其中:Δτkij(t)表示螞蟻Ak在迭代過程中釋放在鏈路lij上的信息素;Lbest和Lworst則分別表示在本輪迭代成功到達(dá)目的節(jié)點(diǎn)的最優(yōu)和最差螞蟻所經(jīng)過的路徑長度,即交換機(jī)節(jié)點(diǎn)間跳數(shù)。其中,源節(jié)點(diǎn)和目的節(jié)點(diǎn)間跳數(shù)越少,其所經(jīng)過路徑上的信息素沉積量就越大,這有利于螞蟻選擇更短的路徑,從而降低網(wǎng)絡(luò)的傳輸時(shí)延。

    其次,這里采用對本輪迭代最優(yōu)和最差路徑進(jìn)行更新。由于每輪迭代的結(jié)果可能不同,這使得更多路徑上的信息素將會(huì)得到沉積,從而可以有效地防止搜索過早地陷入局部最優(yōu)。

    此外,就階段性信息素?fù)]發(fā)系數(shù)而言,初期其值偏高,有利于螞蟻對路徑進(jìn)行更加全面地搜索。隨著迭代次數(shù)的增加,其值逐漸降低,可以讓螞蟻漸進(jìn)地匯集到最優(yōu)路徑上,從而避免算法過早或過晚的收斂。另外,當(dāng)本輪迭代最優(yōu)路徑和至今為止迭代最優(yōu)路徑相同時(shí),則說明算法已有收斂趨勢。如果該現(xiàn)象發(fā)生在算法初期,則說明其過早地陷入了局部最優(yōu),理應(yīng)保持其相對較高的揮發(fā)值。

    5)當(dāng)算法到達(dá)指定迭代次數(shù)Imax時(shí),則根據(jù)優(yōu)化目標(biāo)選出最優(yōu)路徑,并將其作為大流調(diào)度的最終路由方案。

    在算法執(zhí)行期間,ACO算法中節(jié)點(diǎn)間鏈路信息素會(huì)隨迭代次數(shù)的增加差值越來越大,容易導(dǎo)致路徑搜索過早停滯,從而錯(cuò)過更優(yōu)的路徑。本文為避免上述現(xiàn)象的發(fā)生,將鏈路信息素范圍限制在一定區(qū)間內(nèi),即τij∈[τmin,τmax],τmax>τmin>0。其中,當(dāng)信息素在更新過程中大于τmax時(shí),則將其設(shè)置為τmax,反之,當(dāng)信息素在更新過程中小于τmin時(shí),則將其設(shè)置為τmin。其中,τmin代表信息素的下限值,τmax代表信息素的上限值。

    3仿真與結(jié)果分析

    為了驗(yàn)證本文所提出的ACIFS算法性能,這里采用平均對分帶寬和端到端的往返時(shí)延,還有丟包率作為算法性能評價(jià)指標(biāo),在FatTree網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)下進(jìn)行實(shí)驗(yàn)測試。為進(jìn)一步展現(xiàn)ACIFS算法的優(yōu)勢,本文將對比在目前數(shù)據(jù)中心中應(yīng)用廣泛的ECMP算法[13]和基于GFF算法的Hedera動(dòng)態(tài)流量調(diào)度系統(tǒng)[16],還有基于蟻群算法[9]的流調(diào)度策略。

    3.1仿真環(huán)境參數(shù)設(shè)置

    1.3.1網(wǎng)絡(luò)環(huán)境

    本實(shí)驗(yàn)采用Mininet[20]網(wǎng)絡(luò)仿真工具來模擬真實(shí)數(shù)據(jù)中心網(wǎng)絡(luò)環(huán)境。實(shí)驗(yàn)拓?fù)洳捎胟=4的FatTree網(wǎng)絡(luò)拓?fù)?,具體如圖1所示。

    其中,內(nèi)部的虛擬交換機(jī)采用支持OpenFlow協(xié)議的OpenvSwitch。相關(guān)網(wǎng)絡(luò)環(huán)境參數(shù)如表1所示。

    1.3.2控制器

    本實(shí)驗(yàn)采用開源的Ryu[21]控制器,并在上面實(shí)現(xiàn)了ACIFS等算法原型。其中,ACIFS算法的參數(shù)設(shè)定將直接影響其性能。為此,本文針對流調(diào)度問題的模型約束進(jìn)行大量的仿真實(shí)驗(yàn),通過對實(shí)驗(yàn)結(jié)果的研究進(jìn)行算法的參數(shù)設(shè)置。具體ACIFS算法的參數(shù)如表2所示。

    1.3.3通信模式

    關(guān)于虛擬主機(jī)之間通信模式,本文采用隨機(jī)通信模式和交錯(cuò)通信模式。其中,在隨機(jī)通信模式Random里,網(wǎng)絡(luò)中虛擬主機(jī)之間以相等的概率進(jìn)行隨機(jī)通信,在交錯(cuò)通信模式Staggered(pEdge,pPod)里,pEdge表示同一邊緣交換機(jī)內(nèi)主機(jī)間通信概率,而pPod則表示同一Pod內(nèi)不同子網(wǎng)主機(jī)之間通信概率,相應(yīng)不同Pod間主機(jī)通信概率為1pEdgepPod。

    為了公平起見,本實(shí)驗(yàn)針對交錯(cuò)通信模式采用具有不同特點(diǎn)的兩種流量模型,分別為Staggered(0.4,0.4)、Staggered(0.2,0.4)。這里使用Iperf工具生成相應(yīng)流量模型,同時(shí)對每組流量模型重復(fù)測試10次,每次測試運(yùn)行時(shí)間為60s。另外,測試期間使用bwmng工具對網(wǎng)絡(luò)帶寬進(jìn)行監(jiān)測,對每組流量模型測試結(jié)果取平均值作為最終實(shí)驗(yàn)結(jié)果。

    3.2算法性能分析

    針對平均對分帶寬,具體實(shí)驗(yàn)結(jié)果對比如圖2所示。從圖中可以明顯發(fā)現(xiàn),無論在哪種流量模型下,ACIFS算法在平均對分帶寬上都高于ECMP和GFF,還有ACO算法。其中,在Random流量模型下,ACIFS算法較ECMP提高了約27%,較GFF提高了約20%,較ACO提高了約13%。在Staggered(0.2,0.4)流量模型下,ACIFS算法較ECMP提高了約35%,較GFF提高了約16%,較ACO提高了約10%。在Staggered(0.4,0.4)流量模型下,ACIFS算法較ECMP提高了約6%,較GFF提高了約4%,較ACO提高了約3%。

    針對包的平均往返時(shí)延,具體實(shí)驗(yàn)結(jié)果對比如圖3所示。從圖中不難發(fā)現(xiàn),不管在哪種流量模型下,ACIFS算法在網(wǎng)絡(luò)數(shù)據(jù)包的平均往返時(shí)延上都優(yōu)于ECMP和GFF,還有ACO算法。其中,在Random流量模型下,ACIFS算法較ECMP降低了約45%,較GFF降低了約39%,較ACO降低了約18%。在Staggered(0.2,0.4)流量模型下,ACIFS算法較ECMP降低了約49%,較GFF降低了約41%,較ACO降低了約19%。在Staggered(0.4,0.4)流量模型下,ACIFS算法較ECMP降低了約36%,較GFF降低了約32%,較ACO降低了約27%。

    針對丟包率,具體實(shí)驗(yàn)結(jié)果對比如圖4所示。從圖中各算法在不同流量模型下的丟包率可以看出,在任何流量模型下,ACIFS算法在丟包率上都低于ECMP和GFF,還有ACO算法。其中,在Random流量模型下,ACIFS算法較ECMP降低了約47%,較GFF降低了約28%,較ACO降低了約14%。在Staggered(0.2,0.4)流量模型下,ACIFS算法較ECMP降低了約66%,較GFF降低了約43%,較ACO降低了約24%。在Staggered(0.4,0.4)流量模型下,ACIFS算法較ECMP降低了約46%,較GFF降低了約41%,較ACO降低了約29%。

    綜上所述,總體來看,Random流量模型下的網(wǎng)絡(luò)整體性能介于Staggered(0.2,0.4)和Staggered(0.4,0.4)流量模型中間。當(dāng)Pod內(nèi)相同子網(wǎng)流量占比較高時(shí),由于跨Pod通信的大流數(shù)量相對較少,這導(dǎo)致大流發(fā)生沖突的概率較低。因此,Staggered(0.4,0.4)流量模型相對其它流量模型總體平均對分帶寬偏高,同時(shí),包平均往返時(shí)延和丟包率偏低。另外,由于大流沖突相對較少,所以ACIFS算法在平均對分帶寬方面相對其它算法沒有很明顯的提升。但隨著跨Pod間流量占比的提高,越來越多的大流在Pod間通信,因此,大流調(diào)度方案的不同將很大程度地影響網(wǎng)絡(luò)的整體性能。

    其中,由于ECMP算法沒有考慮當(dāng)前網(wǎng)絡(luò)狀態(tài),僅采用散列的方式對流量進(jìn)行調(diào)度,這將導(dǎo)致多條大流被分配到同一路徑上,從而引發(fā)嚴(yán)重的網(wǎng)絡(luò)擁塞。GFF算法雖然根據(jù)當(dāng)前網(wǎng)絡(luò)鏈路帶寬,將大流調(diào)度到第一條滿足其帶寬需求的路徑上,有效緩解了網(wǎng)絡(luò)擁塞,但其考慮因素過于單一,可能錯(cuò)過更優(yōu)的路徑。ACO算法則根據(jù)各種網(wǎng)絡(luò)狀態(tài)信息,利用螞蟻并行搜索對大流調(diào)度路徑進(jìn)行求解,進(jìn)一步減輕了網(wǎng)絡(luò)擁塞。ACIFS算法在ACO算法的基礎(chǔ)上通過改進(jìn)信息素的更新方式,不僅提高了算法的收斂速度,使螞蟻可以更快地找到較優(yōu)路徑,同時(shí)也防止了其錯(cuò)失其它更好路徑,進(jìn)而獲得了相對更佳的調(diào)度方案。實(shí)驗(yàn)結(jié)果表明,ACIFS算法相對其它算法在提升網(wǎng)絡(luò)吞吐量的同時(shí)很大程度地降低了網(wǎng)絡(luò)傳輸時(shí)延和丟包率。

    針對平均鏈路帶寬利用率,具體實(shí)驗(yàn)對比結(jié)果如圖5所示。從圖中可以看出,隨著模擬時(shí)間的增加,網(wǎng)絡(luò)中鏈路帶寬利用率也在不斷地增長。其中,在25s之前,鏈路帶寬利用率增長較快。這是由于初期網(wǎng)絡(luò)流量剛進(jìn)入網(wǎng)絡(luò),僅僅占用了網(wǎng)絡(luò)中一部分鏈路帶寬。但隨著時(shí)間的推移,流量將快速填充網(wǎng)絡(luò)中剩余的鏈路帶寬,期間流沖突相對較少,所以算法之間性能差距不明顯。而在25s以后,網(wǎng)絡(luò)中流量趨于穩(wěn)定。其中,ECMP算法由于沒有對流量進(jìn)行重調(diào)度,所以在流量穩(wěn)定后其鏈路帶寬利用率保持不變。GFF算法在30s到35s和55s到60s期間沒有對大流進(jìn)行重調(diào)度致使鏈路帶寬利用率沒有改變,這是因?yàn)樵谶@段時(shí)間內(nèi)沒有滿足大流帶寬需求的鏈路。另外,ACIFS算法和ACO算法的鏈路帶寬利用率增長趨勢相近,但由于ACIFS算法彌補(bǔ)了ACO算法在大流調(diào)度方面的缺陷,所以其增長幅度較ACO算法相對偏大。

    4結(jié)語

    本文針對基于蟻群的流調(diào)度算法容易導(dǎo)致網(wǎng)絡(luò)傳輸時(shí)延過高和網(wǎng)絡(luò)資源利用率低等問題,提出了ACIFS算法。利用差異化、獎(jiǎng)懲、限制三種策略對ACO算法中信息素的處理模式進(jìn)行改進(jìn),并將其應(yīng)用到流調(diào)度問題中進(jìn)行求解,從而得出大流調(diào)度方案。通過對比ECMP和GFF,還有ACO算法的實(shí)驗(yàn)結(jié)果,驗(yàn)證了本文所提出的ACIFS算法通過對大流的合理調(diào)度,不僅獲得了在平均對分帶寬上的提升,而且還有效地降低了網(wǎng)絡(luò)傳輸時(shí)延和丟包率,全面提高了網(wǎng)絡(luò)性能。

    參 考 文 獻(xiàn):

    [1]HAMMADI A, MHAMDI L. A Survey on Architectures and Energy Efficiency in Data Center Networks[J]. Computer Communications, 2014, 40: 1.

    [2]ALFARES M, LOUKISSAS A, VAHDAT A. A Scalable, Commodity Data Center Network Architecture[C]//ACM SIGCOMM Computer Communication Review. ACM, 2008, 38(4): 63.

    [3]GUO C, WU H, TAN K, et al. Dcell: A Scalable and Faulttolerant Network Structure for Data Centers[C]//ACM SIGCOMM Computer Communication Review. ACM, 2008, 38(4): 75.

    [4]NIRANJAN MYSORE R, PAMBORIS A, FARRINGTON N, et al. Portland: A Scalable Faulttolerant Layer 2 Data Center Network Fabric[C]//ACM SIGCOMM Computer Communication Review. ACM, 2009, 39(4): 39.

    [5]BENSON T, AKELLA A, MALTZ D A. Network Traffic Characteristics of Data Centers in the Wild[C]//Proceedings of the 10th ACM SIGCOMM conference on Internet Measurement. ACM, 2010: 267.

    [6]GREENBERG A, HAMILTON J, MALTZ D A, et al. The Cost of a Cloud: Research Problems in Data Center Networks[J]. ACM SIGCOMM Computer Communication Review, 2008, 39(1): 68.

    [7]MCKEOWN N, ANDERSON T, BALAKRISHNAN H, et al. OpenFlow: Enabling Innovation in Campus Networks[J]. ACM SIGCOMM Computer Communication Review, 2008, 38(2): 69.

    [8]KREUTZ D, RAMOS F, VERISSIMO P. Towards Secure and Dependable Softwaredefined Networks[C]//Proceedings of the Second ACM SIGCOMM Workshop on Hot Topics in Software Defined Networking. ACM, 2013: 55.

    [9]DORIGO M, STTZLE T. Ant Colony Optimization: Overview and Recent Advances[M]//Handbook of Metaheuristics. Springer, Cham, 2019: 311.

    [10]孟慶巖,王晶晶. 基于蟻群算法的分區(qū)揀貨法的改進(jìn)與實(shí)例研究[J]. 電子設(shè)計(jì)工程, 2021, 29(11):44.

    MENG Qingyan,WANG Jingjing. The Improvement and Case Study of the Partition Picking Method Based on Ant Colony Algorithm[J]. Electronic Design Engineering, 2021, 29(11):44.

    [11]胡治鋒, 陳冬方, 李慶奎, 等. 基于模擬退火蟻群算法的揀貨路徑規(guī)劃[J]. 電子設(shè)計(jì)工程, 2021, 29(24):80.

    HU Zhifeng, CHEN Dongfang, LI Qingkui, et al. Picking Path Planning Based on Simulated Annealing Ant Colony Algorithm[J]. Electronic Design Engineering, 2021, 29(24):80.

    [12]NEGHABI A A, NAVIMIPOUR N J, HOSSEINZADEH M, et al. Load Balancing Mechanisms in the Software Defined Networks: a Systematic and Comprehensive Review of the Literature[J]. IEEE Access, 2018, 6: 14159.

    [13]HOPPS C. Analysis of An Equalcost Multipath Algorithm[S]. RFC2992, IETF, 2000.

    [14]LI J, CHANG X, REN Y, et al. An Effective Path Load Balancing Mechanism Based on SDN[C]// Trust, Security and Privacy in Computing and Communications (TrustCom), 2014 IEEE 13th International Conference on. IEEE, 2014: 527.

    [15]YANG X, WANG L. SDN Load Balancing Method Based on KDijkstra[J].International Journal of Performability Engineering, 2018, 14(4).

    [16]ALFARES M, RADHAKRISHNAN S, RAGHAVAN B, et al. Hedera: Dynamic Flow Scheduling for Data Center Networks[C]//Nsdi. 2010, 10(8): 89.

    [17]WANG C, ZHANG G, XU H, et al. An ACObased Link Loadbalancing Algorithm in SDN[C]//2016 7th International Conference on Cloud Computing and Big Data (CCBD). IEEE, 2016: 214.

    [18]曲樺,趙季紅,樊斌,等.軟件定義網(wǎng)絡(luò)中應(yīng)用蟻群優(yōu)化的負(fù)載均衡算法[J].北京郵電大學(xué)學(xué)報(bào),2017,40(3):51.

    QU Hua, ZHAO Jihong, FAN Bin, et al. Ant Colony Optimization for Load Balance in Software Defined Network[J]. Journal of Beijing University of Posts and Telecommunications, 2017,40(3):51.

    [19]XUE H, KIM K T, YOUN H Y. Dynamic Load Balancing of SoftwareDefined Networking Based on GeneticAnt Colony Optimization[J]. Sensors, 2019, 19(2): 311.

    [20]LANTZ B, HELLER B, MCKEOWN N. A Network in a Laptop: Rapid Prototyping for Softwaredefined Networks[C]//Proceedings of the 9th ACM SIGCOMM Workshop on Hot Topics in Networks. ACM, 2010: 19.

    [21]STANCU A L, HALUNGA S, VULPE A, et al. A Comparison Between Several Software Defined Networking Controllers[C]//Telecommunication in Modern Satellite, Cable and Broadcasting Services (TELSIKS), 2015 12th International Conference on. IEEE, 2015: 223.

    (編輯:王萍)

    猜你喜歡
    軟件定義網(wǎng)絡(luò)蟻群算法
    中國聯(lián)通SDN的思考和應(yīng)用實(shí)例
    業(yè)務(wù)功能鏈技術(shù)及其應(yīng)用探析
    針對大規(guī)模軟件定義網(wǎng)絡(luò)的子域劃分及控制器部署方法
    一種新的SDN架構(gòu)下端到端網(wǎng)絡(luò)主動(dòng)測量機(jī)制
    CVRP物流配送路徑優(yōu)化及應(yīng)用研究
    云計(jì)算中虛擬機(jī)放置多目標(biāo)優(yōu)化
    基于蟻群算法的一種無人機(jī)二維航跡規(guī)劃方法研究
    超高吞吐率Wi—Fi融合應(yīng)用新技術(shù)分析
    蟻群算法基本原理及綜述
    一種多項(xiàng)目調(diào)度的改進(jìn)蟻群算法研究
    科技視界(2016年18期)2016-11-03 00:32:24
    videossex国产| 亚洲av中文字字幕乱码综合| 美女cb高潮喷水在线观看| а√天堂www在线а√下载| 九色成人免费人妻av| 别揉我奶头~嗯~啊~动态视频| 91麻豆精品激情在线观看国产| 欧美+亚洲+日韩+国产| 波野结衣二区三区在线| 免费在线观看日本一区| 极品教师在线视频| 99久久精品国产国产毛片| 在线观看午夜福利视频| 变态另类丝袜制服| 男女做爰动态图高潮gif福利片| 久久香蕉精品热| 国产成人一区二区在线| 男人狂女人下面高潮的视频| 人妻少妇偷人精品九色| 啪啪无遮挡十八禁网站| 国产精品三级大全| 国产精品一及| 久久精品久久久久久噜噜老黄 | 最后的刺客免费高清国语| 少妇的逼好多水| 最新中文字幕久久久久| 日韩精品青青久久久久久| 国产一级毛片七仙女欲春2| 成年版毛片免费区| 欧美日本视频| 国产色婷婷99| 九九爱精品视频在线观看| 1024手机看黄色片| 嫁个100分男人电影在线观看| 国产男人的电影天堂91| 亚洲精品成人久久久久久| 又粗又爽又猛毛片免费看| av在线亚洲专区| 国产精品野战在线观看| 性欧美人与动物交配| 给我免费播放毛片高清在线观看| 夜夜爽天天搞| 亚洲av美国av| 久久这里只有精品中国| 久久久午夜欧美精品| 国产乱人视频| 看免费成人av毛片| 亚洲无线观看免费| 尾随美女入室| 少妇熟女aⅴ在线视频| 人人妻人人看人人澡| 久久草成人影院| 韩国av在线不卡| 能在线免费观看的黄片| 亚洲精品影视一区二区三区av| 两个人视频免费观看高清| 成人午夜高清在线视频| 一个人免费在线观看电影| 一区二区三区免费毛片| 欧美日韩乱码在线| 国产精品三级大全| 成年女人永久免费观看视频| 精品午夜福利在线看| 他把我摸到了高潮在线观看| 国内揄拍国产精品人妻在线| 欧美日韩精品成人综合77777| 国产高清激情床上av| 高清日韩中文字幕在线| 色综合亚洲欧美另类图片| 日韩精品有码人妻一区| 91av网一区二区| 亚洲成人中文字幕在线播放| 男女啪啪激烈高潮av片| 亚洲av二区三区四区| 亚洲精华国产精华液的使用体验 | 日本色播在线视频| 国产精品福利在线免费观看| 精品人妻偷拍中文字幕| 又粗又爽又猛毛片免费看| 成人毛片a级毛片在线播放| 999久久久精品免费观看国产| 九九在线视频观看精品| .国产精品久久| 久久精品国产亚洲av涩爱 | av中文乱码字幕在线| 变态另类成人亚洲欧美熟女| 亚洲成av人片在线播放无| 淫妇啪啪啪对白视频| 免费看日本二区| 亚洲人成伊人成综合网2020| 97热精品久久久久久| 亚洲精品久久国产高清桃花| 天天躁日日操中文字幕| 亚洲aⅴ乱码一区二区在线播放| 国产精品日韩av在线免费观看| 欧美性猛交╳xxx乱大交人| 俺也久久电影网| 好男人在线观看高清免费视频| 国产视频内射| 别揉我奶头 嗯啊视频| 国产色婷婷99| 黄色配什么色好看| ponron亚洲| 一级a爱片免费观看的视频| 久久久久久久久久黄片| 天美传媒精品一区二区| 久久久国产成人免费| 性欧美人与动物交配| 日本一本二区三区精品| h日本视频在线播放| 国产午夜精品久久久久久一区二区三区 | 校园春色视频在线观看| 亚洲中文字幕一区二区三区有码在线看| 欧美精品国产亚洲| 国产亚洲欧美98| 欧美不卡视频在线免费观看| 国产成人福利小说| 久久草成人影院| 亚洲精品一卡2卡三卡4卡5卡| 一进一出好大好爽视频| bbb黄色大片| 国产亚洲精品av在线| av国产免费在线观看| 精品久久久久久久久av| 国产真实乱freesex| 国产在线精品亚洲第一网站| 日本成人三级电影网站| 琪琪午夜伦伦电影理论片6080| 亚洲一区高清亚洲精品| 变态另类成人亚洲欧美熟女| 变态另类丝袜制服| 亚洲一区高清亚洲精品| 黄色日韩在线| 亚洲精品粉嫩美女一区| 女人被狂操c到高潮| 国产精品1区2区在线观看.| 五月玫瑰六月丁香| 久久久国产成人精品二区| 色综合色国产| 国产精品日韩av在线免费观看| 美女高潮的动态| 亚洲经典国产精华液单| 男女边吃奶边做爰视频| 99热这里只有精品一区| 一区二区三区高清视频在线| 日本a在线网址| 色尼玛亚洲综合影院| 精品一区二区三区视频在线观看免费| 俄罗斯特黄特色一大片| 国产又黄又爽又无遮挡在线| 婷婷精品国产亚洲av在线| 欧美激情在线99| 尤物成人国产欧美一区二区三区| 日韩精品青青久久久久久| 岛国在线免费视频观看| 国产大屁股一区二区在线视频| 亚洲成人久久性| 亚洲精品国产成人久久av| 成人亚洲精品av一区二区| 国产视频一区二区在线看| 国产国拍精品亚洲av在线观看| aaaaa片日本免费| 免费无遮挡裸体视频| 99热只有精品国产| 欧美中文日本在线观看视频| 午夜福利在线观看免费完整高清在 | 伦理电影大哥的女人| 免费电影在线观看免费观看| 国产精品久久久久久久久免| 亚洲成人久久性| 国产男人的电影天堂91| 亚洲成a人片在线一区二区| 欧美人与善性xxx| 成人国产麻豆网| 久久九九热精品免费| 国产伦精品一区二区三区四那| 2021天堂中文幕一二区在线观| 色精品久久人妻99蜜桃| 亚洲性久久影院| 草草在线视频免费看| 精品一区二区三区视频在线| 黄色日韩在线| 亚洲av日韩精品久久久久久密| 亚洲精品456在线播放app | 日韩 亚洲 欧美在线| 久久久久国产精品人妻aⅴ院| 亚洲精品色激情综合| 色视频www国产| 亚洲精品一卡2卡三卡4卡5卡| 男女边吃奶边做爰视频| 乱码一卡2卡4卡精品| av天堂在线播放| 啪啪无遮挡十八禁网站| 国产午夜精品论理片| 免费电影在线观看免费观看| 成熟少妇高潮喷水视频| 久久精品人妻少妇| 国产亚洲精品久久久com| 欧美+日韩+精品| 一进一出好大好爽视频| 桃色一区二区三区在线观看| 精品不卡国产一区二区三区| 我要搜黄色片| 成人一区二区视频在线观看| 国产91精品成人一区二区三区| 亚洲欧美激情综合另类| 亚洲第一区二区三区不卡| 制服丝袜大香蕉在线| 老师上课跳d突然被开到最大视频| 国产爱豆传媒在线观看| videossex国产| netflix在线观看网站| 国产91精品成人一区二区三区| 97超级碰碰碰精品色视频在线观看| 黄色日韩在线| 搡老妇女老女人老熟妇| 国产在线男女| 亚洲av免费在线观看| 色视频www国产| 动漫黄色视频在线观看| 久久亚洲真实| 日韩国内少妇激情av| 88av欧美| 色尼玛亚洲综合影院| av天堂在线播放| 午夜福利视频1000在线观看| 国产毛片a区久久久久| 亚洲国产欧美人成| 观看免费一级毛片| avwww免费| 午夜激情欧美在线| 免费观看在线日韩| 中国美女看黄片| 欧美高清成人免费视频www| 国产精品一及| 日本三级黄在线观看| 午夜免费成人在线视频| www.www免费av| 男人的好看免费观看在线视频| 99久久精品一区二区三区| 色噜噜av男人的天堂激情| 亚洲四区av| 久久精品国产亚洲av涩爱 | 午夜福利欧美成人| 成人鲁丝片一二三区免费| 一个人看的www免费观看视频| 国产av不卡久久| 特大巨黑吊av在线直播| 大型黄色视频在线免费观看| 春色校园在线视频观看| 黄色一级大片看看| 国产一区二区亚洲精品在线观看| 精品久久久噜噜| 亚洲精品日韩av片在线观看| 非洲黑人性xxxx精品又粗又长| 中文亚洲av片在线观看爽| 嫩草影院新地址| 免费人成在线观看视频色| 草草在线视频免费看| 日本黄色片子视频| 神马国产精品三级电影在线观看| 嫩草影院入口| 欧美不卡视频在线免费观看| 69人妻影院| 赤兔流量卡办理| 97超视频在线观看视频| 级片在线观看| 午夜a级毛片| 中文字幕精品亚洲无线码一区| 成人特级黄色片久久久久久久| 岛国在线免费视频观看| 两性午夜刺激爽爽歪歪视频在线观看| 综合色av麻豆| 波多野结衣巨乳人妻| 久久久久久久久久黄片| 在线播放国产精品三级| 日本 av在线| 欧美色欧美亚洲另类二区| 两个人的视频大全免费| 色播亚洲综合网| netflix在线观看网站| 国产亚洲91精品色在线| 国产大屁股一区二区在线视频| www日本黄色视频网| 51国产日韩欧美| 亚洲中文字幕日韩| 日韩高清综合在线| 黄色日韩在线| 毛片一级片免费看久久久久 | 他把我摸到了高潮在线观看| 欧美高清性xxxxhd video| 亚洲成人精品中文字幕电影| 99热6这里只有精品| 久久精品91蜜桃| 99国产精品一区二区蜜桃av| 搞女人的毛片| 亚洲熟妇中文字幕五十中出| 精品一区二区三区av网在线观看| 亚洲av.av天堂| 老司机午夜福利在线观看视频| 男人舔奶头视频| 国产淫片久久久久久久久| 中文亚洲av片在线观看爽| 亚洲黑人精品在线| 亚洲国产精品合色在线| 久久6这里有精品| av在线老鸭窝| 搡女人真爽免费视频火全软件 | 日本在线视频免费播放| 欧美bdsm另类| 亚洲久久久久久中文字幕| 精品人妻视频免费看| 久久久久性生活片| 此物有八面人人有两片| 很黄的视频免费| 22中文网久久字幕| 别揉我奶头~嗯~啊~动态视频| 日本黄色视频三级网站网址| 免费观看的影片在线观看| 麻豆成人av在线观看| 69av精品久久久久久| 91狼人影院| 亚洲无线在线观看| 亚洲午夜理论影院| a级毛片a级免费在线| 日韩大尺度精品在线看网址| 五月玫瑰六月丁香| 国产又黄又爽又无遮挡在线| 99热只有精品国产| 99热这里只有是精品50| 亚洲精品色激情综合| 国产aⅴ精品一区二区三区波| 亚洲美女视频黄频| 亚洲不卡免费看| 色噜噜av男人的天堂激情| 老司机午夜福利在线观看视频| 最好的美女福利视频网| xxxwww97欧美| 2021天堂中文幕一二区在线观| 中文字幕精品亚洲无线码一区| 午夜福利高清视频| 亚洲人与动物交配视频| 婷婷精品国产亚洲av在线| 日韩 亚洲 欧美在线| 一进一出抽搐gif免费好疼| 久久午夜福利片| 网址你懂的国产日韩在线| а√天堂www在线а√下载| 内射极品少妇av片p| 嫩草影院精品99| 国产伦精品一区二区三区四那| 99在线人妻在线中文字幕| 啦啦啦观看免费观看视频高清| 丰满的人妻完整版| 国产综合懂色| 国产精品国产三级国产av玫瑰| 中文字幕免费在线视频6| 少妇被粗大猛烈的视频| 欧美另类亚洲清纯唯美| 国产蜜桃级精品一区二区三区| 欧美日韩亚洲国产一区二区在线观看| 亚洲美女视频黄频| 老女人水多毛片| 久久中文看片网| 国产 一区 欧美 日韩| www.色视频.com| 在线播放国产精品三级| 在线免费观看的www视频| 久久国产精品人妻蜜桃| 深夜精品福利| 啦啦啦观看免费观看视频高清| 国产男人的电影天堂91| 亚洲av中文字字幕乱码综合| 亚洲性夜色夜夜综合| 搡老熟女国产l中国老女人| 俄罗斯特黄特色一大片| 国产精品乱码一区二三区的特点| 亚洲av熟女| 少妇高潮的动态图| 天天躁日日操中文字幕| 亚洲中文字幕日韩| 久久久色成人| 97碰自拍视频| 干丝袜人妻中文字幕| av中文乱码字幕在线| 亚洲成a人片在线一区二区| 村上凉子中文字幕在线| 99热这里只有是精品在线观看| 久久久午夜欧美精品| 国产视频内射| 日韩中字成人| 内地一区二区视频在线| 久久婷婷人人爽人人干人人爱| 黄色丝袜av网址大全| 男女做爰动态图高潮gif福利片| 国内久久婷婷六月综合欲色啪| 久久亚洲精品不卡| av在线老鸭窝| 亚洲国产欧美人成| 成人永久免费在线观看视频| 亚洲黑人精品在线| 亚洲国产高清在线一区二区三| 一本一本综合久久| 国产爱豆传媒在线观看| 桃色一区二区三区在线观看| 国产不卡一卡二| 亚洲国产精品久久男人天堂| 88av欧美| 小蜜桃在线观看免费完整版高清| 欧美一区二区亚洲| 欧美激情久久久久久爽电影| 18禁裸乳无遮挡免费网站照片| 亚洲人成网站在线播放欧美日韩| 男人和女人高潮做爰伦理| 国产高潮美女av| 久99久视频精品免费| 欧美又色又爽又黄视频| 干丝袜人妻中文字幕| eeuss影院久久| 精品久久久久久成人av| 免费不卡的大黄色大毛片视频在线观看 | 亚洲图色成人| 亚洲一级一片aⅴ在线观看| 成人综合一区亚洲| 琪琪午夜伦伦电影理论片6080| 欧美日本视频| 久久久久久久精品吃奶| 一区二区三区激情视频| 成人av在线播放网站| 午夜福利在线在线| 亚洲av电影不卡..在线观看| 在线免费观看的www视频| 99精品在免费线老司机午夜| 狂野欧美激情性xxxx在线观看| 亚洲国产日韩欧美精品在线观看| 丝袜美腿在线中文| 动漫黄色视频在线观看| 在线免费观看不下载黄p国产 | 乱码一卡2卡4卡精品| 国产男人的电影天堂91| 中国美白少妇内射xxxbb| 成人午夜高清在线视频| 日本黄色视频三级网站网址| 热99re8久久精品国产| 免费看a级黄色片| 色av中文字幕| 亚洲真实伦在线观看| 久久久国产成人精品二区| 久久亚洲精品不卡| 人妻久久中文字幕网| 国产乱人伦免费视频| 欧美黑人巨大hd| av天堂中文字幕网| 日本爱情动作片www.在线观看 | 日韩欧美在线乱码| 搡女人真爽免费视频火全软件 | 亚洲国产欧美人成| 免费黄网站久久成人精品| 欧美+亚洲+日韩+国产| 日韩av在线大香蕉| 中国美白少妇内射xxxbb| 国国产精品蜜臀av免费| 国产av一区在线观看免费| 国内揄拍国产精品人妻在线| 亚洲精品456在线播放app | 99热这里只有是精品在线观看| 中文字幕av成人在线电影| 久久久国产成人免费| 999久久久精品免费观看国产| 性色avwww在线观看| 在线观看66精品国产| 一个人免费在线观看电影| av在线亚洲专区| 久久久色成人| 搡老熟女国产l中国老女人| 久久精品影院6| 淫妇啪啪啪对白视频| 97超视频在线观看视频| 一本精品99久久精品77| 亚洲欧美日韩无卡精品| 非洲黑人性xxxx精品又粗又长| 日本免费一区二区三区高清不卡| 久9热在线精品视频| 在线观看免费视频日本深夜| 午夜福利在线观看吧| 亚洲精品一卡2卡三卡4卡5卡| 欧美zozozo另类| 国内精品一区二区在线观看| 一个人免费在线观看电影| 伦精品一区二区三区| 99九九线精品视频在线观看视频| 在线播放无遮挡| 18禁在线播放成人免费| 国产精品人妻久久久久久| 有码 亚洲区| av专区在线播放| 色哟哟·www| 国产av麻豆久久久久久久| 国产成人福利小说| 亚洲av中文字字幕乱码综合| 欧美激情在线99| 国产一区二区三区视频了| 午夜激情欧美在线| 国产伦精品一区二区三区视频9| 成人美女网站在线观看视频| 久久久精品欧美日韩精品| 一个人看的www免费观看视频| 国产人妻一区二区三区在| 亚洲精品日韩av片在线观看| 成人美女网站在线观看视频| 国产伦人伦偷精品视频| 不卡一级毛片| 婷婷丁香在线五月| 精品乱码久久久久久99久播| 成人永久免费在线观看视频| 国产亚洲av嫩草精品影院| 欧美日本亚洲视频在线播放| 乱码一卡2卡4卡精品| 中文字幕熟女人妻在线| 国产乱人伦免费视频| 久99久视频精品免费| 男人舔女人下体高潮全视频| 亚洲在线观看片| 午夜亚洲福利在线播放| 亚洲一区二区三区色噜噜| 国产亚洲欧美98| 国产精品免费一区二区三区在线| 欧美日韩国产亚洲二区| 日日干狠狠操夜夜爽| 国产毛片a区久久久久| 精品久久久久久久末码| 女同久久另类99精品国产91| 搡老妇女老女人老熟妇| 免费av观看视频| 成人特级av手机在线观看| 亚洲av中文字字幕乱码综合| 黄色女人牲交| 99久久成人亚洲精品观看| 亚洲综合色惰| 欧美国产日韩亚洲一区| 国产精品久久久久久精品电影| 国产又黄又爽又无遮挡在线| 亚洲自偷自拍三级| 国产高清三级在线| 国产国拍精品亚洲av在线观看| av专区在线播放| 亚洲狠狠婷婷综合久久图片| 欧美人与善性xxx| 69av精品久久久久久| 在线a可以看的网站| 久久久久九九精品影院| 人妻夜夜爽99麻豆av| 美女 人体艺术 gogo| 亚洲美女黄片视频| 中文字幕免费在线视频6| 国产精品久久久久久精品电影| 国产高清三级在线| 国产一区二区激情短视频| netflix在线观看网站| 丝袜美腿在线中文| 亚洲精品亚洲一区二区| 老师上课跳d突然被开到最大视频| 极品教师在线免费播放| 999久久久精品免费观看国产| 如何舔出高潮| 欧美一区二区国产精品久久精品| 又紧又爽又黄一区二区| 亚洲一区高清亚洲精品| 久久人人爽人人爽人人片va| 国产毛片a区久久久久| 无人区码免费观看不卡| 国产精品,欧美在线| 国产探花极品一区二区| 可以在线观看的亚洲视频| 成人国产麻豆网| 日韩在线高清观看一区二区三区 | 午夜日韩欧美国产| www.www免费av| 亚洲美女黄片视频| 亚洲三级黄色毛片| 亚洲五月天丁香| 欧美又色又爽又黄视频| 国产在线精品亚洲第一网站| 成人午夜高清在线视频| 此物有八面人人有两片| 国产高清三级在线| 欧美激情在线99| 久久久午夜欧美精品| 亚洲在线自拍视频| 成人午夜高清在线视频| 久久久午夜欧美精品| 校园春色视频在线观看| 美女高潮喷水抽搐中文字幕| 看黄色毛片网站| 亚洲无线在线观看| 国产精品99久久久久久久久| 超碰av人人做人人爽久久| 免费av观看视频| 嫩草影院新地址| 小说图片视频综合网站| 久久午夜福利片| 不卡一级毛片| 很黄的视频免费| 欧美日韩精品成人综合77777| 国产又黄又爽又无遮挡在线| 久久久久久久午夜电影| 天天一区二区日本电影三级| 毛片一级片免费看久久久久 | 高清日韩中文字幕在线| 国产伦精品一区二区三区四那| 欧美性猛交╳xxx乱大交人| 精品福利观看| 国产亚洲av嫩草精品影院| 亚洲精品在线观看二区| 亚洲男人的天堂狠狠|