• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    結(jié)合價格波動策略與動態(tài)回溯機制的蟻群算法

    2022-06-17 07:10:56趙家波游曉明
    計算機與生活 2022年6期
    關(guān)鍵詞:螞蟻局部動態(tài)

    趙家波,游曉明+,劉 升

    1.上海工程技術(shù)大學(xué) 電子電氣學(xué)院,上海 201620

    2.上海工程技術(shù)大學(xué) 管理學(xué)院,上海 201620

    旅行商問題(traveling salesman problem,TSP)是一類經(jīng)典的組合優(yōu)化問題,可以描述為一位旅行商從某一城市出發(fā),要求不重復(fù)通過所有規(guī)定的城市,最后回到最初城市的最短路徑問題。

    在20 世紀90 年代,意大利學(xué)者Dorigo、Maniezzo等人受到自然界螞蟻覓食的啟發(fā),模擬螞蟻覓食的行為,提出了蟻群算法(ant colony optimization,ACO),并應(yīng)用于旅行商的問題與分布式優(yōu)化問題,取得了較好的結(jié)果。之后學(xué)者們根據(jù)自身研究領(lǐng)域?qū)⑾伻核惴☉?yīng)用于配電網(wǎng)故障定位、火力分配問題、網(wǎng)絡(luò)路由問題、車間調(diào)度問題等。

    由于信息素的正反饋作用,螞蟻系統(tǒng)在后期常常因為個別路徑信息素的快速積累導(dǎo)致螞蟻不會選擇其他路徑,從而陷入局部最優(yōu)問題。為了避免信息素的過度積累,減少陷入局部最優(yōu)的概率,Dorigo在螞蟻系統(tǒng)(ant system,AS)算法的基礎(chǔ)上提出蟻群系統(tǒng)(ant colony system,ACS)算法,并提出了全局信息素更新方式與局部信息素更新方式,加入局部搜索算法,改善了算法陷入局部最優(yōu)的情況。之后,為了避免信息素過多而導(dǎo)致陷入局部最優(yōu),Stutzle 等人提出了最大-最小螞蟻系統(tǒng)(max-min ant system,MMAS),通過分別設(shè)置信息素最大最小閾值,將信息素的濃度控制在一定范圍內(nèi),從而避免信息素的不斷堆積造成局部最優(yōu)。以上是經(jīng)典的蟻群算法,雖然它們具有高效的探索尋優(yōu)能力,但仍存在著容易陷入局部最優(yōu)、收斂速度慢等問題。針對這些問題,許多學(xué)者提出各自的改進策略。

    一些學(xué)者在加快蟻群算法的收斂速度上做出一些改進,如文獻[9]結(jié)合遺傳算法,提出使用螞蟻的基因控制螞蟻選擇城市,減少算法初期探索全部路徑的時間成本,加快算法前期收斂速度。文獻[10]通過全局路徑重新設(shè)定初始信息素分布,使得算法前期路徑的探索具有一定導(dǎo)向性,并且通過信息素的二次揮發(fā),加快算法后期的收斂能力,使算法能夠在較短時間內(nèi)找到較優(yōu)解。文獻[11]提出一種改進的信息素差異化更新策略,在所有螞蟻完成本次路徑構(gòu)建后,對優(yōu)于平均路徑長度的路徑進行信息素加強,對劣于平均路徑長度的路徑進行信息素削弱,從而增大較優(yōu)路徑的吸引力,削弱較差路徑對螞蟻路徑選擇的干擾,加快算法整體的收斂速度。上述學(xué)者較好地解決了蟻群算法收斂速度慢的問題,但算法仍存在易陷入局部最優(yōu)的問題。文獻[12]提出一種具有記憶特征的區(qū)間蟻群優(yōu)化算法,將信息素濃度推廣為一定區(qū)間范圍,不再束縛于信息素為某一定值,并引入長短時記憶的信息素更新方式,對應(yīng)不同的揮發(fā)系數(shù),使得算法呈現(xiàn)更具層次的多樣性。文獻[13]為了解決算法陷入局部最優(yōu)的問題,使用平滑信息素的方法削弱所有路徑信息素的差異性,并通過自適應(yīng)改變算法的取值,增大算法接受隨機解的概率,從而實現(xiàn)跳出局部最優(yōu)。文獻[14]根據(jù)蟻群算法與魚群算法的優(yōu)勢互補,提出一種先魚群再蟻群的混合算法,通過更新率的調(diào)整,前期借助魚群算法找到更多的解,當(dāng)更新率達到某一值時,轉(zhuǎn)為蟻群算法進行更好的尋優(yōu),當(dāng)算法陷入局部最優(yōu)時,再通過更新率的變化轉(zhuǎn)為魚群算法,從而平衡收斂速度慢、易陷入局部最優(yōu)等問題。雖然以上改進的蟻群算法都從加快收斂速度與提高多樣性進行改善,但在解決中大規(guī)模的TSP 問題中仍然存在收斂速度慢且容易陷入局部最優(yōu)等問題。

    為了在中大規(guī)模TSP 問題中較好地平衡解的多樣性與收斂速度的關(guān)系,本文提出一種結(jié)合價格波動策略與動態(tài)回溯的蟻群算法(ant colony algorithm based on price fluctuation strategy and dynamic backtracking mechanism,PBACO)。在價格波動策略中,結(jié)合時間序列思想將蟻群算法完整迭代周期根據(jù)不同需求分為三類,并根據(jù)價格波動平衡,將影響價格波動的供求關(guān)系進行匹配,通過分析算法在各類時期的不同需求,對信息素揮發(fā)因子進行自適應(yīng)動態(tài)供給,來滿足算法各階段的動態(tài)需求,較好地改善算法整體性能。當(dāng)價格波動策略的供給關(guān)系無法實現(xiàn)平衡時,算法將面臨局部最優(yōu)問題,此時引入動態(tài)回溯機制,以迭代最優(yōu)螞蟻的個體相似度作為標(biāo)準(zhǔn),將路徑信息素回溯至相似度差異顯著的時期,而非將路徑信息素清零,保證了算法收斂速度的同時能夠有效跳出局部最優(yōu)。通過MATLAB 對TSP 中的不同測試集進行仿真,結(jié)果表明該算法在保證收斂速度的基礎(chǔ)上,有效提高了解的質(zhì)量,較好地平衡了多樣性與收斂速度的關(guān)系。本文的主要工作總結(jié)如下:

    (1)結(jié)合時間序列的思想,將蟻群算法完整迭代周期根據(jù)不同內(nèi)在需求分為A、B、C 三類,并采用價格波動策略對三類不同時期的不同需求,自適應(yīng)調(diào)整信息素揮發(fā)因子進行動態(tài)供給,使算法能夠在不同時期對多樣性差與收斂速度慢的問題做出相應(yīng)的改善,優(yōu)于傳統(tǒng)算法恒定的信息素揮發(fā)因子。

    (2)通過分析三類不同時期的陷入局部最優(yōu)情況,引入斐波那契數(shù)列抽樣來判定算法是否陷入局部最優(yōu),而非傳統(tǒng)算法逐個判斷若干代最短路徑均不變的方法。采用斐波那契數(shù)列抽樣的方式通過抽樣更少樣本數(shù)來判定陷入局部最優(yōu),節(jié)約時間成本,同時對不同時期采用不同的最大樣本數(shù),更為合理地進行抽樣樣本數(shù)的調(diào)整,進一步加快算法收斂速度。

    (3)在算法陷入局部最優(yōu)后,最優(yōu)路徑信息素積累較多,此時引入動態(tài)回溯機制,以迭代最優(yōu)螞蟻的個體相似度作為標(biāo)準(zhǔn),將路徑信息素回溯至相似度差異顯著的時期,可以將路徑信息素重置為若干代前的路徑信息素,這樣既增加了下代螞蟻選擇路徑的多樣性,同時未完全重置信息素,節(jié)省了螞蟻重新構(gòu)建路徑信息素的時間成本,在保證收斂速度的同時能夠有效跳出局部最優(yōu)。

    1 相關(guān)工作

    1.1 ACS 蟻群算法1.1.1 路徑構(gòu)建

    ACS 中每只螞蟻從城市到城市的選擇公式:

    其中,τ()代表著時刻城市和城市之間的信息素的濃度大小,每條邊上的起始濃度都是相同的,記為。 η代表的是、城市之間距離d的倒數(shù),即η=1/d。是在區(qū)間[0,1]的常數(shù)值,是在區(qū)間[0,1]的隨機數(shù),∈表示城市屬于禁忌表外的可選城市集合。表示當(dāng)≤時將要被選擇的下一個城市。是式(2)輪盤賭的選擇方式。、分別表示信息啟發(fā)式因子和期望啟發(fā)式因子,越大,表示對下一條路徑選擇受啟發(fā)式信息素的影響越大,而值越大,表示對下一條路徑選擇受城市間距離的影響越大。

    式(1)、式(2)表明,當(dāng)≤時,城市之間信息素高的城市和距離相對近的城市被選擇的概率更大,當(dāng)不符合上述條件,采用式(2)輪盤賭進行路徑構(gòu)建。

    ACS 蟻群算法的更新機制分為局部信息素更新和全局信息素更新兩部分。

    全局信息素更新:當(dāng)所有螞蟻都完成一次迭代之后,算法只對當(dāng)前最優(yōu)路徑上的信息素進行更新,通過算法的正反饋作用,使得最優(yōu)路徑和非最優(yōu)路徑上的信息素的差距逐漸拉大,為蟻群的路徑選擇增加指向性,加快了算法的收斂速度。公式如下:

    其中,是全局信息素的蒸發(fā)率;Δτ是信息素增量;是當(dāng)前最優(yōu)路徑長度。

    局部信息素更新:當(dāng)每只螞蟻完成一次周游后,算法便會對其走過的路徑進行局部信息素更新。局部信息素更新是對所有螞蟻都進行更新,其作用是為了縮短最優(yōu)路徑和非最優(yōu)路徑之間信息素的差距,增加算法的多樣性,提高算法全局搜索能力,避免陷入局部最優(yōu)。公式如下:

    其中,Δτ是信息素增量;為每條邊上的起始濃度;是局部信息素的蒸發(fā)率。

    1.2 時間序列分析法

    時間序列分析法是統(tǒng)計學(xué)中常用于預(yù)測未來發(fā)展變化趨勢的一種方法,能夠以時間的推移預(yù)測市場需求趨勢,通過將經(jīng)濟跌漲、購買力大小、價格變動等同一常數(shù)的觀察值,按照時間順序進行排列,再運用數(shù)理統(tǒng)計方法對市場未來趨勢的變化進行預(yù)測,來確定市場的預(yù)測值。

    一個時間序列通常由四種要素組成:長期趨勢變動、季節(jié)變動、循環(huán)變動和不規(guī)則變動。長期趨勢變動是指時間序列在長時期內(nèi)呈現(xiàn)出來的持續(xù)向上或持續(xù)向下的變動;季節(jié)變動是指時間序列在隨季節(jié)而重復(fù)出現(xiàn)的周期性波動,受氣候條件、節(jié)假日等各種因素的影響;循環(huán)變動是指時間序列變化為非固定時長的周期性波動,其循環(huán)周期與趨勢不同,它并非是單一方向的長時變化,而是漲落有序的交替波動;不規(guī)則變動是指時間序列中除去以上三種要素所剩余的變動,通常隨機出現(xiàn)在時間序列中,使時間序列產(chǎn)生不平穩(wěn)的震蕩波動。

    時間序列函數(shù)可由以上四種元素進行表示,即=(,,,),常用所構(gòu)建的模型可分為兩種,加法模型=+++以及乘法模型=***。當(dāng)時間序列隨時間等寬推進時,常用加法模型;當(dāng)時間序列的季節(jié)變動與長期趨勢變動成正比時,常用乘法模型。

    1.3 個體相似度

    在相似度算法的距離度量中,距離越近則兩者差異性較小,證明其相似度越高。但是這類相似度無法直接應(yīng)用于蟻群算法中,因為當(dāng)蟻群算法陷入局部最優(yōu)時,其最優(yōu)路徑基本保持不變,前后兩次路徑的差異性較小,相似度高,但是對于需要跳出局部最優(yōu)的問題并非一個好的結(jié)果。

    考慮到螞蟻個體在尋找路徑時是通過城市節(jié)點的連接來進行路徑尋優(yōu),個體之間形成的閉環(huán)路徑總會有一些相同路徑,因此可用個體間的相同路徑信息來表示個體之間的相似度,路徑信息相同數(shù)越多,則代表個體間的相似度越高,而相同數(shù)越少,也表示個體間差異性較為明顯。個體相似度的計算過程如下所示。

    個體相似度的計算通過相同路徑的多少來進行,設(shè)兩個個體和,其路徑信息借助連接矩陣表示,如對應(yīng)連接矩陣,對應(yīng)連接矩陣,則有:

    其中,代表城市數(shù),在矩陣中,x表示城市至城市的路徑信息,如果個體的路徑信息中具有城市至城市,則使x=1,否則x=0;因為xx均表示城市至城市的路徑信息,所以x=x,為對稱矩陣,個體的連接矩陣同理所示。

    個體相似度借助連接矩陣則可以較為明顯地比較兩個個體的路徑信息。在算法運行初期,從隨機城市出發(fā)的兩個螞蟻個體可能走過完全不同的路徑,此時兩者的相似度應(yīng)為0,在算法陷入局部最優(yōu)或算法運行末期,因為信息素正反饋的作用,兩個螞蟻個體走過的路徑可能大體相同,此時兩者的相似度為1 或近似為1,所以可構(gòu)建個體相似度函數(shù),將兩個個體的相同路徑進行統(tǒng)計處理,使個體間的相似度處于0~1 的范圍。個體相似度函數(shù)的公式如下所示:

    2 改進的蟻群算法

    2.1 價格波動策略

    價格波動策略結(jié)合了價格理論中商品的供求關(guān)系對價格的影響,在不同時期商品的價格會受供給和需求的不同而產(chǎn)生變化,但總體價格呈現(xiàn)出波動平衡的狀態(tài)。而傳統(tǒng)蟻群算法在進行路徑探索時,存在易陷入局部最優(yōu)、收斂速度慢等問題,雖然后續(xù)提出信息素揮發(fā)因子來避免信息素過度積累,改善解的質(zhì)量,但傳統(tǒng)蟻群算法的信息素揮發(fā)因子仍具有一定的局限性,信息素揮發(fā)因子作為蟻群算法的重要參數(shù),設(shè)置為某一定值無法發(fā)揮其在算法各階段的不同作用,對算法整體的適應(yīng)性較差,因此提出價格波動策略,使算法不同時期的供求關(guān)系處于動態(tài)平衡狀態(tài)。

    時間序列分析法處理的數(shù)據(jù)通常是根據(jù)時間排列的數(shù)據(jù),用來進行曲線的預(yù)測與內(nèi)在發(fā)展趨勢的變化,本文通過將時間序列思想引入蟻群算法,對蟻群算法各時期的不同狀態(tài)進行分析分類,為2.1.2 小節(jié)價格波動策略的供求關(guān)系匹配奠定基礎(chǔ)。

    下面將通過分析最短路徑收斂圖來對蟻群算法各時期的不同狀態(tài)進行分類,為了提高此分類方法的普適性,本文根據(jù)文獻[7]的ACS 算法,對城市集eil51、eil76、KroA100、KroB100、ch130、ch150、KroA200 和KroB200 進行15 次獨立實驗,獲取各城市集的最短路徑收斂圖。為了增強說服力,選取各城市集15 次實驗中的最優(yōu)路徑收斂圖作為典型進行分析。

    如圖1 所示,蟻群算法的收斂曲線是以迭代數(shù)為時間軸,對本次迭代最優(yōu)螞蟻的最短距離進行統(tǒng)計,從而繪制成的曲線,因此曲線不會出現(xiàn)往上回升的變化,只存在下降與持平的情況。考慮到以上原因在蟻群算法的特殊性,蟻群算法最短路徑的變化曲線在結(jié)合時間序列思想時會對曲線的要素做出相應(yīng)調(diào)整,構(gòu)建符合蟻群算法邏輯的模型。

    圖1 最短路徑收斂圖Fig.1 Shortest path convergence graph

    圖1 將根據(jù)算法不同時期的不同變化對對應(yīng)時期的曲線進行要素分類。在圖1 中,各城市集的最短路徑曲線都可分為A、B 和C 三個階段。在A 階段,各城市集曲線呈極速下降趨勢,階段特征為曲線在較少迭代數(shù)內(nèi)落差明顯,此時處于算法前期,螞蟻主要受期望啟發(fā)式的影響積極探索路徑,稱之為極速下降變化;在B 階段,各城市集曲線呈階梯下降趨勢,階段特征為曲線在持平較短迭代數(shù)后發(fā)生下降變化,之后再次持平與下降,循環(huán)進行,此時處于算法前中期,路徑信息素積累至一定程度,螞蟻的路徑選擇受啟發(fā)式與信息素濃度的共同作用,波折探索更短路徑,稱之為階梯下降變化;在C 階段,各城市集曲線呈長期持平或長期持平后下降趨勢,階段特征為曲線在較長迭代數(shù)內(nèi)持平,或在較長迭代數(shù)內(nèi)持平后出現(xiàn)下降,此時處于算法中后期,信息素的正反饋積累使當(dāng)前最優(yōu)路徑的信息素達到較大值,陷入局部最優(yōu),算法只能通過輪盤賭的小概率來尋找更短路徑,因此曲線在較長迭代數(shù)保持持平,若能找出更短路徑,即出現(xiàn)下降現(xiàn)象,稱之為恒定兼隨機變化。

    因為最優(yōu)路徑曲線是以每代進行統(tǒng)計,以上四種分類滿足時間序列加法模型,所以可以構(gòu)建價格波動策略分類模型,如式(9)所示。

    其中,為最短路徑收斂曲線中的極速下降變化,為極速下降的時長,該時段算法多樣性較好,容易找出更優(yōu)解;為最短路徑收斂曲線中的階梯下降變化,為階梯下降的時長,該時段信息啟發(fā)式與期望啟發(fā)式共同作用,算法多樣性逐漸降低,開始陷入局部最優(yōu),又跳出局部最優(yōu)的階段;為恒定兼隨機變化,為恒定兼隨機變化的時長,該時期算法的多樣性較低,已經(jīng)陷入局部最優(yōu)問題,若能跳出局部最優(yōu),則為隨機變化,若未能跳出局部最優(yōu),則為長期恒定變化;為完整收斂曲線,為各階段時長的總和。

    上述通過結(jié)合時間序列的思想,分析了蟻群算法最短路徑的變化曲線,將蟻群算法迭代周期分為三種階段時期,在不同時期算法具有不同的需求,而當(dāng)信息素揮發(fā)算子設(shè)置為定值時,無法動態(tài)調(diào)整信息素在各個階段發(fā)揮不同的作用,對算法整體的適應(yīng)性較差。因此本文提出一種價格波動策略,將影響價格波動的供求關(guān)系進行匹配,對信息素揮發(fā)因子進行動態(tài)調(diào)整,用于全局信息素更新公式中,來平衡算法各階段不同時期的需求。

    在算法運行前期,即A 階段,最優(yōu)路徑曲線處于極速下降變化階段,此時路徑信息素積累量較少,此時若將信息素揮發(fā)因子設(shè)定為較大值,雖然會削弱正反饋的作用,但此時算法會將期望啟發(fā)式因子作為主導(dǎo)地位,從而使螞蟻容易聚集在期望啟發(fā)式因子最強的路徑,變?yōu)轭愗澬乃惴?,容易陷入局部最?yōu);而將信息素揮發(fā)算子設(shè)為較小值時,有助于加快算法前期的收斂速度,因此在算法前期設(shè)置信息素揮發(fā)因子為較小值。在算法運行前中期,即B 階段,最優(yōu)路徑曲線呈階梯下降階段,路徑信息素積累較為密集,易陷入局部最優(yōu),此時采用較大值的信息素揮發(fā)因子,來平衡最優(yōu)路徑與其他路徑的差異性,使螞蟻選擇其他路徑的可能性增大,從而增加探索更優(yōu)解的概率。在算法運行中后期,即C 階段,最優(yōu)路徑曲線呈恒定兼隨機變化,算法跳出局部最優(yōu)能力較弱,并在當(dāng)前最優(yōu)解上浪費了大量時間成本,因此此時應(yīng)適當(dāng)增加算法的收斂速度,應(yīng)減小信息素揮發(fā)因子,以實現(xiàn)算法后期的快速收斂。

    綜合上述分析,并結(jié)合MMAS 的范圍限制思想,本文構(gòu)建一種服從高斯分布的自適應(yīng)信息素揮發(fā)因子。

    圖2 全局信息素揮發(fā)因子Fig.2 Global pheromone volatilization factor

    由圖2 可知,在算法前期的A 階段,服從高斯分布的自適應(yīng)信息素揮發(fā)因子將處于較小值,滿足算法前期信息素揮發(fā)因子較小的需求;當(dāng)算法運行至中前期的B 階段,此時算法路徑信息素積累逐漸密集,且隨迭代數(shù)的增加與解的精度的提高,算法陷入局部最優(yōu)后再跳出局部最優(yōu)的能力逐漸減弱,此時需要信息素揮發(fā)因子也隨之增加,而服從高斯分布的自適應(yīng)信息素揮發(fā)因子隨迭代數(shù)增加而增加,滿足此階段的需求;在算法中后期的C 階段,最優(yōu)路徑信息素的積累達到較大值,隨迭代數(shù)的增加與信息素的積累,算法跳出局部最優(yōu)的概率逐漸降低,此時算法會在當(dāng)前最優(yōu)解上浪費大量的時間成本,此時服從高斯分布的信息素揮發(fā)因子隨迭代數(shù)逐步減小,提升算法后期的收斂速度,滿足此階段的需求。

    服從高斯分布的自適應(yīng)信息素揮發(fā)因子公式如下所示:

    全局信息素更新公式為:

    其中,是位置參數(shù),這里設(shè)定為1 000;>0 是尺度參數(shù);是調(diào)整倍數(shù)。通過調(diào)整和的值,使信息素揮發(fā)因子范圍保持在圖中各分布區(qū)間,對于具體參數(shù)選擇,在后續(xù)實驗中會進行分析對比,選出一組相對較好的參數(shù)。

    2.2 動態(tài)回溯機制

    動態(tài)回溯思想受中值法與最優(yōu)化估計算法啟發(fā),在進行優(yōu)化計算時通過取區(qū)間中值來對最優(yōu)解不斷逼近,當(dāng)一次中值法結(jié)束,對最優(yōu)解存在區(qū)間再次進行中值法,循環(huán)往復(fù)直至逼近最優(yōu)解或得到最優(yōu)解。而在蟻群算法中,常常會遇到陷入局部最優(yōu)的問題,導(dǎo)致算法在較優(yōu)解而非最優(yōu)解浪費大量時間成本,并且解的精度提升較小,因此提出一種動態(tài)回溯機制來實現(xiàn)跳出局部最優(yōu),改善解的質(zhì)量。信息素是蟻群算法的核心因素,螞蟻通過信息素的積累來進行下一個城市的選擇,而動態(tài)回溯機制正是通過將路徑信息素回溯至個體相似度差異顯著的時期,此時在未完全陷入局部最優(yōu)的同時,保留路徑信息素的完整性,區(qū)別于將信息素初始化的大災(zāi)變,節(jié)省時間成本,并能有效地跳出局部最優(yōu)。

    動態(tài)回溯的核心在于將信息素重置為較優(yōu)迭代時刻,在判斷重置為哪些較優(yōu)迭代時刻的選擇問題上,本文借助個體相似度作為標(biāo)準(zhǔn),來判斷信息素較好的較優(yōu)時刻,從而進行動態(tài)回溯。

    該機制首先要對是否陷入局部最優(yōu)進行判斷,傳統(tǒng)判斷局部最優(yōu)方式為若干代的至今最短路徑是否均相等,此類判斷方法需要在每次迭代結(jié)束后將最優(yōu)路徑與若干代前每一代的最優(yōu)路徑進行對比,浪費了時間成本。本文借助斐波那契數(shù)列來對陷入局部最優(yōu)進行判定,通過斐波那契數(shù)列的抽樣方式,結(jié)合價格波動策略不同階段時期的特殊情況,對算法是否陷入局部最優(yōu)進行判定,在算法前期的A 階段,算法基本不會出現(xiàn)陷入局部最優(yōu)的情況;在算法前中期的B 階段,算法會在陷入局部持續(xù)較短迭代數(shù),再跳出局部,此時斐波那契數(shù)列抽樣的最大樣本數(shù)會相應(yīng)減小;在算法中后期的C 階段,算法會陷入局部最優(yōu),并持續(xù)較長迭代數(shù),此時斐波那契數(shù)列抽樣的最大樣本數(shù)會相應(yīng)增加。如圖3 所示,對比傳統(tǒng)局部最優(yōu)判定方式,假設(shè)樣本迭代數(shù)為50 代,即連續(xù)50 代的最短路徑均相等,最短路徑不發(fā)生變化時,判定算法陷入局部最優(yōu);而斐波那契數(shù)列抽樣的方式,在算法前中期設(shè)置最大樣本數(shù)為30,即可通過抽樣第1、2、3、5、8、13 和21 這7 組迭代樣本的最短路徑進行比較,從而判定算法是否陷入局部最優(yōu)。在算法中后期適當(dāng)提高最大樣本數(shù),設(shè)置最大樣本數(shù)為50,抽樣方式同理。隨著斐波那契數(shù)列的遞進,樣本抽樣跨度顯著提高,可以省去檢測大量重復(fù)樣本的時間。采用斐波那契數(shù)列抽樣進行局部最優(yōu)的判定,其優(yōu)點在于能通過抽樣的方式快捷合理地判斷是否陷入局部最優(yōu),節(jié)約時間成本,并結(jié)合動態(tài)回溯機制實現(xiàn)跳出局部最優(yōu),使算法解的精度得到較好的提升。

    圖3 斐波那契數(shù)列抽樣對比圖Fig.3 Comparison chart of Fibonacci sequence sampling

    在算法運行時,若出現(xiàn)下一代最優(yōu)路徑與至今最優(yōu)路徑相等,則調(diào)用斐波那契數(shù)列函數(shù)進行判定,設(shè)定當(dāng)前代斐波那契數(shù)為1,下一代斐波那契數(shù)為2,校驗后續(xù)滿足斐波那契數(shù)列代數(shù)的最優(yōu)路徑,若經(jīng)過斐波那契數(shù)列抽樣后的最優(yōu)路徑都相等,則判定算法陷入局部最優(yōu)。斐波那契抽樣函數(shù)公式如下:

    其中,為抽樣時刻;=1 為采樣周期;()為斐波那契函數(shù);為整數(shù)。

    若抽樣得到的最短路徑均相等,則判定算法陷入局部最優(yōu),此時對下一代螞蟻的路徑信息素進行回溯,通過式(14)相似度判別公式作為判定條件,回溯到滿足此條件且距離當(dāng)前迭代數(shù)最近的較優(yōu)代,根據(jù)式(15)重置其信息素,使其信息素回溯至若干代前個體相似度差異顯著的時期,借助此時跳出局部最優(yōu)能力更強的信息素重新進行路徑尋優(yōu),迭代代,若仍未跳出局部最優(yōu)則再次使用式(14),找出滿足條件的下一個較優(yōu)代,再次進行信息素回溯,以此循環(huán)直至跳出局部最優(yōu)或達到迭代最大代數(shù),動態(tài)回溯示意圖與動態(tài)回溯機制流程圖如圖4、圖5 所示。

    其中,為個體相似度判定算子,為0 至1 的某一常數(shù)??紤]到取1 時,等同于將信息素重置為與至今最優(yōu)路徑相同的路徑信息素,并不一定能實現(xiàn)跳出局部最優(yōu)。為滿足相似度判別公式時的迭代數(shù)。為信息素回溯后的迭代數(shù),與成正比,當(dāng)個體相似度高時,回溯的較優(yōu)代與此時代數(shù)相差步長較小,陷入局部最優(yōu)嚴重,需要迭代時間加長;反之當(dāng)個體相似度低時,回溯的較優(yōu)代與此時代數(shù)相差較大,信息素差異明顯,此時迭代時間適當(dāng)縮小。

    圖4 動態(tài)回溯示意圖Fig.4 Dynamic backtracking diagram

    圖5 動態(tài)回溯機制流程圖Fig.5 Flow chart of dynamic backtracking mechanism

    當(dāng)價格波動策略難以通過自適應(yīng)調(diào)整信息素揮發(fā)因子來滿足算法的需求時,算法陷入局部最優(yōu)問題,此時將會啟用動態(tài)回溯機制,使跳出局部最優(yōu)成為算法的首要任務(wù),通過式(17)強制提升信息素揮發(fā)因子,使其達到最大值,來更好地解決跳出局部最優(yōu)問題。

    其中,為價格波動策略的最大揮發(fā)因子值,當(dāng)(,)≤時,算法已經(jīng)陷入局部最優(yōu),強制全局信息素揮發(fā)因子調(diào)整為最大值。

    2.3 算法流程

    初始化參數(shù),=0。

    將只螞蟻隨機分配到各個節(jié)點。

    根據(jù)ACS 算法進行迭代,根據(jù)式(10)自適應(yīng)調(diào)整信息素揮發(fā)因子,將式(11)作為全局最優(yōu)更新公式進行信息素更新。

    若發(fā)現(xiàn)相鄰兩代最優(yōu)路徑的距離相同,調(diào)用斐波那契函數(shù)進行抽樣,若抽樣后的最優(yōu)路徑距離不全部相同,則跳回步驟3;若抽樣后的最優(yōu)路徑距離完全相同,則跳到步驟5。

    當(dāng)算法陷入局部最優(yōu)時,根據(jù)式(14)進行動態(tài)回溯,匹配滿足個體相似度算子的迭代數(shù),記錄至今最優(yōu)路徑,根據(jù)式(15)將對應(yīng)的信息素賦予下一代。

    以重置后的信息素進行次迭代,若迭代數(shù)達到最大迭代時,則找到并輸出最優(yōu)解;若未達到時,則對比當(dāng)前最優(yōu)路徑與至今最優(yōu)路徑,若當(dāng)前最優(yōu)路徑小于至今最優(yōu)路徑,則跳出局部最優(yōu),跳至步驟7;若不小于至今最優(yōu)路徑,則取滿足式(14)的下一個最近迭代數(shù)時的信息素回溯,跳回步驟6。

    重復(fù)上述步驟2~6,直至迭代次,找到并輸出最優(yōu)解。

    2.4 算法復(fù)雜度分析

    雖然本文通過回溯信息素濃度的方式實現(xiàn)跳出局部最優(yōu),但并未對迭代總數(shù)進行改變。從上述算法流程的分析可以看出,本文算法總的迭代數(shù)為,假設(shè)算法在第1 代陷入局部最優(yōu),動態(tài)回溯機制會將若干代前滿足相似度標(biāo)準(zhǔn)的該代信息素賦予1代,并運行1 代,若無法跳出局部最優(yōu)則繼續(xù)向前尋找滿足相似度標(biāo)準(zhǔn)的信息素,賦予第(1+1)代。以此循環(huán),假設(shè)迭代數(shù)達到代也未能跳出局部最優(yōu),則運行總代數(shù)為(1+1+2+…+)代,其中=1+1+2+…+;若假設(shè)在運行代時實現(xiàn)跳出局部最優(yōu),則當(dāng)前運行代數(shù)為(1+1+2+…+),隨后運行-(1+1+2+…+)代。綜上所述,算法迭代總數(shù)仍為,螞蟻的數(shù)量是,城市數(shù)為,在每次迭代時因為禁忌表的使用,每只螞蟻只能搜尋除自身初始城市外的城市,即-1 個城市,因此算法的時間復(fù)雜度為(××(-1))即(××),與傳統(tǒng)ACS 算法的時間復(fù)雜度相同。

    3 實驗對比與結(jié)果分析

    為檢驗PBACO 的算法性能,本文實驗使用Windows10 系統(tǒng),MATLAB2016a 版本的仿真環(huán)境,選取國際標(biāo)準(zhǔn)TSP 數(shù)據(jù)庫的多組數(shù)據(jù)集進行仿真實驗。

    3.1 節(jié)將進行公共參數(shù)、價格波動策略與動態(tài)回溯機制的參數(shù)設(shè)置。首先引用文獻[7]的公共參數(shù),為了檢驗后續(xù)參數(shù)的性能,采用控制變量法,后續(xù)全部實驗將在統(tǒng)一的公共參數(shù)上進行。在設(shè)置價格波動策略參數(shù)中,以KroA100 作為數(shù)據(jù)集,將圖1 中動態(tài)揮發(fā)因子的九組不同區(qū)間參數(shù),與全局信息素揮發(fā)因子為恒定值0.3 時的算法作對比,通過比較30 次獨立實驗中的最小誤差率、滿足誤差率在0.5%的比例和平均解,來分析揮發(fā)因子的動態(tài)調(diào)整所改善的性能;同時挑出幾組較優(yōu)的區(qū)間參數(shù),在A200 數(shù)據(jù)集上進行30 次獨立實驗,再次與恒值為0.3 時的算法作對比,通過分析對比更大規(guī)模數(shù)據(jù)集的結(jié)果,再次驗證算法的改善,并選出一組最佳參數(shù)。最后分析動態(tài)回溯機制的個體相似度判定因子對性能的影響,綜合分析后確定其取值。

    3.2 節(jié)將進行算法的性能分析,分析不同改進方法的作用。在數(shù)據(jù)集eil76、KroA150 與tsp225 進行仿真實驗,分別對ACS、ACS+波動平衡策略、ACS+波動平衡策略+動態(tài)回溯機制進行20 次仿真實驗,通過對比實驗分析各改進方法的作用及優(yōu)勢。

    3.3 節(jié)將在多組數(shù)據(jù)集中對ACS、ACS+3opt 與PBACO 算法進行仿真實驗,證明本文算法性能更優(yōu),有效改善了蟻群算法解的質(zhì)量,較好地平衡了解的多樣性與收斂速度的關(guān)系。

    3.4 節(jié)將會與其他最新改進算法進行對比分析,再次驗證本文改進算法的性能。

    3.1 實驗參數(shù)設(shè)置

    本文在ACS的基礎(chǔ)上進行多次實驗,測試了多組參數(shù)對算法性能的敏感性作用,統(tǒng)計發(fā)現(xiàn)公共參數(shù)為表1 所示參數(shù)時效果更好。因此,在本文后續(xù)實驗中,在表1 公共參數(shù)不變的基礎(chǔ)上測試其他參數(shù),進行敏感性分析。

    表1 PBACO 的公共參數(shù)設(shè)置Table 1 Public parameter setting of PBACO

    表1 中,為信息啟發(fā)因子,影響信息素在路徑構(gòu)建的作用,越小,螞蟻探索非最優(yōu)路徑的概率增加,解的多樣性變好,但容易使期望啟發(fā)因子作用加強而陷入局部最優(yōu);為期望啟發(fā)因子,越大,螞蟻選擇距離最短路徑的概率加大,收斂速度加快,但多樣性會降低;為局部信息素揮發(fā)率,揮發(fā)率過小時,會容易陷入局部最優(yōu),揮發(fā)率過大時,會影響最優(yōu)路徑的探索;為螞蟻數(shù)量,螞蟻數(shù)量越大,得到的解越多,算法精度相應(yīng)提升,但會增加時間成本,影響收斂速度;為式(1)的判別閾值,越大,算法探索信息素與距離更短的路徑概率越大,收斂速度加快,但多樣性降低;為總迭代數(shù)。

    表2 節(jié)點分配組合表Table 2 Node allocation combination table

    首先將圖2 中的9 組區(qū)間參數(shù),與=0.3 在公共參數(shù)相同的基礎(chǔ)上進行實驗對比,在KroA100數(shù)據(jù)集上進行獨立實驗30 次,得到的運行結(jié)果如表3 所示。

    以=0.3 作對比,觀察表3 可知,在KroA100 數(shù)據(jù)集上,各組參數(shù)均能找到最優(yōu)解;在0.1~0.3 區(qū)間時,其滿足誤差率比例與平均解都最優(yōu),同時參數(shù)為0.1~0.5、0.1~0.9、0.3~0.7 與0.5~0.9 在平均解上都略優(yōu)于0.3,前三組參數(shù)在滿足誤差率比例上與0.3 持平,雖然0.5~0.9 略低,但在后續(xù)仿真時也加入實驗,避免遺失潛在優(yōu)質(zhì)參數(shù)。通過表3 數(shù)據(jù)可知,價格波動策略在算法各時期對的動態(tài)調(diào)整,對算法性能具有一定改善作用。

    表3 不同區(qū)間ρ 在KroA100 對蟻群算法性能的影響Table 3 Effect of different interval ρ in KroA100 on performance of ant colony algorithm

    為了確定最佳參數(shù),同時驗證算法性能,將以上較優(yōu)的參數(shù)在KroA200 數(shù)據(jù)集上再次進行獨立實驗30 次,得到的運行結(jié)果如表4 所示。

    表4 不同區(qū)間ρ 在KroA200 對蟻群算法性能的影響Table 4 Effect of different interval ρ in KroA200 on performance of ant colony algorithm

    以=0.3 作對比,觀察表4 可知,在KroA200 數(shù)據(jù)集上,參數(shù)為0.1~0.3 和0.1~0.5 在最小誤差率上最小,能找到精確解的能力優(yōu)于其余參數(shù),證明此時參數(shù)會使解的質(zhì)量得到提升;在滿足誤差率比例上,參數(shù)為0.1~0.3 和0.1~0.5 均以40%比例高于其他參數(shù),此時參數(shù)穩(wěn)定性能優(yōu)于其他參數(shù);最后通過比較15組實驗最短路徑的平均解,發(fā)現(xiàn)參數(shù)0.1~0.5 的平均解優(yōu)于參數(shù)0.1~0.3,雖然在滿足誤差率比例上兩者持平,但從平均解分析可發(fā)現(xiàn)參數(shù)0.1~0.5 在解的質(zhì)量上會略優(yōu),因此確定波動平衡策略的參數(shù)區(qū)間為0.1~0.5,根據(jù)式(6),可計算出=577.4,=698.6。

    動態(tài)回溯機制中參數(shù)設(shè)置涉及個體相似度判定因子,值越大,個體與最優(yōu)螞蟻的路徑相似度越高,越難跳出局部最優(yōu),值越小,路徑差異越明顯,但此時也要花費較多的時間成本。綜合上述分析并在多組數(shù)據(jù)集上進行實驗,發(fā)現(xiàn)在算法陷入局部最優(yōu)后,回溯至前300 代,個體相似度可降至0.95,回溯至前500 代,個體相似度可降至0.9,再往前回溯雖然個體相似度會較快下降,但其原因是已經(jīng)貼近初始運行時期,類似于大災(zāi)變,因此綜合考慮將值設(shè)定為0.9。

    3.2 算法性能分析

    為了驗證PBACO 算法各個改進策略的作用,本文將不同策略組合為三組優(yōu)化方案,分別在數(shù)據(jù)集eil76、KroA150 與tsp225 進行仿真實驗,優(yōu)化方案如表5 所示。每組優(yōu)化方案在各數(shù)據(jù)集進行20 次獨立實驗,并統(tǒng)計各組方案的最優(yōu)解、最優(yōu)解誤差率、平均解與迭代次數(shù),并結(jié)合收斂曲線與多樣性曲線來進行對比與分析,統(tǒng)計結(jié)果如表6 和圖6 所示。

    表5 優(yōu)化方案表Table 5 Optimization scheme table

    表6 優(yōu)化方案性能對比表Table 6 Performance comparison table of optimization scheme

    從eil76 數(shù)據(jù)集的實驗結(jié)果可以發(fā)現(xiàn),A、B、C 方案都可以找到最優(yōu)解,但是B、C 方案在收斂速度上明顯優(yōu)于ACS 算法,并且更快速地跳出局部最優(yōu)找到最優(yōu)解,能夠較好地平衡算法多樣性與收斂速度,同時從平均解可以看出,改進算法的穩(wěn)定性也優(yōu)于ACS 算法。

    圖6 各測試集收斂情況Fig.6 Convergence of each test set

    從KroA150 數(shù)據(jù)集的實驗結(jié)果可以發(fā)現(xiàn),在迭代前期,B 方案通過價格波動策略在短時間內(nèi)就能夠找到較優(yōu)解,優(yōu)于A 方案,C 方案雖然因為陷入局部最優(yōu),未找到較優(yōu)解,但在300 代左右仍能快速跳出,并找到優(yōu)于A、B 方案的更優(yōu)解。在迭代中后期陷入局部最優(yōu)后,B 方案通過價格波動策略,最先使算法跳出局部最優(yōu),但解的精度不高;在此基礎(chǔ)上改進的C 方案通過動態(tài)回溯機制,進一步跳出局部最優(yōu),使算法整體解的精度得到較好的改善。

    從tsp225 數(shù)據(jù)集的實驗結(jié)果可以發(fā)現(xiàn),B、C 方案在前期收斂速度與探索較優(yōu)解的能力明顯優(yōu)于A 方案,在中后期的收斂曲線中,C 方案借助動態(tài)回溯策略,在更高精度的解中多次跳出局部最優(yōu),找到更優(yōu)解,同時結(jié)合表6 中的最優(yōu)解與平均解可以發(fā)現(xiàn),C方案在解的精度上得到了有效提升,并且相比A、B方案,解的穩(wěn)定性也得到了明顯改善。

    3.3 與傳統(tǒng)蟻群算法對比分析

    為了分析PBACO 算法在不同規(guī)模數(shù)據(jù)集的性能,將ACS、ACS+3opt、PBACO 算法應(yīng)用于不同城市規(guī)模的TSP 實例中,其中ACS 與ACS+3opt 為傳統(tǒng)判定局部最優(yōu)方式,PBACO 算法中的動態(tài)回溯機制為斐波那契數(shù)列抽樣方式判定是否陷入局部最優(yōu),結(jié)果如表7、圖7 和圖8 所示。

    圖7 PBACO 算法在部分城市集最短路徑Fig.7 Optimal path of PBACO algorithm for part of city sets

    圖8 部分城市集收斂情況Fig.8 Convergence for part of city sets

    圖7 和圖8 按順序分別展示了改進算法在eil76、KroA100、KroB100、ch130、ch150、KroA150、KroB150、KroA200、KroB200、tsp225、a280 和lin318 城市集中的最短路徑和收斂情況。從表7、圖7 和圖8 可以看出,在小規(guī)模城市集中,三種算法均能找到最優(yōu)解,但ACS 與ACS+3opt 的收斂速度明顯慢于PBACO 算法,改進算法在前期通過價格波動策略對算法進行改善,能夠較快收斂且找到精度較高的解。城市數(shù)在100 至200 之間的中規(guī)模城市集中,傳統(tǒng)算法無法找到ch130 的最優(yōu)解,而改進算法能通過中后期的動態(tài)回溯機制跳出局部最優(yōu),找到最優(yōu)解;對于ch150、KroA150 與KroB150,PBACO 算法相比傳統(tǒng)算法均能有效地提高解的精度,并且在KroB150 城市集能精確找到最優(yōu)解,同時找到最優(yōu)解的迭代數(shù)明顯縮減。在城市數(shù)大于200 的城市集中,從表7 中可以發(fā)現(xiàn),PBACO 算法在解的精度上得到了較大的改善,并且找到最優(yōu)解的迭代數(shù)也有部分減少,其中KroA200找到貼近最優(yōu)解的較優(yōu)解,KroA200 與a280 在改善解的精度的同時將收斂速度提升,雖然在tsp225 城市集中PBACO 迭代數(shù)較大,但在動態(tài)回溯機制的作用下,多次跳出局部最優(yōu),找到更優(yōu)解。在大規(guī)模城市集lin318 中,雖然在迭代前期PBACO 算法陷入短暫的局部最優(yōu),但在200 代之后算法解的精度明顯提高,在550 代相比傳統(tǒng)算法已經(jīng)找到更優(yōu)解,并在之后陷入局部最優(yōu)后,通過動態(tài)回溯機制多次跳出局部最優(yōu),將解的質(zhì)量明顯改善。

    表7 不同規(guī)模城市數(shù)據(jù)集的性能對比Table 7 Performance comparison of urban datasets of different sizes

    3.4 與至今最新改進算法對比分析

    為了進一步驗證PBACO 算法性能,本文選用至今最新改進的融合貓群算法的動態(tài)分組蟻群算法(CACS)、考慮動態(tài)導(dǎo)向與鄰域交互的雙蟻型算法(TREEACS)和文獻[11]進行比對,如表8 所示。由表8 可以看出,PBACO 算法在小規(guī)模城市中與其他算法都能找到最優(yōu)解,但在中規(guī)模城市與大規(guī)模城市中,PBACO 算法解的精度相比其他算法得到了較好的改善。

    表8 PBACO 與其他最新改進算法比較Table 8 Comparison of PBACO with other newly improved algorithms

    通過實驗分析與結(jié)果對比可知,本文改進后的PBACO 算法與傳統(tǒng)蟻群算法ACS、ACS+3opt和至今最新改進的蟻群算法相比,解的精度與收斂性都有明顯的改善。

    4 結(jié)束語

    針對傳統(tǒng)蟻群算法存在易陷入局部最優(yōu)、收斂速度較慢等問題,本文提出一種結(jié)合價格波動策略與動態(tài)回溯機制的蟻群優(yōu)化算法(PBACO)。通過價格波動策略,以時間序列分析的思想將算法不同需求的時期進行分類,以價格波動平衡的供求思想對信息素揮發(fā)因子進行自適應(yīng)動態(tài)供給,在保證收斂速度的同時增大跳出局部最優(yōu)的能力,能夠有效地改善解的質(zhì)量。在算法陷入局部最優(yōu)后,引入動態(tài)回溯機制,以迭代最優(yōu)螞蟻的個體相似度作為標(biāo)準(zhǔn),將路徑信息素回溯至相似度差異顯著的時期,在保證收斂速度的同時能夠有效地跳出局部最優(yōu),明顯改善解的精度,并且保證解的穩(wěn)定性。雖然在實驗對比中相較其他算法解的質(zhì)量得到較好的改善,但在超大規(guī)模城市集中算法解的精度還需要進一步提升,因此下一步將進行多種群合作競爭的算法研究,以提高算法在超大規(guī)模城市集中的求解能力。

    猜你喜歡
    螞蟻局部動態(tài)
    國內(nèi)動態(tài)
    國內(nèi)動態(tài)
    國內(nèi)動態(tài)
    局部分解 巧妙求值
    非局部AB-NLS方程的雙線性B?cklund和Darboux變換與非線性波
    動態(tài)
    我們會“隱身”讓螞蟻來保護自己
    螞蟻
    局部遮光器
    吳觀真漆畫作品選
    男人添女人高潮全过程视频| 天堂中文最新版在线下载| 中国国产av一级| 久久性视频一级片| 巨乳人妻的诱惑在线观看| 黄色视频在线播放观看不卡| 欧美精品av麻豆av| 日韩一本色道免费dvd| 久久亚洲国产成人精品v| 久久韩国三级中文字幕| 亚洲免费av在线视频| 男女免费视频国产| 赤兔流量卡办理| 99久久人妻综合| 久久人人爽人人片av| 9191精品国产免费久久| 视频区图区小说| 男女免费视频国产| 亚洲精品美女久久久久99蜜臀 | 制服诱惑二区| 成年动漫av网址| 日韩中文字幕欧美一区二区 | 免费高清在线观看视频在线观看| 亚洲成人国产一区在线观看 | 午夜日韩欧美国产| 少妇人妻久久综合中文| 国产精品av久久久久免费| 亚洲成人免费av在线播放| 我要看黄色一级片免费的| 国产97色在线日韩免费| 天堂中文最新版在线下载| 天天躁狠狠躁夜夜躁狠狠躁| 亚洲四区av| 国产亚洲欧美精品永久| 亚洲一区二区三区欧美精品| 在线精品无人区一区二区三| 久久久久久人人人人人| 啦啦啦中文免费视频观看日本| 免费观看a级毛片全部| 波野结衣二区三区在线| 成人午夜精彩视频在线观看| 欧美日韩精品网址| 最近中文字幕高清免费大全6| 国产成人91sexporn| 交换朋友夫妻互换小说| 欧美黑人欧美精品刺激| 激情视频va一区二区三区| 天美传媒精品一区二区| 汤姆久久久久久久影院中文字幕| 国产午夜精品一二区理论片| 亚洲欧美一区二区三区国产| 人人澡人人妻人| 99香蕉大伊视频| 国产欧美亚洲国产| 精品亚洲成a人片在线观看| 男女高潮啪啪啪动态图| 日韩大码丰满熟妇| 午夜福利免费观看在线| 亚洲av成人不卡在线观看播放网 | 国产无遮挡羞羞视频在线观看| 国产亚洲最大av| av在线观看视频网站免费| 午夜福利在线免费观看网站| 国产av一区二区精品久久| 亚洲专区中文字幕在线 | 一本一本久久a久久精品综合妖精| 国产精品香港三级国产av潘金莲 | 老司机影院成人| 一级,二级,三级黄色视频| 亚洲一码二码三码区别大吗| 亚洲精品美女久久av网站| 午夜免费男女啪啪视频观看| 欧美最新免费一区二区三区| 亚洲激情五月婷婷啪啪| 亚洲欧洲国产日韩| 国产视频首页在线观看| 一区二区av电影网| 人人妻人人添人人爽欧美一区卜| 高清欧美精品videossex| 亚洲精品在线美女| 精品亚洲成国产av| 欧美变态另类bdsm刘玥| 国产精品.久久久| 性高湖久久久久久久久免费观看| 亚洲欧美一区二区三区黑人| 69精品国产乱码久久久| 69精品国产乱码久久久| 搡老乐熟女国产| 午夜激情av网站| 亚洲精品一区蜜桃| 国产在线视频一区二区| 欧美亚洲 丝袜 人妻 在线| 亚洲专区中文字幕在线 | 99久久人妻综合| 日韩人妻精品一区2区三区| 午夜精品国产一区二区电影| 国产精品免费视频内射| 99热全是精品| 老司机亚洲免费影院| av国产久精品久网站免费入址| 免费久久久久久久精品成人欧美视频| 中文欧美无线码| 精品福利永久在线观看| 看十八女毛片水多多多| a级片在线免费高清观看视频| 十八禁高潮呻吟视频| 天堂俺去俺来也www色官网| 久久精品亚洲熟妇少妇任你| netflix在线观看网站| 9色porny在线观看| 国产男人的电影天堂91| 99精品久久久久人妻精品| 人成视频在线观看免费观看| 黑丝袜美女国产一区| 香蕉丝袜av| 国产成人精品福利久久| 不卡视频在线观看欧美| 男女床上黄色一级片免费看| 中文字幕人妻丝袜一区二区 | 精品福利永久在线观看| 在线天堂最新版资源| 黄色视频不卡| 国产毛片在线视频| 久久毛片免费看一区二区三区| 久久精品国产a三级三级三级| 啦啦啦啦在线视频资源| 一边摸一边做爽爽视频免费| 一边摸一边抽搐一进一出视频| 午夜91福利影院| 99久久综合免费| 精品国产一区二区久久| 亚洲一卡2卡3卡4卡5卡精品中文| 欧美xxⅹ黑人| 国产亚洲精品第一综合不卡| 高清在线视频一区二区三区| 伊人久久国产一区二区| 伊人久久国产一区二区| av在线老鸭窝| 91成人精品电影| 国产在线一区二区三区精| 日韩制服丝袜自拍偷拍| 自线自在国产av| 亚洲精品在线美女| 国产成人欧美| 国产亚洲一区二区精品| 欧美日韩亚洲高清精品| 在线亚洲精品国产二区图片欧美| 纯流量卡能插随身wifi吗| 亚洲精品中文字幕在线视频| 久久久久久免费高清国产稀缺| 亚洲精品中文字幕在线视频| 国产精品久久久久久久久免| 一边摸一边做爽爽视频免费| 亚洲精品中文字幕在线视频| 女的被弄到高潮叫床怎么办| 狠狠精品人妻久久久久久综合| 欧美 日韩 精品 国产| 国产精品久久久久久久久免| 亚洲精品国产av蜜桃| 日韩制服丝袜自拍偷拍| 91成人精品电影| 十八禁高潮呻吟视频| 欧美97在线视频| 精品一品国产午夜福利视频| 一区福利在线观看| 国产伦理片在线播放av一区| 看免费成人av毛片| 男女之事视频高清在线观看 | 国产成人免费观看mmmm| 日韩大码丰满熟妇| 日韩伦理黄色片| 免费不卡黄色视频| 亚洲情色 制服丝袜| 王馨瑶露胸无遮挡在线观看| 亚洲欧美激情在线| 丝袜喷水一区| 久久亚洲国产成人精品v| 国产成人精品在线电影| 国产精品久久久久久人妻精品电影 | a级毛片黄视频| 国产精品久久久久久久久免| 极品少妇高潮喷水抽搐| 女人高潮潮喷娇喘18禁视频| 国产日韩欧美亚洲二区| 在线观看免费视频网站a站| 亚洲国产日韩一区二区| 色精品久久人妻99蜜桃| 成人国产麻豆网| 亚洲情色 制服丝袜| 国产老妇伦熟女老妇高清| 国产精品99久久99久久久不卡 | 美女脱内裤让男人舔精品视频| 精品国产一区二区三区久久久樱花| 亚洲精品aⅴ在线观看| 自线自在国产av| 天堂俺去俺来也www色官网| 天堂8中文在线网| 18禁裸乳无遮挡动漫免费视频| 男女高潮啪啪啪动态图| 中文字幕色久视频| 国产精品 欧美亚洲| 观看美女的网站| 青青草视频在线视频观看| 男女边吃奶边做爰视频| 最新在线观看一区二区三区 | 国产黄色视频一区二区在线观看| 七月丁香在线播放| 国产免费福利视频在线观看| 国产xxxxx性猛交| 亚洲少妇的诱惑av| 侵犯人妻中文字幕一二三四区| 国产精品嫩草影院av在线观看| 热99国产精品久久久久久7| 久久久久网色| 婷婷色综合www| 亚洲色图综合在线观看| 青春草亚洲视频在线观看| 亚洲情色 制服丝袜| 天天躁日日躁夜夜躁夜夜| 黄色毛片三级朝国网站| 亚洲 欧美一区二区三区| 天堂8中文在线网| 成人国产av品久久久| 久久影院123| 午夜免费鲁丝| 国产人伦9x9x在线观看| 国产亚洲午夜精品一区二区久久| 大片电影免费在线观看免费| 男女边吃奶边做爰视频| 欧美久久黑人一区二区| 黑人猛操日本美女一级片| 欧美另类一区| 久久久国产一区二区| 各种免费的搞黄视频| av又黄又爽大尺度在线免费看| √禁漫天堂资源中文www| 黑人猛操日本美女一级片| 成人三级做爰电影| 亚洲伊人久久精品综合| 色精品久久人妻99蜜桃| 黄频高清免费视频| 51午夜福利影视在线观看| 夫妻性生交免费视频一级片| 色94色欧美一区二区| 捣出白浆h1v1| 亚洲中文av在线| 老司机影院毛片| 久久亚洲国产成人精品v| 深夜精品福利| 亚洲,欧美精品.| 精品视频人人做人人爽| 国产免费又黄又爽又色| 老熟女久久久| 涩涩av久久男人的天堂| 国产爽快片一区二区三区| 日本欧美视频一区| 国产亚洲精品第一综合不卡| 黑人巨大精品欧美一区二区蜜桃| 亚洲欧美激情在线| 欧美日韩国产mv在线观看视频| 狠狠精品人妻久久久久久综合| 9191精品国产免费久久| 最近中文字幕高清免费大全6| 精品一区二区三区av网在线观看 | 国产一区二区激情短视频 | 日韩熟女老妇一区二区性免费视频| 不卡视频在线观看欧美| 在线精品无人区一区二区三| 亚洲av电影在线进入| 国产av精品麻豆| 成人免费观看视频高清| 黄频高清免费视频| 高清视频免费观看一区二区| 大香蕉久久网| 国产一区二区激情短视频 | 免费在线观看黄色视频的| 亚洲欧美精品自产自拍| 51午夜福利影视在线观看| 日韩av在线免费看完整版不卡| 汤姆久久久久久久影院中文字幕| av福利片在线| 男女边吃奶边做爰视频| 亚洲精品成人av观看孕妇| 亚洲精品一区蜜桃| 久久av网站| 天天操日日干夜夜撸| 91国产中文字幕| 亚洲激情五月婷婷啪啪| 久久久久国产一级毛片高清牌| 在线观看免费高清a一片| 国产无遮挡羞羞视频在线观看| 欧美av亚洲av综合av国产av | 中文字幕人妻丝袜制服| 伊人亚洲综合成人网| 久久99精品国语久久久| 国产精品人妻久久久影院| 最近中文字幕高清免费大全6| 最近的中文字幕免费完整| 国产成人欧美| 精品人妻在线不人妻| 在线观看免费视频网站a站| kizo精华| 80岁老熟妇乱子伦牲交| 亚洲第一青青草原| 亚洲成av片中文字幕在线观看| 不卡视频在线观看欧美| 欧美老熟妇乱子伦牲交| 久久精品国产亚洲av高清一级| 少妇被粗大猛烈的视频| 黄片播放在线免费| 久久精品久久久久久噜噜老黄| 两个人看的免费小视频| 久久人人爽人人片av| 免费在线观看完整版高清| 婷婷色麻豆天堂久久| 亚洲av欧美aⅴ国产| svipshipincom国产片| 下体分泌物呈黄色| 国产又爽黄色视频| 婷婷色麻豆天堂久久| 成人影院久久| 97精品久久久久久久久久精品| 免费看不卡的av| 99热网站在线观看| 亚洲国产欧美网| 亚洲成人一二三区av| 蜜桃在线观看..| 操出白浆在线播放| 综合色丁香网| 久久久久久久国产电影| 免费在线观看完整版高清| 国产男人的电影天堂91| 一级毛片电影观看| 亚洲三区欧美一区| 日韩精品免费视频一区二区三区| 视频区图区小说| 丁香六月欧美| 伊人久久大香线蕉亚洲五| 亚洲七黄色美女视频| 国产亚洲最大av| 麻豆乱淫一区二区| 最近中文字幕2019免费版| 母亲3免费完整高清在线观看| 亚洲国产av新网站| av国产久精品久网站免费入址| 欧美精品高潮呻吟av久久| 日本色播在线视频| 中国国产av一级| 麻豆乱淫一区二区| 免费看不卡的av| 日韩中文字幕欧美一区二区 | 一区二区三区四区激情视频| 久久精品国产综合久久久| 嫩草影院入口| 日韩 亚洲 欧美在线| 日韩欧美精品免费久久| 热99国产精品久久久久久7| 国产在线一区二区三区精| 日韩制服丝袜自拍偷拍| 国产一区有黄有色的免费视频| 无遮挡黄片免费观看| 日韩一区二区视频免费看| 亚洲av日韩精品久久久久久密 | 欧美黄色片欧美黄色片| 看免费成人av毛片| 久久国产精品大桥未久av| 国产精品.久久久| 亚洲精品日韩在线中文字幕| 亚洲欧美成人综合另类久久久| 亚洲国产av新网站| av一本久久久久| 午夜福利视频精品| 热99国产精品久久久久久7| 亚洲欧美一区二区三区国产| 在线亚洲精品国产二区图片欧美| 无遮挡黄片免费观看| 亚洲精品美女久久久久99蜜臀 | 另类精品久久| 涩涩av久久男人的天堂| 久久久欧美国产精品| 亚洲中文av在线| 国产福利在线免费观看视频| 国产 一区精品| 日韩大片免费观看网站| 综合色丁香网| 无限看片的www在线观看| 中文乱码字字幕精品一区二区三区| 久久久久网色| 女性被躁到高潮视频| 久久久精品区二区三区| 国产乱来视频区| 国产精品久久久久久精品古装| av在线app专区| 亚洲欧美成人精品一区二区| 精品国产一区二区三区久久久樱花| 日韩av在线免费看完整版不卡| 亚洲国产精品一区二区三区在线| 久久99精品国语久久久| 国产一区二区 视频在线| 亚洲精品日本国产第一区| 一区二区三区激情视频| 十八禁高潮呻吟视频| 免费高清在线观看日韩| 视频区图区小说| 一本久久精品| 国产免费又黄又爽又色| 19禁男女啪啪无遮挡网站| 男女之事视频高清在线观看 | 别揉我奶头~嗯~啊~动态视频 | 久久97久久精品| 飞空精品影院首页| 欧美黄色片欧美黄色片| 亚洲av电影在线进入| 成人手机av| 高清av免费在线| 中文字幕精品免费在线观看视频| 亚洲国产欧美日韩在线播放| 午夜福利一区二区在线看| 久久鲁丝午夜福利片| 成人亚洲欧美一区二区av| 国产精品一区二区在线观看99| 精品福利永久在线观看| 亚洲精品一二三| 午夜福利免费观看在线| 丝袜人妻中文字幕| 成年女人毛片免费观看观看9 | 色视频在线一区二区三区| svipshipincom国产片| 王馨瑶露胸无遮挡在线观看| 久久久久久久国产电影| 欧美日本中文国产一区发布| 久久免费观看电影| 桃花免费在线播放| 国产亚洲最大av| 免费在线观看视频国产中文字幕亚洲 | 欧美变态另类bdsm刘玥| 国产精品国产av在线观看| 国产成人精品久久久久久| 又大又黄又爽视频免费| 国产1区2区3区精品| 老司机靠b影院| 国产午夜精品一二区理论片| 免费观看人在逋| 看非洲黑人一级黄片| 日日摸夜夜添夜夜爱| 韩国精品一区二区三区| 亚洲男人天堂网一区| 人人妻人人添人人爽欧美一区卜| 欧美日韩精品网址| 中文字幕制服av| 搡老岳熟女国产| 成人亚洲欧美一区二区av| 在线观看免费午夜福利视频| 性少妇av在线| 久久99一区二区三区| 国产精品无大码| 天堂8中文在线网| 侵犯人妻中文字幕一二三四区| 国产在线一区二区三区精| 久久av网站| 成人黄色视频免费在线看| 欧美日韩视频高清一区二区三区二| 亚洲欧美一区二区三区国产| 国产xxxxx性猛交| 制服丝袜香蕉在线| 国产熟女午夜一区二区三区| 国产高清国产精品国产三级| 老司机影院成人| 国产在线一区二区三区精| 欧美人与善性xxx| 电影成人av| 国产国语露脸激情在线看| xxxhd国产人妻xxx| 亚洲欧美中文字幕日韩二区| 国产又色又爽无遮挡免| 亚洲天堂av无毛| 看免费av毛片| 国产乱人偷精品视频| 久久人妻熟女aⅴ| 在线天堂最新版资源| 国产一区二区在线观看av| 天美传媒精品一区二区| 妹子高潮喷水视频| 黄片小视频在线播放| 欧美激情高清一区二区三区 | kizo精华| 青草久久国产| 王馨瑶露胸无遮挡在线观看| 国产成人系列免费观看| 黄色视频不卡| 欧美在线一区亚洲| 狂野欧美激情性xxxx| 99久久99久久久精品蜜桃| 久久精品久久久久久久性| 1024香蕉在线观看| 久久天躁狠狠躁夜夜2o2o | 国产一区有黄有色的免费视频| 国产av一区二区精品久久| 亚洲av电影在线进入| 欧美日韩一级在线毛片| 9色porny在线观看| 亚洲成人一二三区av| 两个人免费观看高清视频| 免费在线观看完整版高清| 两性夫妻黄色片| 精品第一国产精品| 久久久久久人人人人人| 三上悠亚av全集在线观看| 91精品三级在线观看| 久久免费观看电影| 男女国产视频网站| 女性被躁到高潮视频| 97在线人人人人妻| 国产精品一区二区在线观看99| 精品国产一区二区久久| 久久精品国产综合久久久| 丝袜美足系列| 三上悠亚av全集在线观看| 美女高潮到喷水免费观看| 日韩一本色道免费dvd| 一级片'在线观看视频| 99九九在线精品视频| 超碰97精品在线观看| 男女床上黄色一级片免费看| 波野结衣二区三区在线| bbb黄色大片| 精品卡一卡二卡四卡免费| 亚洲美女搞黄在线观看| 波野结衣二区三区在线| 色吧在线观看| 好男人视频免费观看在线| 欧美精品亚洲一区二区| 久久毛片免费看一区二区三区| 十八禁人妻一区二区| 国产麻豆69| 久久青草综合色| 纯流量卡能插随身wifi吗| 久久精品国产a三级三级三级| videosex国产| 精品国产乱码久久久久久小说| 王馨瑶露胸无遮挡在线观看| 涩涩av久久男人的天堂| 国产av码专区亚洲av| 中文字幕色久视频| a级毛片黄视频| 久久婷婷青草| 深夜精品福利| 日本午夜av视频| 亚洲精品国产色婷婷电影| 久久久精品区二区三区| 伦理电影大哥的女人| 婷婷色麻豆天堂久久| 日本爱情动作片www.在线观看| 老司机在亚洲福利影院| 熟女av电影| 日本猛色少妇xxxxx猛交久久| 韩国高清视频一区二区三区| 久久鲁丝午夜福利片| 七月丁香在线播放| 亚洲一区中文字幕在线| h视频一区二区三区| 国产不卡av网站在线观看| 大香蕉久久成人网| 在线观看免费高清a一片| 日韩一区二区三区影片| 午夜福利在线免费观看网站| 精品国产乱码久久久久久小说| 2018国产大陆天天弄谢| 午夜激情av网站| 尾随美女入室| 精品国产超薄肉色丝袜足j| 日韩视频在线欧美| 人成视频在线观看免费观看| 国产成人精品久久二区二区91 | 涩涩av久久男人的天堂| 纵有疾风起免费观看全集完整版| 国产视频首页在线观看| 悠悠久久av| tube8黄色片| 国产成人精品在线电影| 在线观看三级黄色| 亚洲精品第二区| 美女中出高潮动态图| 大香蕉久久网| 日日撸夜夜添| 热99国产精品久久久久久7| 一个人免费看片子| 国产女主播在线喷水免费视频网站| 丰满乱子伦码专区| 丝袜美足系列| 日韩一区二区视频免费看| 制服诱惑二区| 一级毛片 在线播放| 侵犯人妻中文字幕一二三四区| 欧美日本中文国产一区发布| 亚洲国产av影院在线观看| 91精品国产国语对白视频| 国产成人系列免费观看| 亚洲精品,欧美精品| 咕卡用的链子| 亚洲专区中文字幕在线 | 欧美日韩亚洲综合一区二区三区_| 国产精品人妻久久久影院| 亚洲欧美精品综合一区二区三区| 一本一本久久a久久精品综合妖精| 色婷婷av一区二区三区视频| 青春草国产在线视频| 黑丝袜美女国产一区| 久久久精品94久久精品| 亚洲av成人不卡在线观看播放网 | 18在线观看网站| 一边摸一边做爽爽视频免费| 又大又爽又粗| 麻豆精品久久久久久蜜桃| av免费观看日本|