• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    K元N立方體網(wǎng)絡(luò)均勻跨步通信模式的性能分析與優(yōu)化

    2015-04-20 00:15盧宏生等
    湖南大學學報·自然科學版 2015年2期

    盧宏生等

    摘要:K元N立方體網(wǎng)絡(luò)是高性能計算機常用的一種網(wǎng)絡(luò)結(jié)構(gòu).均勻跨步通信是高性能計算最重要的通信模式之一.針對K元N立方體網(wǎng)絡(luò)均勻跨步通信模式,推導(dǎo)出其性能下限的理論公式,采用自行開發(fā)的網(wǎng)絡(luò)模擬器模擬了多種結(jié)構(gòu)、多種跨步值和多種消息長度的傳輸性能.最后針對節(jié)點重映射和消息分割兩種優(yōu)化措施進行了模擬和分析.模擬結(jié)果顯示,4元N立方體網(wǎng)絡(luò)具有良好的Alltoall性能,接近Alltoall性能最好的K元N樹網(wǎng)絡(luò).

    關(guān)鍵詞:K元N立方體;Alltoall通信;均勻跨步通信;節(jié)點重映射;消息分割

    中圖分類號:TP301 文獻標識碼:A

    對于很多重要應(yīng)用而言,比如快速傅里葉變換等[1],Alltoall通信都是非常重要的通信模式,是影響性能的關(guān)鍵所在[2].許多網(wǎng)絡(luò)設(shè)計的目標就是獲得良好的Alltoall性能.標準的Alltoall通信可參考圖1所示的MPI_AlltoAll的定義[3],每個進程都向其他所有進程發(fā)送數(shù)據(jù),這意味著每個進程也同時接收來自其他進程的數(shù)據(jù).由于標準的Alltoall通信可能存在大量競爭,包括網(wǎng)絡(luò)的競爭,目標的競爭,從而導(dǎo)致性能大幅下降.

    假設(shè)共計N個進程{P0, P1, …, PN-1}.一種常用的優(yōu)化手段是將Alltoall通信過程分解成N-1個階段.階段i,i=[1, …, N-1],每個進程Pk只向進程P(k+i)%N發(fā)送數(shù)據(jù),這意味著每個進程Pk同時在接收P(k+N-i)%N發(fā)送的數(shù)據(jù).這種方式有序化了Alltoall通信,降低了可能的阻塞,提升了整體Alltoall性能.上述每個階段的通信都屬于均勻跨步模式.所謂均勻跨步模式就是參與通信的所有進程對,其目標進程號和源發(fā)送進程號差值都相同.這種均勻跨步模式是許多重要應(yīng)用中的通信基礎(chǔ)模式,是超級計算機網(wǎng)絡(luò)結(jié)構(gòu)設(shè)計中的重要參考指標.圖2是一個4進程Alltoall通信的階段劃分示意圖.

    在高性能計算中,每種通信模式的性能都和網(wǎng)絡(luò)拓撲結(jié)構(gòu)有著重要的關(guān)系.其中K元N立方體結(jié)構(gòu)一直是網(wǎng)絡(luò)結(jié)構(gòu)研究的熱點,是高性能計算機常用的一種拓撲結(jié)構(gòu).典型的系統(tǒng)包括IBM Blue Gene,Cray Gemini等.本文重點研究K元N立方體網(wǎng)絡(luò)均勻跨步模式的性能及其優(yōu)化.

    1均勻跨步通信性能分析

    Alltoall通信由于涉及很多因素,其性能的理論分析是十分復(fù)雜的.IBM的Kumar等人基于Bluegene/L系統(tǒng)3D環(huán)網(wǎng)結(jié)構(gòu)提出了一個針對多維環(huán)網(wǎng)的Alltoall通信模型性能公式[4].假設(shè)三維環(huán)網(wǎng)中每一維的處理器數(shù)量分別為Px,Py,Pz,系統(tǒng)中處理器的總數(shù)量為P=Px*Py*Pz,最長維處理器數(shù)量M=max(Px,Py,Pz),每個處理器發(fā)送m字節(jié)數(shù)據(jù)到其他處理器,單個字節(jié)在網(wǎng)絡(luò)中的傳輸時間為β,則在Alltoall通信模式下,網(wǎng)絡(luò)所傳輸?shù)臄?shù)據(jù)總量為P*P*m.每個包在最長維的平均步長為M/4,該維的鏈路總數(shù)為2P,因此完成Alltoall通信的時間T=P2*m*M/4*b/(2P)=P*(M/8)*m*β.該公式反映了Alltoall模式下3D環(huán)網(wǎng)的最好性能.如引言中所述,Alltoall通信可分解成若干步均勻跨步通信,因此分析均勻跨步通信模式的性能具有重要意義.

    Kumar以IBM BlueGene系統(tǒng)為參考,給出了3D環(huán)網(wǎng)Alltoall性能的上限評估公式.但事實上,在設(shè)計高性能計算機網(wǎng)絡(luò)系統(tǒng)時,我們更關(guān)注其Alltoall性能的下限.因為應(yīng)用與算法是多種多樣的,知道了網(wǎng)絡(luò)可能的性能下限,才能針對重大應(yīng)用選擇適應(yīng)性更好的網(wǎng)絡(luò)架構(gòu).下面從理論上初步分析均勻跨步的性能下限.K元N立方體網(wǎng)絡(luò),共有KN個節(jié)點,網(wǎng)絡(luò)直徑為N*K/2,鏈路總數(shù)為N*2*KN條.對于均勻跨步消息,網(wǎng)絡(luò)鏈路沖突最大的情況是任一對通信節(jié)點間的步長均等于網(wǎng)絡(luò)直徑.所以理想情況下,需要的鏈路數(shù)為N*(K/2)*KN.所以我們得到系統(tǒng)鏈路吞吐率的下限公式為:

    這是一個十分有趣的公式.它顯示,對于K元N立方體而言,均勻跨步通信的吞吐率下限與維數(shù)無關(guān),僅和每一維的長度相關(guān).當K≤8時,均勻跨步通信吞吐率超過50%;特別當長度K=4時,即4元N立方體在進行均勻跨步模式通信時,吞吐率可以達到100%.了解一種網(wǎng)絡(luò)結(jié)構(gòu)Alltoall性能的下限對于網(wǎng)絡(luò)結(jié)構(gòu)的設(shè)計、各種網(wǎng)絡(luò)參數(shù)的選取具有重要的參考意義.由上述公式可見,在Alltoall通信性能方面,4元N立方體性能接近K元N樹性能.當然上述情況的分析都是基于理想情況.后面將用模擬器檢查我們的分析是否準確.

    2均勻跨步通信性能模擬

    2.1網(wǎng)絡(luò)模擬器

    為了更好地模擬網(wǎng)絡(luò)通信的性能,我們開發(fā)了一款采用C++編寫的節(jié)拍級網(wǎng)絡(luò)模擬器netsim.該模擬器支持K元N立方體、K元N樹等多種網(wǎng)絡(luò)結(jié)構(gòu).我們重點模擬了K元2立方體網(wǎng)絡(luò),即2D環(huán)網(wǎng).該2D環(huán)網(wǎng)基于5端口路由器實現(xiàn).路由器采用從輸入緩沖經(jīng)交叉開關(guān)到輸出緩沖的傳統(tǒng)的路由器結(jié)構(gòu).之所以沒有采用目前比較主流的高階路由器結(jié)構(gòu),主要是考慮構(gòu)建2D環(huán)網(wǎng)所需路由器的端口比較少,同時這種結(jié)構(gòu)的差異對我們研究的影響很小.我們研究的重點在于消息長度、通信模式和網(wǎng)絡(luò)拓撲間的關(guān)系上.

    2.2性能模擬

    我們分別對4×4 2D環(huán)網(wǎng)和8×8 2D環(huán)網(wǎng)進行了模擬.針對4×4 2D環(huán)網(wǎng)的16個節(jié)點,我們分別模擬長度為512 B,1 kB,2 kB,4 kB,8 kB,16 kB,32 kB,64 kB,128 kB,256 kB,512 kB,1 MB的Alltoall消息.每個Alltoall消息被劃分為15個階段完成.

    圖5是 8×8 2D環(huán)網(wǎng)執(zhí)行不同長度的Alltoall通信在63個階段的吞吐率.其中系列i,i=[1..12],分別對應(yīng)長度為512*2i-1 B的消息.每個階段p,p=[1..63],坐標(X,Y)的節(jié)點向坐標((X+dx)%8,(Y+dy)%8)的節(jié)點發(fā)送消息,dx=p%8, dy=p/8.結(jié)果顯示,各個階段的吞吐率有很大的差別.部分階段,無論消息長度,吞吐率均達到100%,這主要得益于上述階段不存在鏈路沖突;還有部分階段吞吐率很低,最低的僅為14%,遠低于我們預(yù)測的8×8 環(huán)網(wǎng)50%的吞吐率下限.這主要是因為我們的預(yù)測中僅從鏈路數(shù)量需求方面考慮了沖突的情況,但實際上作為環(huán)網(wǎng),采用確定性維序路由算法后,鏈路之間存在依賴關(guān)系.這種依賴關(guān)系使得鏈路沖突率進一步加大.對于K元N立方體網(wǎng)絡(luò),K越大,影響越大.第2節(jié)中預(yù)測的最低值更接近最低值的上限或Alltoall通信階段的平均值.

    在很多應(yīng)用中,Alltoall性能都是性能的關(guān)鍵.優(yōu)化Alltoall通信性能也一直是研究的熱點.將Alltoall通信分解為N-1個均勻跨步過程是一種比較常見的優(yōu)化方法.在前面的分析和模擬中,我們發(fā)現(xiàn)均勻跨步的性能和網(wǎng)絡(luò)的結(jié)構(gòu)有很大的依賴關(guān)系,而應(yīng)用程序看到的跨步通常是邏輯上的概念.比如進程號,它并不等同代表網(wǎng)絡(luò)中物理位置的物理號.真正影響通信性能的是物理號.是否可以通過變換邏輯和物理的映射關(guān)系改變均勻跨步的性能,從而提升Alltoall通信性能呢?

    為此,我們編寫了一個模擬程序,選擇8X8 2D環(huán)網(wǎng)進行模擬,用A,B,C,D 4個矩陣分別記錄X+,Y+,X-,Y- 4個方向的鏈路,一個完整的Alltoall消息被分解為63個階段,分別記錄每個階段所有鏈路的使用情況.

    圖7(a)代表了一個邏輯節(jié)點號到物理節(jié)點號的映射關(guān)系.圖7(b)中的4個圖分別表示在階段9即p[i]進程向p[(i+9)%64]進程(i=[0..63])通信時X+,Y+,X-,Y-4個方向共計256條鏈路的使用情況.圖7(c)中的4個圖則分別表示在階段31即p[i]進程向p[(i+31)%64]進程(i=[0..63])通信時X+,Y+,X-,Y- 4個方向共計256條鏈路的使用情況.很容易發(fā)現(xiàn),2個階段的鏈路情況并不相同,這和我們前面的分析是吻合的.一個有趣的現(xiàn)象是:完成完整的Alltoall通信后,所有X+,Y+,X-,Y- 4個方向共計256條鏈路,每條鏈路均被使用了64次.多次更換映射關(guān)系,現(xiàn)象依舊.實際上,由于我們面對K*K 2D環(huán)網(wǎng)是一個對稱網(wǎng)絡(luò),無論邏輯節(jié)點號和物理節(jié)點號如何映射,對于完整的Alltoall通信而言,都是每個節(jié)點都和其他所有節(jié)點完成一次通信.而我們采用的是均衡的先X后Y確定性維序路由算法,因此無論如何映射,每條鏈路使用的次數(shù)是固定的,只在每個階段有一定的差異.由于網(wǎng)絡(luò)的對稱性,每條鏈路最終使用的次數(shù)都是相同的.但這并不意味著重新映射邏輯節(jié)點號與物理節(jié)點號無助于提升Alltoall通信性能.事實上,由于映射關(guān)系的不同,每種映射下每個階段的鏈路沖突率是不同的,最終所有階段疊加的結(jié)果就是Alltoall通信性能并不相同.

    如圖8所示,(a),(b)分別對應(yīng)4×4 2D環(huán)結(jié)構(gòu)下兩種邏輯處理器號和物理處理器號的映射關(guān)系.16個處理器的2D環(huán)網(wǎng)的Alltoall通信劃分成15個均勻跨步通信階段.(a.1),(a.2),(a.3),(a.4)表示映射關(guān)系1時階段1的X+,Y+,X-,Y- 4個方向鏈路的使用情況.(b.1),(b.2),(b.3),(b.4) 表示映射關(guān)系2時階段1的X+,Y+,X-,Y-4個方向鏈路的使用情況.定義一條鏈路的權(quán)值W為同一個階段傳輸?shù)南?shù)量.可以發(fā)現(xiàn),映射關(guān)系1在階段1時最大鏈路權(quán)值為1,即意味著在此階段通信的16個消息沒有鏈路沖突,消息以滿帶寬傳輸.而映射關(guān)系2在階段1時最大鏈路權(quán)值為2,即意味這在此階段通信16個消息中有2個消息共享(1,1)到(2,1)號鏈路.因此消息性能將為峰值性能的一半.階段i的最大權(quán)值記為Wi.W=∑Wi/15(i∈[0..15])是Alltoall通信各階段平均最大鏈路權(quán)值.結(jié)果顯示,在映射關(guān)系1下,W1=1.在映射關(guān)系2下,W2=1.87.即4×4 2D 環(huán)網(wǎng)在映射關(guān)系1下Alltoall消息帶寬可以達到鏈路峰值,而在映射關(guān)系2下,Alltoall消息帶寬僅為鏈路峰值帶寬的1/W2=53%.

    針對Alltoall通信,也有一些研究人員嘗試將長消息分割成小消息,通過對小消息的調(diào)度降低網(wǎng)絡(luò)的沖突,從而提升性能[5].比如在InfiniBand 16元2樹網(wǎng)絡(luò)中通過將128 kB長消息拆分成16 kB小消息,Alltoall性能提升10%.但事實上,InfiniBand網(wǎng)絡(luò)采用的是確定性路由,排除消息非常短的情況,無論消息長度多長,鏈路的使用情況是相同的.之所以通過將長消息拆分成短消息性能有所提升,主要是由InfiniBand HCA的消息發(fā)送機制造成的.HCA在發(fā)送消息時以時間片為單位,在一個時間片內(nèi)連續(xù)調(diào)度同一個QP上的數(shù)據(jù)包,導(dǎo)致消息發(fā)射的頻率并不恒定,從而導(dǎo)致網(wǎng)絡(luò)擁塞.同時由于在Alltoall通信的各階段間沒有高效的同步機制,也容易造成目標節(jié)點的沖突,從而增加性能隨消息長度浮動的變數(shù).

    總體來說,在理想情況下,這里的理想條件包括合理的消息發(fā)送機制、合理的NI,ROUTER均衡的緩沖配置、均衡的路由算法、足量的VC數(shù)量,決定Alltoall通信性能的關(guān)鍵首先是網(wǎng)絡(luò)固有的屬性即網(wǎng)絡(luò)拓撲.良好的映射關(guān)系將有助于減少網(wǎng)絡(luò)鏈路的沖突率,從而提升Alltoall通信的性能.因此在作業(yè)分配時,合理地配置節(jié)點資源或者在算法設(shè)計時緊耦合網(wǎng)絡(luò)拓撲狀況將大大提升Alltoall通信的性能.由于K元N樹網(wǎng)絡(luò)能夠保證所有源和目標間的一一映射均不存在鏈路沖突[6],因此其任意均勻跨步模式的通信性能均可達到鏈路有效性能的100%,即等同于點到點通信性能.因此樹型網(wǎng)絡(luò)作為支持Alltoall通信的理想拓撲結(jié)構(gòu),是K元N立方體網(wǎng)絡(luò)在Alltoall通信性能方面優(yōu)化的重要標尺.

    4結(jié)束語

    Alltoall性能的理論分析十分復(fù)雜.將Alltoall通信拆分成多個階段的均勻跨步通信是一種提升性能的簡單高效的方法.這種方法避免了目標的沖突.本文給出了一種K元N立方體網(wǎng)絡(luò)中均勻跨步通信模式最低性能的估計值,這對高性能計算機網(wǎng)絡(luò)結(jié)構(gòu)的設(shè)計具有一定的參考價值.本文的公式顯示其性能和一維的長度成反比.特別是當K=4時,4元N立方體網(wǎng)絡(luò)有比較好的Alltoall性能.但最好的性能仍然屬于完全無沖突的K元N樹網(wǎng)絡(luò).在Alltoall通信方面,網(wǎng)絡(luò)拓撲結(jié)構(gòu)仍然是影響性能的第一要素.經(jīng)過模擬與分析,也指出通過節(jié)點重映射手段可提升K元N立方體網(wǎng)絡(luò)的Alltoall通信性能,而消息分割只在某些特定的系統(tǒng)中有效,并不具備普適性.

    參考文獻

    [1]YOGISH Sabharwal, SAURABH K Garg, RAHUL Garg, et al. Optimization of fast fourier transforms on the blue Gene/L supercomputer[C] // Proc of 15th International Conference on High Performance Computing.Bangalore, India, 2008: 309-322.

    [2]Alltoallcommunication[EB/OL]. [2014-4-9].http://en.wikepedia.org/wiki/Alltoall_communication.

    [3]MPI_Alltoall[EB/OL]. [2014-4-9].http://www.mpich.org/static/docs/v3.1/www3/MPI_Alltoall.html.

    [4]SAMEER Kumar, YOGISH Sabharwal, RAHUL Garg, et al. Optimization of Alltoall communication on the blue Gene/L supercomputer[C] // Proc of 37th International Conference on Parallel Processing, Portland, Oregon, 2008: 320-329.

    [5]陳淑平, 盧德平, 陳忠平. InfiniBand網(wǎng)絡(luò)中Alltoall通信性能優(yōu)化[J]. 高性能計算發(fā)展與應(yīng)用, 2012(2): 69-74.

    CHEN Shuping, LU Deping, CHEN Zhongping. Optimization of Alltoall performance in InfiniBand network[J]. Development and Application of High Performance Computing, 2012(2):69-74.(In Chinese)

    [6]SABINE R hring, MAXIMILIAN Ibel, SAJAL K Das, et al. On generalized fat trees[C] // Proc of the 9th International Parallel Processing Symposium.Santa Barbara, California, 1995: 37-44.

    伊人久久国产一区二区| 国产一区亚洲一区在线观看| 欧美日韩视频高清一区二区三区二| 成年人午夜在线观看视频| 涩涩av久久男人的天堂| kizo精华| 男的添女的下面高潮视频| 少妇人妻久久综合中文| 天美传媒精品一区二区| 少妇 在线观看| 日本欧美视频一区| 亚洲成人av在线免费| 男人操女人黄网站| 精品一区在线观看国产| 美女国产高潮福利片在线看| 丝袜喷水一区| 久久国产精品大桥未久av| 看非洲黑人一级黄片| 黄片播放在线免费| 麻豆乱淫一区二区| 一区二区日韩欧美中文字幕 | 多毛熟女@视频| 欧美 亚洲 国产 日韩一| 伊人久久国产一区二区| 日韩熟女老妇一区二区性免费视频| 交换朋友夫妻互换小说| 日韩中文字幕视频在线看片| 久久精品国产综合久久久 | av又黄又爽大尺度在线免费看| 好男人视频免费观看在线| 亚洲精品国产av蜜桃| 欧美人与善性xxx| 只有这里有精品99| 欧美另类一区| a级毛片黄视频| 国产日韩欧美在线精品| 中文字幕另类日韩欧美亚洲嫩草| 菩萨蛮人人尽说江南好唐韦庄| 国产成人免费无遮挡视频| 丝袜在线中文字幕| 一本一本久久a久久精品综合妖精 国产伦在线观看视频一区 | 男女边摸边吃奶| 亚洲内射少妇av| 日本欧美国产在线视频| 久久久国产欧美日韩av| 美女脱内裤让男人舔精品视频| 又大又黄又爽视频免费| 亚洲精品av麻豆狂野| 亚洲精品中文字幕在线视频| 一本一本久久a久久精品综合妖精 国产伦在线观看视频一区 | 国产精品一国产av| 国产精品女同一区二区软件| 国产乱来视频区| 热99久久久久精品小说推荐| 男女边摸边吃奶| 国产片内射在线| 免费黄色在线免费观看| 另类亚洲欧美激情| 亚洲av国产av综合av卡| 亚洲精品国产色婷婷电影| 亚洲精品第二区| 热99久久久久精品小说推荐| 亚洲av中文av极速乱| 精品一区在线观看国产| 韩国av在线不卡| 宅男免费午夜| av在线观看视频网站免费| 精品一区在线观看国产| 99热全是精品| 亚洲精华国产精华液的使用体验| 汤姆久久久久久久影院中文字幕| 中国国产av一级| 青春草国产在线视频| 亚洲国产精品999| 91aial.com中文字幕在线观看| 天堂8中文在线网| 国产无遮挡羞羞视频在线观看| 久久av网站| 亚洲美女黄色视频免费看| 观看美女的网站| 国产精品一二三区在线看| 国产成人一区二区在线| 国产精品无大码| 看免费av毛片| 在线亚洲精品国产二区图片欧美| 九草在线视频观看| 人人妻人人澡人人看| 精品少妇内射三级| 极品少妇高潮喷水抽搐| 国产av码专区亚洲av| 一本色道久久久久久精品综合| 中文字幕精品免费在线观看视频 | 狂野欧美激情性xxxx在线观看| 侵犯人妻中文字幕一二三四区| 97超碰精品成人国产| 国产精品成人在线| 免费观看性生交大片5| 午夜精品国产一区二区电影| 国产白丝娇喘喷水9色精品| 日本wwww免费看| 一区二区三区乱码不卡18| tube8黄色片| 高清黄色对白视频在线免费看| 少妇的逼好多水| 免费黄色在线免费观看| 人妻一区二区av| 日韩中字成人| 国产精品久久久久久av不卡| 十八禁高潮呻吟视频| 欧美日韩一区二区视频在线观看视频在线| 精品久久蜜臀av无| 亚洲人与动物交配视频| 97超碰精品成人国产| 波多野结衣一区麻豆| 久久国产亚洲av麻豆专区| 精品亚洲乱码少妇综合久久| 亚洲欧美一区二区三区黑人 | 最近2019中文字幕mv第一页| 国产成人午夜福利电影在线观看| 国产精品无大码| 久久韩国三级中文字幕| videos熟女内射| 在线观看国产h片| 亚洲精品中文字幕在线视频| 国产一区二区三区综合在线观看 | 久久国产精品男人的天堂亚洲 | 中文字幕亚洲精品专区| 成人亚洲欧美一区二区av| 国产精品人妻久久久影院| 美女国产高潮福利片在线看| 宅男免费午夜| 国产极品粉嫩免费观看在线| 国语对白做爰xxxⅹ性视频网站| 日本欧美视频一区| 母亲3免费完整高清在线观看 | 美女福利国产在线| 免费黄频网站在线观看国产| 天天躁夜夜躁狠狠久久av| 美女xxoo啪啪120秒动态图| 纯流量卡能插随身wifi吗| 最近中文字幕2019免费版| 我的女老师完整版在线观看| av女优亚洲男人天堂| 久久毛片免费看一区二区三区| 日本av免费视频播放| av卡一久久| 一级爰片在线观看| 日韩av不卡免费在线播放| 在线观看美女被高潮喷水网站| 日韩制服丝袜自拍偷拍| 免费女性裸体啪啪无遮挡网站| 激情五月婷婷亚洲| 国产成人欧美| 国产男女超爽视频在线观看| xxx大片免费视频| 狂野欧美激情性bbbbbb| 欧美激情国产日韩精品一区| 亚洲欧美成人综合另类久久久| 亚洲综合精品二区| 国产av一区二区精品久久| 哪个播放器可以免费观看大片| 精品国产国语对白av| 美女中出高潮动态图| av播播在线观看一区| 嫩草影院入口| 在线观看免费视频网站a站| 欧美精品一区二区免费开放| av卡一久久| 日韩电影二区| 日本av免费视频播放| 丰满少妇做爰视频| 亚洲丝袜综合中文字幕| 波多野结衣一区麻豆| 一本久久精品| 久久久欧美国产精品| 国产欧美日韩综合在线一区二区| 国语对白做爰xxxⅹ性视频网站| 考比视频在线观看| av福利片在线| 久久国内精品自在自线图片| 熟女av电影| 少妇人妻 视频| www日本在线高清视频| 久久亚洲国产成人精品v| 视频区图区小说| 中文乱码字字幕精品一区二区三区| 国产毛片在线视频| 亚洲伊人久久精品综合| 51国产日韩欧美| 看免费成人av毛片| 中文精品一卡2卡3卡4更新| 妹子高潮喷水视频| 精品国产一区二区三区久久久樱花| 欧美国产精品一级二级三级| 天天躁夜夜躁狠狠躁躁| 亚洲一码二码三码区别大吗| 久久99热这里只频精品6学生| 一个人免费看片子| 一区二区三区精品91| av卡一久久| 两个人免费观看高清视频| 婷婷色综合大香蕉| 国产精品熟女久久久久浪| 亚洲在久久综合| 亚洲一级一片aⅴ在线观看| 免费黄色在线免费观看| 色94色欧美一区二区| 欧美另类一区| 99久久人妻综合| 美女大奶头黄色视频| 亚洲,一卡二卡三卡| 免费人成在线观看视频色| 国产熟女午夜一区二区三区| 色婷婷久久久亚洲欧美| 精品人妻熟女毛片av久久网站| 免费不卡的大黄色大毛片视频在线观看| 欧美成人午夜精品| 香蕉丝袜av| 久久热在线av| 久久久a久久爽久久v久久| 欧美精品一区二区免费开放| 99久国产av精品国产电影| 欧美激情国产日韩精品一区| 精品久久蜜臀av无| 18禁动态无遮挡网站| 交换朋友夫妻互换小说| 久久韩国三级中文字幕| 另类亚洲欧美激情| 女人精品久久久久毛片| 建设人人有责人人尽责人人享有的| 最近中文字幕2019免费版| 精品第一国产精品| 欧美精品高潮呻吟av久久| 日本色播在线视频| 国产 精品1| 人人妻人人澡人人爽人人夜夜| 一级毛片电影观看| 国产日韩欧美亚洲二区| 欧美亚洲 丝袜 人妻 在线| 欧美人与性动交α欧美软件 | 性色avwww在线观看| 免费在线观看完整版高清| 亚洲精品色激情综合| 亚洲精品456在线播放app| 午夜福利网站1000一区二区三区| 国产精品久久久久久av不卡| 亚洲欧美成人精品一区二区| 18禁裸乳无遮挡动漫免费视频| 亚洲精品中文字幕在线视频| 伊人亚洲综合成人网| 亚洲成人手机| 亚洲,欧美精品.| 一本色道久久久久久精品综合| 丝袜在线中文字幕| 精品人妻偷拍中文字幕| 9191精品国产免费久久| 伦精品一区二区三区| 国产亚洲欧美精品永久| 九九爱精品视频在线观看| 最新的欧美精品一区二区| 中文字幕精品免费在线观看视频 | 日本欧美国产在线视频| 国产在线免费精品| 在线观看国产h片| 亚洲第一av免费看| 精品国产一区二区久久| 另类精品久久| 寂寞人妻少妇视频99o| 一二三四中文在线观看免费高清| 日韩精品免费视频一区二区三区 | 国产成人欧美| 一级,二级,三级黄色视频| 日韩免费高清中文字幕av| 精品少妇黑人巨大在线播放| 欧美另类一区| 亚洲国产最新在线播放| 国产一区二区三区综合在线观看 | 亚洲中文av在线| 亚洲国产精品一区三区| 成年动漫av网址| 美女国产视频在线观看| 亚洲av综合色区一区| 久久久久久久久久久久大奶| 美国免费a级毛片| www.av在线官网国产| 亚洲欧洲精品一区二区精品久久久 | 搡女人真爽免费视频火全软件| 99热6这里只有精品| 寂寞人妻少妇视频99o| av卡一久久| 亚洲成av片中文字幕在线观看 | av国产精品久久久久影院| 午夜免费男女啪啪视频观看| 在线观看三级黄色| 久久精品国产a三级三级三级| 午夜av观看不卡| 狂野欧美激情性bbbbbb| 国产av精品麻豆| 国精品久久久久久国模美| 97超碰精品成人国产| 九色成人免费人妻av| 丁香六月天网| 免费在线观看黄色视频的| 在线观看www视频免费| 成人毛片a级毛片在线播放| 一区二区三区乱码不卡18| av有码第一页| 色视频在线一区二区三区| 国产精品国产av在线观看| 啦啦啦在线观看免费高清www| av线在线观看网站| 一区在线观看完整版| 秋霞在线观看毛片| 一级片免费观看大全| 大香蕉97超碰在线| 99国产综合亚洲精品| 久久韩国三级中文字幕| 亚洲精品美女久久av网站| 搡老乐熟女国产| 亚洲欧美色中文字幕在线| 亚洲国产精品专区欧美| 久久久久久久国产电影| 亚洲天堂av无毛| 日韩一区二区三区影片| 亚洲激情五月婷婷啪啪| 丝袜脚勾引网站| 日本黄大片高清| 日韩欧美精品免费久久| 国产精品.久久久| 国产综合精华液| 国产成人午夜福利电影在线观看| √禁漫天堂资源中文www| 国产精品麻豆人妻色哟哟久久| 少妇人妻久久综合中文| 乱人伦中国视频| 日韩中字成人| 欧美 日韩 精品 国产| 午夜日本视频在线| 欧美精品亚洲一区二区| 亚洲精品aⅴ在线观看| av电影中文网址| 久久国产精品大桥未久av| 少妇猛男粗大的猛烈进出视频| 亚洲在久久综合| 两个人看的免费小视频| 日韩成人伦理影院| 国产亚洲最大av| 成年女人在线观看亚洲视频| 欧美精品国产亚洲| 夜夜爽夜夜爽视频| 精品久久蜜臀av无| 亚洲第一av免费看| 国产精品人妻久久久影院| 久久久国产欧美日韩av| 十分钟在线观看高清视频www| 久久精品国产a三级三级三级| 成人国产麻豆网| 飞空精品影院首页| 美女主播在线视频| 久久久久久人人人人人| av福利片在线| 国产爽快片一区二区三区| 69精品国产乱码久久久| 飞空精品影院首页| 中文字幕人妻熟女乱码| 香蕉精品网在线| 五月伊人婷婷丁香| 欧美日韩亚洲高清精品| 国产一区二区在线观看日韩| 亚洲精品456在线播放app| 亚洲色图 男人天堂 中文字幕 | 日韩av不卡免费在线播放| 国产精品99久久99久久久不卡 | 你懂的网址亚洲精品在线观看| 性色avwww在线观看| 国产av码专区亚洲av| 精品久久久精品久久久| 中文字幕人妻丝袜制服| 国产精品熟女久久久久浪| 男女免费视频国产| av女优亚洲男人天堂| 男的添女的下面高潮视频| 午夜激情av网站| 国产精品 国内视频| 最近2019中文字幕mv第一页| 这个男人来自地球电影免费观看 | av女优亚洲男人天堂| 边亲边吃奶的免费视频| 最近2019中文字幕mv第一页| freevideosex欧美| 激情视频va一区二区三区| 制服诱惑二区| 晚上一个人看的免费电影| 欧美人与性动交α欧美精品济南到 | 亚洲欧美一区二区三区国产| 亚洲av国产av综合av卡| 啦啦啦啦在线视频资源| 国产一区二区三区av在线| 欧美 日韩 精品 国产| 日韩伦理黄色片| 成年av动漫网址| 草草在线视频免费看| 亚洲伊人色综图| 成人国产av品久久久| 亚洲精品日本国产第一区| 午夜福利网站1000一区二区三区| 水蜜桃什么品种好| 亚洲精品日韩在线中文字幕| 热re99久久精品国产66热6| 欧美精品一区二区免费开放| 中文字幕制服av| 人人妻人人澡人人看| 精品人妻一区二区三区麻豆| av又黄又爽大尺度在线免费看| 国产淫语在线视频| 国产片内射在线| 久久av网站| 亚洲 欧美一区二区三区| 久久久久久久久久久免费av| av电影中文网址| 男女免费视频国产| 久久精品夜色国产| 欧美精品一区二区免费开放| 天天躁夜夜躁狠狠躁躁| 一级毛片 在线播放| 免费少妇av软件| 一级a做视频免费观看| 国产精品人妻久久久久久| 视频中文字幕在线观看| 五月开心婷婷网| 最后的刺客免费高清国语| 天堂中文最新版在线下载| 丝袜脚勾引网站| 日产精品乱码卡一卡2卡三| 亚洲成人一二三区av| 视频区图区小说| 在线观看人妻少妇| 色哟哟·www| 久久av网站| 日日摸夜夜添夜夜爱| 亚洲人成77777在线视频| 日韩免费高清中文字幕av| 交换朋友夫妻互换小说| 天堂俺去俺来也www色官网| 最黄视频免费看| av线在线观看网站| 精品午夜福利在线看| 赤兔流量卡办理| 黄色怎么调成土黄色| 亚洲av电影在线进入| 亚洲av免费高清在线观看| 一级,二级,三级黄色视频| 另类精品久久| 菩萨蛮人人尽说江南好唐韦庄| 亚洲第一av免费看| 久久午夜综合久久蜜桃| 少妇高潮的动态图| 欧美 亚洲 国产 日韩一| 亚洲精品自拍成人| 日日啪夜夜爽| 精品久久国产蜜桃| 高清视频免费观看一区二区| 久久午夜福利片| 午夜福利网站1000一区二区三区| 亚洲国产精品999| 久久青草综合色| 夫妻性生交免费视频一级片| www日本在线高清视频| 汤姆久久久久久久影院中文字幕| 18禁观看日本| 又粗又硬又长又爽又黄的视频| 免费看不卡的av| 一区二区三区四区激情视频| 亚洲欧美精品自产自拍| a级毛色黄片| 日韩精品有码人妻一区| 久久久久久久亚洲中文字幕| 制服人妻中文乱码| 亚洲经典国产精华液单| 欧美日韩av久久| 成人黄色视频免费在线看| 国产乱人偷精品视频| 国产男女内射视频| 久久精品国产亚洲av涩爱| 亚洲国产最新在线播放| 亚洲激情五月婷婷啪啪| 天天躁夜夜躁狠狠躁躁| 高清av免费在线| 欧美激情国产日韩精品一区| 午夜福利影视在线免费观看| 国产极品天堂在线| 乱人伦中国视频| 精品久久国产蜜桃| www.av在线官网国产| 日本欧美国产在线视频| 国产一区二区三区av在线| av在线app专区| 一级a做视频免费观看| 免费看光身美女| 又黄又粗又硬又大视频| 国产黄频视频在线观看| 99久久人妻综合| 国产亚洲午夜精品一区二区久久| 免费大片黄手机在线观看| 欧美人与性动交α欧美软件 | 亚洲精品一区蜜桃| 久久久精品94久久精品| 少妇高潮的动态图| 国产精品一区www在线观看| 五月伊人婷婷丁香| 男人添女人高潮全过程视频| 免费观看性生交大片5| 午夜福利在线观看免费完整高清在| 青春草国产在线视频| www.色视频.com| 久久久精品免费免费高清| 亚洲欧美日韩卡通动漫| 天天操日日干夜夜撸| 晚上一个人看的免费电影| 在线观看三级黄色| 捣出白浆h1v1| 免费日韩欧美在线观看| 亚洲欧美成人精品一区二区| 好男人视频免费观看在线| 一级,二级,三级黄色视频| 久久久久久人妻| 国产国拍精品亚洲av在线观看| 亚洲精品美女久久av网站| 在现免费观看毛片| 欧美日韩精品成人综合77777| 国产xxxxx性猛交| xxxhd国产人妻xxx| 午夜福利在线观看免费完整高清在| 国产69精品久久久久777片| 女人精品久久久久毛片| 午夜福利,免费看| 婷婷色综合www| 超色免费av| 涩涩av久久男人的天堂| 精品第一国产精品| av.在线天堂| 啦啦啦啦在线视频资源| 大码成人一级视频| 99国产精品免费福利视频| 2021少妇久久久久久久久久久| 日本av免费视频播放| 亚洲第一av免费看| 亚洲,一卡二卡三卡| 亚洲av欧美aⅴ国产| 亚洲精品国产av蜜桃| 男女边吃奶边做爰视频| 国产精品一区二区在线观看99| 亚洲欧美日韩另类电影网站| 亚洲综合色惰| 一本一本久久a久久精品综合妖精 国产伦在线观看视频一区 | 国产精品熟女久久久久浪| 亚洲天堂av无毛| 美女中出高潮动态图| 91精品国产国语对白视频| 久久免费观看电影| 久久精品国产鲁丝片午夜精品| 制服人妻中文乱码| 免费观看在线日韩| 如何舔出高潮| 亚洲内射少妇av| 亚洲成色77777| 欧美成人午夜精品| 一本色道久久久久久精品综合| 久久久久久久久久成人| 国产精品久久久久成人av| 亚洲天堂av无毛| 男女无遮挡免费网站观看| 啦啦啦视频在线资源免费观看| av网站免费在线观看视频| 久久人人97超碰香蕉20202| 国产视频首页在线观看| 欧美日韩综合久久久久久| 妹子高潮喷水视频| 大片电影免费在线观看免费| videosex国产| 日韩一区二区三区影片| 精品午夜福利在线看| 精品酒店卫生间| 亚洲精品成人av观看孕妇| 十分钟在线观看高清视频www| 久久精品国产亚洲av涩爱| a 毛片基地| 少妇人妻 视频| 日韩成人伦理影院| 在现免费观看毛片| 亚洲美女视频黄频| 国产毛片在线视频| av女优亚洲男人天堂| 精品一区二区免费观看| 欧美人与善性xxx| a 毛片基地| 桃花免费在线播放| 精品少妇黑人巨大在线播放| 国产 精品1| 女人精品久久久久毛片| 国产在线视频一区二区| 最近的中文字幕免费完整| 亚洲综合色惰| 国产在线视频一区二区| 少妇人妻精品综合一区二区| 爱豆传媒免费全集在线观看| av有码第一页| 国产精品一二三区在线看| 国产亚洲欧美精品永久| 免费高清在线观看日韩| 欧美亚洲日本最大视频资源| 欧美另类一区| 精品熟女少妇av免费看| 免费黄网站久久成人精品| 国产日韩一区二区三区精品不卡|