• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    一種在仿真工具軟件內直接調度計算資源的方法

    2020-01-03 10:10:55任靜
    現代信息科技 2020年16期

    摘? 要:仿真工具軟件不具備計算資源的調度能力,在高性能計算系統(tǒng)上進行仿真,必須在設計完成后,先保存模型,然后到調度軟件上申請計算資源,仿真與設計過程相對分離,過程重復。通過研究MPI并行計算原理及調度軟件調度原理,以常用電磁仿真工具軟件FEKO為例,研究其并行計算的模式,在FEKO與高性能計算系統(tǒng)調度軟件之間,增加一個中間過程,實現在該軟件內對計算資源的直接調度。結果表明,可以做到在仿真工具軟件內對計算資源直接調度。

    關鍵詞:高性能計算;仿真工具;資源調度;FEKO

    中圖分類號:TP311.5? ? ? 文獻標識碼:A 文章編號:2096-4706(2020)16-0016-04

    A Method of Scheduling Computing Resources Directly in Simulation Software

    REN Jing

    (The 29th Research Institute of China Electronics Technology Group Corporation,Chengdu? 610036,China)

    Abstract:The simulation software does not have the ability of scheduling computing resources. In the simulation of high-performance computing system,the model must be saved after the design is completed,and then switch to the scheduling software interface to apply for computing resources. The process of simulation and design is relatively separated,and the process is repeated. By studying MPI parallel computing principle and scheduling principle of scheduling software,taking the commonly used electromagnetic simulation software FEKO as an example,its parallel computing mode is studied. An intermediate process is added between FEKO and high performance computing system scheduling software to realize the direct scheduling of high performance computing system resources in the tool software. The results show that the system resources can be directly scheduled in the simulation software.

    Keywords:HPC;simulation tools;scheduling resources;FEKO

    0? 引? 言

    高性能計算(HPC)是指利用大量處理單元的聚合能力來解決復雜問題。隨著集群技術的成熟,高性能計算的成本不斷下降,催生了建立在并行計算基礎之上的大型仿真設計等應用。在高性能計算系統(tǒng)上進行仿真設計,比在單臺計算機上仿真設計,不僅能提升數十、數百倍的精度和規(guī)模,還獲得數十、數百倍的仿真求解速度。

    但是,在高性能計算系統(tǒng)上進行仿真設計存在一個缺點:用戶感覺到不如在單臺計算機上操作便捷。區(qū)別在于:用戶在單臺計算機上設計仿真時,全部工作在工具軟件內完成,即在工具軟件內完成設計建模后,直接在軟件界面上點擊“求解”命令鍵,即可啟動仿真計算;而在高性能計算系統(tǒng)上,需要用戶設計好模型后,先保存起來,然后切換到調度軟件界面上申請計算資源,才能進行計算。這造成設計與仿真工作的相對分離,過程重復,導致效率降低,與高性能計算系統(tǒng)仿真設計一體化的發(fā)展趨勢相背離,是高性能計算系統(tǒng)向科研生產一線推廣應用過程中,急需優(yōu)化的問題之一。產生這個問題的根源在于,仿真工具軟件本身不是調度軟件,不掌握高性能計算系統(tǒng)中計算資源情況,包括服務器名稱、CPU核的數量、忙閑狀態(tài)等。在其軟件內發(fā)出起計算資源調度,必然造成多用戶、多作業(yè)計算資源沖突,計算效率低下,甚至系統(tǒng)崩潰。

    本文先是研究了通用MPI并行計算原理,及高性能計算系統(tǒng)中調度軟件對計算資源調度的原理。然后以常用的電磁仿真工具軟件FEKO為對象,找出FEKO軟件與并行計算相關的所有進程,研究其資源申請、調度的內部邏輯。緊接著,設計了一種在FEKO軟件內直接調度計算資源的方法:在FEKO的并行計算相關腳本程序和調度管理軟件之間,增加一個中間過程,實現了在FEKO軟件內,對高性能計算系統(tǒng)計算資源進行申請,并將申請傳遞給調度軟件,由調度軟件統(tǒng)一調度資源,效果與通過調度軟件申請計算資源完全一致。結果表明,在仿真工具軟件內直接調度計算資源完全可行,大大優(yōu)化了高性能計算系統(tǒng)的使用。目前,該研究成果已經在本文作者所在科研院所的高性能計算系統(tǒng)上成功應用。

    1? MPI并行計算

    并行計算(Parallel Computing)是指同時使用多個計算單元進行計算。即將被求解的問題分解成若干個部分,各部分均由一個獨立的處理單元來計算。目的是加快求解問題的速度,提升求解問題的規(guī)模。由于程序的各部分之間需要通過來回傳遞消息的方式通信,要使得消息傳遞方式可移植,就必須采用標準的消息傳遞庫。

    當前,被廣泛采用的消息傳遞標準是消息傳遞接口(Message Passing Interface,MPI),它是一種基于消息傳遞的跨語言的并行編程技術,支持點對點通信和廣播通信。MPI是一種編程接口標準,它定義了一組接口函數,使應用程序可以將消息從一個MPI進程送到另一個MPI進程。各個廠商或組織遵循這些標準實現自己的MPI軟件包(如鏈接庫等形式),程序員僅需設計好并行算法,使用對應的MPI庫就能夠實現基于消息傳遞的并行計算。

    Open MPI是一種高性能消息傳遞庫,其中有一個常用進程分配參數(--machinefile),在多機環(huán)境中,運行程序前先創(chuàng)建一個machinefile文件,其中列出要使用的節(jié)點名和每個節(jié)點所用核數(本文中稱為“機器與核數配比清單”),然后用mpirun命令在指定的節(jié)點上運行程序。

    2? 高性能計算系統(tǒng)調度軟件調度原理

    高性能計算系統(tǒng)擁有大規(guī)模的并行計算資源,是提供并行計算的強大工具。在高性能計算系統(tǒng)中,由調度軟件將分散的、通過網絡連接的多臺計算機的計算資源整合為整體的計算資源池,根據用戶申請,遵循一定的策略,進行調度管理。調度軟件調度資源時,會將空閑的資源分配給需要的作業(yè);資源不足時,會依照策略進行排隊或優(yōu)先處理,從而不會出現計算資源的搶占、沖突,實現資源共享與效能提升。

    調度軟件對于計算資源分配的機制,主要是按照MPI并行的進程分配機制執(zhí)行的。由于MPI進程在CPU核單元上計算效率最高,因此,調度軟件對資源的管理和調度是以CPU核為單位的。其邏輯主要為:隨時監(jiān)控系統(tǒng)中CPU核的狀態(tài),根據仿真作業(yè)對于CPU核數(等于作業(yè)進程數,本文中稱為“總核數(進程數)”)的需求,從所有空閑CPU核中分配相應數量的CPU核。這些CPU核有可能分散在不同的計算機中,例如,對于24核的需求,可能在機器A中分配了8核,在機器B中分配了16核。于是就產生了配比清單:

    機器A:8

    機器B:16

    調度軟件將配比清單與MPI并行程序的進程分配參數(--machinefile)相對應,啟動MPI并行程序:在機器A上啟動8個執(zhí)行并行進程,每個并行進程占據1個CPU核;在機器B上啟動16個并行進程,每個并行進程占據1個CPU核。于是,對于調度軟件來說,總計24個計算資源,就精準的分配給了仿真作業(yè)的24個并行進程。

    3? FEKO作業(yè)的并行計算機制

    3.1? FEKO軟件啟動并行計算的兩種方法

    FEKO作為電磁領域常用的仿真軟件,采用通用的MPI并行計算機制。本文作者研究了FEKO提供的兩種常用的啟動并發(fā)計算的方法:

    方法一:FEKO軟件界面上有一個“Solver/Run”按鍵,在其彈出界面上,用戶可配置所需核數及機器名,如圖1所示。

    當用戶完成配置后,點擊“OK”,FEKO軟件將觸發(fā)求解命令,在配置的計算資源上進行求解。

    圖1的配置界面只能用于用戶在單臺計算機上仿真的資源申請,此種情況下,用戶清楚自己所使用的機器的名稱。即便在單臺計算機上,這樣的資源調度也是不安全的,因為用戶可能申請超過該機空閑核數的資源,可能造成計算停頓甚至崩潰。

    在多用戶共享使用的高性能計算系統(tǒng)中,這樣的申請操作則完全不可行:用戶不清楚集群中空閑機器的名稱、核數,在多作業(yè)排隊使用資源時,用戶更不可能清楚哪些資源可以最快釋放出來供計算使用。針對系統(tǒng)顯示的空閑機器及核數進行配置,如果多人配置了相同的機器,會造成資源爭搶和沖突。由用戶配置申請計算資源,而未通過任何統(tǒng)一的資源管理與分配系統(tǒng),不能避免多用戶、多作業(yè)的資源爭搶與沖突。因此,傳統(tǒng)的高性能計算系統(tǒng)不允許用戶在FEKO軟件內直接向高性能計算系統(tǒng)提交作業(yè)、申請計算資源。

    方法二:在命令行模式下,FEKO軟件提供了并行計算的命令接口(Command Line)runfeko。接口格式:

    runfeko算例文件 --machines-file 機器與核數配比清單- np總核數(進程數)

    其中“總核數(進程數)”為需求的總的核數(進程數),也是“機器與核數配比清單”中各機器所分配核數的總和。

    FEKO利用這個接口,完成在命令行模式下對計算資源的申請,并在所申請的計算資源上啟動計算。但是,這也是不考慮計算資源的忙閑狀態(tài),與方法一實際上是同一邏輯原理不同形式的方法。因而也是高性能計算系統(tǒng)禁止使用的。

    在對使用FEKO提供的仿真計算的兩種常用方法的研究中,發(fā)現無論是方法一或者方法二,FEKO都只是在對自身作業(yè)的并行進程進行劃分、觸發(fā)計算,而不是對計算資源進行安全合理的調度。在多用戶共享的高性能計算環(huán)境中,唯有調度軟件掌握著集群中所有機器的名稱、核數,持續(xù)收集資源使用情況,避免資源爭搶和沖突,實現負載均衡。因此要實現在FEKO軟件內向高性能計算系統(tǒng)提交作業(yè)、申請計算資源,需要將FEKO軟件中申請的計算資源信息傳導給調度軟件,由調度軟件完成調度工作。

    3.2? FEKO并行計算內部算法

    分析FEKO并行計算的接口,本文作者發(fā)現FEKO并行計算遵循Open MPI的接口規(guī)范:采用--machines-file和-np參數,同時接口的格式要求也一致。而高性能計算系統(tǒng)調度軟件作為支持MPI并行計算的通用軟件,也建立兩個重要輸出:--machinefile 機器與核數配比清單和-np 總核數(進程數),內容與MPI接口的同名參數相對應。

    再對FEKO并行計算的真實進程進行進一步的分析。如圖2所示,運行Pstree -ua sysadmin命令,可以查看FEKO并行計算有關進程樹,其中含有很多進程,例如:runfeko、adaptfeko、feko_parallel、feko_parallel_r、mpirun。研究其中的相互關系,追蹤FEKO并行計算中所申請的計算資源參數的傳遞方式。

    分析發(fā)現,FEKO在并行計算的時候,會調用一個腳本文件run_feko。run_feko中調用了FEKO的計算接口runfeko,在執(zhí)行的時候會傳遞類似于機器與核數配比清單和總核數(進程數)的參數,而這些參數值的來源則來自前文中,用戶在FEKO界面中設置的并行機器和核數。然后runfeko將這些參數轉化為并行的進程數,在相應的節(jié)點上開展并行計算。

    4? 增加中間過程實現FEKO軟件內對計算資源的直接調度

    通過上述分析,確定了FEKO并行計算時,利用run_feko執(zhí)行腳本對用戶申請的計算資源進行采集。本文作者以run_feko腳本作為橋梁,創(chuàng)建中間過程,將FEKO軟件原始的并行資源創(chuàng)建與傳遞過程與高性能計算系統(tǒng)的調度過程結合起來,在FEKO并行計算時所需的計算資源置換為調度軟件分配的資源,使得FEKO作業(yè)的并行計算采用調度軟件所分配的資源進行,解決多用戶手動指定計算資源造成的計算資源的沖突問題。

    具體實現方法為:

    將FEKO軟件原始的run_feko腳本進行重載,原腳本實現的是獲取用戶在FEKO軟件界面內配置的計算資源,新的腳本實現將獲取到的計算資源傳遞給調度軟件,并通過調度軟件來分配計算資源。步驟為:

    (1)編輯run_feko腳本文件,獲得FEKO軟件界面內配置的總核數(進程數),并將核數轉換為通過調度軟件生成的機器與核數配比清單。

    np=`awk -F\= '$1=="NumberOfParallelProcesses"{print $2}' feko.ini`

    上述語句用以獲得單節(jié)點并行的核數設置,其中np是總核數(進程數)。

    np=`awk -F\: 'BEGIN{a=0}{a+=$2}END{print a}' machines.feko`

    上述語句用以獲得多節(jié)點并行的核數設置,其中np是總核數(進程數)。

    (2)執(zhí)行命令:jsub -q feko_queue -n $np $*,將用戶在FEKO軟件內配置的總核數(進程數)轉換為調度軟件分配的核數,并啟動計算。其中,jsub是仿真作業(yè)提交命令,feko_queue是feko調度隊列,$np是從上文中獲得的總核數(進程數),$*是FEKO仿真求解算例及參數。

    (3)在調度軟件中創(chuàng)建一個新的FEKO作業(yè)求解腳本run_feko_orig,將調度軟件分配的機器與核數配比清單和總核數(進程數)作為參數通過FEKO作業(yè)求解腳本回傳FEKO的Solver命令中,驅動FEKO利用調度軟件分配的資源進行仿真求解:

    run_feko_orig $1 --run-from-gui -np $np --machines-file $hostfile

    該命令將調度軟件分配的資源回傳FEKO的Solver命令中,驅動FEKO利用調度軟件分配的資源進行仿真求解。其中run_feko_orig是FEKO求解腳本,包含FEKO的Solver命令;$1是FEKO仿真求解算例及參數;$np是調度軟件分配的總核數(進程數);$hostfile是調度軟件分配的機器與核數配比清單。

    通過測試,上述腳本運行后,調用FEKO的Solver命令,利用用戶在FEKO軟件界面上配置的計算資源數創(chuàng)建Solver進程,但是實際按照調度軟件的機器與核數配比清單分配,實現了在FEKO軟件內申請計算資源,借調度軟件提交作業(yè)、申請計算資源,按照調度軟件的統(tǒng)一調度策略完成FEKO并行計算的資源分配,并在集群模式下完成仿真計算的目標。

    5? 結? 論

    本研究實現了在FEKO軟件內直接調度計算資源,啟動并行計算,使得高性能計算系統(tǒng)上實現仿真和設計一體化,簡化了工作過程。本文作者所使用的方法,是通過對并行計算和調度原理的研究,在調度軟件和工具軟件之間增加一個中間過程,實現工具軟件內的參數向調度軟件的傳遞。由于支持高性能計算的仿真工具軟件均遵循MPI標準,調度軟件具有通用性,所以對于在其他仿真工具軟件內直接調度高性能計算系統(tǒng)上的計算資源的方法的實現,具有普適性。但本文中的原代碼及命令是以FEKO為例,并非所有仿真軟件都可以直接套用。某特定的工具軟件,還需依照本文的思路,研究其并行進程的命令接口、參數,并做類似重載,以實現文中提到的直接調度功能。

    參考文獻:

    [1] SPI.mpirun(1)man page (version 4.0.5) [EB/OL].[2020-05-30].https://www.open-mpi.org/doc/v4.0/man1/mpirun.1.php.

    [2] 臥龍小三.實戰(zhàn)Linux Shell編程與服務器管理 [M].北京:電子工業(yè)出版社,2010.

    [3] tomctx.并行計算與MPI [EB/OL].(2019-06-01).https: //blog.csdn.net/tomjchan/article/details/90730497.

    作者簡介:任靜(1974.05—),女,漢族,四川夾江人,工程師,工程碩士,研究方向:高性能計算及人工智能。

    国产 精品1| 色综合色国产| 亚洲精品自拍成人| 国产亚洲欧美精品永久| 夫妻午夜视频| 午夜福利网站1000一区二区三区| 高清视频免费观看一区二区| 成年女人在线观看亚洲视频| 乱码一卡2卡4卡精品| 尤物成人国产欧美一区二区三区| 国产一区有黄有色的免费视频| 美女中出高潮动态图| 午夜免费观看性视频| 免费大片黄手机在线观看| 国产av精品麻豆| 一个人看的www免费观看视频| 91狼人影院| 亚洲久久久国产精品| 亚洲经典国产精华液单| 美女脱内裤让男人舔精品视频| 纵有疾风起免费观看全集完整版| 国产永久视频网站| 自拍偷自拍亚洲精品老妇| 精品国产乱码久久久久久小说| 国产成人免费观看mmmm| 亚洲内射少妇av| 深爱激情五月婷婷| 一区二区三区四区激情视频| 日韩欧美精品免费久久| 亚洲国产色片| 欧美日韩亚洲高清精品| videos熟女内射| 99热这里只有精品一区| 久久国产精品男人的天堂亚洲 | 在线观看av片永久免费下载| 97在线视频观看| 中文乱码字字幕精品一区二区三区| 国产精品国产三级国产专区5o| av在线app专区| 免费看光身美女| 国产男女超爽视频在线观看| 色5月婷婷丁香| 久久亚洲国产成人精品v| 国产在线视频一区二区| 国产精品一区二区在线观看99| 大话2 男鬼变身卡| 亚洲精品乱码久久久久久按摩| 日本午夜av视频| 免费不卡的大黄色大毛片视频在线观看| 一级毛片电影观看| 高清不卡的av网站| 夜夜骑夜夜射夜夜干| 久久精品夜色国产| 干丝袜人妻中文字幕| 亚洲av成人精品一区久久| 亚洲成人av在线免费| 草草在线视频免费看| 91精品伊人久久大香线蕉| 久久久久久久国产电影| 欧美最新免费一区二区三区| 国产伦精品一区二区三区视频9| 国产亚洲午夜精品一区二区久久| 少妇猛男粗大的猛烈进出视频| 亚洲av免费高清在线观看| 亚洲图色成人| 日日摸夜夜添夜夜添av毛片| 国产女主播在线喷水免费视频网站| 精品久久久久久久久亚洲| 99热网站在线观看| 日本vs欧美在线观看视频 | 国产黄片视频在线免费观看| 国产一级毛片在线| 午夜视频国产福利| 黑丝袜美女国产一区| 精品国产露脸久久av麻豆| 国产乱人视频| 国产亚洲5aaaaa淫片| 18禁裸乳无遮挡动漫免费视频| 少妇的逼好多水| 亚洲一级一片aⅴ在线观看| 日韩av免费高清视频| 一区二区三区四区激情视频| 嘟嘟电影网在线观看| 三级国产精品片| 欧美极品一区二区三区四区| 一级av片app| videos熟女内射| 欧美日韩一区二区视频在线观看视频在线| 国产精品三级大全| 国产精品久久久久久久久免| 欧美区成人在线视频| 一本—道久久a久久精品蜜桃钙片| 99久久精品国产国产毛片| 99热这里只有是精品50| 亚洲av国产av综合av卡| 国产av国产精品国产| 丝瓜视频免费看黄片| 网址你懂的国产日韩在线| 日韩中字成人| 免费av中文字幕在线| 精品一区在线观看国产| 亚洲欧洲日产国产| 久久综合国产亚洲精品| 亚洲av在线观看美女高潮| 精品国产一区二区三区久久久樱花 | 丰满人妻一区二区三区视频av| 一本久久精品| 欧美高清成人免费视频www| 久久99精品国语久久久| 国产精品久久久久久av不卡| 久久国产精品男人的天堂亚洲 | 嘟嘟电影网在线观看| 少妇高潮的动态图| 啦啦啦在线观看免费高清www| 国产人妻一区二区三区在| 熟女av电影| 哪个播放器可以免费观看大片| 国产成人免费无遮挡视频| 99久久人妻综合| 亚洲电影在线观看av| 一级片'在线观看视频| 亚洲欧美一区二区三区国产| 99re6热这里在线精品视频| 少妇被粗大猛烈的视频| 色婷婷久久久亚洲欧美| 国产探花极品一区二区| 97超视频在线观看视频| 99热这里只有是精品在线观看| 一个人看视频在线观看www免费| 少妇丰满av| 日韩免费高清中文字幕av| 夜夜爽夜夜爽视频| 欧美日韩在线观看h| 美女福利国产在线 | 欧美bdsm另类| 中文乱码字字幕精品一区二区三区| 人人妻人人看人人澡| 亚洲美女黄色视频免费看| 在线观看免费高清a一片| 久久久a久久爽久久v久久| 成人毛片a级毛片在线播放| 久久久久人妻精品一区果冻| 亚洲国产精品国产精品| 男女免费视频国产| 久久人人爽av亚洲精品天堂 | 国产男人的电影天堂91| 99热全是精品| 九九在线视频观看精品| 中国国产av一级| 亚洲国产成人一精品久久久| 中文天堂在线官网| 日日摸夜夜添夜夜爱| tube8黄色片| 91午夜精品亚洲一区二区三区| 视频中文字幕在线观看| 中文字幕久久专区| 日韩精品有码人妻一区| 免费黄色在线免费观看| 色网站视频免费| 2018国产大陆天天弄谢| 内地一区二区视频在线| 色综合色国产| 亚洲成人中文字幕在线播放| 精品久久久久久久久av| 大片免费播放器 马上看| 三级国产精品片| 国产毛片在线视频| 亚洲自偷自拍三级| 王馨瑶露胸无遮挡在线观看| 蜜桃亚洲精品一区二区三区| 日韩视频在线欧美| 麻豆成人av视频| 欧美精品人与动牲交sv欧美| 国产av国产精品国产| 观看免费一级毛片| 91午夜精品亚洲一区二区三区| 久久青草综合色| 少妇精品久久久久久久| 哪个播放器可以免费观看大片| 最近手机中文字幕大全| 久久久欧美国产精品| 看非洲黑人一级黄片| av不卡在线播放| 熟女av电影| 亚洲伊人久久精品综合| 性色av一级| 最近中文字幕2019免费版| 亚洲成色77777| 国产成人91sexporn| 最近2019中文字幕mv第一页| 熟女电影av网| 最近中文字幕高清免费大全6| 老女人水多毛片| 亚洲精品视频女| 啦啦啦视频在线资源免费观看| 精品久久久噜噜| 街头女战士在线观看网站| av国产精品久久久久影院| 在线观看一区二区三区激情| 久久99精品国语久久久| 成人漫画全彩无遮挡| 热99国产精品久久久久久7| 亚洲国产欧美人成| 老司机影院成人| 国产伦精品一区二区三区四那| 国产av码专区亚洲av| 亚州av有码| 水蜜桃什么品种好| 色5月婷婷丁香| 日本vs欧美在线观看视频 | 欧美少妇被猛烈插入视频| 简卡轻食公司| 成年女人在线观看亚洲视频| 久久热精品热| 美女xxoo啪啪120秒动态图| 女的被弄到高潮叫床怎么办| 五月开心婷婷网| 久久久成人免费电影| 丰满少妇做爰视频| 中文字幕人妻熟人妻熟丝袜美| 全区人妻精品视频| 2018国产大陆天天弄谢| 免费在线观看成人毛片| 免费看不卡的av| 亚洲精品自拍成人| 老司机影院成人| 黄色配什么色好看| 搡老乐熟女国产| 又爽又黄a免费视频| 婷婷色麻豆天堂久久| 亚洲婷婷狠狠爱综合网| 丝袜喷水一区| 在线精品无人区一区二区三 | 亚洲成人av在线免费| 永久网站在线| 色婷婷av一区二区三区视频| videossex国产| 免费看不卡的av| 十分钟在线观看高清视频www | 尤物成人国产欧美一区二区三区| 国产亚洲5aaaaa淫片| 国产精品久久久久成人av| 在线精品无人区一区二区三 | 国产成人freesex在线| 国产男女内射视频| tube8黄色片| 婷婷色综合大香蕉| 亚洲人与动物交配视频| 亚洲av二区三区四区| 久久久久精品久久久久真实原创| 啦啦啦中文免费视频观看日本| 人妻系列 视频| 联通29元200g的流量卡| 国产精品偷伦视频观看了| 免费观看的影片在线观看| 精品少妇黑人巨大在线播放| 国产成人精品婷婷| 国产精品麻豆人妻色哟哟久久| 精华霜和精华液先用哪个| 国产精品久久久久久精品电影小说 | 国产亚洲91精品色在线| 亚洲欧美日韩另类电影网站 | 99精国产麻豆久久婷婷| 男女下面进入的视频免费午夜| 91精品国产国语对白视频| 免费看日本二区| 国产一区二区三区综合在线观看 | 少妇被粗大猛烈的视频| 日日摸夜夜添夜夜爱| 午夜免费男女啪啪视频观看| 高清av免费在线| 蜜桃久久精品国产亚洲av| 久久久午夜欧美精品| 高清欧美精品videossex| 国产精品一区二区三区四区免费观看| 免费大片18禁| 亚洲精华国产精华液的使用体验| 国产男人的电影天堂91| av在线老鸭窝| 十分钟在线观看高清视频www | 日韩视频在线欧美| 亚洲精品色激情综合| 成年av动漫网址| 日日啪夜夜撸| 久久精品夜色国产| 国产成人精品久久久久久| 亚洲高清免费不卡视频| 女性生殖器流出的白浆| 人人妻人人添人人爽欧美一区卜 | 18禁裸乳无遮挡动漫免费视频| 亚洲av不卡在线观看| 久久99精品国语久久久| 久久精品国产亚洲网站| 婷婷色麻豆天堂久久| 色婷婷久久久亚洲欧美| 日本黄大片高清| 好男人视频免费观看在线| 久久精品国产亚洲av涩爱| 亚洲精品国产成人久久av| 在线观看一区二区三区激情| 免费不卡的大黄色大毛片视频在线观看| 精品99又大又爽又粗少妇毛片| av播播在线观看一区| 下体分泌物呈黄色| 边亲边吃奶的免费视频| 老司机影院成人| 国产有黄有色有爽视频| 国产在视频线精品| 国产精品久久久久久久电影| 婷婷色综合www| 亚洲色图av天堂| 国产黄片视频在线免费观看| 国产成人freesex在线| 国产精品精品国产色婷婷| a级一级毛片免费在线观看| 日韩中文字幕视频在线看片 | 夫妻午夜视频| 中文字幕久久专区| 久久久国产一区二区| 丝袜喷水一区| av又黄又爽大尺度在线免费看| 丝瓜视频免费看黄片| 黄片wwwwww| 亚洲精品中文字幕在线视频 | 亚洲av男天堂| 国产日韩欧美亚洲二区| 草草在线视频免费看| 晚上一个人看的免费电影| 自拍偷自拍亚洲精品老妇| 午夜激情福利司机影院| 亚洲精品久久久久久婷婷小说| 下体分泌物呈黄色| 久久久亚洲精品成人影院| 亚洲精品日本国产第一区| 一级毛片电影观看| 80岁老熟妇乱子伦牲交| 91久久精品国产一区二区三区| 精品视频人人做人人爽| 亚洲国产欧美人成| 国产午夜精品一二区理论片| 日本猛色少妇xxxxx猛交久久| 国产色爽女视频免费观看| 日日撸夜夜添| 国产大屁股一区二区在线视频| 亚洲成人中文字幕在线播放| 亚洲av不卡在线观看| 哪个播放器可以免费观看大片| 欧美丝袜亚洲另类| 一区二区三区精品91| 久久精品国产亚洲网站| 午夜福利在线在线| 色视频www国产| 国产黄色免费在线视频| 韩国高清视频一区二区三区| 亚洲欧美日韩无卡精品| 嘟嘟电影网在线观看| 国产一区二区三区av在线| 亚洲精品第二区| 永久免费av网站大全| 中文乱码字字幕精品一区二区三区| 欧美xxⅹ黑人| 人妻少妇偷人精品九色| 亚洲精品日韩在线中文字幕| 久久99热6这里只有精品| 国产亚洲5aaaaa淫片| 国产乱来视频区| av在线观看视频网站免费| 日韩一区二区三区影片| 国产 一区精品| 香蕉精品网在线| av免费观看日本| 久热久热在线精品观看| 日韩伦理黄色片| 国产爽快片一区二区三区| 在线观看一区二区三区| 精品亚洲乱码少妇综合久久| 99久久中文字幕三级久久日本| 亚洲精品一区蜜桃| 亚州av有码| 精品久久久噜噜| 午夜激情久久久久久久| 成人午夜精彩视频在线观看| 久久ye,这里只有精品| 亚洲欧美成人精品一区二区| 久久久久久久精品精品| 性高湖久久久久久久久免费观看| 日韩欧美精品免费久久| 大话2 男鬼变身卡| 狂野欧美白嫩少妇大欣赏| 亚洲av国产av综合av卡| 亚洲精品中文字幕在线视频 | 777米奇影视久久| 久久久久久久亚洲中文字幕| 久久久国产一区二区| 人妻 亚洲 视频| 国产精品一区二区在线不卡| 欧美人与善性xxx| 91在线精品国自产拍蜜月| 国产在线免费精品| 一本久久精品| 成人毛片a级毛片在线播放| 欧美xxxx性猛交bbbb| 日产精品乱码卡一卡2卡三| 欧美丝袜亚洲另类| 男女下面进入的视频免费午夜| 久久精品国产亚洲av天美| 99久久精品热视频| 黄色欧美视频在线观看| 夫妻午夜视频| 在线精品无人区一区二区三 | 制服丝袜香蕉在线| 狂野欧美激情性bbbbbb| 在线观看免费日韩欧美大片 | 久久久久国产精品人妻一区二区| 欧美精品一区二区免费开放| 九九爱精品视频在线观看| 美女国产视频在线观看| 精品视频人人做人人爽| 99九九线精品视频在线观看视频| 少妇高潮的动态图| 美女cb高潮喷水在线观看| 两个人的视频大全免费| 午夜激情福利司机影院| 美女主播在线视频| 精品亚洲乱码少妇综合久久| 久久久国产一区二区| 久久毛片免费看一区二区三区| 国产精品女同一区二区软件| 三级经典国产精品| 五月天丁香电影| 日韩av在线免费看完整版不卡| 国产精品国产三级国产专区5o| av免费观看日本| 久久久久久久久久久丰满| 国产一区亚洲一区在线观看| 午夜免费男女啪啪视频观看| 久久97久久精品| 色网站视频免费| 老司机影院成人| 婷婷色麻豆天堂久久| 蜜桃亚洲精品一区二区三区| 亚洲av.av天堂| 男女无遮挡免费网站观看| 日韩av免费高清视频| 亚洲精品一二三| 国产黄片视频在线免费观看| 国产有黄有色有爽视频| 狂野欧美白嫩少妇大欣赏| 欧美日韩视频精品一区| av黄色大香蕉| 免费av中文字幕在线| 国产精品99久久久久久久久| av卡一久久| 国产免费福利视频在线观看| 国产精品国产三级国产专区5o| 少妇被粗大猛烈的视频| 亚洲av成人精品一区久久| 黑人高潮一二区| 国产精品99久久99久久久不卡 | 一个人免费看片子| 激情五月婷婷亚洲| 亚洲久久久国产精品| 亚洲婷婷狠狠爱综合网| 亚洲av欧美aⅴ国产| 国产69精品久久久久777片| 亚洲欧洲国产日韩| 日韩电影二区| 午夜免费鲁丝| 你懂的网址亚洲精品在线观看| 国产成人aa在线观看| 欧美日韩视频精品一区| 免费黄频网站在线观看国产| 噜噜噜噜噜久久久久久91| 大香蕉久久网| 国产老妇伦熟女老妇高清| freevideosex欧美| 亚洲美女搞黄在线观看| 九色成人免费人妻av| 久久久久久久久久成人| 成人无遮挡网站| 午夜福利网站1000一区二区三区| 国产精品久久久久久精品古装| 国产成人91sexporn| 久久这里有精品视频免费| 亚洲精品久久午夜乱码| 日本-黄色视频高清免费观看| 少妇熟女欧美另类| 亚洲av成人精品一二三区| 精品一区二区三卡| 国产黄片视频在线免费观看| 欧美xxⅹ黑人| 欧美3d第一页| 丰满人妻一区二区三区视频av| 国产午夜精品一二区理论片| 男男h啪啪无遮挡| 国产免费一级a男人的天堂| 啦啦啦啦在线视频资源| 一级毛片 在线播放| 人人妻人人看人人澡| 久久韩国三级中文字幕| 成人毛片a级毛片在线播放| 国产一级毛片在线| 大码成人一级视频| 久久精品国产亚洲av涩爱| 亚洲欧美清纯卡通| 在线观看免费日韩欧美大片 | 国产精品蜜桃在线观看| 中文精品一卡2卡3卡4更新| 高清视频免费观看一区二区| 夜夜骑夜夜射夜夜干| av在线观看视频网站免费| 亚洲国产精品国产精品| 久久ye,这里只有精品| 国产精品一区二区在线观看99| 欧美精品亚洲一区二区| 亚洲av成人精品一二三区| h视频一区二区三区| 久久6这里有精品| 永久免费av网站大全| 欧美成人精品欧美一级黄| 中国三级夫妇交换| 久久久久久久久久成人| 热99国产精品久久久久久7| 欧美日韩在线观看h| 少妇精品久久久久久久| 天美传媒精品一区二区| 免费观看在线日韩| 一级av片app| 在线观看三级黄色| 国产欧美亚洲国产| 国产精品一区www在线观看| 日韩中字成人| 精品视频人人做人人爽| 久久国产亚洲av麻豆专区| 国内少妇人妻偷人精品xxx网站| 欧美 日韩 精品 国产| 久久人人爽人人爽人人片va| 黄色配什么色好看| 乱系列少妇在线播放| 成人国产麻豆网| 亚洲国产欧美人成| 黄色一级大片看看| 最近2019中文字幕mv第一页| 久久99热这里只有精品18| 免费看不卡的av| 丰满少妇做爰视频| 街头女战士在线观看网站| 国产一区有黄有色的免费视频| 色视频在线一区二区三区| 在线看a的网站| 亚洲av不卡在线观看| 一级a做视频免费观看| 女人久久www免费人成看片| 国产 精品1| 九九久久精品国产亚洲av麻豆| 另类亚洲欧美激情| 欧美成人一区二区免费高清观看| av在线观看视频网站免费| 久久久a久久爽久久v久久| 日韩成人av中文字幕在线观看| 男女免费视频国产| 中文字幕免费在线视频6| 成人特级av手机在线观看| 国产av精品麻豆| 免费看av在线观看网站| 中文精品一卡2卡3卡4更新| 精品酒店卫生间| 水蜜桃什么品种好| 久久久久久久久大av| 亚洲,欧美,日韩| 国产片特级美女逼逼视频| 亚洲欧洲国产日韩| 欧美日本视频| 美女cb高潮喷水在线观看| 精华霜和精华液先用哪个| 日韩一区二区视频免费看| 一区二区三区免费毛片| 国产精品福利在线免费观看| 精品一区二区三卡| 亚洲高清免费不卡视频| av播播在线观看一区| 中文字幕久久专区| 亚洲成人手机| 日本与韩国留学比较| 青春草视频在线免费观看| 嫩草影院入口| 中文欧美无线码| 久久婷婷青草| 免费观看无遮挡的男女| 亚洲精品日韩在线中文字幕| 亚洲国产毛片av蜜桃av| 日日摸夜夜添夜夜爱| freevideosex欧美| 亚洲第一av免费看| 天天躁日日操中文字幕| 街头女战士在线观看网站| 成人一区二区视频在线观看| 97热精品久久久久久| 久久国产乱子免费精品| 成人午夜精彩视频在线观看| 最近手机中文字幕大全| 日韩伦理黄色片| 熟女av电影| 亚洲国产精品成人久久小说| 色婷婷av一区二区三区视频| 伊人久久精品亚洲午夜| 免费黄色在线免费观看| 五月玫瑰六月丁香| 黄色日韩在线| 免费看av在线观看网站| 欧美国产精品一级二级三级 | 午夜激情久久久久久久| 老司机影院毛片| 如何舔出高潮| 舔av片在线|