• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    網(wǎng)絡(luò)編排技術(shù)進(jìn)展研究

    2016-05-14 03:21:03
    信息通信技術(shù) 2016年1期
    關(guān)鍵詞:開源虛擬化部署

    張 晨 黃 韜 張 嬌 劉 江

    背景

    編排一詞最早出現(xiàn)在藝術(shù)領(lǐng)域,指的是按照一定目的對音樂、舞蹈等表現(xiàn)元素進(jìn)行排列,以達(dá)到最佳的藝術(shù)效果。而網(wǎng)絡(luò)中的編排一詞則指的是對于服務(wù)器、存儲設(shè)備、網(wǎng)絡(luò)轉(zhuǎn)發(fā)與網(wǎng)絡(luò)服務(wù)設(shè)備進(jìn)行排列,以滿足網(wǎng)絡(luò)用戶或管理員的需求。網(wǎng)絡(luò)中的編排可以分為底層資源的編排以及高層業(yè)務(wù)的編排,其中資源編排側(cè)重于對設(shè)備進(jìn)行調(diào)度,業(yè)務(wù)編排側(cè)重于對工作流程的規(guī)范,業(yè)務(wù)編排往往要依賴于資源編排來實(shí)現(xiàn)。

    傳統(tǒng)網(wǎng)絡(luò)中,編排的工作主要由管理人員手工完成。在實(shí)際生產(chǎn)環(huán)境中,一個(gè)業(yè)務(wù)的開通往往需要不同領(lǐng)域的專業(yè)人員投入大量時(shí)間,短則一周半個(gè)月,長則數(shù)月半年。這不僅造成大量的運(yùn)維開銷,而且設(shè)備配置上的變更也難以跟上需求的快速變更,導(dǎo)致新業(yè)務(wù)遲遲不能上線?,F(xiàn)網(wǎng)中,運(yùn)營商的運(yùn)營支撐系統(tǒng)(Operation Support System, OSS)具備對高層業(yè)務(wù)進(jìn)行編排的能力,不過由于傳統(tǒng)網(wǎng)絡(luò)設(shè)備的能力不夠開放,OSS對網(wǎng)絡(luò)設(shè)備只能進(jìn)行一些簡單的管理和操作,業(yè)務(wù)的最終交付仍需要網(wǎng)絡(luò)專業(yè)人員進(jìn)行配置和調(diào)測。

    網(wǎng)絡(luò)自動化編排技術(shù)的變革首先發(fā)生在云計(jì)算領(lǐng)域。近年來,云計(jì)算的商業(yè)模式逐漸成熟,一切即服務(wù)(Everything as a Service, XaaS)的愿景要求IT基礎(chǔ)設(shè)施能夠按需地為云用戶提供服務(wù)。在此背景下,虛擬化技術(shù)也得到飛速發(fā)展。虛擬化技術(shù)通過對服務(wù)器、存儲設(shè)備、網(wǎng)絡(luò)設(shè)備的能力進(jìn)行抽象,將硬件設(shè)備軟化為計(jì)算、存儲、網(wǎng)絡(luò)的資源池,這些資源都能夠通過開放接口進(jìn)行靈活調(diào)度,為實(shí)現(xiàn)物理資源的編排提供技術(shù)基礎(chǔ)。同時(shí),基于對物理資源的調(diào)度,在云中能夠?qū)崿F(xiàn)豐富的高層業(yè)務(wù)編排邏輯。目前,以Vmware、Microsoft為代表的IT服務(wù)商都形成了較為完整的云解決方案[1-2],開源社區(qū)也緊跟廠商的腳步,以O(shè)penStack[3]為代表的開源云管理平臺自推出以來迅速風(fēng)靡全球。

    然而在云中,網(wǎng)絡(luò)資源的開放性仍然有所欠缺,相比于計(jì)算、存儲虛擬化的縱深式發(fā)展,網(wǎng)絡(luò)即服務(wù)(Network as a Service, NaaS)的發(fā)展則相對滯后。為填補(bǔ)網(wǎng)絡(luò)資源在開放性上的不足,軟件定義網(wǎng)絡(luò)(Software Defined Networking, SDN)成為了網(wǎng)絡(luò)界近幾年來的焦點(diǎn)。SDN將傳統(tǒng)網(wǎng)絡(luò)設(shè)備中本地嵌入的控制邏輯提取到遠(yuǎn)端,并提倡通過開放的接口實(shí)現(xiàn)網(wǎng)絡(luò)的可編程性[4]。自2008年提出以來,SDN的概念已經(jīng)在云數(shù)據(jù)中心中得到廣泛應(yīng)用,SDN搭配OpenStack已經(jīng)成為云數(shù)據(jù)中心的主流趨勢。云數(shù)據(jù)中心是SDN的典型應(yīng)用場景,但SDN不限于用作云數(shù)據(jù)中心網(wǎng)絡(luò),在企業(yè)網(wǎng)、廣域網(wǎng)中SDN也正在逐步落地。

    SDN側(cè)重于對L2~L3中的網(wǎng)絡(luò)連接進(jìn)行虛擬化,而網(wǎng)絡(luò)功能虛擬化(Network Function Virtualization, NFV)則側(cè)重于對L4~L7中的網(wǎng)絡(luò)服務(wù)(如防火墻、負(fù)載均衡等)進(jìn)行虛擬化。NFV提出將專用硬件設(shè)施進(jìn)行軟件化,運(yùn)行在通用服務(wù)器、通用存儲和通用轉(zhuǎn)發(fā)設(shè)備中,從而實(shí)現(xiàn)網(wǎng)絡(luò)功能服務(wù)的靈活部署,并降低CAPEX和OPEX[5]。如果說SDN結(jié)合云管理平臺提供了對計(jì)算、存儲、網(wǎng)絡(luò)連接的編排調(diào)度能力,那么NFV則提供了對于網(wǎng)絡(luò)服務(wù)的編排調(diào)度能力。三者的有機(jī)結(jié)合,將共同描繪一張端到端、全程全網(wǎng)編排管理的新一代網(wǎng)絡(luò)藍(lán)圖。

    基于上述愿景,業(yè)界正在完善云、SDN和NFV相關(guān)技術(shù),對于全自動化的網(wǎng)絡(luò)編排進(jìn)行著不斷嘗試。

    1 云管理平臺中的編排

    云計(jì)算的一個(gè)典型特點(diǎn)是集中式管理與控制。云中的各類資源和模塊都實(shí)現(xiàn)了數(shù)據(jù)和控制層面的分離,云管理平臺對底層的計(jì)算、存儲、網(wǎng)絡(luò)資源進(jìn)行統(tǒng)一調(diào)度,以實(shí)現(xiàn)底層資源的編排。在此基礎(chǔ)上,云管理平臺往往通過提供標(biāo)準(zhǔn)、開放的模板來簡化業(yè)務(wù)部署、業(yè)務(wù)交付和新型業(yè)務(wù)的設(shè)計(jì),從而實(shí)現(xiàn)高層業(yè)務(wù)的編排。

    1.1 Vmware vCloud

    vCloud Suite[1]是Vmware公司提供的云數(shù)據(jù)中心解決方案,能夠?qū)崿F(xiàn)數(shù)據(jù)中心的自動化控制,硬件配置通過軟件系統(tǒng)進(jìn)行維護(hù)。vCloud目前已經(jīng)更新至6.0版本,其產(chǎn)品架構(gòu)如圖1所示。其中,vSphere組件負(fù)責(zé)進(jìn)行服務(wù)器虛擬化和對虛擬計(jì)算資源的管理調(diào)度,Virtual SAN組件負(fù)責(zé)對存儲進(jìn)行虛擬化和對虛擬存儲資源的管理調(diào)度,Site Recovery Manager組件負(fù)責(zé)提供基于策略的云高可用性。在網(wǎng)絡(luò)虛擬化技術(shù)方面,vCloud自研的虛擬分布式交換機(jī)(Virtual Distuibuted Switch, VDS)使用了VLAN技術(shù),在收購SDN創(chuàng)業(yè)公司Nicira后,Vmware將Nicira的網(wǎng)絡(luò)虛擬化平臺(Network Virtualization Platform, NVP)和開源虛擬交換機(jī)(OpenvSwitch, OVS)集成為目前vCloud中的NSX組件,基于Overlay技術(shù)實(shí)現(xiàn)網(wǎng)絡(luò)虛擬化并對虛擬網(wǎng)絡(luò)資源進(jìn)行管理調(diào)度,在不同的租戶間提供安全策略和隔離性。上述組件共同提供云數(shù)據(jù)中心的基礎(chǔ)設(shè)施即服務(wù)(Infrastructure as a Service, IaaS)的能力。在此基礎(chǔ)上,vRealize Automation/Operations/Business共同提供了云管理能力,其中vRealize Automation提供一個(gè)安全門戶,已授權(quán)的管理員、開發(fā)人員或業(yè)務(wù)用戶可以請求新的云服務(wù),vRealize Automation會觸發(fā)vRealize Orchestrator,Orchestrator支持對云中的工作流程進(jìn)行標(biāo)準(zhǔn)化,并通過調(diào)用IaaS接口來自動部署云服務(wù),實(shí)現(xiàn)Vmware中的高層業(yè)務(wù)編排。vCloud是Vmware的商用產(chǎn)品,并提供與OpenStack等開源云平臺項(xiàng)目的對接。

    圖1 Vmware Cloud Suite v6.0架構(gòu)圖[1]

    1.2 OpenStack

    OpenStack是一個(gè)開源的云計(jì)算平臺,可以大規(guī)模地管理計(jì)算資源、存儲資源、網(wǎng)絡(luò)資源等基礎(chǔ)架構(gòu)。OpenStack是由Rackspace Cloud和NASA在2010年發(fā)起的,自成立以來,OpenStack已經(jīng)獲得業(yè)界廣泛認(rèn)可,目前,已經(jīng)迭代到第12個(gè)發(fā)行版本—Liberty。OpenStack Liberty的組件結(jié)構(gòu)如圖2所示,其中Nova對計(jì)算資源進(jìn)行編排,提供虛擬機(jī)的全生命周期管理功能,Cinder和Swift對存儲資源進(jìn)行編排,分別提供塊存儲和對象存儲的能力,Neutron對網(wǎng)絡(luò)資源進(jìn)行編排,以插件的形式支持多類網(wǎng)絡(luò)資源的互聯(lián)互通。其它組件如Horizon提供面板控制、Keystone提供身份認(rèn)證、Glance提供鏡像等等。Heat是OpenStack中的業(yè)務(wù)編排組件,通過接收面板的調(diào)用,或者根據(jù)模板文件中的描述,將服務(wù)請求解析為對各種類型資源的請求,然后通過調(diào)用Nova、Neutron等組件的接口來完成部署。Heat還支持資源的彈性伸縮,以按需服務(wù)于云用戶。

    圖2 OpenStack組件結(jié)構(gòu)圖

    目前,在Liberty版本中,Neutron作為OpenStack中管理網(wǎng)絡(luò)的組件,能夠接收前端傳送過來的業(yè)務(wù)請求,或者接收開放的Neutron API的調(diào)用,據(jù)此對計(jì)算節(jié)點(diǎn)HyperVisor中的虛擬轉(zhuǎn)發(fā)設(shè)備(如Linux Bridge和OpenvSwitch)進(jìn)行控制,OpenStack在設(shè)計(jì)之初采用Nova-network對網(wǎng)絡(luò)進(jìn)行管理,支持簡單的Flat DHCP 2層網(wǎng)絡(luò)以及VLAN網(wǎng)絡(luò),不過不提供面向租戶的開放API,后續(xù)OpenStack在Folsom版本中推出了專用的網(wǎng)絡(luò)組件Quantum,支持Overlay技術(shù),并提供面向租戶的開放式API。Quantum還支持廠商開發(fā)各家的設(shè)備驅(qū)動,不過一些基本功能(如租戶網(wǎng)絡(luò)的數(shù)據(jù)庫)也需要各個(gè)廠商自己獨(dú)立開發(fā)。Openstack在Havana版本上將Quantum更名為Neutron,并開發(fā)了ML2(Modular Layer 2,模塊化的2層網(wǎng)絡(luò))插件記錄租戶網(wǎng)絡(luò)的一些基本信息(如網(wǎng)絡(luò)類型是VLAN還是VxLAN等),各個(gè)廠家基于ML2進(jìn)行設(shè)備驅(qū)動的插件開發(fā)。

    1.3 CloudStack

    CloudStack[6]是一個(gè)開源云計(jì)算解決方案,最初由Cloud.com公司開發(fā),Citrix公司在2011年收購Cloud.com后,將全部代碼開源,目前已經(jīng)發(fā)布了4.6版本。CloudStack的架構(gòu)如圖3所示,可以看到它與OpenStack的主要功能類似,通過Orchestration Engine對業(yè)務(wù)進(jìn)行編排,Orchestration Engine通過與Compute Controller、Network Controller和Storage Controller進(jìn)行交互來編排底層的資源。不過與OpenStack的分布式服務(wù)架構(gòu)不同,CloudStack采用了集中式的單體架構(gòu),整個(gè)平臺只有一個(gè)項(xiàng)目,不同模塊之間通過本地調(diào)用進(jìn)行交互,在一臺主機(jī)上就可以完成平臺的部署。CloudStack中的Network Controller支持基于VLAN、Overlay等技術(shù)實(shí)現(xiàn)網(wǎng)絡(luò)虛擬化。

    圖3 CloudStack架構(gòu)圖

    2 SDN網(wǎng)絡(luò)中的編排

    SDN中控制平面與轉(zhuǎn)發(fā)平面分離,設(shè)備的轉(zhuǎn)發(fā)邏輯由遠(yuǎn)端集中式的控制器實(shí)現(xiàn),解決了傳統(tǒng)網(wǎng)絡(luò)設(shè)備的嵌入式控制不夠靈活、分布式控制無法全局最優(yōu)等問題。SDN中編排的概念很廣泛,控制器通過南向協(xié)議控制設(shè)備的轉(zhuǎn)發(fā)可以看做是對底層資源進(jìn)行編排,應(yīng)用程序通過北向接口調(diào)用控制器的功能可以看做是對業(yè)務(wù)的編排。關(guān)于控制器如何對底層資源進(jìn)行編排,本節(jié)不做詳細(xì)的描述,下面主要對SDN中的業(yè)務(wù)編排進(jìn)行介紹。

    2.1 SDN高級編程語言

    計(jì)算機(jī)編程語言的發(fā)展經(jīng)歷了晦澀的機(jī)器語言、匯編語言等階段,最終發(fā)展出易于理解的高級語言。同樣,對于SDN來說,高度用戶化的編程語言能夠屏蔽底層設(shè)備接口的復(fù)雜性,使得SDN應(yīng)用開發(fā)人員可以注重于業(yè)務(wù)邏輯,而非底層硬件實(shí)現(xiàn),是推動SDN發(fā)展的重要技術(shù)。普林斯頓大學(xué)和康奈爾大學(xué)的研究人員分別在2011年和2013年提出Frentic[7]和Pyretic[8],這兩個(gè)語言的研發(fā)都在Frenetic Project的整體框架中進(jìn)行,主要在網(wǎng)絡(luò)流量監(jiān)測、轉(zhuǎn)發(fā)策略指定、一致性策略更新和服務(wù)質(zhì)量等方面進(jìn)行了高層業(yè)務(wù)邏輯的抽象。Frenetic提供了并行的模型,進(jìn)入控制器的每一個(gè)數(shù)據(jù)包都由一個(gè)對應(yīng)的策略模塊處理,多個(gè)條件組合形成的策略也是并行執(zhí)行的。Pyretic則在Frenetic的基礎(chǔ)上支持策略的串行執(zhí)行,以及串行并行相結(jié)合的混合模型。耶魯大學(xué)的研究人員在2013年提出了Maple[9],相比于Frentic和Pyretic對策略模型的關(guān)注,Maple則能夠通過高效的算法將集中式的業(yè)務(wù)策略映射為分布式部署的流表,并支持多核處理,提高了編譯的性能。

    P4[10]是斯坦福大學(xué)和普林斯頓大學(xué)于2015年發(fā)布的SDN編程語言項(xiàng)目,起源于2014年的一篇Sigcomm論文。P4是一種數(shù)據(jù)平面的編程語言,旨在徹底打破現(xiàn)有協(xié)議對于網(wǎng)絡(luò)的限制,基于P4的用戶可以任意地指定字段的解析、匹配與處理動作,這也是目前能夠看到的SDN最為理想的形態(tài)。除了底層的數(shù)據(jù)平面編程,P4也提供了高層的邏輯,編程者能夠方便地指定與設(shè)備類型無關(guān)的轉(zhuǎn)發(fā)表匹配范式。P4直接打通了高層業(yè)務(wù)邏輯和底層轉(zhuǎn)發(fā)資源,被寄希望作為OpenFlow 2.0,不過P4這種接近于終極的靈活性也對芯片的設(shè)計(jì)要求極高,短期內(nèi)還很難進(jìn)行商用。

    上述的SDN編程語言均采用自底向上模型驅(qū)動的設(shè)計(jì)方式,雖然用戶無需關(guān)注底層資源,但語言本身仍關(guān)注網(wǎng)絡(luò)配置和實(shí)現(xiàn)的細(xì)節(jié)。相比之下,SDN編程語言還可以采用自頂向下業(yè)務(wù)驅(qū)動的設(shè)計(jì)方式,從業(yè)務(wù)行為和應(yīng)用需求的角度出發(fā),語言本身無需關(guān)注底層實(shí)現(xiàn)細(xì)節(jié),從而使得北向接口和南向協(xié)議能夠完全解耦。開源項(xiàng)目ONOS[11]的Intent設(shè)計(jì),OpenDaylight[12]的GBP、NEMO設(shè)計(jì)均采用了這種思路。

    2.2 Cisco ACI策略引擎

    ACI[13](Application Centric Infrastructure,以應(yīng)用為中心)是思科推出的SDN解決方案,通過應(yīng)用驅(qū)動型策略模式簡化自動化工作,同時(shí)能夠利用實(shí)時(shí)的應(yīng)用運(yùn)行狀況監(jiān)控實(shí)現(xiàn)集中式可視性。ACI策略引擎實(shí)現(xiàn)了應(yīng)用程序需求策略的具體要求,管理著整個(gè)ACI網(wǎng)絡(luò),包括基礎(chǔ)架構(gòu)、驗(yàn)證授權(quán)、安全、服務(wù)、應(yīng)用和故障排查等,ACI策略引擎的模型如圖4所示。APIC作為控制器在ACI網(wǎng)絡(luò)中自動將策略部署到ACI設(shè)備中,對包括應(yīng)用程序設(shè)置、安全策略、租戶子網(wǎng)等進(jìn)行自動化實(shí)現(xiàn)。ACI改變了思科傳統(tǒng)以硬件為核心的產(chǎn)品和服務(wù)策略,它的核心基礎(chǔ)是以軟件方式管理和運(yùn)營網(wǎng)絡(luò),不過ACI的實(shí)現(xiàn)仍主要基于思科硬件設(shè)備如Nexus交換機(jī)和定制化的ASIC商用芯片。

    圖4 ACI策略引擎模型[13]

    2.3 華為Netmatrix編排系統(tǒng)

    Netmatrix[14]是華為2013年推出的SDN/NFV編排系統(tǒng),它獨(dú)立于SDN控制器存在,向上提供了與運(yùn)營商OSS的集成能力,支持OpenStack、CloudStack等多種主流云平臺的接口,向下通過Netconf、REST API等接口協(xié)議與SDN控制器互通,負(fù)責(zé)業(yè)務(wù)模版定義和業(yè)務(wù)發(fā)放,同時(shí)Netmatrix支持通過Netconf、SNMP、CLI、XML等接口協(xié)議與傳統(tǒng)設(shè)備互通。通過上述技術(shù),Netmatrix希望提供端到端的跨域SDN控制器協(xié)同,SDN和傳統(tǒng)網(wǎng)絡(luò)協(xié)同,網(wǎng)絡(luò)和DC業(yè)務(wù)協(xié)同。Netmatrix屏蔽了網(wǎng)絡(luò)技術(shù)的細(xì)節(jié)和設(shè)備差異,并提供模型驅(qū)動的可編程框架,以期快速適應(yīng)新需求改變。

    3 NFV網(wǎng)絡(luò)中的編排

    在ETSI提出的NFV架構(gòu)中[5],MANO(Management&Orchestration)負(fù)責(zé)對NFV網(wǎng)絡(luò)進(jìn)行管理。MANO又分為NFVO(NFV Orchestrator)、VNFM(VNF Management)和VIM(Virtualised Infrastructure Management)。VIM和VNFM聯(lián)合對資源進(jìn)行編排,其中VIM負(fù)責(zé)對通用物理設(shè)備進(jìn)行虛擬化,VNFM負(fù)責(zé)對虛擬網(wǎng)元VNF(Virtual Network Function)進(jìn)行生命周期的管理,而NFVO負(fù)責(zé)對NFV網(wǎng)絡(luò)中的業(yè)務(wù)進(jìn)行編排。本章將對MANO的一些具體實(shí)現(xiàn)進(jìn)行簡要的介紹。

    3.1 HP NFV Director

    NFV Director[15]是惠普推出的MANO產(chǎn)品,實(shí)現(xiàn)了ESTI提出的NFV架構(gòu)中的NFVO和VNFM。HP NFV Director的模塊如圖5所示。

    圖5 HP NFV Director的組成模塊[15]

    其中,策略管理模塊通過北向接口接收服務(wù)的描述和需求,目錄和列表模塊負(fù)責(zé)對服務(wù)和網(wǎng)元進(jìn)行存放和記錄,執(zhí)行模塊包括服務(wù)執(zhí)行、VNF執(zhí)行和全局資源執(zhí)行,負(fù)責(zé)服務(wù)開通與一些具體的網(wǎng)絡(luò)配置,監(jiān)測模塊包括服務(wù)監(jiān)測、VNF監(jiān)測和全局資源監(jiān)測,負(fù)責(zé)對NFV網(wǎng)絡(luò)進(jìn)行多個(gè)層次的保障。HP NFV Director采用模塊化的設(shè)計(jì),能夠支持第三方VNFM擴(kuò)展,能夠?qū)Χ鄰S商的物理基礎(chǔ)設(shè)施和虛擬網(wǎng)元進(jìn)行聯(lián)合的編排與調(diào)度。

    3.2 Oracle NSO&AO

    NSO[16](Network Service Orchestration,網(wǎng)絡(luò)服務(wù)編排器)和AO[17](Application Orchestrator,應(yīng)用編排器)分別是Oracle基于ESTI的NFV架構(gòu)開發(fā)的NFVO和VNFM產(chǎn)品,如圖6所示。NSO由三個(gè)組件構(gòu)成:UIM負(fù)責(zé)記錄VNF和網(wǎng)絡(luò)服務(wù)的目錄清單,ASAP負(fù)責(zé)與AO進(jìn)行交互以對VNF進(jìn)行管理,Design Studio負(fù)責(zé)定義VNF和網(wǎng)絡(luò)服務(wù)的部署方式、屬性和配置信息。AO由六個(gè)組件構(gòu)成:Virtual Image Archive負(fù)責(zé)管理VNF虛擬機(jī)的鏡像,Orchestration Engines負(fù)責(zé)與VIM進(jìn)行交互以管理VNF虛擬機(jī),Virtual Machine Group負(fù)責(zé)維護(hù)具有相同策略的VNF虛擬機(jī),Cloud Administration負(fù)責(zé)權(quán)限管理,KPI Thresholds負(fù)責(zé)記錄VNF關(guān)鍵性能指標(biāo)的閾值信息,Monitor負(fù)責(zé)對VNF關(guān)鍵性能指標(biāo)進(jìn)行周期性的監(jiān)測。NSO的設(shè)計(jì)與AO是解耦的,能夠支持第三方VNFM擴(kuò)展。

    圖6 Oracle的NFV產(chǎn)品NSO和AO[16]

    3.3 OPNFV

    OPNFV[18]是目前全球最大的NFV開源組織,它是一個(gè)運(yùn)營商級的、集成的平臺,旨在加速引入NFV產(chǎn)品和服務(wù)。2015年6月,OPNFV發(fā)布了首個(gè)版本Arno,這個(gè)版本基于OpenStack和SDN開源控制器OpenDaylight進(jìn)行集成開發(fā),提供了ESTI的NFV架構(gòu)中基礎(chǔ)設(shè)施層的NFVI和VIM,但目前仍缺乏VNFM和NFVO的實(shí)現(xiàn)。據(jù)OPNFV項(xiàng)目組計(jì)劃,在2016年2月發(fā)布的第二個(gè)版本Brahmaputra中將對VNFM和NFVO進(jìn)行簡單的實(shí)現(xiàn)。

    4 云、SDN、NFV的混合編排

    4.1 云管理平臺與SDN混合編排

    云管理平臺主要通過其專門負(fù)責(zé)網(wǎng)絡(luò)的Neutron組件來完成對計(jì)算、存儲、網(wǎng)絡(luò)三維資源的編排及與SDN的混合編排。當(dāng)廠家為Neutron提供的是虛擬轉(zhuǎn)發(fā)設(shè)備的插件時(shí)(如OpenvSwitch在Neutron中的插件),此時(shí)Neutron直接控制設(shè)備的轉(zhuǎn)發(fā),即可將Neutron看做是SDN控制器;當(dāng)廠家為Neutron提供的是控制器的插件時(shí)(如Nicira NVP、OpenDaylight、ONOS在Neutron中的插件),Neutron不直接控制虛擬轉(zhuǎn)發(fā)設(shè)備,而是由SDN控制器在接收Neutron的調(diào)用后通過南向協(xié)議(如OpenFlow、OVSDB等)對設(shè)備進(jìn)行控制,此時(shí)Neutron可以看做是網(wǎng)絡(luò)的服務(wù)編排器,而SDN控制器可以看做是網(wǎng)絡(luò)的資源編排器。上述兩種云管理平臺與SDN混合編排的模式分別示意為圖7中(a)與(b)。

    4.2 云管理平臺與NFV混合編排

    N F V的基本思想是將硬件設(shè)備軟件化,在NFV框架中包括基礎(chǔ)設(shè)施層、虛擬功能實(shí)例層和NFV編排層,而云中管理平臺(如OpenStack)可以看做是NFV的一個(gè)特殊的實(shí)現(xiàn)。目前,NFV開源項(xiàng)目OPNFV中即使用OpenStack作為NFVI對物理基礎(chǔ)設(shè)施進(jìn)行虛擬化。另外,OpenStack除了能夠?qū)ξ锢砘A(chǔ)設(shè)施進(jìn)行虛擬化以外,也能夠作為虛擬功能實(shí)例層(如通過Celimetor組件對虛擬機(jī)進(jìn)行生命周期監(jiān)測),還能夠作為NFV編排層(如通過Heat組件對服務(wù)進(jìn)行模板化設(shè)計(jì)),OpenStack項(xiàng)目組也正在積極準(zhǔn)備一個(gè)名為Tracker的項(xiàng)目,以對虛擬功能實(shí)例層和NFV編排層進(jìn)行更好的實(shí)現(xiàn)。上述云管理平臺與NFV混合編排的架構(gòu)如圖8(a)所示。

    在云中,一些V N F(如Firewalls、vRouter等)可以看做是為租戶提供增值業(yè)務(wù)的設(shè)備,一些VNF可以在云管理平臺中的網(wǎng)絡(luò)組件(如OpenStack的Neutron)中實(shí)現(xiàn),并通過對其接口進(jìn)行擴(kuò)展以實(shí)現(xiàn)對VNF資源的編排,此時(shí)云管平臺從系統(tǒng)建設(shè)角度來看也不再附屬于NFV,對NFV服務(wù)鏈的編排依賴于云管平臺的服務(wù)編排組件進(jìn)行實(shí)現(xiàn)(如OpenStack Heat)。上述兩種云管理平臺與NFV混合編排的架構(gòu)如圖8(b)所示。

    圖7 云管理平臺與SDN混合編排

    圖8 云管理平臺與NFV混合編排

    4.3 SDN與NFV的混合編排

    當(dāng)SDN在ETSI提出的NFV架構(gòu)下進(jìn)行部署時(shí),SDN不再進(jìn)行單獨(dú)的系統(tǒng)建設(shè),包括SDN控制器、SDN轉(zhuǎn)發(fā)設(shè)備都可能有不同的部署位置。如圖9(a)所示,橙色和綠色的方框分別為SDN控制器、SDN轉(zhuǎn)發(fā)設(shè)備可能的部署位置。其中,當(dāng)控制器部署在a點(diǎn)即VIM中時(shí),轉(zhuǎn)發(fā)設(shè)備可以部署在d點(diǎn)作為硬件網(wǎng)絡(luò)資源,也可以部署在通用硬件虛擬化層中的e點(diǎn)作為虛擬網(wǎng)絡(luò)資源;當(dāng)控制器部署在通用硬件虛擬化層中的虛擬計(jì)算資源即b點(diǎn)時(shí),轉(zhuǎn)發(fā)設(shè)備以VNF轉(zhuǎn)發(fā)實(shí)例的形式部署在c點(diǎn);當(dāng)控制器部署在VNF SDN Controller實(shí)例時(shí),轉(zhuǎn)發(fā)設(shè)備同樣以VNF轉(zhuǎn)發(fā)實(shí)例的形式部署在c點(diǎn)。SDN編排器的功能在該架構(gòu)中可以集成在NFVO和VNFM中,其編排主要功能包括服務(wù)鏈的標(biāo)簽分配,服務(wù)鏈的流量引導(dǎo),SLA策略等等。另外,在這種混合部署模式中,由NFVO完成與傳統(tǒng)網(wǎng)絡(luò)OSS系統(tǒng)的對接。業(yè)務(wù)入口可以為OSS系統(tǒng),其對于SDN服務(wù)的需求傳遞給NFVO來完成。業(yè)務(wù)入口也可以為MANO,其對于傳統(tǒng)網(wǎng)絡(luò)服務(wù)的需求由NFVO傳遞給OSS來完成。

    SDN網(wǎng)絡(luò)在某些場景下是不依賴于NFV的,網(wǎng)絡(luò)中除了包括NFV虛擬轉(zhuǎn)發(fā)設(shè)備以外,還很有可能包括一些硬件轉(zhuǎn)發(fā)設(shè)備。此時(shí),SDN系統(tǒng)與NFV系統(tǒng)將獨(dú)立建設(shè),由SDN負(fù)責(zé)對虛擬、物理設(shè)備的轉(zhuǎn)發(fā)進(jìn)行控制,而NFV則扮演類似于SDN網(wǎng)管的角色,負(fù)責(zé)虛擬轉(zhuǎn)發(fā)設(shè)備的實(shí)例化和配置等,兩套系統(tǒng)并行工作,協(xié)同完成對網(wǎng)絡(luò)的編排工作,如圖9(b)所示。

    圖9 SDN與NFV混合編排

    5 總結(jié)

    云、SDN、NFV都是近年來業(yè)界比較重視的新型網(wǎng)絡(luò)技術(shù),它們沿著虛擬化、軟件化的路線正在對靈活性差、自動化能力弱的傳統(tǒng)網(wǎng)絡(luò)進(jìn)行著深刻的變革。本文對云、SDN、NFV中的網(wǎng)絡(luò)編排原理進(jìn)行描述,并選擇有代表性的產(chǎn)品和開源項(xiàng)目進(jìn)行了介紹。網(wǎng)絡(luò)的自動化編排能力正是虛擬化和軟件化所追求的理想結(jié)果,目前,云管理平臺在自動化編排能力上已經(jīng)獲得業(yè)界的廣泛認(rèn)可,而SDN和NFV在自動化編排方面仍缺乏相關(guān)標(biāo)準(zhǔn),三類技術(shù)混合編排的部署方式也有待進(jìn)一步的探索。

    參考文獻(xiàn)

    [1]Vmware.vCloud Suite[EB/OL].[2016-01-20].http://www.vmware.com/cn/products/vcloud-suite/

    [2]Microsoft.Windows Azure[EB/OL].[2016-01-20].http://www.windowsazure.cn/zh-cn/

    [3]OpenStack.Official Website[EB/OL].[2016-01-20].http://openstack.org/

    [4] ONF.SDN_ARCH_1.0[EB/OL].[2016-01-20].https://www.opennetworking.org/images/stories/downloads/ sdnresources/technical-reports/TR_SDN_ARCH_1.0_06062014.pdf

    [5]ESTI.NFV Witepaper[EB/OL].[2016-01-20].http://www.etsi.org/deliver/etsi_gs/NFV/001_099/002/ 01.02.01_60/gs_NFV002v010201p.pdf

    [6 CloudStack.Official Website[EB/OL].[2016-01-20].http://cloudstack.apache.org/

    [7]Nate Foster, Arjun Guha, Mark Reitblatt, et al.Languages for software-defined networks[J].Communications Magazine,IEEE, 2013, 51(2): 128-134

    [8]Joshua Reich, Christopher Monsanto, Nate Foster, et al.Modular sdn programming with pyretic[J].Technical Reprot of USENIX, 2013

    [9]Andreas Voellmy, Junchang Wang, Yang Y, et al.Maple:Simplifying SDN programming using algorithmic policies[C]//ACM SIGCOMM Computer Communication Review.ACM,2013, 43(4): 87-98

    [10] Pat Bosshart, Dan Daly, Glen Gibb, et al.P4: Programming protocol-independent packet processors[J].ACM SIGCOMM Computer Communication Review, 2014, 44(3): 87-95

    [11] Pankaj Berde, Matteo Gerola, Jonathan Hart, et al.ONOS: towards an open, distributed SDN OS[C]//Proceedings of the third workshop on Hot topics in software defined networking.ACM, 2014: 1-6

    [12]Jan Medved, Robert Varga, Anton Tkacik, et al.Opendaylight: Towards a model-driven sdn controller architecture[C]//2014 IEEE 15th International Symposium on.IEEE, 2014: 1-6

    [13]Cisco.Application Based Infrastructure[EB/OL].[2016-01-20].http://www.cisco.com/web/CN/solutions/datacenter/aci.html?CAMPAIGN=Insieme&COUNTRY_SITE=cn&POSITION=sl&REFERRING_SITE=Cisco.co m+homepage&CREATIVE=homepage+spotlight+to+AC I+launch+landing

    [14]Huawei.NetMatrix[EB/OL].[2016-01-20].http://www.huawei.com/ilink/cn/about-huawei/newsroom/pr essrelease/HW_310988

    [15]HP.NFV Director[EB/OL].[2016-01-20].http://www8.hp.com/uk/en/pdf/NFV_Director_customer_prese ntation_tcm_183_1541136.pdf

    [16]Oracle.Network Service Orchestartor[EB/OL].[2016-01-20].http://www.oracle.com/us/products/ applications/communications/service-orchestration/index.html

    [17]Oracle.Application Orchestrator[EB/OL].[2016-01-20].http://www.oracle.com/us/products/applications /communications/application-orchestrator/index.html

    [18]OPNFV[EB/OL].[2016-01-20].https://www.opnfv.org/

    猜你喜歡
    開源虛擬化部署
    一種基于Kubernetes的Web應(yīng)用部署與配置系統(tǒng)
    晉城:安排部署 統(tǒng)防統(tǒng)治
    部署
    五毛錢能買多少頭牛
    基于OpenStack虛擬化網(wǎng)絡(luò)管理平臺的設(shè)計(jì)與實(shí)現(xiàn)
    電子制作(2019年10期)2019-06-17 11:45:10
    對基于Docker的虛擬化技術(shù)的幾點(diǎn)探討
    電子制作(2018年14期)2018-08-21 01:38:20
    虛擬化技術(shù)在計(jì)算機(jī)技術(shù)創(chuàng)造中的應(yīng)用
    電子測試(2017年11期)2017-12-15 08:57:56
    大家說:開源、人工智能及創(chuàng)新
    開源中國開源世界高峰論壇圓桌會議縱論開源與互聯(lián)網(wǎng)+創(chuàng)新2.0
    部署“薩德”意欲何為?
    太空探索(2016年9期)2016-07-12 10:00:02
    欧美成狂野欧美在线观看| 亚洲在线自拍视频| 男女下面插进去视频免费观看| 天天躁狠狠躁夜夜躁狠狠躁| 一级毛片高清免费大全| 高清在线国产一区| 国产黄色免费在线视频| 亚洲男人天堂网一区| 久久香蕉精品热| www日本在线高清视频| 午夜成年电影在线免费观看| 19禁男女啪啪无遮挡网站| 999久久久精品免费观看国产| 99国产精品一区二区三区| 久久影院123| 免费女性裸体啪啪无遮挡网站| 国产男靠女视频免费网站| 淫妇啪啪啪对白视频| 国产深夜福利视频在线观看| 人人妻人人添人人爽欧美一区卜| 欧美人与性动交α欧美精品济南到| 亚洲性夜色夜夜综合| 最好的美女福利视频网| 麻豆一二三区av精品| 亚洲九九香蕉| 黄色 视频免费看| 可以在线观看毛片的网站| 欧美中文综合在线视频| 麻豆国产av国片精品| 人成视频在线观看免费观看| 黑丝袜美女国产一区| 午夜福利,免费看| 国产三级在线视频| 又紧又爽又黄一区二区| 搡老熟女国产l中国老女人| 熟女少妇亚洲综合色aaa.| 久久香蕉激情| 国产精品久久久久久人妻精品电影| a级片在线免费高清观看视频| 一级a爱片免费观看的视频| 色哟哟哟哟哟哟| 91九色精品人成在线观看| 最新美女视频免费是黄的| 成人av一区二区三区在线看| 黄片播放在线免费| 久久人妻熟女aⅴ| 国产精品一区二区三区四区久久 | 亚洲成国产人片在线观看| 国产黄a三级三级三级人| 最好的美女福利视频网| 国产99白浆流出| 亚洲一区中文字幕在线| 国产1区2区3区精品| 久久热在线av| av网站在线播放免费| 欧美乱妇无乱码| а√天堂www在线а√下载| 国产精品二区激情视频| 亚洲精品在线观看二区| 国产成+人综合+亚洲专区| 老司机福利观看| 夜夜爽天天搞| 日韩人妻精品一区2区三区| 成在线人永久免费视频| 久久精品国产清高在天天线| 乱人伦中国视频| 变态另类成人亚洲欧美熟女 | 色综合欧美亚洲国产小说| 少妇裸体淫交视频免费看高清 | 天堂中文最新版在线下载| 亚洲av成人不卡在线观看播放网| 国产成+人综合+亚洲专区| 美女福利国产在线| 老司机福利观看| 亚洲欧美精品综合久久99| 男人的好看免费观看在线视频 | 亚洲va日本ⅴa欧美va伊人久久| 淫妇啪啪啪对白视频| 99精品久久久久人妻精品| 免费女性裸体啪啪无遮挡网站| 啦啦啦 在线观看视频| 女性生殖器流出的白浆| 久久精品国产清高在天天线| 久久人人97超碰香蕉20202| 久久人妻av系列| 国产区一区二久久| 国产色视频综合| 国产av精品麻豆| 色综合站精品国产| 老汉色av国产亚洲站长工具| 日韩 欧美 亚洲 中文字幕| 久久人人97超碰香蕉20202| 搡老乐熟女国产| 中文字幕最新亚洲高清| 国产成人欧美在线观看| 性少妇av在线| 亚洲一码二码三码区别大吗| 国产精品av久久久久免费| 十八禁网站免费在线| 亚洲成人国产一区在线观看| 男女床上黄色一级片免费看| 黄片小视频在线播放| 人人妻人人爽人人添夜夜欢视频| 国产精品香港三级国产av潘金莲| 精品少妇一区二区三区视频日本电影| 久久国产亚洲av麻豆专区| 99久久综合精品五月天人人| 亚洲免费av在线视频| 国产97色在线日韩免费| 国产欧美日韩一区二区精品| 日韩三级视频一区二区三区| 1024香蕉在线观看| 色哟哟哟哟哟哟| 999久久久精品免费观看国产| 精品电影一区二区在线| 亚洲精品中文字幕在线视频| 亚洲欧美日韩另类电影网站| 亚洲精品国产区一区二| 午夜视频精品福利| 亚洲人成网站在线播放欧美日韩| 麻豆成人av在线观看| 国产精品1区2区在线观看.| 搡老熟女国产l中国老女人| 精品国产国语对白av| 丝袜美足系列| 日日干狠狠操夜夜爽| 天天影视国产精品| 嫩草影视91久久| 99久久久亚洲精品蜜臀av| 久久精品91蜜桃| 欧美日韩亚洲高清精品| 身体一侧抽搐| 黄色成人免费大全| 色老头精品视频在线观看| 国产乱人伦免费视频| 亚洲国产精品合色在线| 中文字幕精品免费在线观看视频| 精品国产乱子伦一区二区三区| 一级毛片女人18水好多| 美女福利国产在线| 久久精品国产99精品国产亚洲性色 | 精品久久久久久电影网| 欧美人与性动交α欧美精品济南到| 亚洲人成电影观看| 国产黄色免费在线视频| 十八禁人妻一区二区| 午夜免费激情av| 俄罗斯特黄特色一大片| 长腿黑丝高跟| 久久亚洲精品不卡| 国产午夜精品久久久久久| 日韩三级视频一区二区三区| 成人亚洲精品一区在线观看| 99在线人妻在线中文字幕| 亚洲av成人av| 老汉色av国产亚洲站长工具| 淫秽高清视频在线观看| 国产亚洲精品久久久久5区| 欧美乱妇无乱码| 中文字幕人妻熟女乱码| 桃色一区二区三区在线观看| 国产单亲对白刺激| 精品午夜福利视频在线观看一区| 夜夜夜夜夜久久久久| 欧美丝袜亚洲另类 | a在线观看视频网站| 在线观看午夜福利视频| 午夜老司机福利片| 久久久精品国产亚洲av高清涩受| 少妇的丰满在线观看| 国产麻豆69| 日本wwww免费看| 欧美日韩亚洲国产一区二区在线观看| 国产单亲对白刺激| 午夜老司机福利片| 一级片'在线观看视频| 麻豆一二三区av精品| 在线观看www视频免费| 亚洲成人精品中文字幕电影 | 99国产极品粉嫩在线观看| 国产野战对白在线观看| 一进一出抽搐gif免费好疼 | 中文欧美无线码| 欧美日韩一级在线毛片| 亚洲七黄色美女视频| 99riav亚洲国产免费| 午夜老司机福利片| 欧美大码av| 91大片在线观看| 久久青草综合色| 国产精品野战在线观看 | 亚洲中文av在线| 国产av又大| 可以免费在线观看a视频的电影网站| 午夜免费鲁丝| 热99国产精品久久久久久7| 一进一出抽搐gif免费好疼 | 69精品国产乱码久久久| 在线观看午夜福利视频| 大香蕉久久成人网| 精品国产一区二区久久| 欧美中文综合在线视频| 成人18禁高潮啪啪吃奶动态图| 日韩免费高清中文字幕av| 免费在线观看影片大全网站| 老熟妇仑乱视频hdxx| 美女午夜性视频免费| 女生性感内裤真人,穿戴方法视频| 亚洲一码二码三码区别大吗| 在线观看免费日韩欧美大片| 欧美成狂野欧美在线观看| 少妇的丰满在线观看| 日日摸夜夜添夜夜添小说| 曰老女人黄片| ponron亚洲| 国产精品久久久av美女十八| 欧美黄色片欧美黄色片| 欧美激情高清一区二区三区| 成年人黄色毛片网站| av片东京热男人的天堂| 88av欧美| 国产在线观看jvid| 国产xxxxx性猛交| 99国产精品免费福利视频| 国产av精品麻豆| 十八禁人妻一区二区| 色婷婷av一区二区三区视频| 亚洲国产中文字幕在线视频| 高潮久久久久久久久久久不卡| 亚洲一区二区三区不卡视频| 亚洲精品国产区一区二| avwww免费| 午夜福利免费观看在线| 久久午夜亚洲精品久久| 亚洲免费av在线视频| 精品日产1卡2卡| av国产精品久久久久影院| 亚洲自偷自拍图片 自拍| 亚洲中文字幕日韩| 午夜精品国产一区二区电影| 男女下面进入的视频免费午夜 | 国产黄a三级三级三级人| 亚洲欧美一区二区三区黑人| 成人亚洲精品一区在线观看| 亚洲国产欧美一区二区综合| bbb黄色大片| 成人亚洲精品av一区二区 | av视频免费观看在线观看| 老汉色av国产亚洲站长工具| 天堂中文最新版在线下载| 中亚洲国语对白在线视频| 日本一区二区免费在线视频| 大香蕉久久成人网| 日本vs欧美在线观看视频| 国产片内射在线| 啦啦啦在线免费观看视频4| 在线十欧美十亚洲十日本专区| 国产99白浆流出| 精品国产一区二区三区四区第35| 亚洲av日韩精品久久久久久密| 国产精品久久久久久人妻精品电影| 别揉我奶头~嗯~啊~动态视频| 老司机午夜福利在线观看视频| 人妻丰满熟妇av一区二区三区| www日本在线高清视频| 午夜影院日韩av| 黄片小视频在线播放| 久久亚洲真实| 99热国产这里只有精品6| 色综合欧美亚洲国产小说| 色尼玛亚洲综合影院| 亚洲中文日韩欧美视频| 午夜激情av网站| 午夜免费成人在线视频| 国产精品一区二区三区四区久久 | 亚洲一区二区三区欧美精品| 在线观看免费午夜福利视频| 久久精品国产99精品国产亚洲性色 | 999久久久精品免费观看国产| 日本欧美视频一区| 国产精品一区二区三区四区久久 | 一个人观看的视频www高清免费观看 | 亚洲国产欧美一区二区综合| 成人国语在线视频| 欧美乱色亚洲激情| 欧美成人午夜精品| 国产成人啪精品午夜网站| 又黄又粗又硬又大视频| 国产免费av片在线观看野外av| 制服诱惑二区| 一边摸一边抽搐一进一出视频| 国产一区二区在线av高清观看| 久久久国产成人精品二区 | 亚洲av美国av| bbb黄色大片| 欧美人与性动交α欧美软件| 日韩欧美一区视频在线观看| 日本一区二区免费在线视频| 热99国产精品久久久久久7| 国产黄a三级三级三级人| 高清av免费在线| 国产成人欧美| 91成年电影在线观看| www.熟女人妻精品国产| 久久欧美精品欧美久久欧美| 欧美日韩乱码在线| 久久人妻av系列| 韩国精品一区二区三区| 亚洲熟妇熟女久久| 久9热在线精品视频| 看黄色毛片网站| 一区福利在线观看| 国产成人影院久久av| 日韩大尺度精品在线看网址 | 男女午夜视频在线观看| 欧美成人性av电影在线观看| 久久久久国产一级毛片高清牌| 黄色 视频免费看| 欧美日韩乱码在线| √禁漫天堂资源中文www| 757午夜福利合集在线观看| 亚洲av成人不卡在线观看播放网| 啦啦啦在线免费观看视频4| 999久久久国产精品视频| 激情视频va一区二区三区| 美女福利国产在线| 国产精品亚洲一级av第二区| 黄片小视频在线播放| 又大又爽又粗| 黑人猛操日本美女一级片| 国产精品一区二区精品视频观看| 美女大奶头视频| 少妇裸体淫交视频免费看高清 | 日本五十路高清| 十八禁网站免费在线| 亚洲精华国产精华精| 夫妻午夜视频| 麻豆成人av在线观看| 一进一出好大好爽视频| 亚洲人成电影观看| 国产精品一区二区在线不卡| 国产一区二区三区视频了| 国产精品久久久人人做人人爽| 一个人观看的视频www高清免费观看 | 别揉我奶头~嗯~啊~动态视频| 夫妻午夜视频| 欧美不卡视频在线免费观看 | 日本五十路高清| 一个人免费在线观看的高清视频| 欧美精品一区二区免费开放| 亚洲情色 制服丝袜| 精品国产超薄肉色丝袜足j| 久热这里只有精品99| 日韩大码丰满熟妇| 高清av免费在线| 精品少妇一区二区三区视频日本电影| 亚洲精品一二三| 视频在线观看一区二区三区| 天堂影院成人在线观看| 亚洲自偷自拍图片 自拍| 美女午夜性视频免费| 满18在线观看网站| 精品午夜福利视频在线观看一区| 亚洲欧美精品综合一区二区三区| 国产91精品成人一区二区三区| 亚洲一区二区三区欧美精品| 亚洲情色 制服丝袜| 一二三四在线观看免费中文在| 精品人妻在线不人妻| 一级片免费观看大全| av天堂久久9| 国产乱人伦免费视频| 欧美在线黄色| 麻豆av在线久日| 91大片在线观看| 免费在线观看影片大全网站| 国产一区二区三区综合在线观看| cao死你这个sao货| 国产在线精品亚洲第一网站| 超碰97精品在线观看| 宅男免费午夜| 欧美精品一区二区免费开放| 免费一级毛片在线播放高清视频 | 亚洲五月色婷婷综合| 国产一区二区在线av高清观看| 成熟少妇高潮喷水视频| 久久久久亚洲av毛片大全| 国内毛片毛片毛片毛片毛片| 国产激情欧美一区二区| 国产免费av片在线观看野外av| 成年女人毛片免费观看观看9| 午夜激情av网站| 精品免费久久久久久久清纯| 看片在线看免费视频| 亚洲熟妇中文字幕五十中出 | 精品国产美女av久久久久小说| 如日韩欧美国产精品一区二区三区| 亚洲国产精品合色在线| www.999成人在线观看| 精品欧美一区二区三区在线| 国产精品免费视频内射| 欧美黑人欧美精品刺激| 一级,二级,三级黄色视频| 搡老乐熟女国产| 成人国产一区最新在线观看| 日日干狠狠操夜夜爽| 亚洲精品国产色婷婷电影| 悠悠久久av| 欧美日韩中文字幕国产精品一区二区三区 | 人人妻,人人澡人人爽秒播| 国产精品九九99| 日本一区二区免费在线视频| 欧美日韩精品网址| 视频区欧美日本亚洲| 老司机午夜福利在线观看视频| 999精品在线视频| 国产成人精品在线电影| 成人三级做爰电影| 侵犯人妻中文字幕一二三四区| 免费在线观看完整版高清| 少妇裸体淫交视频免费看高清 | 欧美日韩亚洲综合一区二区三区_| 精品日产1卡2卡| 国产亚洲av高清不卡| 亚洲熟妇熟女久久| 99精品久久久久人妻精品| 国产精品一区二区在线不卡| 亚洲熟女毛片儿| 久久精品aⅴ一区二区三区四区| 黄片大片在线免费观看| 免费一级毛片在线播放高清视频 | 亚洲欧美日韩无卡精品| 国产精华一区二区三区| 丝袜美足系列| 国产精品国产av在线观看| 两人在一起打扑克的视频| 精品久久久精品久久久| 免费在线观看完整版高清| 国产97色在线日韩免费| 国产黄a三级三级三级人| 久久精品影院6| 可以免费在线观看a视频的电影网站| 激情视频va一区二区三区| 亚洲性夜色夜夜综合| 丰满人妻熟妇乱又伦精品不卡| 成人国产一区最新在线观看| 亚洲国产精品一区二区三区在线| 窝窝影院91人妻| 男人舔女人下体高潮全视频| 如日韩欧美国产精品一区二区三区| 一区二区三区国产精品乱码| 91麻豆精品激情在线观看国产 | 午夜两性在线视频| 免费女性裸体啪啪无遮挡网站| 黄色a级毛片大全视频| 免费少妇av软件| 18禁裸乳无遮挡免费网站照片 | 啦啦啦免费观看视频1| av超薄肉色丝袜交足视频| 中文字幕高清在线视频| 男女做爰动态图高潮gif福利片 | 99国产综合亚洲精品| 日本三级黄在线观看| 亚洲 国产 在线| 18禁裸乳无遮挡免费网站照片 | 日本欧美视频一区| 国产精品 国内视频| 中文字幕高清在线视频| 岛国视频午夜一区免费看| 精品午夜福利视频在线观看一区| 国产深夜福利视频在线观看| 亚洲精华国产精华精| 在线观看舔阴道视频| 免费高清视频大片| 午夜成年电影在线免费观看| 国产成人欧美| 免费人成视频x8x8入口观看| 咕卡用的链子| 黄片小视频在线播放| 人妻久久中文字幕网| 欧美日韩亚洲高清精品| 久久人妻熟女aⅴ| 看片在线看免费视频| 深夜精品福利| 午夜成年电影在线免费观看| 国产亚洲精品第一综合不卡| 欧美人与性动交α欧美精品济南到| 欧美日韩精品网址| 日韩视频一区二区在线观看| 黄色怎么调成土黄色| av视频免费观看在线观看| 免费久久久久久久精品成人欧美视频| 三上悠亚av全集在线观看| 免费搜索国产男女视频| 91在线观看av| 日韩三级视频一区二区三区| 国产精品永久免费网站| 亚洲伊人色综图| 麻豆国产av国片精品| 在线观看66精品国产| 日本免费a在线| 精品国内亚洲2022精品成人| 亚洲成人国产一区在线观看| 成人三级做爰电影| 精品人妻1区二区| 热99re8久久精品国产| 久久久久久免费高清国产稀缺| 18美女黄网站色大片免费观看| 激情在线观看视频在线高清| 中文字幕另类日韩欧美亚洲嫩草| 久久 成人 亚洲| 日韩三级视频一区二区三区| 亚洲欧洲精品一区二区精品久久久| 在线观看一区二区三区| 亚洲成a人片在线一区二区| 麻豆久久精品国产亚洲av | 香蕉久久夜色| 午夜福利免费观看在线| 日韩大尺度精品在线看网址 | 亚洲久久久国产精品| 国内久久婷婷六月综合欲色啪| 国产真人三级小视频在线观看| 国产亚洲欧美98| 人人妻,人人澡人人爽秒播| 很黄的视频免费| 天天躁夜夜躁狠狠躁躁| 国产色视频综合| 国产精品亚洲一级av第二区| 啪啪无遮挡十八禁网站| 9热在线视频观看99| 欧美激情高清一区二区三区| 亚洲午夜理论影院| 国产免费现黄频在线看| 黄片播放在线免费| 在线免费观看的www视频| 高清在线国产一区| 日韩欧美一区二区三区在线观看| 欧美日韩亚洲国产一区二区在线观看| 女人高潮潮喷娇喘18禁视频| 精品一区二区三区四区五区乱码| 999久久久国产精品视频| 99香蕉大伊视频| 国产高清视频在线播放一区| 中文字幕人妻熟女乱码| 97碰自拍视频| 亚洲欧美激情综合另类| 亚洲av成人不卡在线观看播放网| 国产成人一区二区三区免费视频网站| www.自偷自拍.com| 色婷婷av一区二区三区视频| 国产亚洲精品第一综合不卡| 性欧美人与动物交配| 丁香欧美五月| av网站在线播放免费| 婷婷精品国产亚洲av在线| 午夜精品在线福利| 亚洲成人久久性| 99精品久久久久人妻精品| 亚洲专区中文字幕在线| 一级作爱视频免费观看| 国产精品综合久久久久久久免费 | 国产av在哪里看| 亚洲欧美激情综合另类| 久久久久亚洲av毛片大全| 国产成人av教育| 自线自在国产av| x7x7x7水蜜桃| 国产深夜福利视频在线观看| 色婷婷av一区二区三区视频| 久久欧美精品欧美久久欧美| 三级毛片av免费| 亚洲伊人色综图| 两人在一起打扑克的视频| 精品久久久久久,| 最新在线观看一区二区三区| 在线视频色国产色| 亚洲免费av在线视频| 99国产极品粉嫩在线观看| 日本vs欧美在线观看视频| av天堂在线播放| 很黄的视频免费| 亚洲自拍偷在线| 亚洲男人的天堂狠狠| 国产又色又爽无遮挡免费看| 国产高清国产精品国产三级| 岛国视频午夜一区免费看| 美女福利国产在线| 俄罗斯特黄特色一大片| 欧美激情久久久久久爽电影 | 成人手机av| 黑人巨大精品欧美一区二区蜜桃| 久久久国产成人精品二区 | 免费久久久久久久精品成人欧美视频| 老熟妇仑乱视频hdxx| 大香蕉久久成人网| 12—13女人毛片做爰片一| 亚洲一卡2卡3卡4卡5卡精品中文| 热re99久久精品国产66热6| 人人妻人人澡人人看| 丁香欧美五月| svipshipincom国产片| a级片在线免费高清观看视频| 我的亚洲天堂| 91成年电影在线观看| 欧美人与性动交α欧美软件| 男女下面插进去视频免费观看| 国产精品99久久99久久久不卡| 亚洲人成电影观看| 纯流量卡能插随身wifi吗| 一级作爱视频免费观看| 好男人电影高清在线观看| 日本wwww免费看| 亚洲第一av免费看| 男女高潮啪啪啪动态图| 免费av毛片视频|