• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    算力網(wǎng)絡(luò)調(diào)度的集中式方案研究與實踐

    2023-01-27 11:50:38崔占偉
    廣東通信技術(shù) 2022年12期
    關(guān)鍵詞:集中式算力路由

    [崔占偉]

    1 引言

    算力,可稱為計算能力,即處理數(shù)據(jù)的能力。從概念上講,數(shù)據(jù)和算力早在信息技術(shù)產(chǎn)生后、數(shù)字經(jīng)濟出現(xiàn)之前就已經(jīng)存在。隨著5G、人工智能、物聯(lián)網(wǎng)、區(qū)塊鏈等技術(shù)的發(fā)展,智能化、數(shù)字化成為未來經(jīng)濟的主流,算力正在成為像水力、電力一樣的生產(chǎn)力要素。

    隨著數(shù)字時代的到來,算力作為重要生產(chǎn)力,成為支撐數(shù)字經(jīng)濟、數(shù)字社會和數(shù)字政府發(fā)展的核心基礎(chǔ)。根據(jù)2022 中國算力大會發(fā)布的數(shù)據(jù)顯示,算力作為數(shù)字經(jīng)濟時代新的生產(chǎn)力正迅速發(fā)展。截至2021 年底,我國在用數(shù)據(jù)中心機架總規(guī)模超過520 萬標準機架,平均上架率超過55%。在用數(shù)據(jù)中心服務(wù)器規(guī)模1 900 萬臺,存儲容量達到800EB(1EB=1024PB)。算力總規(guī)模超過140EFlops,近五年年均增速超過30%,算力規(guī)模排名全球第二。

    算力網(wǎng)絡(luò)是一種利用網(wǎng)絡(luò)控制面?zhèn)鬟f算力等資源信息,并以此為基礎(chǔ)實現(xiàn)多方、異構(gòu)的計算、存儲、網(wǎng)絡(luò)等資源之間的信息關(guān)聯(lián)與高頻交易的技術(shù)體系,以滿足新興業(yè)務(wù)提出的“隨時、隨地、隨需”的多樣化需求,從而解決不同類型云計算節(jié)點規(guī)模建設(shè)后的算力分配與資源共享需求難題。

    2 算力網(wǎng)絡(luò)調(diào)度功能框架

    2.1 算力網(wǎng)絡(luò)調(diào)度功能框架

    算力國際標準ITU-T Y.2501 中提出將算力網(wǎng)絡(luò)功能架構(gòu)分成4 大模塊:算力網(wǎng)絡(luò)資源層、算力網(wǎng)絡(luò)控制層、算力網(wǎng)絡(luò)服務(wù)層和算力網(wǎng)絡(luò)編排管理層,如圖1 所示。

    圖1 算力網(wǎng)絡(luò)總體功能架構(gòu)圖

    其中服務(wù)提供層主要實現(xiàn)面向用戶的服務(wù)、原子功能能力開放;網(wǎng)絡(luò)控制層主要通過網(wǎng)絡(luò)控制平面實現(xiàn)計算和網(wǎng)絡(luò)多維度資源融合的路由;算力網(wǎng)絡(luò)資源層主要提供算力資源、存儲資源和網(wǎng)絡(luò)轉(zhuǎn)發(fā)資源;并結(jié)合網(wǎng)絡(luò)中計算處理能力和網(wǎng)絡(luò)轉(zhuǎn)發(fā)能力的實際情況,實現(xiàn)各類計算、存儲資源的傳遞和流動;算力管理編排層主要解決異構(gòu)算力資源、服務(wù)/功能資源的注冊、建模、納管、編排、安全等問題。

    2.2 算力網(wǎng)絡(luò)調(diào)度模塊劃分

    (1)算力網(wǎng)絡(luò)資源層:包括算力資源和網(wǎng)絡(luò)資源。算力資源是滿足新興業(yè)務(wù)的多樣性計算需求,通過從單核CPU 到多核CPU,到CPU+GPU+FPGA 等多種算力組合,在網(wǎng)絡(luò)中提供泛在異構(gòu)計算資源。網(wǎng)絡(luò)資源時提供信息傳輸?shù)木W(wǎng)絡(luò)基礎(chǔ)設(shè)施,包括接入網(wǎng)、城域網(wǎng)和骨干網(wǎng)。

    (2)算力網(wǎng)絡(luò)控制層:基于抽象后的算力網(wǎng)絡(luò)計算資源采集和發(fā)現(xiàn),實現(xiàn)對算力節(jié)點的資源信息感知;另一方面,通過在用戶請求中攜帶業(yè)務(wù)需求,實現(xiàn)對用戶業(yè)務(wù)需求的感知。綜合考慮用戶業(yè)務(wù)請求、網(wǎng)絡(luò)信息和算力資源信息,將業(yè)務(wù)靈活按需調(diào)度到不同的算力節(jié)點中,同時將計算結(jié)果發(fā)布到算力服務(wù)層。

    (3)算力網(wǎng)絡(luò)服務(wù)層:承載算力的各類能力及應(yīng)用,并將用戶對業(yè)務(wù)SLA 的請求包括算力請求等參數(shù)傳遞給算力網(wǎng)絡(luò)控制層。

    (4)算力網(wǎng)絡(luò)編排管理層:實現(xiàn)對算力服務(wù)的運營與編排管理、對算力路由的管理、對算力資源的管理以及對于網(wǎng)絡(luò)資源的管理,其中算力資源管理包括基于統(tǒng)一的算力度量體系,完成對算力資源的統(tǒng)一抽象描述,進而實現(xiàn)對算力資源的度量與建模、注冊和OAM 管理等功能;以支持網(wǎng)絡(luò)對算力資源的可感知、可度量、可管理和可控制。

    3 算力網(wǎng)絡(luò)調(diào)度總體實現(xiàn)方案分析

    算力網(wǎng)絡(luò)是通過網(wǎng)絡(luò)控制面分發(fā)服務(wù)節(jié)點的算力、存儲、算法等資源信息,并結(jié)合網(wǎng)絡(luò)信息和用戶需求,提供最佳的計算、存儲、網(wǎng)絡(luò)等資源的分發(fā)、關(guān)聯(lián)、交易與調(diào)配,從而實現(xiàn)整網(wǎng)資源的最優(yōu)化配置和使用的新型網(wǎng)絡(luò)。

    3.1 算力網(wǎng)絡(luò)調(diào)度的技術(shù)特征

    現(xiàn)有網(wǎng)絡(luò)架構(gòu)采用以應(yīng)用層為主、基于DNS 的尋址,由于沒有考慮網(wǎng)絡(luò)狀態(tài)以及目的節(jié)點計算能力的變化,因此其綜合性能在某些情況下比較差。算力網(wǎng)絡(luò)面向計算類業(yè)務(wù),根據(jù)業(yè)務(wù)的需求,結(jié)合當前網(wǎng)絡(luò)中實時的網(wǎng)絡(luò)狀況和可服務(wù)的計算資源的計算狀況,通過算力網(wǎng)絡(luò)靈活匹配、動態(tài)調(diào)度,將終端的計算任務(wù)路由到合適的目標計算節(jié)點,以支撐業(yè)務(wù)的計算需求,保證業(yè)務(wù)的用戶體驗。

    綜上,算力網(wǎng)絡(luò)的技術(shù)特征如下。

    (1)算力網(wǎng)絡(luò)路由技術(shù):基于抽象后的計算資源發(fā)現(xiàn),綜合考慮網(wǎng)絡(luò)狀況和計算資源狀況,將業(yè)務(wù)靈活按需調(diào)度到不同的計算資源節(jié)點中。具體功能主要包括算力標識、算力狀態(tài)網(wǎng)絡(luò)同步、算力路由控制、算力路由尋址、算力路由轉(zhuǎn)發(fā)等。可包含集中式算力路由技術(shù)方案和分布式算力路由技術(shù)等方案;

    (2)面向服務(wù)/功能/算力的接口:定義算力網(wǎng)絡(luò)與服務(wù)/功能/算力間的通用接口,用于描述計算狀態(tài),與應(yīng)用無關(guān),語義不感知,使得算力網(wǎng)絡(luò)與千變?nèi)f化的應(yīng)用創(chuàng)新解耦,保持自己的穩(wěn)定。

    算力網(wǎng)絡(luò)的部署可以基于overlay 技術(shù)疊加在現(xiàn)有的傳統(tǒng)網(wǎng)絡(luò)之上,也可以在新建的局部網(wǎng)絡(luò)中獨立部署。算力網(wǎng)絡(luò)的功能模塊可以基于通用服務(wù)器進行實現(xiàn),也可以基于專用網(wǎng)絡(luò)設(shè)備進行實現(xiàn)。

    3.2 算力調(diào)度編排

    算力網(wǎng)絡(luò)編排是針對多樣化、定制化的算網(wǎng)融合服務(wù)需求,基于算力和網(wǎng)絡(luò)的原子能力進行靈活組合、一體編排,設(shè)計產(chǎn)品服務(wù)模型,并以模板的形式固化所需的資源、服務(wù)、策略及配置,實現(xiàn)流程、模型等因子的通用化、標準化,實現(xiàn)算網(wǎng)業(yè)務(wù)統(tǒng)一編排、部署和保障。

    面向上層的能力調(diào)度主要包含網(wǎng)絡(luò)編排和服務(wù)編排兩個方面。

    3.2.1 網(wǎng)絡(luò)編排

    網(wǎng)絡(luò)編排主要是指,對底層的網(wǎng)絡(luò)服務(wù)編排能力進行硬件資源的抽象和能力的建模,并通過服務(wù)編排來實現(xiàn)網(wǎng)絡(luò)控制。我們提出基于SDN 的寬帶接入(SEBA)容器化架構(gòu),以實現(xiàn)SDN 網(wǎng)絡(luò)訪問。SEBA 的核心組件主要包括開放網(wǎng)絡(luò)操作系統(tǒng)(ONOS)、Kafka、VOLTHA、XOS。

    ①ONOS:實現(xiàn)SDN 網(wǎng)絡(luò)操作系統(tǒng),對網(wǎng)絡(luò)服務(wù)編排實現(xiàn)統(tǒng)一的資源調(diào)度和管理。

    ② Kafka:實現(xiàn)REST 的消息隊列管理,并通過上層的服務(wù)能力對底層硬件的訪問請求消息進行統(tǒng)一管理。

    ③VOLTHA:實現(xiàn)底層網(wǎng)絡(luò)接入設(shè)備和轉(zhuǎn)發(fā)設(shè)備的硬件資源抽象,從而使用和訪問上層的網(wǎng)絡(luò)功能。

    ④ XOS:實現(xiàn)網(wǎng)絡(luò)功能虛擬化和服務(wù)化,并可以基于SDN 控制器的可編程能力實現(xiàn)網(wǎng)絡(luò)控制和功能軟件定義能力。

    3.2.2 服務(wù)編排

    服務(wù)編排可以實現(xiàn)對PaaS 和軟件即服務(wù)(SaaS)能力的容器化調(diào)度。由于云原生具有服務(wù)化和微服務(wù)化的能力,因此在實現(xiàn)算力調(diào)度的過程中,基于不同的應(yīng)用場景,我們提出了3 個方面的服務(wù)能力。

    ①計算能力集:集成目前云原生統(tǒng)一的計算型能力庫,包括 Spark、Hadoop、Hive、Flink 等。

    ② 數(shù)據(jù)庫:采用傳統(tǒng)的數(shù)據(jù)庫服務(wù)能力,為上層的應(yīng)用和業(yè)務(wù)場景提供一鍵部署式的云原生數(shù)據(jù)庫,包括Mysql、MangoDB 等。

    ③人工智能:包括面向人工智能場景的推理和訓(xùn)練,以及對硬件加速有特定需求的算力調(diào)度能力。

    這些服務(wù)能力統(tǒng)一由Kubernetes 來實現(xiàn)編排。通過Kubernetes 的調(diào)度擴展接口和平臺內(nèi)部調(diào)度器對接,從而能夠?qū)崿F(xiàn)PaaS 和SaaS 服務(wù)的容器化調(diào)度。

    通過Knative 來完成統(tǒng)一服務(wù)能力的封裝和打包,通過Knative 的API 網(wǎng)關(guān)提供統(tǒng)一的網(wǎng)絡(luò)和算力調(diào)度接口,并通過統(tǒng)一的門戶對外開放,開發(fā)者可以根據(jù)網(wǎng)絡(luò)和算力調(diào)度能力進行網(wǎng)絡(luò)編程。這樣可以進一步融合底層網(wǎng)絡(luò)和算力,實現(xiàn)基于可編程網(wǎng)絡(luò)的算力調(diào)度。同時,用戶也可以更加關(guān)注上層業(yè)務(wù)邏輯和業(yè)務(wù)流程。

    4 算力網(wǎng)絡(luò)調(diào)度的集中式方案

    算力網(wǎng)絡(luò)調(diào)度的技術(shù)實現(xiàn)方案可以分為集中式方案、分布式方案和混合式方案,面向不同的業(yè)務(wù)場景,需綜合考慮業(yè)務(wù)需求、技術(shù)特性,合理選擇適宜的算力調(diào)度方案。

    集中式包括基于SDN/NFV 的算網(wǎng)編排管控以及基于域名解析機制的編排管控;集中式技術(shù)方案基于中心化管理編排系統(tǒng)進行狀態(tài)同步、同步代價相對較小,可適用于較大規(guī)模網(wǎng)絡(luò)。

    分布式技術(shù)方案基于分布式路由協(xié)議進行狀態(tài)同步,需要對現(xiàn)有網(wǎng)絡(luò)設(shè)備升級,因此對網(wǎng)絡(luò)影響較大,此方案具有實時性高、數(shù)據(jù)面調(diào)度轉(zhuǎn)發(fā)快速的特點,比較適用于面向時延敏感業(yè)務(wù)。

    下面我們重點分析集中式方案。

    4.1 集中式方案功能

    算力網(wǎng)絡(luò)集中式管理方案通過集中式的控制單元來統(tǒng)一收集全網(wǎng)的算力資源、網(wǎng)絡(luò)資源以及其他資源信息,用戶將業(yè)務(wù)需求發(fā)送給這個集中的控制單元,然后由該單元利用全局視角進行最優(yōu)化的資源選擇與分配。

    由于算力網(wǎng)絡(luò)編排管理平臺不但要收集各類資源信息,同時還要進行相應(yīng)的抽象與計算,最后還要將算力分配策略發(fā)送給用戶和算力資源池,并調(diào)度網(wǎng)絡(luò)建立相應(yīng)的傳送通道。因此算力網(wǎng)絡(luò)編排管理平臺需要集成原有網(wǎng)絡(luò)的SDN 控制器、NFV 編排器等網(wǎng)絡(luò)控制單元。從某種意義上,也可以認為是集成了算力信息與算力策略的新型網(wǎng)絡(luò)編排調(diào)度系統(tǒng)。

    算力網(wǎng)絡(luò)編排管理平臺具有三大功能:資源信息收集功能、資源分配調(diào)度功能和網(wǎng)絡(luò)連接調(diào)度功能。

    其中:(1)資源信息收集功能:算力網(wǎng)絡(luò)編排管理平臺收集各類資源信息,包括但不限于算力資源信息、網(wǎng)絡(luò)資源信息、存儲資源信息、算法資源信息等。

    (2)資源分配調(diào)度功能:根據(jù)用戶與資源供應(yīng)方在算力網(wǎng)絡(luò)交易平臺所達成的交易(也可以是匿名交易)情況,算力網(wǎng)絡(luò)編排管理平臺將相應(yīng)的資源分配策略發(fā)送給各資源管理方,比如通知算力資源的供應(yīng)方,在什么時間段有多少算力資源將被占用,同時刷新平臺所記錄的資源信息數(shù)據(jù)。

    (3)網(wǎng)絡(luò)連接調(diào)度功能:根據(jù)網(wǎng)絡(luò)資源分配情況,得到網(wǎng)絡(luò)連接需求,比如在哪些節(jié)點之間需要建立多大的網(wǎng)絡(luò)連接,以及提供什么樣的服務(wù)質(zhì)量保障,按照這些業(yè)務(wù)需求,調(diào)度相應(yīng)的網(wǎng)絡(luò)資源,完成網(wǎng)絡(luò)連接建立。注,這里的網(wǎng)絡(luò)連接不只是傳統(tǒng)的通道建立,也可能根據(jù)業(yè)務(wù)需求,需要部署相應(yīng)的網(wǎng)元,如5G UPF、vBRAS、vCPE等接入控制網(wǎng)元等。

    以上這3 個功能,是算力網(wǎng)絡(luò)編排管理平臺所需具備的基本功能,但在實踐中,算力網(wǎng)絡(luò)編排管理平臺會根據(jù)現(xiàn)有系統(tǒng)情況,靈活地增刪相應(yīng)功能。

    4.2 集中式方案架構(gòu)

    算力網(wǎng)絡(luò)集中式方案架構(gòu)主要由以下4 部分構(gòu)成。

    (1)算力網(wǎng)絡(luò)管理編排系統(tǒng)。算力網(wǎng)絡(luò)的資源管理和調(diào)度系統(tǒng),根據(jù)業(yè)務(wù)需求對算力資源進行彈性調(diào)度,在滿足業(yè)務(wù)實時需求的同時,提高算力利用率。

    (2)賦能平臺。為用戶業(yè)務(wù)部署賦能,例如針對AI業(yè)務(wù)的AI 賦能平臺。

    (3)邊緣/核心DC。業(yè)務(wù)部署節(jié)點,包含算力資源基礎(chǔ)設(shè)施和NFV 基礎(chǔ)設(shè)施。其中,用戶應(yīng)用部署在異構(gòu)算力資源池之上,vBRAS、vCPE 等虛擬網(wǎng)元部署在NFVI之上。

    (4)網(wǎng)絡(luò)基礎(chǔ)設(shè)施。連接用戶、邊緣云、核心云的網(wǎng)絡(luò)基礎(chǔ)設(shè)施,包括控制面的SDN 控制器、傳統(tǒng)網(wǎng)管,以及轉(zhuǎn)發(fā)面的網(wǎng)絡(luò)設(shè)備。

    其中,賦能平臺、邊緣/核心DC、網(wǎng)絡(luò)基礎(chǔ)設(shè)施包含了算力調(diào)度的基礎(chǔ)資源,而算力網(wǎng)絡(luò)管理編排系統(tǒng)負責對這些資源進行管理和編排,既要實現(xiàn)根據(jù)業(yè)務(wù)需求的動態(tài)算力調(diào)整,又要實現(xiàn)對各個層面資源的有機協(xié)調(diào)。

    完整的一個算力網(wǎng)絡(luò)調(diào)度集中式方案的架構(gòu),如圖2所示。

    圖2 算力網(wǎng)絡(luò)集中式方案架構(gòu)

    算力網(wǎng)絡(luò)管理編排系統(tǒng)的主要模塊功能如下。

    (1)需求解析模塊。分析用戶業(yè)務(wù)需求,將用戶業(yè)務(wù)需求轉(zhuǎn)化為算力資源需求,根據(jù)算力需求劃分業(yè)務(wù)等級,以確定業(yè)務(wù)的部署位置、所需資源大小等信息。

    (2)算法選擇模塊。根據(jù)用戶的業(yè)務(wù)類型和需求解析模塊的結(jié)果,在賦能平臺中為用戶選擇合適的部署算法,確定用戶業(yè)務(wù)部署的規(guī)格。

    (3)應(yīng)用部署模塊。根據(jù)算法選擇模塊的結(jié)果,將用戶業(yè)務(wù)部署到指定的算力節(jié)點中。

    (4)算力調(diào)度模塊。管理核心云和邊緣云的算力資源,根據(jù)業(yè)務(wù)需求為用戶分配相應(yīng)的計算、存儲、網(wǎng)絡(luò)資源,并根據(jù)策略對業(yè)務(wù)部署位置、業(yè)務(wù)算力進行彈性調(diào)整。

    (5)網(wǎng)絡(luò)調(diào)度模塊。管理用戶、邊緣云、核心云的網(wǎng)絡(luò),在用戶業(yè)務(wù)部署或調(diào)整之后,配置用戶到業(yè)務(wù)處理節(jié)點之間的網(wǎng)絡(luò),將用戶流量路由到處理節(jié)點。

    在上述功能模塊中,部分功能可以借助現(xiàn)有的技術(shù)進行實現(xiàn),如算法選擇模塊使用大數(shù)據(jù)分析技術(shù),應(yīng)用部署模塊借助邊緣計算管控平臺,算力調(diào)度模塊使用NFVO,網(wǎng)絡(luò)調(diào)度模塊使用SDN 控制器等。

    需求分析模塊則需要根據(jù)服務(wù)的用戶類型進行設(shè)計,形成標準化的模板,用戶根據(jù)自身業(yè)務(wù)規(guī)模提出不同的需求,算力網(wǎng)絡(luò)管理編排系統(tǒng)將業(yè)務(wù)需求轉(zhuǎn)化為具體的算力資源調(diào)度方案,并為用戶分配合適的基礎(chǔ)資源。

    可通過將已實現(xiàn)的南向接口協(xié)議(如Netconf、Openflow等)進行增強來實現(xiàn)集中式的算力網(wǎng)絡(luò)編排管理系統(tǒng)。

    4.3 集中式方案工作流程

    集中式的算力網(wǎng)絡(luò)方案主要工作流程如下。

    (1)算力網(wǎng)絡(luò)編排管理系統(tǒng)與所有資源及網(wǎng)絡(luò)節(jié)點建立控制連接,資源結(jié)點和網(wǎng)絡(luò)節(jié)點將自身的計算、網(wǎng)絡(luò)等資源信息通過控制連接上報給算力網(wǎng)絡(luò)編排管理系統(tǒng)。

    (2)算力網(wǎng)絡(luò)編排管理系統(tǒng)將獲得的信息進行處理,得到一張總體資源視圖。

    (3)當用戶向算力網(wǎng)絡(luò)編排管理系統(tǒng)發(fā)送其資源需求(或通過需求分析模塊得到用戶的需求),算力網(wǎng)絡(luò)編排管理系統(tǒng)將根據(jù)用戶的需求將滿足需求的方案返回給用戶供用戶進行選擇(或根據(jù)用戶的需求及資源視圖主動為用戶選擇最佳的方案)。

    (4)用戶在進行選擇之后,將選擇之后的結(jié)果發(fā)送給算力網(wǎng)絡(luò)編排管理系統(tǒng)(或算力網(wǎng)絡(luò)編排管理系統(tǒng)為用戶選擇最佳方案后),算力網(wǎng)絡(luò)編排管理系統(tǒng)通過控制連接告知資源節(jié)點和用戶并對網(wǎng)絡(luò)節(jié)點進行業(yè)務(wù)配置,建立用戶和資源節(jié)點之間的通路。

    詳細工作流程如圖3 所示。

    圖3 算力網(wǎng)絡(luò)集中式方案工作流程

    4.4 集中式方案應(yīng)用案例

    4.4.1 應(yīng)用場景方案

    A 市邊緣云算力不足無法及時擴容,不能滿足A 市業(yè)務(wù)發(fā)展需求,而傳統(tǒng)資源擴容方案從方案招標、設(shè)備采購、設(shè)備上架、設(shè)備部署,整個資源擴容周期按月計算,嚴重拖延了業(yè)務(wù)發(fā)展速度。通過云調(diào)網(wǎng)應(yīng)用場景,在B 市邊緣云分配算力承載A 市新發(fā)展業(yè)務(wù),通過算力網(wǎng)絡(luò)調(diào)度編排系統(tǒng)能力,支持城域網(wǎng)邊緣云資源一體化管理,實現(xiàn)省市跨域資源的共享,按需高效提供彈性資源;支持“視頻監(jiān)控”應(yīng)用云網(wǎng)資源的自動化開通與自適應(yīng)調(diào)度。

    4.4.2 應(yīng)用調(diào)度流程

    集中式方案應(yīng)用調(diào)度流程如圖4 所示。

    圖4 應(yīng)用調(diào)度流程

    4.4.3 算力網(wǎng)絡(luò)調(diào)度配置方法

    (1)網(wǎng)絡(luò)調(diào)度:在B 地市資源分配完成后,協(xié)同調(diào)度多云管配置云上交換機,新增MSE 鏈路子接口,配置子接口地址,配置A 地網(wǎng)段靜態(tài)路由指向MSE 側(cè)對接地址;調(diào)度SDN 控制器 新增VPN,新增上云鏈路子接口加入VPN,配置鏈路子接口地址,配置云上新增資源網(wǎng)段靜態(tài)路由指向云上交換機;協(xié)同SDN 控制器配置A、B 兩地網(wǎng)PE,配置EVPN(以太網(wǎng)虛擬專用網(wǎng))打通A 地視頻接入VPN 與B 地新增VPN。

    在協(xié)同云網(wǎng)管和sdn 控制器之前,需要為業(yè)務(wù)分配網(wǎng)絡(luò)資源,網(wǎng)絡(luò)資源是用于網(wǎng)絡(luò)編排的與底層網(wǎng)絡(luò)部署有關(guān)的、不可共享的網(wǎng)絡(luò)參數(shù)。資源又分為邊緣云資源和城域網(wǎng)資源,邊緣云資源的管理以資源池為單位,一個資源池管理在邊緣云范圍內(nèi)不可共享的特定類型資源。例如,在同一對視頻云網(wǎng)接入MSE 與邊緣云交換機之間的相同物理線路上,為了隔離兩個不同VPN 的流量,需要為兩個VPN 分配不同的VlanId。

    城域網(wǎng)資源以地市城域網(wǎng)為單位,主要有VPN 網(wǎng)號,VPN 網(wǎng)號是專線組網(wǎng)的關(guān)鍵參數(shù),不同VPN 不重復(fù),vpn的RD(路由標識)/RT(網(wǎng)絡(luò)路由目標)以及EVPN 的RD/RT 均基于VPN 網(wǎng)號按規(guī)則生成。

    RT/RD 分配規(guī)則如下。

    ①全網(wǎng)狀組網(wǎng)RD/RT 分配規(guī)則:

    (a)RD 格式:AS 號:VPN 網(wǎng)號;

    (b)ExportRT 格式:AS 號:VPN 網(wǎng)號+00

    (c)ImportRT 格式:AS 號:VPN 網(wǎng)號+00

    ② 星型組網(wǎng)RD/RT 分配規(guī)則:

    中心點:

    (a)RD 格式:AS 號:VPN 網(wǎng)號+00;

    (b)ExportRT 格式:AS 號:VPN 網(wǎng)號+01

    (c)ImportRT 格式:AS 號:VPN 網(wǎng)號+00

    非中心點:

    (a)RD 格式:AS 號:VPN 網(wǎng)號+01;

    (b)ExportRT 格式:AS 號:VPN 網(wǎng)號+00

    (c)ImportRT 格式:AS 號:VPN 網(wǎng)號+01

    本系統(tǒng)的資源管理模塊支持上述的資源分配與回收邏輯。支持的資源類型包括:VlanId、VPN 網(wǎng)號、IP、通用數(shù)值??筛鶕?jù)業(yè)務(wù)管理的需要新增、刪除、修改,并可設(shè)置每個資源池中的可用資源范圍。

    (2)算力資源調(diào)度:算網(wǎng)編排管理平臺根據(jù)業(yè)務(wù)容量需求轉(zhuǎn)換為算力、內(nèi)存及存儲能力需求。在換算之前首先需確認業(yè)務(wù)需求數(shù)量,人工觸發(fā)場景直接選取應(yīng)用管理員輸入的業(yè)務(wù)需求數(shù)量;自動觸發(fā)場景按應(yīng)用現(xiàn)有業(yè)務(wù)容量的10%計算業(yè)務(wù)需求數(shù)量。

    各地市邊緣云節(jié)點服務(wù)器配置不等,同一地市也有提供多種配置的服務(wù)器,有物理機、虛機,云化物理服務(wù)器配置的cpu 型號也不同;各地市的存儲也有不同;面對網(wǎng)絡(luò)中分布的各種異構(gòu)資源,需要實現(xiàn)計算能力資源的抽象表示。

    本應(yīng)用案例按分配的網(wǎng)絡(luò)資源協(xié)同控制器向資源管理服務(wù)器打通A、B 兩個邊緣云節(jié)點之間的網(wǎng)絡(luò),實現(xiàn)集中式方案的算力網(wǎng)絡(luò)互調(diào)。

    4.4.4 實驗效果

    “視頻監(jiān)控”應(yīng)用經(jīng)過集中式方案部署,基于算力網(wǎng)絡(luò)編排管理平臺,實現(xiàn)了應(yīng)用從的A 市節(jié)點到B 市節(jié)點的分鐘級調(diào)度拉起;解決了邊緣云資源忙閑不均的問題,提升整體使用效率,通過CT 資源降低IT 擴容成本;實現(xiàn)對云網(wǎng)業(yè)務(wù)及網(wǎng)絡(luò)的實時質(zhì)量的指標體系的全面掌控。實驗結(jié)果數(shù)據(jù)如表1 所示。

    表1 “視頻監(jiān)控”應(yīng)用集中式調(diào)度測試結(jié)果

    5 結(jié)束語

    在5G 高速發(fā)展的當今時代,高速率和低時延是網(wǎng)絡(luò)的主要技術(shù)特征,無線接入的分量越來越重,促進了移動邊緣計算的發(fā)展,使業(yè)務(wù)的產(chǎn)生、處理和應(yīng)用都可以在本地完成,而不再僅僅依靠遙遠的集中單元,在未來網(wǎng)絡(luò)應(yīng)用中,接入側(cè)的影響也會越來越深遠,業(yè)務(wù)應(yīng)用的速率和時延要求會越來越高,移動邊緣計算的作用也會更加凸顯,算力網(wǎng)絡(luò)架構(gòu)將會以網(wǎng)絡(luò)與計算的深度融合為引擎,集中式技術(shù)方案集成了算力信息與算力策略的新型網(wǎng)絡(luò)編排調(diào)度系統(tǒng),基于中心化管理編排系統(tǒng)進行狀態(tài)同步、同步代價相對較小,在運營商網(wǎng)絡(luò)等較大規(guī)模網(wǎng)絡(luò)應(yīng)用中效率更高,能有效實現(xiàn)全頻域、全場景、全業(yè)務(wù)的靈活適配與資源協(xié)同,最終實現(xiàn)一體化的算力網(wǎng)絡(luò)架構(gòu)目標,為邊緣云網(wǎng)應(yīng)用的百花齊放提供穩(wěn)定、靈活的底座。

    猜你喜歡
    集中式算力路由
    多方求解智能時代算力挑戰(zhàn)
    新華月報(2024年7期)2024-04-08 02:10:56
    這個第二不一般
    都市人(2023年11期)2024-01-12 05:55:06
    衛(wèi)星通信在算力網(wǎng)絡(luò)中的應(yīng)用研究
    中國電信董事長柯瑞文:算力成為數(shù)字經(jīng)濟的主要生產(chǎn)力
    探究路由與環(huán)路的問題
    光伏:分布式新增裝機規(guī)模首次超越集中式
    能源(2018年8期)2018-09-21 07:57:16
    組串式、集中式逆變器的評估選定淺析
    電子測試(2017年23期)2017-04-04 05:07:46
    接觸網(wǎng)隔離開關(guān)集中式控制方案研究
    電氣化鐵道(2016年5期)2016-04-16 05:59:55
    光伏集中式逆變器與組串式逆變器
    PRIME和G3-PLC路由機制對比
    久久久久国产网址| 久久久欧美国产精品| 成人手机av| 男女午夜视频在线观看| 国产男人的电影天堂91| 蜜桃国产av成人99| 青青草视频在线视频观看| 久久午夜综合久久蜜桃| www.精华液| 免费播放大片免费观看视频在线观看| 欧美97在线视频| 国产成人精品一,二区| 亚洲少妇的诱惑av| 国产精品蜜桃在线观看| 亚洲国产精品国产精品| 天天躁夜夜躁狠狠躁躁| 999久久久国产精品视频| 久久久久久免费高清国产稀缺| 三级国产精品片| 韩国av在线不卡| a 毛片基地| 精品国产超薄肉色丝袜足j| 激情视频va一区二区三区| 日韩免费高清中文字幕av| 国产色婷婷99| 日韩中文字幕欧美一区二区 | 精品国产超薄肉色丝袜足j| 国产无遮挡羞羞视频在线观看| 欧美 日韩 精品 国产| 婷婷成人精品国产| 国产成人欧美| 青春草国产在线视频| 午夜福利,免费看| 男人添女人高潮全过程视频| 99re6热这里在线精品视频| 久久免费观看电影| 久久ye,这里只有精品| 97人妻天天添夜夜摸| 久久婷婷青草| 超色免费av| www.熟女人妻精品国产| 啦啦啦啦在线视频资源| 伦理电影大哥的女人| 五月伊人婷婷丁香| 午夜日韩欧美国产| 亚洲国产精品国产精品| 边亲边吃奶的免费视频| 在线观看国产h片| 亚洲欧美一区二区三区国产| 免费看不卡的av| 麻豆av在线久日| 男女边吃奶边做爰视频| 啦啦啦啦在线视频资源| 久久女婷五月综合色啪小说| 精品一区二区三区四区五区乱码 | 久久99蜜桃精品久久| 欧美国产精品一级二级三级| 97人妻天天添夜夜摸| 久久久精品免费免费高清| 欧美精品一区二区大全| av又黄又爽大尺度在线免费看| 婷婷色综合www| 涩涩av久久男人的天堂| 纵有疾风起免费观看全集完整版| 欧美日韩亚洲国产一区二区在线观看 | 黄色一级大片看看| 又大又黄又爽视频免费| 女性被躁到高潮视频| 国产成人精品一,二区| 久久99一区二区三区| 一级片'在线观看视频| 免费日韩欧美在线观看| 1024香蕉在线观看| 国产精品国产三级专区第一集| 男女国产视频网站| 在线观看www视频免费| 亚洲国产精品999| 香蕉国产在线看| 久久99热这里只频精品6学生| 久久久久久久大尺度免费视频| 亚洲久久久国产精品| 国产 一区精品| 免费观看性生交大片5| 中文字幕制服av| 伦理电影大哥的女人| 精品一区二区免费观看| a 毛片基地| 免费看不卡的av| 欧美精品一区二区免费开放| 久久青草综合色| 天天躁夜夜躁狠狠躁躁| 亚洲av日韩在线播放| 又粗又硬又长又爽又黄的视频| 在线 av 中文字幕| 欧美黄色片欧美黄色片| 少妇人妻久久综合中文| 亚洲欧美中文字幕日韩二区| 免费看不卡的av| 久久99蜜桃精品久久| 一区二区三区四区激情视频| 亚洲美女搞黄在线观看| 大话2 男鬼变身卡| 黑人猛操日本美女一级片| 国产精品国产三级国产专区5o| 黄片小视频在线播放| 男人操女人黄网站| 一区二区三区乱码不卡18| 在线观看一区二区三区激情| 纵有疾风起免费观看全集完整版| 制服人妻中文乱码| 久久久久久人妻| 色网站视频免费| 亚洲精品乱久久久久久| 久久精品久久久久久久性| 久久精品国产亚洲av涩爱| av福利片在线| 在线 av 中文字幕| 亚洲精品美女久久av网站| 国产一区二区在线观看av| 亚洲婷婷狠狠爱综合网| 久热这里只有精品99| 国产极品天堂在线| 久久国产亚洲av麻豆专区| 伊人久久国产一区二区| 亚洲激情五月婷婷啪啪| 亚洲,一卡二卡三卡| www.自偷自拍.com| 久久久久久久久久久久大奶| 国产综合精华液| 三上悠亚av全集在线观看| 叶爱在线成人免费视频播放| 午夜久久久在线观看| 欧美成人午夜精品| 黑丝袜美女国产一区| 日韩av免费高清视频| 在线免费观看不下载黄p国产| 国产成人一区二区在线| 免费在线观看黄色视频的| 亚洲精品国产av成人精品| 日韩精品免费视频一区二区三区| 亚洲精品久久久久久婷婷小说| 91在线精品国自产拍蜜月| 久久精品国产鲁丝片午夜精品| 在线看a的网站| 男女高潮啪啪啪动态图| 亚洲精品中文字幕在线视频| 亚洲国产欧美日韩在线播放| 久热久热在线精品观看| 国产亚洲av片在线观看秒播厂| 男女无遮挡免费网站观看| 深夜精品福利| 国产有黄有色有爽视频| 男女边摸边吃奶| 久久精品久久久久久噜噜老黄| 欧美日韩亚洲国产一区二区在线观看 | xxx大片免费视频| 春色校园在线视频观看| 高清视频免费观看一区二区| 视频区图区小说| 我要看黄色一级片免费的| 国产成人免费无遮挡视频| 韩国精品一区二区三区| 午夜福利在线观看免费完整高清在| 欧美另类一区| 黑人巨大精品欧美一区二区蜜桃| 亚洲av日韩在线播放| 美女xxoo啪啪120秒动态图| 熟妇人妻不卡中文字幕| freevideosex欧美| 日韩免费高清中文字幕av| 国产精品国产av在线观看| 欧美人与性动交α欧美精品济南到 | 国产爽快片一区二区三区| 欧美激情高清一区二区三区 | 欧美成人午夜精品| av.在线天堂| 激情五月婷婷亚洲| 国产亚洲av片在线观看秒播厂| 一级,二级,三级黄色视频| 天美传媒精品一区二区| 国产又爽黄色视频| 婷婷色综合大香蕉| 国产 精品1| 成年人免费黄色播放视频| 一本—道久久a久久精品蜜桃钙片| 一二三四在线观看免费中文在| 亚洲精品美女久久久久99蜜臀 | 又大又黄又爽视频免费| 精品少妇一区二区三区视频日本电影 | 亚洲国产看品久久| 成人国产麻豆网| www日本在线高清视频| 久久亚洲国产成人精品v| 精品久久久久久电影网| 激情视频va一区二区三区| 黑丝袜美女国产一区| 丰满乱子伦码专区| tube8黄色片| 日本av免费视频播放| 午夜老司机福利剧场| 免费看不卡的av| 菩萨蛮人人尽说江南好唐韦庄| 国产精品99久久99久久久不卡 | 日韩精品有码人妻一区| 久久久久国产精品人妻一区二区| 国产一区二区三区综合在线观看| 成人国产av品久久久| 伊人久久国产一区二区| 成人黄色视频免费在线看| 亚洲欧美清纯卡通| 黄色配什么色好看| 男女高潮啪啪啪动态图| 国产日韩欧美在线精品| 一区二区av电影网| 天堂俺去俺来也www色官网| 精品国产一区二区三区久久久樱花| 有码 亚洲区| 午夜精品国产一区二区电影| 国产黄色免费在线视频| 王馨瑶露胸无遮挡在线观看| av视频免费观看在线观看| 哪个播放器可以免费观看大片| 日本欧美国产在线视频| 亚洲经典国产精华液单| www.精华液| 国产深夜福利视频在线观看| 亚洲精品久久久久久婷婷小说| 亚洲国产最新在线播放| 九草在线视频观看| 搡老乐熟女国产| 国产精品蜜桃在线观看| 一区二区三区精品91| 99九九在线精品视频| 考比视频在线观看| 又大又黄又爽视频免费| 美女视频免费永久观看网站| 中文字幕人妻丝袜一区二区 | 热99国产精品久久久久久7| 十八禁网站网址无遮挡| 男女高潮啪啪啪动态图| 青春草视频在线免费观看| 最黄视频免费看| 国产精品99久久99久久久不卡 | 国产97色在线日韩免费| 中文字幕亚洲精品专区| 超色免费av| 热99国产精品久久久久久7| 九草在线视频观看| 国产综合精华液| 国产色婷婷99| 成人国语在线视频| 久久精品国产亚洲av天美| 1024视频免费在线观看| 美女国产高潮福利片在线看| 久久久国产一区二区| 美女福利国产在线| 亚洲欧美精品综合一区二区三区 | 老女人水多毛片| 久久久国产精品麻豆| 99热国产这里只有精品6| 天堂8中文在线网| 妹子高潮喷水视频| 国产精品不卡视频一区二区| 国产精品国产三级专区第一集| 一本—道久久a久久精品蜜桃钙片| 免费日韩欧美在线观看| 国产xxxxx性猛交| 亚洲av日韩在线播放| 自拍欧美九色日韩亚洲蝌蚪91| 最近2019中文字幕mv第一页| 丝袜美腿诱惑在线| 美女福利国产在线| 大香蕉久久网| 免费在线观看黄色视频的| 大片免费播放器 马上看| 最黄视频免费看| 美女xxoo啪啪120秒动态图| 日韩一区二区三区影片| 日本欧美视频一区| 你懂的网址亚洲精品在线观看| 又大又黄又爽视频免费| 91精品伊人久久大香线蕉| 天天躁狠狠躁夜夜躁狠狠躁| 免费大片黄手机在线观看| av免费观看日本| 亚洲av福利一区| 97人妻天天添夜夜摸| 久久精品aⅴ一区二区三区四区 | 亚洲av中文av极速乱| 国产欧美日韩综合在线一区二区| 亚洲情色 制服丝袜| 免费日韩欧美在线观看| 国产精品99久久99久久久不卡 | 国产极品粉嫩免费观看在线| 韩国av在线不卡| 国产女主播在线喷水免费视频网站| 少妇猛男粗大的猛烈进出视频| 欧美激情 高清一区二区三区| 高清av免费在线| 高清在线视频一区二区三区| 国产一区二区三区av在线| av女优亚洲男人天堂| 一级毛片黄色毛片免费观看视频| 午夜91福利影院| 国产在线免费精品| 两个人看的免费小视频| 亚洲精华国产精华液的使用体验| 久久久国产一区二区| 免费黄频网站在线观看国产| 亚洲av成人精品一二三区| 在线观看www视频免费| 男女下面插进去视频免费观看| 人妻人人澡人人爽人人| 香蕉丝袜av| 在线观看免费高清a一片| 国产精品二区激情视频| 美女xxoo啪啪120秒动态图| 国产午夜精品一二区理论片| 欧美中文综合在线视频| 成人午夜精彩视频在线观看| 免费久久久久久久精品成人欧美视频| 日韩视频在线欧美| 国产成人精品婷婷| 欧美在线黄色| 国产男女内射视频| 久久久精品免费免费高清| 国产成人精品婷婷| 精品一品国产午夜福利视频| 少妇的丰满在线观看| 男女午夜视频在线观看| 18禁裸乳无遮挡动漫免费视频| 99久久人妻综合| 看非洲黑人一级黄片| 婷婷成人精品国产| 中文字幕人妻熟女乱码| 国产欧美日韩一区二区三区在线| av福利片在线| 韩国精品一区二区三区| 亚洲伊人久久精品综合| 十八禁高潮呻吟视频| 99热国产这里只有精品6| 香蕉精品网在线| 一区二区三区精品91| 亚洲精品第二区| 天天操日日干夜夜撸| 免费日韩欧美在线观看| 精品福利永久在线观看| 欧美日韩精品网址| 男女边摸边吃奶| 九色亚洲精品在线播放| 久久免费观看电影| 国产精品国产三级国产专区5o| 午夜日本视频在线| 久久久精品区二区三区| 只有这里有精品99| 亚洲精品中文字幕在线视频| 中文字幕人妻熟女乱码| 黑人巨大精品欧美一区二区蜜桃| 菩萨蛮人人尽说江南好唐韦庄| 韩国精品一区二区三区| 99久久中文字幕三级久久日本| 亚洲精品国产av蜜桃| 婷婷色综合大香蕉| 韩国精品一区二区三区| 十分钟在线观看高清视频www| 国产日韩欧美亚洲二区| 十分钟在线观看高清视频www| 国产日韩欧美亚洲二区| 在线观看三级黄色| 人妻 亚洲 视频| www.精华液| 久热这里只有精品99| 夫妻午夜视频| 18+在线观看网站| 久久久久人妻精品一区果冻| 欧美激情 高清一区二区三区| 亚洲国产精品一区三区| 深夜精品福利| 啦啦啦视频在线资源免费观看| 精品少妇黑人巨大在线播放| 久久国产亚洲av麻豆专区| 久久久久久久久久久免费av| 人妻人人澡人人爽人人| 亚洲一码二码三码区别大吗| 少妇人妻精品综合一区二区| 国产精品国产三级专区第一集| 三级国产精品片| 街头女战士在线观看网站| 韩国高清视频一区二区三区| 香蕉国产在线看| 香蕉精品网在线| 看非洲黑人一级黄片| 久久久久久人妻| 日韩制服骚丝袜av| 天天影视国产精品| 国产精品三级大全| 人妻一区二区av| 久久青草综合色| 国产精品.久久久| 国产免费一区二区三区四区乱码| 亚洲第一区二区三区不卡| 老司机影院成人| 成人毛片60女人毛片免费| a级毛片黄视频| 老鸭窝网址在线观看| 九色亚洲精品在线播放| 如日韩欧美国产精品一区二区三区| 香蕉精品网在线| 日韩不卡一区二区三区视频在线| 97在线人人人人妻| 高清av免费在线| 热99久久久久精品小说推荐| 最近中文字幕高清免费大全6| 大香蕉久久网| 夜夜骑夜夜射夜夜干| 久久99一区二区三区| 最近2019中文字幕mv第一页| 日本av免费视频播放| 在线亚洲精品国产二区图片欧美| 日本色播在线视频| 国产精品久久久久久精品电影小说| 在线亚洲精品国产二区图片欧美| 久久久久久久国产电影| 国产探花极品一区二区| 亚洲一级一片aⅴ在线观看| 国产精品久久久久久精品古装| 交换朋友夫妻互换小说| 一区二区三区乱码不卡18| 不卡视频在线观看欧美| av一本久久久久| 一个人免费看片子| 精品国产乱码久久久久久小说| 少妇熟女欧美另类| 美女大奶头黄色视频| 国产精品久久久久成人av| 国产在线免费精品| 国产成人av激情在线播放| 午夜免费男女啪啪视频观看| 最近最新中文字幕免费大全7| 18禁观看日本| 亚洲美女黄色视频免费看| 水蜜桃什么品种好| 大话2 男鬼变身卡| 咕卡用的链子| 色网站视频免费| 毛片一级片免费看久久久久| 黄色配什么色好看| 久久99热这里只频精品6学生| 国产伦理片在线播放av一区| 欧美少妇被猛烈插入视频| 国产精品香港三级国产av潘金莲 | xxxhd国产人妻xxx| 少妇 在线观看| 久久国产精品大桥未久av| 国产日韩一区二区三区精品不卡| 欧美在线黄色| 精品一区二区三区四区五区乱码 | 欧美xxⅹ黑人| 丰满少妇做爰视频| 亚洲中文av在线| 9色porny在线观看| a级片在线免费高清观看视频| 国产亚洲av片在线观看秒播厂| 日日撸夜夜添| 男女无遮挡免费网站观看| 青春草亚洲视频在线观看| 免费在线观看完整版高清| 男女国产视频网站| h视频一区二区三区| 成年女人毛片免费观看观看9 | 久久精品aⅴ一区二区三区四区 | 国产 精品1| 国产福利在线免费观看视频| 丰满少妇做爰视频| 亚洲人成77777在线视频| 久久99热这里只频精品6学生| 亚洲男人天堂网一区| 欧美另类一区| 久热这里只有精品99| 亚洲精品国产一区二区精华液| videos熟女内射| 又大又黄又爽视频免费| 女人被躁到高潮嗷嗷叫费观| 观看av在线不卡| 国产在线一区二区三区精| 一级片'在线观看视频| 黄片小视频在线播放| 精品少妇内射三级| 高清黄色对白视频在线免费看| 韩国高清视频一区二区三区| 美女国产视频在线观看| 午夜免费观看性视频| 亚洲精品久久午夜乱码| 叶爱在线成人免费视频播放| 一级黄片播放器| 波多野结衣一区麻豆| 国产成人欧美| 欧美日韩视频精品一区| 韩国av在线不卡| 亚洲精品久久久久久婷婷小说| 秋霞在线观看毛片| a级毛片在线看网站| 成年人午夜在线观看视频| 免费女性裸体啪啪无遮挡网站| 亚洲精品国产av成人精品| 熟女电影av网| 亚洲国产欧美网| 成人免费观看视频高清| 久久国产亚洲av麻豆专区| 国产一区二区激情短视频 | 亚洲精品中文字幕在线视频| 国产精品一国产av| 如何舔出高潮| 一区在线观看完整版| 亚洲国产欧美日韩在线播放| 波多野结衣一区麻豆| 女人被躁到高潮嗷嗷叫费观| 看非洲黑人一级黄片| 日韩制服丝袜自拍偷拍| 爱豆传媒免费全集在线观看| 亚洲,欧美,日韩| 咕卡用的链子| 免费人妻精品一区二区三区视频| 亚洲av在线观看美女高潮| 黑人猛操日本美女一级片| 女人久久www免费人成看片| 久久久久精品性色| 最新中文字幕久久久久| 精品人妻在线不人妻| 国产综合精华液| 成年人免费黄色播放视频| 久久 成人 亚洲| 岛国毛片在线播放| 午夜福利视频精品| 精品酒店卫生间| 欧美日韩国产mv在线观看视频| 成人亚洲欧美一区二区av| 王馨瑶露胸无遮挡在线观看| 精品国产一区二区三区久久久樱花| 国语对白做爰xxxⅹ性视频网站| 中文字幕人妻丝袜制服| 一本大道久久a久久精品| 在线看a的网站| a 毛片基地| 国产黄色免费在线视频| 久久久精品区二区三区| 哪个播放器可以免费观看大片| 午夜精品国产一区二区电影| 亚洲国产av新网站| 涩涩av久久男人的天堂| 久久久久国产一级毛片高清牌| 日韩精品免费视频一区二区三区| 欧美另类一区| 免费在线观看完整版高清| 久久精品久久精品一区二区三区| 五月开心婷婷网| 午夜福利影视在线免费观看| av.在线天堂| 99久国产av精品国产电影| 男女下面插进去视频免费观看| 国产精品久久久久久精品古装| 精品午夜福利在线看| 亚洲国产日韩一区二区| a级毛片黄视频| 日韩不卡一区二区三区视频在线| 国产精品国产av在线观看| 午夜老司机福利剧场| 青草久久国产| 美女午夜性视频免费| 亚洲精品av麻豆狂野| 人成视频在线观看免费观看| 丝瓜视频免费看黄片| 久久午夜综合久久蜜桃| av.在线天堂| 如何舔出高潮| 欧美另类一区| 香蕉丝袜av| 如何舔出高潮| 丰满乱子伦码专区| 国产精品av久久久久免费| 成人二区视频| 午夜久久久在线观看| 国产精品.久久久| 99热全是精品| 久久久久国产一级毛片高清牌| 国产成人精品福利久久| 久久精品夜色国产| 久久久久久伊人网av| 亚洲久久久国产精品| 下体分泌物呈黄色| 亚洲综合色惰| 人人妻人人爽人人添夜夜欢视频| 亚洲四区av| 人人妻人人澡人人看| h视频一区二区三区| 午夜91福利影院| 亚洲天堂av无毛| av视频免费观看在线观看| 亚洲综合精品二区| av福利片在线| 蜜桃在线观看..| 一本大道久久a久久精品| 中文字幕人妻熟女乱码| 国产精品国产av在线观看| 欧美人与性动交α欧美软件| 欧美bdsm另类| 久久亚洲国产成人精品v| 不卡av一区二区三区| 免费播放大片免费观看视频在线观看| 宅男免费午夜| 亚洲一区中文字幕在线| 搡女人真爽免费视频火全软件| 国产成人一区二区在线| 人妻少妇偷人精品九色| 色吧在线观看|