• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于控制障礙函數(shù)的受限非線性系統(tǒng)安全控制研究進(jìn)展

    2024-08-13 00:00:00王海靜彭金柱張方方

    摘要: 控制障礙函數(shù)能有效兼顧控制目標(biāo)和安全性,成為當(dāng)前研究熱點(diǎn)之一。首先,基于非線性控制系統(tǒng)的復(fù)雜性介紹了一相對(duì)階和高相對(duì)階控制障礙函數(shù)的構(gòu)造方法及其理論成果,通過(guò)各類控制障礙函數(shù)可將安全約束轉(zhuǎn)化為集合前向不變性以實(shí)現(xiàn)系統(tǒng)安全控制。其次,從不同控制目標(biāo)下優(yōu)化問(wèn)題的求解角度對(duì)基于控制障礙函數(shù)的非線性系統(tǒng)安全控制進(jìn)行了總結(jié)。最后,基于控制障礙函數(shù)方法的可擴(kuò)展性、強(qiáng)實(shí)時(shí)性和強(qiáng)魯棒性等優(yōu)點(diǎn),展望了控制障礙函數(shù)方法在非線性系統(tǒng)安全控制領(lǐng)域的應(yīng)用前景。

    關(guān)鍵詞: 控制障礙函數(shù); 非線性系統(tǒng); 安全控制; 二次規(guī)劃

    中圖分類號(hào): TP13

    文獻(xiàn)標(biāo)志碼: A

    文章編號(hào): 1671-6841(2024)06-0001-08

    DOI: 10.13705/j.issn.1671-6841.2023072

    Progress of Research on Safety Control of Constrained Nonlinear

    System Based on Control Barrier Function

    WANG Haijing1, PENG Jinzhu1,2, ZHANG Fangfang1,2

    (1.School of Electrical and Information Engineering, Zhengzhou University, Zhengzhou 450001, China;

    2.State Key Laboratory of Intelligent Agricultural Power Equipment, Luoyang 471039, China)

    Abstract: Since control barrier function could balance control objectives and safety effectively, it has become one of the hotspots of study. Firstly, the construction methods and theoretical achievements of one relative order and high relative order control barrier functions were introduced based on the complexity of nonlinear control systems. By using various control barrier functions, safety constraints could be transformed into set forward invariance to ensure the safety control of the system. Secondly, the safety control of nonlinear systems based on control barrier functions was summarized from the perspective of solving optimization problems with different control objectives. Finally, based on the advantages of the control barrier function method, such as scalability, strong real-time performance and strong robustness, the application prospect of the control barrier function method in the field of nonlinear system safe control was explored.

    Key words: control barrier function; nonlinear system; safety control; quadratic programming

    0 引言

    隨著科技的進(jìn)步,工程控制系統(tǒng)被廣泛應(yīng)用到工業(yè)生產(chǎn)、生活服務(wù)、醫(yī)療、航空航天等重要領(lǐng)域,系統(tǒng)安全性問(wèn)題日益凸顯。為了提高系統(tǒng)在工作運(yùn)行中或與人類協(xié)同工作時(shí)的自適應(yīng)性和安全性,面向系統(tǒng)狀態(tài)安全的分析與控制越來(lái)越多地受到國(guó)內(nèi)外學(xué)者的關(guān)注。21世紀(jì)以來(lái),障礙函數(shù)(barrier function,BF)開(kāi)始應(yīng)用在非線性系統(tǒng)以解決安全性問(wèn)題,該方法繼承了20世紀(jì)40年代Nagumo定理實(shí)現(xiàn)集合不變性的基本思想[1]。不同的是,Nagumo定理只是給出了狀態(tài)在集合邊界應(yīng)該滿足的條件,BF方法則是考慮系統(tǒng)的整個(gè)安全集合[2]。

    針對(duì)現(xiàn)實(shí)系統(tǒng)在沒(méi)有干預(yù)時(shí)并不是總能保證系統(tǒng)安全的情況,需要通過(guò)控制輸入改變系統(tǒng)狀態(tài)的軌跡,從而使系統(tǒng)軌跡滿足安全約束條件。因此,將BF擴(kuò)展到帶有輸入的控制系統(tǒng)中,產(chǎn)生了控制障礙函數(shù)(control barrier function,CBF)的概念[3]。近年來(lái),CBF成為當(dāng)前研究熱點(diǎn)之一[4-5]。該方法是控制Lyapunov函數(shù)(control Lyapunov function,CLF)對(duì)安全狀態(tài)集的推廣,將滿足狀態(tài)約束條件轉(zhuǎn)化為安全狀態(tài)集的前向不變性問(wèn)題。該方法不需要窮舉系統(tǒng)的動(dòng)態(tài)行為,并且避免了顯式計(jì)算系統(tǒng)的狀態(tài)軌跡或可達(dá)集,進(jìn)而降低了非線性系統(tǒng)安全控制的計(jì)算復(fù)雜性和保守性。

    目前,CBF已經(jīng)可以處理任意相對(duì)階的約束條件,其約束條件可以是常值、時(shí)變的,甚至是動(dòng)態(tài)生成的。同時(shí),基于CBF的控制器的設(shè)計(jì)可以獨(dú)立于原有的面向任務(wù)的控制器,并不會(huì)增加控制器設(shè)計(jì)的難度。CBF在機(jī)器人、自動(dòng)駕駛等實(shí)際問(wèn)題中得到了廣泛應(yīng)用[6-8]。本文對(duì)基于CBF的非線性系統(tǒng)安全控制的研究成果進(jìn)行了綜述。首先回顧了基于CBF的非線性系統(tǒng)安全控制相關(guān)理論,然后介紹了基于CBF的安全控制設(shè)計(jì)及其應(yīng)用,并簡(jiǎn)要概括了現(xiàn)有CBF的不足之處,淺析其在非線性系統(tǒng)安全控制領(lǐng)域的未來(lái)研究方向。

    1 CBF的相關(guān)理論

    相關(guān)符號(hào)定義如下:R、R+和R+0分別表示實(shí)數(shù)、正實(shí)數(shù)和非負(fù)實(shí)數(shù),集合DRn表示動(dòng)態(tài)系統(tǒng)容許狀態(tài)集,集合UR表示容許控制輸入集,C表示集合C的邊界,Int(C)表示集合C的內(nèi)部,°表示函數(shù)復(fù)合運(yùn)算符。如果函數(shù)β:[0,ε)→[0,∞),β>0連續(xù)、嚴(yán)格遞增并滿足β(0)=0,稱其為一個(gè)類κ函數(shù)。特別地,如果函數(shù)β:(-b,a)→(-∞,∞),而且a,b∈R+,則該函數(shù)是一個(gè)擴(kuò)展類κ函數(shù)。

    考慮非線性控制系統(tǒng)

    x·=f(x)+g(x)u,(1)

    其中:x∈D為系統(tǒng)狀態(tài);u∈U為輸入;f:D→Rn和g:D→Rn為局部Lipschitz連續(xù)函數(shù)。對(duì)于任意初始狀態(tài)x0=x(t0)∈D和控制輸入u,記x(t,x0,u)為系統(tǒng)(1)的解。假設(shè)系統(tǒng)具有前向完備特性,即對(duì)于任意初始狀態(tài)x0,存在一個(gè)最大時(shí)間間隔I(x)=[0,∞),使得x(t,x0,u)是系統(tǒng)在I(x)上的唯一狀態(tài)解。

    定義1[9] 對(duì)于系統(tǒng)(1),給定系統(tǒng)狀態(tài)集合C,如果狀態(tài)x(t,x0,u)從狀態(tài)集C出發(fā),且滿足對(duì)于任意t∈I(x0),都有x(t)∈C。則稱集合C是前向不變的。

    1.1 一階CBF

    本文的目的是將系統(tǒng)(1)所受狀態(tài)約束條件通過(guò)集合C進(jìn)行刻畫(huà),集合C遵循:

    C={x∈D:h(x)≥0},(2)

    C={x∈D:h(x)=0},(3)

    Int(C)={x∈D:h(x)>0},(4)

    其中:函數(shù)h:D→R連續(xù)可微,該函數(shù)可以用來(lái)觀測(cè)系統(tǒng)(1)的當(dāng)前狀態(tài)是否處于安全區(qū)域。其基本思想是根據(jù)標(biāo)量函數(shù)h(x)探索保證集合C前向不變性的條件,稱集合C為系統(tǒng)(1)的安全集合。

    定義2[3] 對(duì)于系統(tǒng) (1),給定由式(2)~(4)定義的安全集合C和其伴隨連續(xù)可微函數(shù)h:D→R。如果存在一個(gè)局部Lipschitz連續(xù)的類κ函數(shù)α(·),使得對(duì)于任意t≥0和x(t)∈C,都有

    Lfh(x)+Lgh(x)≥-α(h(x)),(5)

    則稱函數(shù)h(x)為集合C的一個(gè)零點(diǎn)控制障礙函數(shù)(zeroing control barrier function, ZCBF)。給定一個(gè)ZCBF h(x),假設(shè)系統(tǒng)輸入沒(méi)有約束,也就是U=R,定義集合

    KZCBF(x)={u∈U:Lfh(x)+Lgh(x)+α(h(x))≥0}。(6)

    定理1[3] 給定系統(tǒng) (1)和由式(2)~(4)定義的安全集合C,如果存在滿足條件(5)的ZCBF,則任意一個(gè)Lipschitz連續(xù)的控制輸入u:D→U且滿足u(x)∈KZCBF(x)可以使集合C前向不變。

    另一類障礙函數(shù)僅在安全集合內(nèi)部具有定義,隨著系統(tǒng)狀態(tài)靠近集合邊界而趨向無(wú)窮大,包括倒數(shù)障礙函數(shù)[10]、障礙Lyapunov函數(shù)[11]等。此類障礙函數(shù)系統(tǒng)狀態(tài)均在安全集合內(nèi),即在安全區(qū)域外未定義控制器,而且隨著系統(tǒng)狀態(tài)靠近安全集合邊界,函數(shù)值趨向無(wú)窮大,不可避免地會(huì)因控制幅值過(guò)大造成測(cè)量誤差非常敏感而無(wú)法使用。這些特點(diǎn)大大降低了此類障礙函數(shù)的適用性。

    ZCBF最早由文獻(xiàn)[3]提出,其障礙函數(shù)在狀態(tài)空間中具有全局定義,并且隨著狀態(tài)軌跡靠近安全集合邊界而趨于零。該類型的障礙函數(shù)條件可以實(shí)現(xiàn):

    1) 如果系統(tǒng)初始狀態(tài)在安全域內(nèi),則狀態(tài)軌跡仍在安全域內(nèi)。

    2) 如果系統(tǒng)初始狀態(tài)在安全域外,則狀態(tài)軌跡漸進(jìn)收斂到安全域內(nèi)。

    上述優(yōu)勢(shì)使得ZCBF成為非線性系統(tǒng)安全控制中廣泛應(yīng)用的障礙函數(shù)。

    值得一提的是,ZCBF的第2個(gè)優(yōu)勢(shì)正是基于ZCBF的魯棒特性,也就是說(shuō),ZCBF不僅能夠保證安全集合C的前向不變性,還保證了安全集合C是漸進(jìn)穩(wěn)定的。當(dāng)系統(tǒng)狀態(tài)受到擾動(dòng)或者初始狀態(tài)在安全集合C之外,由于ZCBF具有魯棒特性,會(huì)使?fàn)顟B(tài)變量收斂至安全集合C,文獻(xiàn)[3]從集合漸進(jìn)穩(wěn)定性的角度指出了該特性,其具體分析過(guò)程如下。

    如果系統(tǒng)狀態(tài)集合D為開(kāi)集,給定一個(gè)ZCBF h(x),構(gòu)造標(biāo)量函數(shù)VC:D→R+0,

    VC(x)=0,if x∈C,

    -h(x),if x∈D\C,(7)

    并得到一系列的魯棒性質(zhì)。

    性質(zhì)1[3] 給定系統(tǒng) (1)和由式(2)~(4)定義的安全集合C,如果存在滿足條件(5)的ZCBF,則安全集合C是漸進(jìn)穩(wěn)定的,而且由式(7)定義的函數(shù)VC(x)是一個(gè)Lyapunov函數(shù)。

    根據(jù)性質(zhì)1,由不同的魯棒特性可以給出性質(zhì)2和性質(zhì)3。

    性質(zhì)2[3] 給定系統(tǒng)x·=f(x)+g(x)u+g1(x),對(duì)于任意的連續(xù)函數(shù)g1:Rn→Rn滿足‖g1(x)‖≤σ1(‖x‖c),x∈D\Int(C),其中函數(shù)σ:[0,ε]→R+0是類κ函數(shù),ε∈R+0。則安全集合C相對(duì)于該擾動(dòng)系統(tǒng)依然是漸進(jìn)穩(wěn)定的。

    性質(zhì)3[3] 給定系統(tǒng)x·=f(x)+g(x)u+g2(x),對(duì)于任意的連續(xù)函數(shù)g2:Rn→Rn滿足‖g2‖∞≤k,k∈R+。則集合Cσ2(‖g2‖∞)D相對(duì)于該擾動(dòng)系統(tǒng)是漸進(jìn)穩(wěn)定的,其中函數(shù)σ2:[0,ε]→R+0是類κ函數(shù),ε∈R+0。

    1.2 高階CBF

    基于以上對(duì)ZCBF的理論分析,ZCBF僅能處理相對(duì)階為一的約束條件。為了處理任意相對(duì)階的約束條件,在ZCBF的基礎(chǔ)上提出了高階控制障礙函數(shù)(high-order control barrier function,HoCBF)的概念。

    定義3[9] 對(duì)于系統(tǒng) (1),給定由式(2)~(4)定義的安全集合C和其伴隨連續(xù)可微函數(shù)h:D→R。對(duì)函數(shù)h(x)進(jìn)行γ次求導(dǎo)后,建立與控制輸入u的聯(lián)系,稱γ為函數(shù)h(x)的相對(duì)階,即

    LgLkfh(x)=0,0≤k≤γ-2,

    LgLγ-1fh(x)≠0。

    對(duì)于非線性系統(tǒng)(1),假設(shè)給定的連續(xù)可微函數(shù)h:D→R具有任意高的相對(duì)階,即γ≥1。Xiao等[9]利用類κ函數(shù)構(gòu)造了HoCBF,具體如下。

    給定函數(shù)h(x),定義一系列函數(shù)φi:D→R, i=1,…,γ,

    φi(x)=φ·i-1(x)+βi(φi-1(x)),(8)

    其中:φ0(x)=h(x),βi(·)為(γ-i)次可微的類κ函數(shù)。

    定義函數(shù)φi(x)對(duì)應(yīng)的零超水平集合為

    Ci={x∈D:φi-1(x)≥0}。(9)

    定義4[9] 對(duì)于系統(tǒng) (1),給定由式(9)定義的安全集合Ci和一系列由式(8)定義的函數(shù)φi(x),i=1,…,γ。如果存在(γ-i)次可微的類κ函數(shù)βi(·),i=1,…,γ-1,以及一個(gè)類κ函數(shù)βγ(·),滿足

    supu∈U[Lγfh(x)+LgLγ-1fh(x)u+S(h(x))+βγ(φγ-1(x))]≥0,(10)

    其中:S(h(x))=∑γ-1i=1Lif(βγ-i°φγ-i-1(x))。則稱函數(shù)h(x)為HoCBF。

    定理2[9] 對(duì)于系統(tǒng)(1),給定一個(gè)HoCBF h(x)以及由式(9)定義的安全集合Ci,i=1,…,γ,如果系統(tǒng)初始條件滿足x0∈∩γi=1Ci,則任意一個(gè)Lipschitz連續(xù)且滿足式(10)的控制輸入u:D→U,可以使集合∩γi=1Ci前向不變。

    不難看出,當(dāng)類κ函數(shù)為線性函數(shù)時(shí),即βi(φi-1(x))=βiφi-1(x),該HoCBF退化為Nguyen等[12]提出的指數(shù)型CBF,該函數(shù)利用了線性反饋理論中的極點(diǎn)配置方法。

    此外,以上介紹的ZCBF和HoCBF方法均是在系統(tǒng)具有前向完備性的限制下得以應(yīng)用,文獻(xiàn)[13]則通過(guò)利用Brezis定理,去除傳統(tǒng)CBF的系統(tǒng)前向完備性限制,并且利用擴(kuò)展類κ函數(shù)構(gòu)造了HoCBF。該HoCBF在安全集合外也被給予了定義,進(jìn)一步得出HoCBF的魯棒特性,也就是說(shuō),ZCBF的魯棒特性進(jìn)一步擴(kuò)展到了HoCBF。

    性質(zhì)4[13] 如果函數(shù)h(x)是系統(tǒng)(1)的一個(gè)HoCBF,則集合∩γi=1Ci是漸進(jìn)穩(wěn)定的。

    2 面向非線性系統(tǒng)的CBF

    實(shí)際的非線性系統(tǒng)往往存在不確定性、時(shí)變性等情況,使得上述的CBF不再適用。隨著CBF方法研究的深入,已經(jīng)涌現(xiàn)出許多關(guān)于不同種類非線性系統(tǒng)安全控制的研究成果。因此,對(duì)面向多種非線性系統(tǒng)的CBF分別進(jìn)行了研究。

    2.1 面向時(shí)不變非線性控制系統(tǒng)的CBF

    對(duì)于時(shí)不變非線性控制系統(tǒng),CBF方法已經(jīng)取得了許多成果?;谇懊娴慕榻B,最早的ZCBF方法只能處理一相對(duì)階的約束條件。鑒于高階非線性系統(tǒng)控制設(shè)計(jì)問(wèn)題已經(jīng)成為非線性控制領(lǐng)域中較為重要的一個(gè)分支,近年來(lái),為拓展基于CBF的安全控制在機(jī)器人等高階非線性系統(tǒng)中的應(yīng)用,在ZCBF的基礎(chǔ)上,Xiao等[9]、Nguyen等[12]、Tan等[13]針對(duì)具有高相對(duì)階的安全約束問(wèn)題,提出了不同種類的HoCBF。

    此外,利用非光滑分析技術(shù)去除連續(xù)可微限制的CBF[14]以及離散時(shí)間ZCBF[15]等的提出,極大豐富了CBF的種類、數(shù)量和應(yīng)用領(lǐng)域。

    2.2 面向時(shí)變非線性控制系統(tǒng)的CBF

    目前,大多數(shù)文獻(xiàn)主要研究的是面向時(shí)不變非線性系統(tǒng)的CBF。但是在實(shí)際工程中,研究對(duì)象日益復(fù)雜,往往會(huì)因?yàn)榻M件磨損或者損壞以及工作環(huán)境變化等因素具有時(shí)變性。在這種情況下,采用時(shí)變微分方程可以更準(zhǔn)確地進(jìn)行研究。為此,進(jìn)一步討論面向時(shí)變非線性系統(tǒng)的CBF方法。

    考慮時(shí)變非線性控制系統(tǒng)

    x·=f(t,x)+g(t,x)u,(11)

    其中:x∈D為系統(tǒng)狀態(tài);f:R+0×D→Rn和g:R+0×D→Rn為局部Lipschitz連續(xù)函數(shù);u∈U為輸入。

    給定γ階連續(xù)可微時(shí)變函數(shù)h(t,x):R+0×D→R,定義函數(shù)h(t,x)對(duì)f的修正李導(dǎo)數(shù)為L(zhǎng)ifh(t,x)=ih(t,x)ti+Lifh(t,x),其中i是非負(fù)整數(shù)。Xu[16]將ZCBF推廣為時(shí)變HoCBF,構(gòu)造方法與指數(shù)型CBF[12]相似,同樣是利用構(gòu)造滿足負(fù)實(shí)根的多項(xiàng)式保證函數(shù)的非負(fù)性,該函數(shù)可處理非線性時(shí)變系統(tǒng)中的高階約束條件。

    性質(zhì)5[16] 對(duì)于系統(tǒng)(11),如果給定一個(gè)時(shí)變HoCBF h(t,x)滿足

    supu∈U[Lγfh(t,x)+LgLγ-1fh(t,x)u]≥-Kαξ(t,x),(12)

    其中:ξ(t,x)=[h(t,x),…,Lγ-1fh(t,x)]T;常數(shù)向量Kα∈Rγ=[αγ,…,α1],其參數(shù)為多項(xiàng)式P(s)=sγ+α1sγ-1+…+αγ的系數(shù),滿足其多項(xiàng)式所有的根為-λi,i=1,…,γ。

    構(gòu)造一系列函數(shù)B0(t,x)=h(t,x),Bk(t,x)=dBk-1(t,x)dt+λkBk-1(t,x),1≤k≤γ,滿足初始條件Bi(0)≥0,i=0,…,γ-1,則任意一個(gè)Lipschitz連續(xù)且滿足式(12)的控制輸入u可以對(duì)任意t≥0,都有h(t,x)≥0。

    注意到性質(zhì)5是在系統(tǒng)具有前向完備性限制下得到的,文獻(xiàn)[17] 在沒(méi)有系統(tǒng)前向完備性限制條件下利用Hartman得到有關(guān)不變性集合的相關(guān)結(jié)論,并給出了時(shí)變HoCBF的證明。另外,以上CBF的定義均是在函數(shù)相對(duì)階明確的情況下,文獻(xiàn)[13]、[18]進(jìn)一步考慮了沒(méi)有明確相對(duì)階限制下的CBF。

    2.3 面向不確定非線性系統(tǒng)的CBF

    以上CBF的提出均是基于精確的系統(tǒng)模型,然而在實(shí)際情況下,在系統(tǒng)設(shè)計(jì)時(shí)得到與實(shí)際系統(tǒng)一致的精確數(shù)學(xué)模型幾乎是不可能的。大部分模型具有非線性、不確定性、時(shí)變性、狀態(tài)不可測(cè)等情況,而忽略系統(tǒng)的不確定性往往會(huì)導(dǎo)致安全約束條件并不能真正被滿足。因而,不確定非線性系統(tǒng)受到國(guó)內(nèi)外學(xué)者的廣泛關(guān)注,并針對(duì)基于CBF的系統(tǒng)安全問(wèn)題進(jìn)行了大量的研究,提出了多種基于CBF的安全理論框架,為多種類型的不確定系統(tǒng)提供一種有效的安全控制策略。比如,為使控制系統(tǒng)的安全控制策略具有魯棒性,進(jìn)行了魯棒CBF的研究;對(duì)不確定系統(tǒng)采用自適應(yīng)控制的方法,進(jìn)行了自適應(yīng)安全控制策略的研究等。

    針對(duì)具有干擾的非線性系統(tǒng),為保證系統(tǒng)安全,可分為以下兩種處理方法:一種方法是利用擾動(dòng)最壞值增大安全域,比如文獻(xiàn)[18]提出的魯棒CBF,文獻(xiàn)[19]構(gòu)造的輸入-狀態(tài)安全CBF等;另一種方法是在線估計(jì)干擾,比如文獻(xiàn)[20]針對(duì)具有時(shí)變并與系統(tǒng)狀態(tài)有關(guān)的不確定擾動(dòng)的非線性系統(tǒng),運(yùn)用自適應(yīng)估計(jì)控制律估計(jì)不確定擾動(dòng)的點(diǎn)態(tài)值,提出了一種自適應(yīng)魯棒CBF方案。

    針對(duì)一類具有未知輸入干擾的非線性系統(tǒng),利用干擾觀測(cè)器[21]、高增益輸入觀測(cè)器[22]等提出了一種觀測(cè)器與CBF相結(jié)合的安全控制框架。與僅考慮未知干擾最壞值方法相比,該方法可以通過(guò)估計(jì)擾動(dòng)值進(jìn)而消除干擾的影響。

    針對(duì)帶有不確定參數(shù)的非線性系統(tǒng),文獻(xiàn)[23]參照自適應(yīng)CLF的方法,提出了自適應(yīng)CBF,其通過(guò)在線更新參數(shù)估計(jì)以保證系統(tǒng)安全性。在此基礎(chǔ)上,文獻(xiàn)[24]結(jié)合數(shù)據(jù)驅(qū)動(dòng)的方法提出了魯棒自適應(yīng)CBF。

    針對(duì)現(xiàn)實(shí)操作時(shí)系統(tǒng)的復(fù)雜性和不確定性,鑒于難以獲得精確的系統(tǒng)模型,基于CBF的學(xué)習(xí)控制技術(shù)也引發(fā)了眾多關(guān)注。比如文獻(xiàn)[25]利用CBF進(jìn)行安全學(xué)習(xí),為模型不準(zhǔn)確的系統(tǒng)提供了高概率的安全保障。文獻(xiàn)[26]將貝葉斯學(xué)習(xí)方法與CBF結(jié)合,高概率地保證系統(tǒng)安全。

    針對(duì)系統(tǒng)狀態(tài)不可測(cè)量或者部分不可測(cè)量的情況,文獻(xiàn)[27]利用系統(tǒng)的輸出信息提出了一種估計(jì)誤差量化觀測(cè)器與CBF相結(jié)合的安全控制框架,且采用函數(shù)近似方法處理狀態(tài)估計(jì)誤差引入的不確定性。同時(shí),考慮到測(cè)量以及系統(tǒng)動(dòng)態(tài)誤差,文獻(xiàn)[28]分別針對(duì)已知完整系統(tǒng)信息和僅具有不完整系統(tǒng)狀態(tài)信息兩種情況,提出了基于隨機(jī)系統(tǒng)的ZCBF和倒數(shù)CBF(reciprocal-type control barrier function,RCBF)。

    3 基于CBF的非線性系統(tǒng)安全控制

    為保證閉環(huán)非線性控制系統(tǒng)的安全,該部分主要介紹基于CBF的安全控制器設(shè)計(jì)方法。

    3.1 基于單個(gè)CBF的二次規(guī)劃框架

    基于以上的理論分析,CBF本質(zhì)上是一種不具有正定特性的類Lyapunov函數(shù),在其研究和性質(zhì)分析上可以借鑒控制Lyapunov函數(shù)(control Lyapunov function,CLF)的技巧和手段。此外,滿足這些障礙條件的障礙函數(shù)集合是一個(gè)凸集,該特性意味著可以利用凸優(yōu)化方法獲取安全控制器。

    鑒于CBF條件關(guān)于控制輸入u是仿射的,因此利用二次規(guī)劃(quadratic programming,QP)可以獲取安全控制器,其形式為

    u*=limu∈U‖u-uno‖ (CBF-QP),

    s.t. Lfh(x)+Lgh(x)u≥-α(h(x)),

    其中:uno稱為名義控制器。該控制器是指除了安全約束以外的面向任務(wù)的顯式控制律,比如軌跡追蹤、系統(tǒng)鎮(zhèn)定等。CBF-QP的思想是實(shí)時(shí)在線地通過(guò)CBF約束條件最小化修正uno,使得被CBF條件篩選后的控制器u*能進(jìn)一步保證系統(tǒng)安全[2]。

    3.2 基于多個(gè)CBF的安全控制器

    上文討論了基于單個(gè)CBF約束條件的CBF-QP框架。但是由于控制系統(tǒng)本身的復(fù)雜性,往往需要引入多個(gè)CBF才能完整地刻畫(huà)所有的安全約束。在這種情況下,文獻(xiàn)[17]根據(jù)多個(gè)CBF提出了激活CBF的概念,即利用即將被違反的CBF集合進(jìn)一步獲取CBF-QP問(wèn)題的解析解。同時(shí),當(dāng)多個(gè)CBF耦合在同一個(gè)CBF-QP時(shí),可能會(huì)導(dǎo)致QP不可解問(wèn)題。利用多個(gè)CBF的控制共享特性是一個(gè)有效的思路。例如,文獻(xiàn)[16]提出了控制共享CBF的定義及其充分必要條件,其本質(zhì)是檢測(cè)多個(gè)CBF所劃定的控制輸入可選范圍是否存在交集。然而該方法是通過(guò)縮小安全集合的范圍以換取CBF-QP的可行性,在某種程度上具有保守性。值得注意的是,以上介紹的CBF-QP框架是基于給定的uno在保證系統(tǒng)穩(wěn)定性的前提下,進(jìn)一步實(shí)現(xiàn)安全控制目標(biāo)。

    3.3 基于CLF和CBF的多目標(biāo)控制

    基于以上分析,CBF方法只能保證系統(tǒng)安全,而不能保證系統(tǒng)的漸進(jìn)穩(wěn)定性。眾所周知,討論平衡點(diǎn)的穩(wěn)定性是控制科學(xué)最重要的問(wèn)題之一。鑒于CLF方法是尋找一個(gè)控制輸入使得系統(tǒng)軌跡能夠達(dá)到平衡點(diǎn),因此結(jié)合系統(tǒng)的CLF條件和CBF條件,構(gòu)造CLF-CBF-QP問(wèn)題,既保證系統(tǒng)穩(wěn)定又保證系統(tǒng)安全,該方法已經(jīng)在很多領(lǐng)域得到驗(yàn)證及應(yīng)用。

    對(duì)一般非線性系統(tǒng),CLF和CBF條件會(huì)存在互相沖突的情況,進(jìn)而導(dǎo)致QP問(wèn)題無(wú)解。為了保證QP問(wèn)題的可解性,本著安全第一的原則,將CLF條件設(shè)為軟約束[29],始終確保系統(tǒng)安全。但是該方法不能保證系統(tǒng)的穩(wěn)定性,尤其是在CBF條件沒(méi)有被激活的情況下,由于松弛變量的存在,得到的控制律依然無(wú)法保證系統(tǒng)漸進(jìn)穩(wěn)定到平衡點(diǎn)。為了避免出現(xiàn)這種情況,文獻(xiàn)[18]對(duì)QP問(wèn)題中的CLF條件進(jìn)行了修改;文獻(xiàn)[30]分析了CLF-CBF-QP問(wèn)題給定的控制器下的閉環(huán)系統(tǒng)平衡點(diǎn),消除了安全域內(nèi)除原點(diǎn)以外的平衡點(diǎn),保證在原點(diǎn)附近漸進(jìn)穩(wěn)定。

    3.4 在機(jī)器人系統(tǒng)中的應(yīng)用

    隨著技術(shù)的不斷發(fā)展,機(jī)器人的技能不斷提升,應(yīng)用范圍越來(lái)越廣泛。機(jī)器人的工作方式也由最初的分離囚籠式逐漸向人機(jī)共融協(xié)同轉(zhuǎn)化。在共享空間下,物理接觸不可避免,因此機(jī)器人的安全問(wèn)題受到越來(lái)越多學(xué)者的關(guān)注。

    基于CBF的安全控制方法在機(jī)器人系統(tǒng)中得到了廣泛應(yīng)用[31-34]。比如,CBF-QP框架的應(yīng)用在保證人機(jī)交互安全的同時(shí),處理了笛卡爾空間下的位置約束[7]。文獻(xiàn)[35]圍繞工業(yè)機(jī)器人的技術(shù)規(guī)范ISO/TS 15066,設(shè)計(jì)了人機(jī)交互的安全操作區(qū)域以及相應(yīng)的CBF約束以提高性能;文獻(xiàn)[36]針對(duì)機(jī)器人系統(tǒng)提出了運(yùn)動(dòng)學(xué)CBF。

    隨著機(jī)器人系統(tǒng)群體規(guī)模的不斷增加,系統(tǒng)的通信負(fù)載以及避碰決策空間也會(huì)呈指數(shù)增長(zhǎng),加之機(jī)器人本身移動(dòng)能力的限制,給多機(jī)器人系統(tǒng)的實(shí)時(shí)安全控制帶來(lái)了挑戰(zhàn)[37]。文獻(xiàn)[38]針對(duì)連續(xù)線性的多智能體系統(tǒng)提出了多智能體CBF的概念;文獻(xiàn)[39]考慮了系統(tǒng)動(dòng)態(tài)不確定性或者非線性,利用多智能體CBF保證了在多機(jī)器人環(huán)境下的安全性,并結(jié)合Matrix-Variate高斯過(guò)程模型學(xué)習(xí)系統(tǒng)動(dòng)態(tài)不確定性。文獻(xiàn)[40-41]將分布式CBF應(yīng)用于信號(hào)時(shí)間邏輯(signal temporal logic, STL)任務(wù)的多機(jī)器人系統(tǒng)中,并針對(duì)特定STL任務(wù)提出了不同的CBF構(gòu)建方法。文獻(xiàn)[42]為了保證多機(jī)器人系統(tǒng)中行為的正確組合,提出了有限時(shí)間收斂CBF的概念?,F(xiàn)有的研究成果大多數(shù)是考慮標(biāo)準(zhǔn)的2維或3維的歐氏距離,文獻(xiàn)[43]針對(duì)球體上一組剛體的分布式避碰問(wèn)題提出了角型CBF,能夠處理球面上測(cè)地距離約束。

    4 小結(jié)與展望

    本文對(duì)基于CBF的非線性系統(tǒng)安全控制進(jìn)行了全面的回顧和總結(jié)。首先,重點(diǎn)闡述了基于ZCBF以及在其基礎(chǔ)上擴(kuò)展的各種HoCBF的構(gòu)造與相關(guān)性質(zhì);基于各種CBF的構(gòu)造,CBF方法可以處理任意高相對(duì)階非線性系統(tǒng)的安全控制研究。其次,對(duì)基于CBF的安全控制設(shè)計(jì)方法進(jìn)行了總結(jié),分別介紹了基于單個(gè)CBF條件、多個(gè)CBF條件以及CLF-CBF條件下的二次規(guī)劃框架。最后,介紹了CBF方法在機(jī)器人系統(tǒng)中的應(yīng)用及擴(kuò)展。此外,該方法在其他領(lǐng)域也得到了驗(yàn)證并被廣泛應(yīng)用,例如自動(dòng)駕駛汽車、無(wú)人機(jī)、工業(yè)過(guò)程系統(tǒng)等。

    如上所述,CBF方法將安全約束轉(zhuǎn)化為集合前向不變性以實(shí)現(xiàn)系統(tǒng)安全控制。與現(xiàn)有的其他安全算法相比,CBF方法具有可擴(kuò)展性、強(qiáng)實(shí)時(shí)性、強(qiáng)魯棒性等優(yōu)點(diǎn),能有效兼顧控制目標(biāo)和安全性,故其理論與應(yīng)用已經(jīng)取得了一系列研究成果,尤其是在安全控制方面的理論研究以及在機(jī)器人系統(tǒng)中的應(yīng)用。因此,基于CBF的非線性系統(tǒng)安全控制方案已逐漸成為非線性控制領(lǐng)域的研究熱點(diǎn)之一。

    雖然CBF方法已經(jīng)被廣泛研究,但是該方法應(yīng)用于非線性系統(tǒng)安全控制的研究起步較晚,目前仍存在CBF構(gòu)造難、優(yōu)化問(wèn)題可解性差、CBF適用范圍窄等尚待解決的問(wèn)題。針對(duì)這些問(wèn)題,提出以下解決思路和研究展望。

    1) 傳統(tǒng)的CBF方法往往需要系統(tǒng)非線性信息精確已知,而且目前已有的各種CBF都有其適用范圍的局限性。隨著現(xiàn)代信息科學(xué)技術(shù)的進(jìn)步,控制系統(tǒng)的模型變得愈加復(fù)雜,給CBF的設(shè)計(jì)帶來(lái)了困難和挑戰(zhàn)。由于外部擾動(dòng)、不確定參數(shù)、未建模動(dòng)態(tài)等不確定因素的存在,很難制訂一套適用于大多數(shù)非線性系統(tǒng)的CBF控制方案。因此,為了更好地滿足實(shí)際應(yīng)用需求,有必要深入研究CBF方法構(gòu)造問(wèn)題。

    2) 基于QP的控制框架的可解性問(wèn)題是實(shí)現(xiàn)安全控制的關(guān)鍵。針對(duì)提高QP的可行性問(wèn)題雖然已經(jīng)進(jìn)行了一些研究工作,然而在實(shí)際控制系統(tǒng)中往往存在一些附加約束條件,例如由于物理限制通常需要考慮容許控制輸入等。這些附加約束可能與CLF或CBF約束發(fā)生沖突,從而導(dǎo)致QP不存在可行解,在這種情況下,如何保證QP可解依舊是一個(gè)難題。因此,為了避免QP求解不可行問(wèn)題,有必要進(jìn)一步開(kāi)發(fā)基于多目標(biāo)的QP新形式,以提高QP的可解性。同時(shí),可以尋找CBF安全控制新形式,例如設(shè)計(jì)顯示控制器等,以實(shí)現(xiàn)在滿足安全、穩(wěn)定等多目標(biāo)的同時(shí),又能避免優(yōu)化問(wèn)題的不可行情況。

    3) 目前CBF的理論研究主要面向時(shí)不變非線性系統(tǒng),對(duì)時(shí)變非線性系統(tǒng)的研究與應(yīng)用還很少。實(shí)際上,隨著科技在各個(gè)領(lǐng)域的全面進(jìn)步,對(duì)復(fù)雜系統(tǒng)建模的要求越來(lái)越高,考慮系統(tǒng)時(shí)變性是十分有必要的。因此,進(jìn)一步開(kāi)展面向時(shí)變非線性系統(tǒng)的CBF方法研究具有重要的理論意義和廣泛的工程應(yīng)用價(jià)值。

    參考文獻(xiàn):

    [1] AMES A D, COOGAN S, EGERSTEDT M, et al. Control barrier functions: theory and applications[C]∥Proceedings of the 18th European Control Conference. Piscataway:IEEE Press, 2019: 3420-3431.

    [2] 陳杰, 呂梓亮, 黃鑫源, 等. 非線性系統(tǒng)的安全分析與控制: 障礙函數(shù)方法[J]. 自動(dòng)化學(xué)報(bào), 2023, 49(3): 567-579.

    CHEN J, LYU Z L, HUANG X Y, et al. Safety analysis and safety-critical control of nonlinear systems: barrier function approach[J]. Acta automatica sinica, 2023, 49(3): 567-579.

    [3] XU X R, TABUADA P, GRIZZLE J W, et al. Robustness of control barrier functions for safety critical control[J]. IFAC-PapersOnLine, 2015, 48(27): 54-61.

    [4] VERGINIS C K. Funnel control for uncertain nonlinear systems via zeroing control barrier functions[J]. IEEE control systems letters, 2023, 7: 853-858.

    [5] LI C, ZHANG Z J, NESRIN A, et al. Instantaneous local control barrier function: an online learning approach for collision avoidance[EB/OL]. (2022-01-26)[2022-12-26]. https:∥doi.org/10.48550/arXiv.2106.05341.

    [6] SCHILLIGER J, LEW T, RICHARDS S M, et al. Control barrier functions for cyber-physical systems and applications to NMPC[J]. IEEE robotics and automation letters, 2021, 6(4): 8623-8630.

    [7] WANG H J, PENG J Z, ZHANG F F, et al. High-order control barrier functions-based impedance control of a robotic manipulator with time-varying output constraints[J]. ISA transactions, 2022, 129: 361-369.

    [8] SHAW C W, OETOMO D, MANZIE C, et al. Control barrier functions for mechanical systems: theory and application to robotic grasping[J]. IEEE transactions on control systems technology, 2021, 29(2): 530-545.

    [9] XIAO W, BELTA C, CASSANDRAS C G. Adaptive control barrier functions[J]. IEEE transactions on automatic control, 2022, 67(5): 2267-2281.

    [10]朱哲人, 張新民, 柴毅, 等. 非正障礙函數(shù): 面向非線性系統(tǒng)狀態(tài)安全控制的一類新穎障礙函數(shù)[J]. 中國(guó)科學(xué): 信息科學(xué), 2022, 52(10): 1853-1869.

    ZHU Z R, ZHANG X M, CHAI Y, et al. Non-positive barrier function: a new notion of barrier function for state-safety control of nonlinear dynamical systems[J]. Scientia sinica:informationis, 2022, 52(10): 1853-1869.

    [11]WANG N, FU Z M, SONG S Z, et al. Barrier-Lyapunov-based adaptive fuzzy finite-time tracking of pure-feedback nonlinear systems with constraints[J]. IEEE transactions on fuzzy systems, 2022, 30(4): 1139-1148.

    [12]NGUYEN Q, SREENATH K. Exponential Control Barrier Functions for enforcing high relative-degree safety-critical constraints[C]∥Proceedings of the American Control Conference. Piscataway:IEEE Press, 2016: 322-328.

    [13]TAN X, CORTEZ W S, DIMAROGONAS D V. High-order barrier functions: robustness, safety, and performance-critical control[J]. IEEE transactions on automatic control, 2022, 67(6): 3021-3028.

    [14]GHANBARPOUR M, ISALY A, SANFELICE R G, et al. Optimal safety for constrained differential inclusions using nonsmooth control barrier functions[J]. IEEE control systems letters, 2023, 7: 1303-1308.

    [15]AHMADI M, SINGLETARY A, BURDICK J W, et al. Safe policy synthesis in multi-agent POMDPs via discrete-time barrier functions[C]∥Proceedings of the 58th IEEE Conference on Decision and Control. Piscataway:IEEE Press, 2020: 4797-4803.

    [16]XU X R. Constrained control of input-output linearizable systems using control sharing barrier functions[J]. Automatica, 2018, 87: 195-201.

    [17]WANG H J, PENG J Z, XU J J, et al. High-order control barrier functions-based optimization control for time-varying nonlinear systems with full-state constraints: a dynamic sub-safe set approach[J]. International journal of robust and nonlinear control, 2023, 33(8): 4490-4503.

    [18]JANKOVIC M. Robust control barrier functions for constrained stabilization of nonlinear systems[J]. Automatica, 2018, 96: 359-367.

    [19]KOLATHAYA S, AMES A D. Input-to-state safety with control barrier functions[J]. IEEE control systems letters, 2019, 3(1): 108-113.

    [20]ZHAO P, MAO Y B, TAO C Y, et al. Adaptive robust quadratic programs using control Lyapunov and barrier functions[C]∥Proceedings of the 59th IEEE Conference on Decision and Control. Piscataway:IEEE Press, 2021: 3353-3358.

    [21]ALAN A, MOLNAR T G, DA瘙塁 E, et al. Disturbance observers for robust safety-critical control with control barrier functions[J]. IEEE control systems letters, 2023, 7: 1123-1128.

    [22]DA瘙塁 E, MURRAY R M. Robust safe control synthesis with disturbance observer-based control barrier functions[C]∥Proceedings of the 61st IEEE Conference on Decision and Control. Piscataway:IEEE Press, 2023: 5566-5573.

    [23]TAYLOR A J, AMES A D. Adaptive safety with control barrier functions[C]∥Proceedings of the American Control Conference. Piscataway:IEEE Press, 2020: 1399-1405.

    [24]LOPEZ B T, SLOTINE J J E, HOW J P. Robust adaptive control barrier functions: an adaptive and data-driven approach to safety[J]. IEEE control systems letters, 2021, 5(3): 1031-1036.

    [25]MARVI Z, KIUMARSI B. Barrier-certified learning-enabled safe control design for systems operating in uncertain environments[J]. IEEE/CAA journal of automatica sinica, 2021, 9(3): 437-449.

    [26]DHIMAN V, KHOJASTEH M J, FRANCESCHETTI M, et al. Control barriers in Bayesian learning of system dynamics[J]. IEEE transactions on automatic control, 2023, 68(1): 214-229.

    [27]WANG Y J, XU X R. Observer-based control barrier functions for safety critical systems[C]∥Proceedings of the American Control Conference. Piscataway:IEEE Press, 2022: 709-714.

    [28]CLARK A. Control barrier functions for stochastic systems[J]. Automatica, 2021, 130: 109688.

    [29]AMES A D, XU X R, GRIZZLE J W, et al. Control barrier function based quadratic programs for safety critical systems[J]. IEEE transactions on automatic control, 2017, 62(8): 3861-3876.

    [30]TAN X, DIMAROGONAS D V. On the undesired equilibria induced by control barrier function based quadratic programs[EB/OL]. (2021-04-30)[2022-11-21]. https:∥doi.org/10.48550/arXiv.2104.14895.

    [31]SPYRAKOS-PAPASTAVRIDIS E, DAI J S. Minimally model-based trajectory tracking and variable impedance control of flexible-joint robots[J]. IEEE transactions on industrial electronics, 2021, 68(7): 6031-6041.

    [32]XU X R, WATERS T, PICKEM D, et al. Realizing simultaneous lane keeping and adaptive speed regulation on accessible mobile robot testbeds[C]∥IEEE Conference on Control Technology and Applications. Piscataway:IEEE Press, 2017: 1769-1775.

    [33]NGUYEN Q, SREENATH K. Safety-critical control for dynamical bipedal walking with precise footstep placement[J]. IFAC-PapersOnLine, 2015, 48(27): 147-154.

    [34]EGERSTEDT M, PAULI J N, NOTOMISTA G, et al. Robot ecology: constraint-based control design for long duration autonomy[J]. Annual reviews in control, 2018, 46: 1-7.

    [35]FERRAGUTI F, BERTULETTI M, LANDI C T, et al. A control barrier function approach for maximizing performance while fulfilling to ISO/TS 15066 regulations[J]. IEEE robotics and automation letters, 2020, 5(4): 5921-5928.

    [36]SINGLETARY A, KOLATHAYA S, AMES A D. Safety-critical kinematic control of robotic systems[J]. IEEE control systems letters, 2022, 6: 139-144.

    [37]張方方, 張文麗, 王婷婷. 基于速度補(bǔ)償算法的多機(jī)器人編隊(duì)控制研究[J]. 鄭州大學(xué)學(xué)報(bào)(工學(xué)版), 2022, 43(2): 1-6, 14.

    ZHANG F F, ZHANG W L, WANG T T. Research on multi-robot formation control based on speed compensation algorithm[J]. Journal of Zhengzhou university (engineering science), 2022, 43(2): 1-6, 14.

    [38]WANG L, AMES A D, EGERSTEDT M. Safety barrier certificates for collisions-free multirobot systems[J]. IEEE transactions on robotics, 2017, 33(3): 661-674.

    [39]CHENG R, KHOJASTEH M J, AMES A D, et al. Safe multi-agent interaction through robust control barrier functions with learned uncertainties[C]∥Proceedings of the 59th IEEE Conference on Decision and Control. Piscataway:IEEE Press, 2021: 777-783.

    [40]LINDEMANN L, DIMAROGONAS D V. Decentralized control barrier functions for coupled multi-agent systems under signal temporal logic tasks[C]∥Proceedings of the 18th European Control Conference. Piscataway:IEEE Press, 2019: 89-94.

    [41]LINDEMANN L, DIMAROGONAS D V. Control barrier functions for multi-agent systems under conflicting local signal temporal logic tasks[J]. IEEE control systems letters, 2019, 3(3): 757-762.

    [42]LI A Q, WANG L, PIERPAOLI P, et al. Formally correct composition of coordinated behaviors using control barrier certificates[C]∥IEEE/RSJ International Conference on Intelligent Robots and Systems. Piscataway:IEEE Press, 2019: 3723-3729.

    [43]IBUKI T, WILSON S, YAMAUCHI J, et al. Optimization-based distributed flocking control for multiple rigid bodies[J]. IEEE robotics and automation letters, 2020, 5(2): 1891-1898.

    午夜免费观看性视频| 亚洲国产精品一区三区| 高清午夜精品一区二区三区| 精品国产一区二区三区久久久樱花 | 麻豆成人午夜福利视频| 在线观看三级黄色| av天堂中文字幕网| 内地一区二区视频在线| 天堂俺去俺来也www色官网| 水蜜桃什么品种好| 欧美少妇被猛烈插入视频| 身体一侧抽搐| 99视频精品全部免费 在线| 直男gayav资源| 最近2019中文字幕mv第一页| 18禁在线无遮挡免费观看视频| 嫩草影院新地址| 成人影院久久| 亚洲国产欧美人成| 精品午夜福利在线看| 少妇被粗大猛烈的视频| 黄片wwwwww| 亚洲精品日韩av片在线观看| 国产一区二区在线观看日韩| 久久久久久久久久久丰满| 免费大片18禁| 国产亚洲91精品色在线| 日韩av不卡免费在线播放| 永久免费av网站大全| 久久精品人妻少妇| 欧美精品一区二区大全| 亚洲av国产av综合av卡| 国产黄片美女视频| 亚洲久久久国产精品| 久久久a久久爽久久v久久| 久久久久久久国产电影| 亚洲成人手机| 久久97久久精品| 99久久综合免费| 国产成人免费无遮挡视频| 各种免费的搞黄视频| 欧美 日韩 精品 国产| 又黄又爽又刺激的免费视频.| 18禁裸乳无遮挡免费网站照片| 一级片'在线观看视频| 成人国产av品久久久| 欧美成人精品欧美一级黄| 一个人看视频在线观看www免费| 少妇高潮的动态图| 寂寞人妻少妇视频99o| 亚洲精品久久久久久婷婷小说| 99热国产这里只有精品6| 亚洲欧洲日产国产| 欧美性感艳星| 欧美日韩视频高清一区二区三区二| 日本爱情动作片www.在线观看| 亚洲成人手机| 日本av免费视频播放| 久久精品人妻少妇| 欧美日韩精品成人综合77777| 又大又黄又爽视频免费| xxx大片免费视频| 国产综合精华液| 一区二区三区乱码不卡18| videossex国产| 麻豆精品久久久久久蜜桃| 人人妻人人看人人澡| 日产精品乱码卡一卡2卡三| 亚洲精品国产色婷婷电影| 欧美xxxx性猛交bbbb| 秋霞伦理黄片| 日本av免费视频播放| 久久青草综合色| 欧美日韩亚洲高清精品| 夫妻性生交免费视频一级片| 国产成人精品婷婷| 免费在线观看成人毛片| 日韩,欧美,国产一区二区三区| 一区在线观看完整版| 女人十人毛片免费观看3o分钟| 亚洲美女搞黄在线观看| 午夜福利在线观看免费完整高清在| 各种免费的搞黄视频| 中文乱码字字幕精品一区二区三区| 久久国产精品男人的天堂亚洲 | 一级毛片久久久久久久久女| 久热久热在线精品观看| 亚洲av二区三区四区| 日韩制服骚丝袜av| 国产老妇伦熟女老妇高清| 最近最新中文字幕大全电影3| 全区人妻精品视频| 国国产精品蜜臀av免费| 国产黄色视频一区二区在线观看| 久久久精品免费免费高清| 日韩一本色道免费dvd| a级毛片免费高清观看在线播放| 麻豆乱淫一区二区| 国产在线视频一区二区| 一级毛片 在线播放| 国产精品久久久久成人av| 国产成人a区在线观看| 成人毛片a级毛片在线播放| 色哟哟·www| 国产 精品1| kizo精华| 日韩中字成人| 精品久久久久久久末码| 99热这里只有是精品50| 亚洲欧美精品专区久久| 18禁在线无遮挡免费观看视频| 久久久a久久爽久久v久久| 午夜福利网站1000一区二区三区| 人人妻人人添人人爽欧美一区卜 | 久久热精品热| 久久99热这里只频精品6学生| 欧美极品一区二区三区四区| 1000部很黄的大片| 18禁在线播放成人免费| 国产 一区 欧美 日韩| 寂寞人妻少妇视频99o| 激情五月婷婷亚洲| 中文字幕免费在线视频6| 国产男女超爽视频在线观看| 亚洲欧洲日产国产| 男人狂女人下面高潮的视频| 夫妻性生交免费视频一级片| 国产国拍精品亚洲av在线观看| 狂野欧美激情性bbbbbb| 岛国毛片在线播放| 欧美精品国产亚洲| 亚洲国产成人一精品久久久| 永久免费av网站大全| 国产精品精品国产色婷婷| 91精品国产九色| 性高湖久久久久久久久免费观看| 丰满人妻一区二区三区视频av| 日韩亚洲欧美综合| 久久久久久久久久成人| 99热网站在线观看| 一级黄片播放器| 亚洲,欧美,日韩| 国产精品久久久久久久电影| 精品人妻视频免费看| 26uuu在线亚洲综合色| 国产精品.久久久| 在线观看av片永久免费下载| 欧美bdsm另类| 超碰av人人做人人爽久久| 六月丁香七月| 性色av一级| 国产伦精品一区二区三区四那| 大话2 男鬼变身卡| 国内揄拍国产精品人妻在线| 中文精品一卡2卡3卡4更新| 亚洲av福利一区| 天天躁日日操中文字幕| 久久精品久久久久久久性| 精品视频人人做人人爽| 九九在线视频观看精品| 欧美精品一区二区免费开放| 免费久久久久久久精品成人欧美视频 | 肉色欧美久久久久久久蜜桃| 国产一区二区三区av在线| 国产精品免费大片| 国产亚洲精品久久久com| 丝袜喷水一区| 亚洲成人av在线免费| 精品午夜福利在线看| 久久久久精品性色| 亚洲精品456在线播放app| 激情五月婷婷亚洲| 99视频精品全部免费 在线| 女人久久www免费人成看片| 国产精品偷伦视频观看了| 91久久精品国产一区二区三区| 国产精品熟女久久久久浪| 精品人妻一区二区三区麻豆| 黑丝袜美女国产一区| 欧美bdsm另类| 日韩强制内射视频| 免费观看在线日韩| 婷婷色综合大香蕉| 天堂8中文在线网| 免费看av在线观看网站| 午夜视频国产福利| 亚洲成人av在线免费| 美女主播在线视频| 精品国产乱码久久久久久小说| 国产深夜福利视频在线观看| 不卡视频在线观看欧美| 久久女婷五月综合色啪小说| 视频区图区小说| 噜噜噜噜噜久久久久久91| 美女内射精品一级片tv| 成年免费大片在线观看| 亚洲丝袜综合中文字幕| 亚洲av二区三区四区| 街头女战士在线观看网站| 日本猛色少妇xxxxx猛交久久| 欧美日韩国产mv在线观看视频 | 女性生殖器流出的白浆| 男人舔奶头视频| 亚州av有码| 日韩欧美精品免费久久| 涩涩av久久男人的天堂| 国产高清不卡午夜福利| 激情五月婷婷亚洲| 国产免费又黄又爽又色| 美女国产视频在线观看| 国产一级毛片在线| 久久久亚洲精品成人影院| 亚洲aⅴ乱码一区二区在线播放| 免费少妇av软件| 国产精品无大码| 亚洲精品日本国产第一区| 久久鲁丝午夜福利片| 在线观看三级黄色| av黄色大香蕉| 欧美日韩精品成人综合77777| 女性被躁到高潮视频| 久久鲁丝午夜福利片| 九色成人免费人妻av| 晚上一个人看的免费电影| 大话2 男鬼变身卡| 性色avwww在线观看| 人妻一区二区av| 精品午夜福利在线看| 18禁动态无遮挡网站| 久久久久久九九精品二区国产| 女人十人毛片免费观看3o分钟| 精品一品国产午夜福利视频| 亚洲欧美成人综合另类久久久| 久久精品夜色国产| 两个人的视频大全免费| 91精品国产国语对白视频| av视频免费观看在线观看| 国产精品av视频在线免费观看| 亚洲人与动物交配视频| av在线蜜桃| 女人十人毛片免费观看3o分钟| 午夜免费观看性视频| www.色视频.com| 麻豆精品久久久久久蜜桃| 免费观看在线日韩| 亚洲欧美日韩卡通动漫| 亚洲,欧美,日韩| 国产国拍精品亚洲av在线观看| 免费黄网站久久成人精品| 久久久午夜欧美精品| 一级毛片我不卡| 久久av网站| 欧美精品国产亚洲| 国产久久久一区二区三区| 久久99精品国语久久久| 女性被躁到高潮视频| 一个人看的www免费观看视频| 丰满乱子伦码专区| 精品视频人人做人人爽| 国产一区亚洲一区在线观看| 国产大屁股一区二区在线视频| 日本色播在线视频| a级毛色黄片| 高清黄色对白视频在线免费看 | av线在线观看网站| 欧美日韩在线观看h| 久久久久网色| 欧美xxⅹ黑人| 我要看黄色一级片免费的| 久久久久久久久久成人| 丰满迷人的少妇在线观看| 夜夜爽夜夜爽视频| 国产成人免费观看mmmm| 亚洲国产精品国产精品| 国产精品av视频在线免费观看| 欧美丝袜亚洲另类| 亚洲精品自拍成人| 亚洲欧美中文字幕日韩二区| 国产精品一区二区性色av| 王馨瑶露胸无遮挡在线观看| www.av在线官网国产| 搡老乐熟女国产| 青春草视频在线免费观看| 亚洲av男天堂| 国产深夜福利视频在线观看| 视频区图区小说| 欧美3d第一页| 黄片无遮挡物在线观看| 韩国高清视频一区二区三区| 午夜日本视频在线| 人妻少妇偷人精品九色| 三级国产精品欧美在线观看| 插阴视频在线观看视频| 精品国产一区二区三区久久久樱花 | a级毛色黄片| 欧美精品一区二区大全| 亚洲国产精品成人久久小说| 国产女主播在线喷水免费视频网站| 日韩欧美精品免费久久| 99精国产麻豆久久婷婷| 能在线免费看毛片的网站| 国产成人freesex在线| 多毛熟女@视频| 国产日韩欧美在线精品| 精品午夜福利在线看| 又爽又黄a免费视频| 日本与韩国留学比较| 在线免费十八禁| 人体艺术视频欧美日本| 女人十人毛片免费观看3o分钟| 国产伦理片在线播放av一区| 国产精品人妻久久久影院| 狂野欧美白嫩少妇大欣赏| 婷婷色av中文字幕| 午夜福利影视在线免费观看| 狂野欧美白嫩少妇大欣赏| 91精品一卡2卡3卡4卡| 少妇人妻一区二区三区视频| 美女福利国产在线 | 日韩成人伦理影院| 最黄视频免费看| 亚洲av免费高清在线观看| 亚洲精品一二三| 视频区图区小说| 老司机影院成人| 国产精品99久久久久久久久| 十分钟在线观看高清视频www | 久久97久久精品| 精品久久久噜噜| 亚洲精品视频女| 国产精品熟女久久久久浪| 国产av码专区亚洲av| 亚洲人成网站在线观看播放| 亚州av有码| 国产在线一区二区三区精| 精华霜和精华液先用哪个| 国产乱来视频区| 亚洲av国产av综合av卡| 麻豆精品久久久久久蜜桃| 亚洲激情五月婷婷啪啪| 亚洲人与动物交配视频| 亚洲精品视频女| 国产成人aa在线观看| 亚洲精品aⅴ在线观看| 我要看黄色一级片免费的| 九九在线视频观看精品| 亚洲va在线va天堂va国产| 最近中文字幕2019免费版| 久久韩国三级中文字幕| 国产黄片美女视频| 亚洲国产最新在线播放| 免费大片黄手机在线观看| 一本—道久久a久久精品蜜桃钙片| 国产精品蜜桃在线观看| 自拍偷自拍亚洲精品老妇| av国产久精品久网站免费入址| 伦精品一区二区三区| 国产精品女同一区二区软件| 国产成人freesex在线| 日本av手机在线免费观看| 99re6热这里在线精品视频| 欧美日韩视频高清一区二区三区二| 久久av网站| 丰满迷人的少妇在线观看| 久久亚洲国产成人精品v| 亚洲av电影在线观看一区二区三区| 亚洲精品一二三| 舔av片在线| 日日摸夜夜添夜夜添av毛片| 青青草视频在线视频观看| 欧美变态另类bdsm刘玥| 成人影院久久| 国产探花极品一区二区| 卡戴珊不雅视频在线播放| 亚洲欧美日韩东京热| 最近中文字幕高清免费大全6| 伊人久久精品亚洲午夜| 日日摸夜夜添夜夜爱| 久久鲁丝午夜福利片| 日日摸夜夜添夜夜爱| 亚洲中文av在线| 国产精品久久久久久av不卡| 全区人妻精品视频| 久久久久精品性色| 蜜臀久久99精品久久宅男| 日本黄色片子视频| 精华霜和精华液先用哪个| 久久久久久久大尺度免费视频| 亚洲精品日韩av片在线观看| 亚洲不卡免费看| 亚洲av成人精品一二三区| 久久精品国产鲁丝片午夜精品| 久久久久久久久大av| 新久久久久国产一级毛片| 久久久久久伊人网av| 国产色爽女视频免费观看| 亚洲av福利一区| 国产欧美日韩精品一区二区| 亚洲国产精品一区三区| 九草在线视频观看| 丰满少妇做爰视频| 1000部很黄的大片| 久久久久性生活片| 亚洲精品日韩av片在线观看| 直男gayav资源| 99久久中文字幕三级久久日本| 国产精品麻豆人妻色哟哟久久| 啦啦啦在线观看免费高清www| 国产欧美日韩精品一区二区| 欧美性感艳星| 看十八女毛片水多多多| 一区二区三区乱码不卡18| 天堂中文最新版在线下载| 精品久久久精品久久久| 亚洲av日韩在线播放| 日韩 亚洲 欧美在线| av在线观看视频网站免费| 亚洲精品456在线播放app| 久久精品久久久久久噜噜老黄| 亚洲av不卡在线观看| 久久99热这里只有精品18| 丝袜喷水一区| 激情五月婷婷亚洲| 伊人久久精品亚洲午夜| 一级毛片我不卡| 人妻夜夜爽99麻豆av| 亚洲欧美日韩另类电影网站 | 在线免费十八禁| 亚洲精品日韩在线中文字幕| 亚洲精品中文字幕在线视频 | 日本猛色少妇xxxxx猛交久久| 18+在线观看网站| 黄色怎么调成土黄色| 国产精品一区二区三区四区免费观看| videossex国产| 大话2 男鬼变身卡| 青春草国产在线视频| 黄片wwwwww| av黄色大香蕉| 亚洲国产欧美人成| 国产在线视频一区二区| 亚洲va在线va天堂va国产| 午夜福利网站1000一区二区三区| 韩国高清视频一区二区三区| 日本wwww免费看| 国产成人精品一,二区| 国产精品免费大片| 国产探花极品一区二区| 一区二区三区乱码不卡18| 寂寞人妻少妇视频99o| 国内精品宾馆在线| 高清午夜精品一区二区三区| 国产亚洲最大av| 亚洲av电影在线观看一区二区三区| 一级爰片在线观看| 午夜福利在线在线| 日韩成人av中文字幕在线观看| 精品久久久噜噜| 日韩,欧美,国产一区二区三区| 综合色丁香网| 成人二区视频| 成人毛片60女人毛片免费| 少妇猛男粗大的猛烈进出视频| 久久这里有精品视频免费| av免费在线看不卡| 干丝袜人妻中文字幕| 亚洲av欧美aⅴ国产| 免费大片18禁| 国产一区有黄有色的免费视频| 日产精品乱码卡一卡2卡三| 国语对白做爰xxxⅹ性视频网站| 人人妻人人爽人人添夜夜欢视频 | 精品国产露脸久久av麻豆| av国产精品久久久久影院| 男女无遮挡免费网站观看| 精华霜和精华液先用哪个| 狂野欧美激情性bbbbbb| 少妇高潮的动态图| 精品一区在线观看国产| 亚洲国产毛片av蜜桃av| 看非洲黑人一级黄片| 精品人妻熟女av久视频| 性高湖久久久久久久久免费观看| 国产高清国产精品国产三级 | 久久国产乱子免费精品| 亚洲欧美中文字幕日韩二区| 欧美区成人在线视频| 欧美日韩视频高清一区二区三区二| av专区在线播放| 日本vs欧美在线观看视频 | 丝袜脚勾引网站| 在线天堂最新版资源| 午夜福利视频精品| 免费看不卡的av| 日本猛色少妇xxxxx猛交久久| 国产亚洲av片在线观看秒播厂| 欧美日韩在线观看h| 国产老妇伦熟女老妇高清| 大香蕉久久网| 亚洲内射少妇av| 99热这里只有精品一区| 蜜臀久久99精品久久宅男| 美女主播在线视频| 在线免费十八禁| 天堂中文最新版在线下载| 18禁裸乳无遮挡免费网站照片| 全区人妻精品视频| 亚洲国产av新网站| 51国产日韩欧美| 亚洲第一区二区三区不卡| 丰满迷人的少妇在线观看| 男人添女人高潮全过程视频| 你懂的网址亚洲精品在线观看| 国产成人免费观看mmmm| 亚洲人与动物交配视频| 91狼人影院| 精品一区在线观看国产| 久久久a久久爽久久v久久| 最黄视频免费看| 国产人妻一区二区三区在| 天堂中文最新版在线下载| 日产精品乱码卡一卡2卡三| 国产成人91sexporn| 久久精品熟女亚洲av麻豆精品| 欧美性感艳星| 免费观看av网站的网址| 免费在线观看成人毛片| 亚洲综合色惰| 中文资源天堂在线| 最近手机中文字幕大全| 黄片无遮挡物在线观看| 一级爰片在线观看| 久久青草综合色| 成人毛片60女人毛片免费| 免费看av在线观看网站| 大码成人一级视频| 成人高潮视频无遮挡免费网站| 在线 av 中文字幕| 欧美bdsm另类| 午夜视频国产福利| 91精品伊人久久大香线蕉| 日韩人妻高清精品专区| 亚洲精品一区蜜桃| 狂野欧美激情性xxxx在线观看| 亚洲成人av在线免费| 国产乱来视频区| 十分钟在线观看高清视频www | 99re6热这里在线精品视频| 99久国产av精品国产电影| 久久99蜜桃精品久久| 亚洲av在线观看美女高潮| 久久ye,这里只有精品| 亚洲成人av在线免费| 麻豆精品久久久久久蜜桃| 色吧在线观看| 欧美老熟妇乱子伦牲交| 亚洲精品国产av成人精品| 日本av免费视频播放| 国产免费又黄又爽又色| 啦啦啦视频在线资源免费观看| 午夜激情久久久久久久| 亚洲欧美成人精品一区二区| 春色校园在线视频观看| 日本午夜av视频| 欧美97在线视频| 久久 成人 亚洲| 亚洲激情五月婷婷啪啪| 新久久久久国产一级毛片| 久久综合国产亚洲精品| 亚洲成色77777| 99久国产av精品国产电影| 精品人妻偷拍中文字幕| 欧美日韩在线观看h| 免费在线观看成人毛片| 婷婷色麻豆天堂久久| 国产69精品久久久久777片| 哪个播放器可以免费观看大片| 国产91av在线免费观看| 国产成人91sexporn| 欧美97在线视频| 男女国产视频网站| 精品少妇黑人巨大在线播放| 亚洲,一卡二卡三卡| 人体艺术视频欧美日本| 亚洲欧美中文字幕日韩二区| 亚洲美女黄色视频免费看| 亚洲av不卡在线观看| 高清日韩中文字幕在线| 在线观看一区二区三区激情| 久久女婷五月综合色啪小说| 久久 成人 亚洲| av福利片在线观看| 男人和女人高潮做爰伦理| 日韩人妻高清精品专区| 久久99热6这里只有精品| 精品人妻视频免费看| 久久精品国产a三级三级三级| 黑人高潮一二区| 国产免费又黄又爽又色| 青春草亚洲视频在线观看| 大香蕉久久网| 日本欧美国产在线视频| 国产极品天堂在线| 免费黄网站久久成人精品| 国产精品人妻久久久影院| 国产精品不卡视频一区二区| 国产免费视频播放在线视频| 永久网站在线| 国产无遮挡羞羞视频在线观看| 国内揄拍国产精品人妻在线| 国产高清三级在线| 国产高清国产精品国产三级 | 26uuu在线亚洲综合色| av卡一久久| 亚洲av日韩在线播放|