• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于頻繁依存子樹模式的中心詞提取方法研究

    2016-05-04 01:15:47田衛(wèi)東虞勇勇
    中文信息學(xué)報 2016年3期
    關(guān)鍵詞:子樹中心詞準確率

    田衛(wèi)東,虞勇勇

    (合肥工業(yè)大學(xué) 計算機與信息學(xué)院,安徽 合肥 230009)

    基于頻繁依存子樹模式的中心詞提取方法研究

    田衛(wèi)東,虞勇勇

    (合肥工業(yè)大學(xué) 計算機與信息學(xué)院,安徽 合肥 230009)

    條件隨機場模型通過抓取問句中心詞各方面統(tǒng)計特征來進行中心詞標注,但未能充分利用中心詞特征間存在的深層統(tǒng)計關(guān)系。該文利用中文問句的依存關(guān)系樹結(jié)構(gòu),通過挖掘問句依存關(guān)系樹所蘊藏的中心詞各維度特征之間的統(tǒng)計概率關(guān)系,為正確提取中心詞提供依據(jù),通過挖掘頻繁依存子樹模式以生成相應(yīng)統(tǒng)計規(guī)則模式,使用條件隨機場模型進行中心詞初始標注,使用頻繁依存子樹模式統(tǒng)計規(guī)則進行中心詞標注校正等。該文方法屬于典型的客觀方法,建立在嚴格的統(tǒng)計語料基礎(chǔ)上,標注的穩(wěn)定性、適應(yīng)性和魯棒性較好。實驗結(jié)果表明,該文方法將條件隨機場模型的中心詞標注準確率提高約3%。

    中心詞;依存關(guān)系樹;條件隨機場;頻繁子樹模式

    1 引言

    對問句所問內(nèi)容的準確理解是問答系統(tǒng)成敗的關(guān)鍵。經(jīng)過對各種形式中文問句分析發(fā)現(xiàn),相對于問句的其他成分,疑問詞和中心詞,對理解問題起著更關(guān)鍵的作用[1]。中文里疑問詞數(shù)量有限,識別容易,識別準確率高[2],然而中心詞不屬于傳統(tǒng)語法所涉及的詞性與語言成分的范疇,識別起來則困難得多。

    正確提取中心詞有助于問題理解及提高問題分類的準確率[3-4],在問句處理領(lǐng)域以至整個自然語言處理方面具有重要意義。對中心詞的關(guān)注,最早是將其用于普通陳述句的句義理解[5],之后擴展到問句處理領(lǐng)域[3]。鑒于中心詞在中文句義理解方面的重要意義,而目前文獻中專門研究中心詞的卻很少,本文的研究具有重要意義。

    在問句中心詞研究方面,中心詞的提取方法研究是熱點。基于啟發(fā)式規(guī)則[6-8]的方法是一類重要的抽取方法。例如,孫景廣等[6]選擇疑問詞(q)右邊或左邊的名詞(n)為中心詞;李廣濤等[7]選擇疑問詞(q)后面第一個名詞短語的最后一個名詞(n)為中心詞;田衛(wèi)東等[8]給出中心詞抽取的兩條啟發(fā)式規(guī)則: 當(dāng)疑問詞(q)在問句的句首或句尾時,離疑問詞最近的名詞(n)為問句的中心詞;當(dāng)疑問詞在其余位置時,則疑問詞(q)之后的第一個名詞(n)為中心詞;若未發(fā)現(xiàn)名詞(n),則認為該問句中沒有中心詞。這些方法所涉及的啟發(fā)式規(guī)則,基本由專家總結(jié),因此不可避免地帶有一定的主觀性,規(guī)則集的完備性難以保證,也缺乏精確的統(tǒng)計依據(jù)。如表1中問句Q1,正確中心詞為“公司”,但以上三種方法會將離疑問詞最近的名詞“視頻”標注為中心詞。

    表1 中心詞在位置、數(shù)量和成份上的多樣性特征

    注: 加粗表示中心詞

    利用大規(guī)模語料庫,統(tǒng)計中心詞的位置和特征的概率數(shù)據(jù),進而給出在最大似然估計、最大后驗概率估計意義下的中心詞概率估計,是一類很有效的中心詞抽取方法。這其中最成功的是條件隨機場(Conditional Random Fields, CRF)[9]。文獻[2]利用CRF模型,選用詞、詞性、修飾詞等作為特征,將問題的中心詞識別問題轉(zhuǎn)化為序列標注的問題,使中心詞識別準確率有了很大改善。在此基礎(chǔ)上,田衛(wèi)東等[10]通過將CRF與錯誤驅(qū)動(TBL)相結(jié)合的方式,利用最小化中心詞標定錯誤率的方式來訓(xùn)練標注器,取得了不錯的效果。

    但是,CRF是一種建立在主觀貝葉斯理論基礎(chǔ)上的專門用于概率處理的數(shù)學(xué)工具,計算量大復(fù)雜度高。對于CRF的最初應(yīng)用領(lǐng)域,例如,英文的一些序列標注問題,其精度損失從實際效果來看[11]微乎其微。但將CRF應(yīng)用于處理中文時,由于漢語句子中詞的平均依存距離遠高于英語和法語[12]、漢語的意合性、無時態(tài)變化與語序的靈活性[13]等原因,抓取存在于中文詞匯多維度特征之間的長距離多層次的統(tǒng)計特征非常困難。由于缺乏中心詞的完整深層統(tǒng)計信息,CRF會在標注時將部分潛在中心詞的邊緣概率計算錯誤,如Q1 CRF錯誤地將“制造”標注為中心詞。

    為此,本文提出了一種基于頻繁依存子樹模式的中心詞提取方法,該方法通過挖掘大量問句的依存關(guān)系樹中所蘊藏的中心詞在不同維度特征之間的概率關(guān)系,以生成頻繁依存子樹對應(yīng)的統(tǒng)計規(guī)則,作為標注中心詞的依據(jù),用于彌補CRF所忽略的問句中心詞的相關(guān)統(tǒng)計信息,從而達到提高中心詞標注準確率的目的。

    2 相關(guān)概念

    2.1 中文問句的中心詞

    中心詞最初定義為“Focus word was defined as the most important word for comprehending a sentence.”[5],用于英語普通句子處理。后來被引入英語問句的處理和分析中,其定義變化為“single word that specifies the object that the question seeks.”[3]。在中文處理領(lǐng)域,中心詞的術(shù)語也不盡相同,如謂語中心詞(Head)、中心詞(head word)[14-15]、 焦點詞(focus)[16]、核心詞(keywords)[17]等。本文所稱中心詞專指中文問句的中心詞,是問句中最能體現(xiàn)和刻畫問句所對應(yīng)答案的特征的詞或詞組,能直接反映問句想查詢和獲得答案的核心內(nèi)容、能體現(xiàn)答案所屬的類別。

    如Q1的答案應(yīng)是某個具體公司名稱,因此答案類型屬于組織機構(gòu)類(HUM_ORGNIZATION)。在該問句中,“公司”應(yīng)為中心詞。

    中心詞與通常所說的關(guān)鍵詞(keywords)相關(guān),但內(nèi)涵不同。關(guān)鍵詞[19-20]是反映文本主題概念和實質(zhì)意義的詞,反映的是“本”文的特征,主要是為了適應(yīng)內(nèi)容檢索而提出來的。而問句的中心詞,本質(zhì)上反映的是“他”句,即問句所對應(yīng)答案句的特征,而非“本”句的特征。由于在問題分類階段無法獲取答案句,因此無法直接了解答案的各方面特征信息,中心詞則為我們間接刻畫答案句的特征提供了依據(jù)。

    中文語言的特點導(dǎo)致了中文問句中心詞的標注更加復(fù)雜,這種復(fù)雜性體現(xiàn)在中心詞的詞性、位置、數(shù)量和成分等幾個方面,如表1所示。對哈爾濱工業(yè)大學(xué)信息檢索實驗室的問題集*http://www.ltp-cloud.com/; HIT-SCIR: http://ir.hit.edu.cn進行中心詞標注后,統(tǒng)計得出中心詞主要詞性的分布如表2所示。該語料庫中,中心詞為名詞的情況雖然占85.94%,但其他詞性的占比也不少,考慮到語料庫規(guī)模有限,可以想象在真實語言中,中心詞的詞性組成是多樣化的。

    表2 中心詞在主要詞性上的分布

    中心詞可能位于句首、句尾或中間,如表1中Q1、Q2和Q3。中心詞在單個問句中的數(shù)量不定,可能沒有中心詞,也可能有多個中心詞。Q4答案是人物類(HUM_PERSON),“人”和“位”聯(lián)合能更明確地表明答案“人”的特征,因此有兩個中心詞,Q6為原因類(DES_REASON),除了疑問詞“為什么”外,沒有其他可以確定其類別的詞,因此沒有中心詞。中心詞在問句中還可以作不同的語法成份。Q7的中心詞“學(xué)校”與疑問詞之間是定語修飾關(guān)系(ATT),Q8中心詞“距離”與謂語間是主謂關(guān)系(SBV),Q9中心詞“市花”與謂語則是動賓關(guān)系(VOB)。

    2.2 依存關(guān)系樹

    依存語法[21-22]是一種使用非常廣泛的語法形式,最早由法國語言學(xué)家L Tesiniere提出。依存語法認為,詞與詞之間的關(guān)系有方向,通常是一個詞支配另一個詞,這種支配與被支配的關(guān)系稱作依存關(guān)系。句子中的這種依存關(guān)系圖形化后的結(jié)果可形成依存關(guān)系樹(Dependency Relation Tree)[22]。

    形式上,依存關(guān)系樹可作如下定義:

    (1) 依存關(guān)系是建立在集合W上的二元關(guān)系R,記為},其中也可進一步記為v

    (2) 依存關(guān)系W存在最小上確界,記為Root,且滿足如式(1)所示的條件;

    (?∈W∧?∈W?w1≠w2)

    (1)

    (3) 依存關(guān)系樹是一棵樹T=(F,B),其中F為結(jié)點集合,B為邊集合。邊是有方向的,假如v

    圖1 依存關(guān)系樹示例

    依存結(jié)構(gòu)分析被認為非常適合中文處理[23]。將大規(guī)模語料庫的依存關(guān)系樹準確解析形成樹庫,可獲得相當(dāng)精確的帶有一定深層語義的各種統(tǒng)計概率信息,在中文信息處理方面的應(yīng)用非常廣泛[24-26]。

    2.3 條件隨機場

    CRF由Lafferty等人于2001年提出[27],是一種判別式概率模型,主要處理序列數(shù)據(jù)。數(shù)據(jù)序列隨機變量記為X,標注結(jié)果序列隨機變量Y的條件概率分布記為P(Y|X),CRF通過在訓(xùn)練數(shù)據(jù)上訓(xùn)練出的特征模板(model),來求得在最大似然估計、最大后驗概率意義下的P(Y|X)。

    令X=(x1,x2,…,xn)表示觀察序列,Y=(y1,y2,…,yn)表示有限的輸出狀態(tài)序列集合。

    CRF定義Y的條件概率為式(2)。

    (2)

    其中,fj(yi-1,yi,x,i)為特征函數(shù),是狀態(tài)特征函數(shù)和轉(zhuǎn)移特征函數(shù)的統(tǒng)一表示形式;Zx為歸一化常量,用于使所有狀態(tài)序列的概率和為1,Zx的計算公式如式(3)所示。

    (3)

    其中,∑i∑jλjfj(yi-1,yi,x,i)是對整個觀察序列,標記位于i和i-1的特征函數(shù),λ={λ1,…,λm}是特征函數(shù)的權(quán)。

    CRF的任務(wù)是搜索概率最大的Y*,得出式(4)。

    Y*=argmaxP(Y/X)

    (4)

    應(yīng)用CRF的限制條件比隱馬爾可夫模型更弱,尤其是線性鏈CRF,有特化的處理算法,特別適合解決自然語言處理領(lǐng)域的序列標注問題。

    3 基于頻繁依存子樹模式的中心詞提取

    基于頻繁依存子樹模式的中心詞提取,主要包括三個核心步驟: (1)問句預(yù)處理;(2)利用CRF進行初始標注;(3)挖掘頻繁依存子樹模式并形成統(tǒng)計規(guī)則模式,利用高可信度的頻繁依存子樹模式和統(tǒng)計規(guī)則模式重新標定中心詞,如圖2。

    3.1 中心詞的初始標注

    首先對問句進行分詞,然后進行依存關(guān)系分析,構(gòu)建依存關(guān)系樹庫。對于依存關(guān)系樹中每個詞匯的特征,可以根據(jù)需要選取,本文的特征集選擇參考了文獻[2,10]。此時,觀察序列X和標注序列Y可表示為:

    其中,F(xiàn)i是詞的第i個特征的值集;L表示標注的結(jié)果,L={f,q,n}。f、q、n分別表示中心詞、疑問詞、既非中心詞也非疑問詞。

    圖2 中心詞提取步驟流程圖

    利用CRF在訓(xùn)練階段得出的特征模板,對目標問句進行標注,形成初始標注結(jié)果。表3是中心詞初始標注的一個示例。

    表3 CRF對問句Q1的中心詞標注

    注:P為邊緣概率CRF錯誤地將“創(chuàng)造”標注為“f”。

    3.2 頻繁依存子樹模式

    語料庫中所有問句的依存關(guān)系樹形成樹數(shù)據(jù)庫。對依存關(guān)系樹的樹庫進行統(tǒng)計分析可以發(fā)現(xiàn),依存關(guān)系樹的局部特征(子樹)的出現(xiàn)概率是不同的,有些經(jīng)常出現(xiàn),有些則很少出現(xiàn)。參考文獻[28-29]頻繁子樹定義,引入頻繁依存子樹的概念。

    嵌入子樹的定義: 給定樹Ta=(Fa,Ba)和Tb=(Fb,Bb),假如,(1)Fb?Fa;(2) (nb,x,nb,y)?Bb?na,y≤lna,x,則稱Tb為Ta的嵌入子樹,簡記為Tb?Ta。其中,ni,y表示依存關(guān)系樹i的深度遍歷序列的y號結(jié)點,≤l表示祖先-后代關(guān)系。

    誘導(dǎo)子樹的定義: 給定樹Ta=(Fa,Ba)和Tb=(Fb,Bb),假如,(1)Fb?Fa;(2) (nb,x,nb,y)?Bb→(na,x,na,y)?Ba,則稱Tb為Ta的誘導(dǎo)子樹,簡記為Tb?Ta。

    嵌入子樹和誘導(dǎo)子樹統(tǒng)稱子樹。

    本文采用文獻[28-29]使用的樹存儲格式,問句Q1對應(yīng)的根樹與子樹如圖3。可以看出,嵌入式子樹的特點是子樹中的節(jié)點在根樹中可保持祖先后代關(guān)系,如圖3(c)中⑥與④;而誘導(dǎo)子樹中的節(jié)點與根樹中保持一致,只能為父子關(guān)系,如圖3(a)。

    圖3 Q1對應(yīng)的根樹及不同類型子樹

    子樹在樹數(shù)據(jù)庫D的支持度: 給定樹數(shù)據(jù)庫D以及子樹T,T的支持度為suppD(T)=|p(T)|/|D|,其中p(T)是D中包含子樹T的依存關(guān)系樹集合,即對任意t∈p(T),T為t的嵌入子樹/誘導(dǎo)子樹,|.|為集合的勢。

    頻繁子樹的定義: 對任意指定的最小支持度閾值0≤minsupp≤1,當(dāng)minsupp≤suppD(T)時,稱T為D中的頻繁嵌入子樹/誘導(dǎo)子樹,統(tǒng)稱頻繁子樹。

    對于依存關(guān)系樹來說,嵌入子樹和誘導(dǎo)子樹都是樹的局部特征,其中嵌入子樹反映了依存關(guān)系樹中離散結(jié)點之間的統(tǒng)計特征,而誘導(dǎo)子樹反映了依存關(guān)系樹中鄰接結(jié)點之間的統(tǒng)計特征。兩類子樹都是頻繁的,本文統(tǒng)稱頻繁依存子樹模式。應(yīng)用到中心詞提取中,可以充分利用模式中共有的結(jié)構(gòu)特征,并通過統(tǒng)計得到大量依存關(guān)系樹所蘊藏的中心詞各維度特征之間的概率關(guān)系,由這些概率關(guān)系生成的規(guī)則可以包含更全面的依存語法結(jié)構(gòu)信息,從而為中心詞抽取所需的深層語義信息抓取提供了可能。實現(xiàn)如算法1。

    算法1 從依存子樹生成統(tǒng)計規(guī)則模式

    if(tree[j]>=0and(tree[j+1]==-1)then R←R∪{j}; R←R∪{indexoftreeslastitem}; foreach itemk∈Rdo subtree←?; forj←0toR.size()?1do if(jk+1)then subtree←subtree∪{tree[k]}; idx←locate(tree); sub_idx←locate(subtree,idx); rule.cond←sub_idx; rule.deci←idx; rule.idx←k; rule.cf←1.0?tree[rule.deci].supp/tree[rule.cond].supp; rules←rules∪{rule}; returnrules;functioninitRulesEmbeddedTree(t,T,D,cf); R←?; forj←0totree.size()?1do if(tree[j]>=0and(tree[j+1]≠?1)then R←R∪{j}; forj←0toR.size()?1do count←sumsupport(D,T,R[j]); idx←locate(tree); rule.cond←idx; rule.deci←idx; rule.idx←R[j]; rule.cf←1.0?tree[rule.deci].supp/count; rules←rules∪{rule}; returnrules

    3.3 統(tǒng)計規(guī)則模式

    統(tǒng)計規(guī)則的定義為式(5)。

    (5)

    其中,Ta?Tb,cf稱為統(tǒng)計規(guī)則的置信度如式(6)所示。

    (6)

    其中D下標表示樹數(shù)據(jù)庫D。

    對于給定的最小支持度閾值minsupp,統(tǒng)計規(guī)則R:Ta?Tb可劃分為三類。

    (1)minsupp≤suppD(Tb) 且minsupp≤suppD(Ta);

    (2)minsupp≥suppD(Tb) 且minsupp≥suppD(Ta);

    (3)minsupp≥suppD(Tb) 且minsupp≤suppD(Ta)。

    如Q1中統(tǒng)計規(guī)則如圖4,Ta在樹庫中出現(xiàn)224次,Tb出現(xiàn)119次,所以規(guī)則中目標節(jié)點⑥(n、ATT、f)為中心詞的概率為97.7%。

    圖4 問句Q1中存在的統(tǒng)計規(guī)則

    通常,我們只對頻繁子樹間構(gòu)成的統(tǒng)計規(guī)則感興趣,即滿足條件1的規(guī)則。但有時候,非頻繁子樹之間構(gòu)成的統(tǒng)計規(guī)則也可能很有價值。給定最小置信度閾值minconf,定義規(guī)則“Ta?Tb,cfD”為強規(guī)則,當(dāng)且僅當(dāng)cfD(Ta?Tb)≥minconf,Ta?Tb。

    強規(guī)則反映了依存子樹局部結(jié)構(gòu)之間較強的關(guān)聯(lián)性,體現(xiàn)出中文問句自然語言結(jié)構(gòu)中,局部語言模式間的強關(guān)聯(lián)性。本文將其稱作統(tǒng)計規(guī)則模式。本質(zhì)上,頻繁依存子樹模式反映了依存子樹中結(jié)點之間的聯(lián)合概率分布,而統(tǒng)計規(guī)則模式反映了子樹之間的條件概率分布。

    有一類特殊的統(tǒng)計規(guī)則模式是我們特別感興趣的,稱為直接統(tǒng)計規(guī)則模式,圖5中“③⑥⑦⑩”均為構(gòu)建問句的依存關(guān)系樹時所考慮的特征;“?”表示通配節(jié)點;虛線框為目標節(jié)點。

    此類規(guī)則的定義為: 定義規(guī)則“Ta?Tb,cfD”為直接統(tǒng)計規(guī)則模式,當(dāng)且僅當(dāng)cfD(Ta?Tb)≥minconf,Ta?Tb,|Tb|=|Ta|+1。

    當(dāng)Ta為Tb的誘導(dǎo)子樹時,稱為直接誘導(dǎo)規(guī)則模式;為嵌入子樹時,稱為直接嵌入規(guī)則模式。

    圖5 統(tǒng)計規(guī)則模式

    3.4 兩類模式的結(jié)點定義

    頻繁依存子樹模式和統(tǒng)計規(guī)則模式所涉及的局部問句語言結(jié)構(gòu),都由結(jié)點組成,而結(jié)點由多維特征來描述。表4是結(jié)點多維度特征的一個例子。

    表4 結(jié)點多維度特征示例

    3.5 中心詞標注

    CRF對問題進行標注時,通過計算每個標注的邊緣概率P來決定最終標注結(jié)果。本文使用置信度高的頻繁依存子樹模式和統(tǒng)計規(guī)則模式,對CRF初始標注結(jié)果進行修正。這種做法本質(zhì)上是將問句中頻繁出現(xiàn)的包括中心詞的這類結(jié)構(gòu)特征作為CRF所選取特征信息的擴充,彌補CRF不能充分利用中心詞特征間存在的深層統(tǒng)計關(guān)系的不足。

    具體做法為: 用CRF進行初始標注,利用前期挖掘得到的頻繁依存子樹模式和統(tǒng)計規(guī)則模式,匹配目標節(jié)點,如果匹配成功,再繼續(xù)匹配目標節(jié)點中包含的特征信息,當(dāng)全部匹配成功后,將初始標注結(jié)果修正為規(guī)則中所標注的內(nèi)容。當(dāng)多條規(guī)則對應(yīng)相同的目標節(jié)點時,選擇置信度最高規(guī)則中的標注為最終結(jié)果。

    4 實驗結(jié)果和分析

    4.1 數(shù)據(jù)及實驗工具來源

    依存句法分析的標注體系各有不同,本文采用的是哈爾濱工業(yè)大學(xué)信息檢索實驗室的語言技術(shù)云平臺(LTP-cloud)的標注體系。另外,測試所用的數(shù)據(jù)集、問句分詞和依存句法分析的工具也來自該平臺。該問題集,共6 294個問句。文中使用CRF++*http://crfpp.sourceforge.net/作為初始標注工具。頻繁子樹挖掘使用文獻[29]的SLEUTH算法。

    4.2 實驗總體設(shè)計

    本文從三個角度設(shè)計實驗。(1)設(shè)不同的CRF訓(xùn)練模板T1和T2。驗證CRF和頻繁子樹和統(tǒng)計規(guī)則模式在考慮相同特征維度、CRF考慮所有維度的特征,頻繁子樹和統(tǒng)計規(guī)則模式仍只考慮部分特征的條件下,本文方法的有效性。特征選取參照表5;(2)為了避免數(shù)據(jù)集劃分不均衡,通過10次交叉驗證的方法,隨機選取90%作為訓(xùn)練集,10%作為測試集,驗證方法的有效性;(3)選取30%-80%作為訓(xùn)練集,目的是驗證訓(xùn)練集數(shù)量的增加,本文方法在CRF基礎(chǔ)上是否仍有修正效果(90%在(2)中)。

    表5 CRF特征模板設(shè)置

    4.3 實驗評價方法

    本文定義了評價函數(shù)FP1-FP4。其中,F(xiàn)P3為文獻[2] 的定義,F(xiàn)P2為文獻[10]的定義。由于評價函數(shù)FP2和FP3僅考慮中心詞的局限性,本文另外定義評價函數(shù)FP1和FP4。

    各評價函數(shù)定義如下:

    其中,F(xiàn)P2反映了中心詞被正確識別或者無中心詞的問句數(shù)量的占比。

    4.4 實驗結(jié)果及分析

    實驗采用10-fold交叉驗證,用四種不同評價函數(shù)在T1、T2模板下進行測試,如圖6-7。

    圖6 中心詞提取準確率(T1)

    圖7 中心詞提取準確率(T2)

    問題集隨機選取30%~80%,六組不同比例的數(shù)據(jù)作為訓(xùn)練集,在T1、T2下進行測試,實驗結(jié)果如圖8。

    圖8 30%~80%比例劃分訓(xùn)練集在T1 下準確率提升百分比

    從圖6、圖8可以看出,當(dāng)CRF與頻繁子樹模式和統(tǒng)計規(guī)則模式挖掘都只考慮詞性和依存關(guān)系等部分特征時,在10-fold交叉驗證情況下四個評價標準FP1-FP4準確率平均提升2.52%、3.09%、3.93%、0.43%;按30%-80%劃分訓(xùn)練集時,準確率分別提升1.65%、2.15%、2.86%、0.25%。這表明了本文的方法能使中心詞標注的準確率得到明顯的提高。

    從圖7、圖8可以看出,在CRF考慮詞、詞性、依存關(guān)系、修飾詞等多類特征時,本文的方法在10-fold交叉驗證情形下,F(xiàn)P1-FP4分別提升0.63%、1.10%、1.37%、0.13%;按30%-80%劃分訓(xùn)練集時,平均提升0.64%、1.01%、1.09%、0.05%。說明當(dāng)CRF考慮更全面的特征時,CRF的標注準確率有所上升,而本文方法的提升幅度雖略有降低,但FP2、FP3仍有1%以上的提高。

    本文與結(jié)合CRF和錯誤驅(qū)動來提取中心詞[10]的方法也作了對比,見表6。該方法將問題集按train∶test1∶test2為2∶2∶1的方式劃分,本文選取與文獻[12]中相同的五組隨機劃分結(jié)果。

    表6 與文獻[10]實驗對比

    表7-8則是按30%~80%比例劃分的實驗結(jié)果。結(jié)果表明隨著訓(xùn)練樣本的增加,本文的方法在CRF標注效果變好的基礎(chǔ)上仍然有修正的效果。

    表7 訓(xùn)練集按 30%~80%劃分在T1基礎(chǔ)上的實驗結(jié)果(cf為規(guī)則置信度,P為CRF的邊緣概率)

    表8 訓(xùn)練集按 30%~80%劃分在T2基礎(chǔ)上的實驗結(jié)果

    續(xù)表

    5 結(jié)論與展望

    本文提出了一種新的問句中心詞提取方法。該方法通過挖掘頻繁依存子樹模式和統(tǒng)計規(guī)則模式,抓取中心詞不同維度特征之間的概率關(guān)系,然后結(jié)合考慮CRF標注結(jié)果的邊緣概率來修正CRF的初始標注結(jié)果。實驗表明,中心詞在依存關(guān)系樹中頻繁存在的層次結(jié)構(gòu)特征對提高中心詞的標注準確率是有益的;在CRF與兩類模式的挖掘中考慮相同特征時,本文方法的有效性更明顯。這些結(jié)論為繼續(xù)深入研究問句中心詞奠定了基礎(chǔ)。

    總體而言,中心詞標注問題復(fù)雜,諸如語料數(shù)據(jù)的稀疏性和數(shù)據(jù)傾斜、分詞和依存句法分析的準確性還不夠高、人工標注的主觀性等,都是影響標注結(jié)果的重要因素。針對這些問題展開研究,同時進一步擴充和完善真實語料庫,通過對生成的各類模式進行精選以減少噪聲提高標注準確率,是本文下一步要研究的工作。

    [1] Xiao-Ming L,Li L. Question Classification Based on Focus[C]//Proceedings of Communication Systems and Network Technologies (CSNT),2012 International Conference on. IEEE,2012: 512-516.

    [2] Zhang Z,Zhang Y,Liu T,et al. Automatic Recognition of Focus and Interrogative Word in Chinese Question for Classification[J]. Computer and Information Science,2010,3(1): P168.

    [3] Huang Z,Thint M,Qin Z. Question classification using head words and their hypernyms[C]//Proceedings of Proceedings of the Conference on Empirical Methods in Natural Language Processing. Association for Computational Linguistics,2008: 927-936.

    [4] Wei Z,Junjie C,Yanqing N. Research on Chinese Question Classification Based on Hownet and Dependency Parsing[C]//Intelligent Systems and Applications (ISA),2011 3rd International Workshop on. IEEE,2011: 1-4.

    [5] Osaka M,Nishizaki Y,Komori M,et al. Effect of focus on verbal working memory: Critical role of the focus word in reading[J]. Memory & cognition,2002,30(4): 562-571.

    [6] 孫景廣,蔡東風(fēng),呂德新,等. 基于知網(wǎng)的中文問題自動分類[J]. 中文信息學(xué)報,2007,21(1): 90-95.

    [7] 李方濤,張顯,孫建樹等.一種新的層次化結(jié)構(gòu)問題分類器[J].中文信息學(xué)報,2008,22(1): 93-98.

    [8] 田衛(wèi)東,高艷影,祖永亮.基于自學(xué)習(xí)規(guī)則和改進貝葉斯結(jié)合的問題分類[J].計算機應(yīng)用研究,2010,27(8): 2869-2871.

    [9] Lafferty J,McCallum A,Pereira F C N. Conditional Ran-dom fields: Probabilistic models for segmenting and labeling sequence data[J]. 2001: 282-289.

    [10] 田衛(wèi)東,李亞娟. 基于 CRF 和錯誤驅(qū)動的中心詞識別[J]. 計算機應(yīng)用研究,2013,30(8): 2345-2348.

    [11] Sasaki Y,Tsuruoka Y,McNaught J,et al. How to make the most of NE dictionaries in statistical NER[J]. BMC bioinformatics,2008,9(Suppl 11): S5.

    [12] 劉海濤,黃偉. 計量語言學(xué)的現(xiàn)狀,理論與方法[J]. 浙江大學(xué)學(xué)報 (人文社會科學(xué)版),2012,42(2).

    [13] 尤昉,李涓子,王作英. 基于語義依存關(guān)系的漢語語料庫的構(gòu)建[J]. 中文信息學(xué)報,2003,17(1): 46-53.

    [14] 龔小謹,羅振聲,駱衛(wèi)華. 漢語句子謂語中心詞的自動識別[J]. 中文信息學(xué)報,2003,17(2): 7-13.

    [15] 李國臣,孟靜山. 利用主語和謂語的句法關(guān)系識別謂語中心詞[J]. 中文信息學(xué)報,2005,19(1): 1-7.

    [16] Sun H,Jurafsky D. Shallow Semantc Parsing of Chinese[C]//Proceedings of HLT-NAACL. 2004: 249-256.

    [17] 李素建,劉群,楊志峰. 基于最大熵模型的組塊分析[J]. 計算機學(xué)報,2003,26(12): 1722-1727.

    [18] Chien L F. PAT-tree-based keyword extraction for Chinese information retrieval[C]//Proceedings of ACM SIGIR Forum. ACM,1997,31(SI): 50-58.

    [19] Azcarraga A,Liu M D,Setiono R. Keyword extraction using backpropagation neural networks and rule extraction[C]//Proceedings of Neural Networks (IJCNN),The 2012 International Joint Conference on. IEEE,2012: 1-7.

    [20] Peng F,McCallum A. Information extraction from research papers using conditional random fields[J]. Information Processing & Management,2006,42(4): 963-979.

    [21] Tesnière L,Fourquet J. Eléments de syntaxe structurale[M]. Paris: Klincksieck,1959.

    [22] 周明,黃昌寧. 面向語料庫標注的漢語依存體系的探討[J]. 中文信息學(xué)報,1994,8(3): 35-52.

    [23] M. Zhou. A block-based dependency parser for unrestricted Chinese text[C]//Proceedings of the 2nd Chinese Language Processing Workshop Attached to ACL-2000,Hong Kong. 2000: 78-84.

    [24] 文勖,張宇,劉挺,等. 基于句法結(jié)構(gòu)分析的中文問題分類[J]. 中文信息學(xué)報,2006,20(2): 33-39.

    [25] 胡寶順,王大玲,于戈,等. 基于句法結(jié)構(gòu)特征分析及分類技術(shù)的答案提取算法[J]. 計算機學(xué)報,2008, 31(4): 662-676.

    [26] 王智強,李茹,陰志洲,等. 基于依存特征的漢語框架語義角色自動標注[J]. 中文信息學(xué)報,2013,2: 005.

    [27] Lafferty J,McCallum A,Pereira F C N. Conditional Ran-dom fields: Probabilistic models for segmenting and labeling sequence data[J]. 2001: 282-289.

    [28] Zaki M J. Efficiently mining frequent trees in a forest: Algorithms and applications[J]. Knowledge and Data Engineering,IEEE Transactions on,2005,17(8): 1021-1035.

    [29] Zaki M J. Efficiently mining frequent embedded unordered trees[J]. Fundamenta Informaticae,2005,66(1): 33-52.

    Automatic Extraction of Focus Based on Frequent Dependency Subtree Patterns

    TIAN Weidong, YU Yongyong

    (School of Computer and Information,Hefei University of Technology, Hefei, Anhui 230009, China)

    Even though Conditional Random Field(CRF) model can automatically tag focus in question,some deep relationships among focuses still cannot be mined,and this results in nontrivial impairing on focus recognition. In this paper,a focus recognition method based on frequent dependency tree pattern of Chinese question is proposed. In this method,probabilities of various dimensional relationships of focus hidden in the dependency tree corpus are mined to improve the recognition accuracy. The main steps of the method include mining frequent subtree dependency model to generate the corresponding statistical rules,using CRF for initial focus annotation,and using frequency dependent subtree statistical rules to correct initial annotation etc. The experimental results show that the proposed method can improve the accuracy by 3% or so in average compared to CRF model.

    focus; dependency tree; CRF; frequent subtree pattern

    田衛(wèi)東(1970—),副教授,主要研究領(lǐng)域為人工智能與數(shù)據(jù)挖掘。E?mail:wdtian@hfut.edu.cn虞勇勇(1989—),碩士,主要研究領(lǐng)域為數(shù)據(jù)挖掘。E?mail:yuyong@mail.hfut.edu.cn

    2014-02-31 定稿日期: 2014-06-13

    國家863高技術(shù)研究發(fā)展計劃資助項目(2012AA011005);國家自然科學(xué)基金(61273292)

    1003-0077(2016)03-0133-10

    TP391

    A

    猜你喜歡
    子樹中心詞準確率
    黑莓子樹與烏鶇鳥
    一種新的快速挖掘頻繁子樹算法
    乳腺超聲檢查診斷乳腺腫瘤的特異度及準確率分析
    健康之家(2021年19期)2021-05-23 11:17:39
    不同序列磁共振成像診斷脊柱損傷的臨床準確率比較探討
    2015—2017 年寧夏各天氣預(yù)報參考產(chǎn)品質(zhì)量檢驗分析
    Why I ride
    書本圖的BC-子樹計數(shù)及漸進密度特性分析?
    高速公路車牌識別標識站準確率驗證法
    基于覆蓋模式的頻繁子樹挖掘方法
    同位語從句與中心詞的句法關(guān)系
    免费观看性生交大片5| 精品一区二区三区视频在线| 成年免费大片在线观看| 国产色婷婷99| av.在线天堂| 日韩精品有码人妻一区| 91在线精品国自产拍蜜月| 午夜激情福利司机影院| 小蜜桃在线观看免费完整版高清| 国产女主播在线喷水免费视频网站| www.色视频.com| 久久97久久精品| 秋霞在线观看毛片| 80岁老熟妇乱子伦牲交| 中文天堂在线官网| 一级毛片电影观看| 亚洲欧美日韩另类电影网站 | 日本免费在线观看一区| 十分钟在线观看高清视频www | 日韩亚洲欧美综合| 观看免费一级毛片| 大话2 男鬼变身卡| 一本色道久久久久久精品综合| 在线观看免费高清a一片| 超碰97精品在线观看| 国产午夜精品一二区理论片| 亚洲精品日韩在线中文字幕| 国国产精品蜜臀av免费| 午夜激情福利司机影院| 蜜桃在线观看..| 久久久久久九九精品二区国产| 亚州av有码| 国模一区二区三区四区视频| 精品亚洲成a人片在线观看 | 性色av一级| 亚洲人成网站在线观看播放| 91午夜精品亚洲一区二区三区| 日韩制服骚丝袜av| 一本久久精品| 成人综合一区亚洲| 亚洲一区二区三区欧美精品| 美女xxoo啪啪120秒动态图| 亚洲欧美日韩另类电影网站 | 亚洲自偷自拍三级| 熟女人妻精品中文字幕| kizo精华| 国产一区二区在线观看日韩| 国模一区二区三区四区视频| 国产免费又黄又爽又色| 91午夜精品亚洲一区二区三区| 国产精品三级大全| 三级国产精品片| 国产午夜精品一二区理论片| 日本色播在线视频| 欧美成人a在线观看| 99热这里只有精品一区| 九九在线视频观看精品| 三级经典国产精品| 国产亚洲5aaaaa淫片| 一级毛片电影观看| 国产乱来视频区| 18+在线观看网站| 天天躁夜夜躁狠狠久久av| 又粗又硬又长又爽又黄的视频| 春色校园在线视频观看| 青春草视频在线免费观看| 全区人妻精品视频| 黑人高潮一二区| 精品久久久久久久末码| 久久久久久人妻| 亚洲精品一二三| 日韩av在线免费看完整版不卡| 国产国拍精品亚洲av在线观看| 国产老妇伦熟女老妇高清| 精品久久久噜噜| 在线看a的网站| 五月玫瑰六月丁香| 在线免费观看不下载黄p国产| 亚洲av中文字字幕乱码综合| 免费人妻精品一区二区三区视频| av在线播放精品| 晚上一个人看的免费电影| 国产欧美亚洲国产| 十分钟在线观看高清视频www | 韩国av在线不卡| 国产精品国产av在线观看| 国产黄色免费在线视频| 啦啦啦视频在线资源免费观看| 欧美日韩亚洲高清精品| 网址你懂的国产日韩在线| 又大又黄又爽视频免费| 美女内射精品一级片tv| 国产成人精品一,二区| 国产成人精品久久久久久| 亚洲内射少妇av| 国产人妻一区二区三区在| 久久久精品免费免费高清| 亚洲av中文av极速乱| 青春草亚洲视频在线观看| 国产69精品久久久久777片| 内射极品少妇av片p| 欧美日韩精品成人综合77777| 亚洲aⅴ乱码一区二区在线播放| 欧美高清性xxxxhd video| 亚洲成色77777| 久久久成人免费电影| 中文字幕精品免费在线观看视频 | 免费大片18禁| 欧美 日韩 精品 国产| 成人免费观看视频高清| av免费在线看不卡| 久久久色成人| 国产精品人妻久久久久久| 只有这里有精品99| av卡一久久| 亚洲国产精品国产精品| av.在线天堂| 一级a做视频免费观看| 少妇熟女欧美另类| 免费大片黄手机在线观看| 精品国产三级普通话版| 最近手机中文字幕大全| 观看免费一级毛片| 国产精品一区二区在线观看99| 插逼视频在线观看| 国产精品久久久久久精品电影小说 | 午夜福利在线在线| 欧美日韩精品成人综合77777| 国产亚洲91精品色在线| 成人18禁高潮啪啪吃奶动态图 | 97超碰精品成人国产| 国产成人a区在线观看| 亚洲欧美成人精品一区二区| 十八禁网站网址无遮挡 | 日韩欧美 国产精品| 国内少妇人妻偷人精品xxx网站| 深夜a级毛片| 国产精品秋霞免费鲁丝片| 激情 狠狠 欧美| 一区二区三区四区激情视频| 欧美高清性xxxxhd video| av.在线天堂| 黑人猛操日本美女一级片| 成年免费大片在线观看| 亚洲电影在线观看av| 国国产精品蜜臀av免费| 亚洲不卡免费看| 制服丝袜香蕉在线| 欧美日韩视频高清一区二区三区二| 中文字幕亚洲精品专区| 亚洲国产高清在线一区二区三| 九色成人免费人妻av| 麻豆精品久久久久久蜜桃| 国产探花极品一区二区| 高清av免费在线| 天堂俺去俺来也www色官网| 人妻制服诱惑在线中文字幕| 麻豆国产97在线/欧美| 色视频www国产| 网址你懂的国产日韩在线| 自拍欧美九色日韩亚洲蝌蚪91 | 国产精品99久久久久久久久| 日韩精品有码人妻一区| 午夜激情福利司机影院| 网址你懂的国产日韩在线| 日日撸夜夜添| 色视频www国产| av天堂中文字幕网| 成人影院久久| 高清毛片免费看| 高清黄色对白视频在线免费看 | 国产精品免费大片| 尾随美女入室| 国产成人一区二区在线| 你懂的网址亚洲精品在线观看| 亚洲精品日韩av片在线观看| 一级毛片电影观看| 国语对白做爰xxxⅹ性视频网站| 在线亚洲精品国产二区图片欧美 | 久久精品国产亚洲av涩爱| 色网站视频免费| 成人黄色视频免费在线看| 97在线视频观看| 国产一区亚洲一区在线观看| 欧美日韩国产mv在线观看视频 | 亚洲欧美成人综合另类久久久| 青春草亚洲视频在线观看| 久久久久精品性色| videos熟女内射| 欧美激情极品国产一区二区三区 | 亚洲成人中文字幕在线播放| 一本—道久久a久久精品蜜桃钙片| 免费大片18禁| 亚洲高清免费不卡视频| 一级黄片播放器| 午夜免费观看性视频| 亚洲经典国产精华液单| 亚洲av国产av综合av卡| 一级毛片电影观看| 乱系列少妇在线播放| 亚洲丝袜综合中文字幕| 久久人妻熟女aⅴ| 少妇被粗大猛烈的视频| 又粗又硬又长又爽又黄的视频| 国产男女内射视频| 免费观看无遮挡的男女| 在线观看免费高清a一片| 热99国产精品久久久久久7| 色视频在线一区二区三区| 大香蕉97超碰在线| 国产久久久一区二区三区| 99热这里只有是精品50| 日本黄大片高清| 免费不卡的大黄色大毛片视频在线观看| 91久久精品国产一区二区成人| 嘟嘟电影网在线观看| 精品人妻一区二区三区麻豆| 国产伦理片在线播放av一区| 一级毛片黄色毛片免费观看视频| 菩萨蛮人人尽说江南好唐韦庄| 久久99热这里只频精品6学生| 97精品久久久久久久久久精品| 国产淫语在线视频| 一级毛片黄色毛片免费观看视频| 中国三级夫妇交换| 高清av免费在线| 毛片女人毛片| 男人狂女人下面高潮的视频| 国产精品人妻久久久久久| 亚洲av欧美aⅴ国产| 久久ye,这里只有精品| a级毛色黄片| 国产欧美亚洲国产| 国产精品一及| 下体分泌物呈黄色| 日韩在线高清观看一区二区三区| 欧美bdsm另类| 卡戴珊不雅视频在线播放| 麻豆精品久久久久久蜜桃| 熟女av电影| 亚洲欧美日韩无卡精品| 免费av中文字幕在线| 黄色视频在线播放观看不卡| 午夜免费观看性视频| 日韩欧美 国产精品| 大片电影免费在线观看免费| 老司机影院成人| 欧美 日韩 精品 国产| 亚洲欧美成人精品一区二区| 身体一侧抽搐| 成人国产av品久久久| av免费观看日本| 欧美少妇被猛烈插入视频| 免费观看无遮挡的男女| 国产精品久久久久久久久免| 人人妻人人看人人澡| 免费观看a级毛片全部| 91在线精品国自产拍蜜月| 秋霞伦理黄片| 亚洲精品乱久久久久久| 国产久久久一区二区三区| 这个男人来自地球电影免费观看 | 大片免费播放器 马上看| 国产精品国产av在线观看| 免费不卡的大黄色大毛片视频在线观看| 香蕉精品网在线| av网站免费在线观看视频| av卡一久久| 国产伦在线观看视频一区| 久久久国产一区二区| 直男gayav资源| 欧美精品一区二区免费开放| 国产 精品1| 成人亚洲精品一区在线观看 | 国产淫语在线视频| 亚州av有码| 蜜桃久久精品国产亚洲av| 国产黄频视频在线观看| 日韩一区二区三区影片| 国内少妇人妻偷人精品xxx网站| av卡一久久| 99国产精品免费福利视频| 亚洲国产av新网站| 婷婷色av中文字幕| 蜜臀久久99精品久久宅男| 亚洲四区av| 国产成人精品福利久久| 亚洲色图综合在线观看| 18+在线观看网站| 啦啦啦在线观看免费高清www| 97在线人人人人妻| 国内揄拍国产精品人妻在线| 国产美女午夜福利| 国产免费一级a男人的天堂| 日韩欧美精品免费久久| 老司机影院毛片| av国产精品久久久久影院| a级一级毛片免费在线观看| 日韩三级伦理在线观看| 又黄又爽又刺激的免费视频.| 视频区图区小说| 久久精品久久久久久久性| 天堂中文最新版在线下载| 国产欧美日韩精品一区二区| 国产成人精品婷婷| 成年av动漫网址| 一区二区三区精品91| 亚洲欧美中文字幕日韩二区| 我的老师免费观看完整版| 一区二区三区乱码不卡18| 人妻制服诱惑在线中文字幕| av在线播放精品| 高清视频免费观看一区二区| 在线观看美女被高潮喷水网站| 小蜜桃在线观看免费完整版高清| a级毛片免费高清观看在线播放| 日韩视频在线欧美| 国产亚洲欧美精品永久| 在线观看人妻少妇| 一本色道久久久久久精品综合| 国产在线一区二区三区精| 汤姆久久久久久久影院中文字幕| 国产免费视频播放在线视频| 欧美日韩亚洲高清精品| 男女边吃奶边做爰视频| 女人十人毛片免费观看3o分钟| 又黄又爽又刺激的免费视频.| 国产免费一级a男人的天堂| 一级a做视频免费观看| 国产精品嫩草影院av在线观看| 韩国高清视频一区二区三区| 人妻系列 视频| 人妻 亚洲 视频| 91久久精品电影网| 狂野欧美激情性xxxx在线观看| videossex国产| 一个人免费看片子| 久久久久久久久久人人人人人人| 亚洲成人中文字幕在线播放| 男男h啪啪无遮挡| 老熟女久久久| 男女免费视频国产| 大香蕉97超碰在线| 1000部很黄的大片| 欧美精品亚洲一区二区| 午夜日本视频在线| 午夜激情福利司机影院| 久久99精品国语久久久| 啦啦啦啦在线视频资源| 观看av在线不卡| 蜜桃亚洲精品一区二区三区| 99热国产这里只有精品6| 女的被弄到高潮叫床怎么办| 国产 一区精品| 国产无遮挡羞羞视频在线观看| 国产黄色免费在线视频| 性色av一级| 中文欧美无线码| 性色av一级| 亚洲欧美精品专区久久| 国产v大片淫在线免费观看| 久久国产乱子免费精品| 99热这里只有精品一区| 亚洲国产精品专区欧美| 国产一区有黄有色的免费视频| 各种免费的搞黄视频| 国产高清三级在线| 高清av免费在线| 亚洲丝袜综合中文字幕| 黑人高潮一二区| 久久久久久久国产电影| 人妻 亚洲 视频| 日日啪夜夜爽| 三级经典国产精品| 一级毛片 在线播放| 国产视频内射| 成人免费观看视频高清| 日韩中文字幕视频在线看片 | 身体一侧抽搐| 天天躁日日操中文字幕| 91狼人影院| 国产亚洲午夜精品一区二区久久| 成年免费大片在线观看| 欧美激情国产日韩精品一区| 在线观看一区二区三区| 男男h啪啪无遮挡| tube8黄色片| 精品人妻偷拍中文字幕| av不卡在线播放| 黄色配什么色好看| 在线观看三级黄色| 亚洲图色成人| 亚洲熟女精品中文字幕| 久久久久国产精品人妻一区二区| av福利片在线观看| 中国国产av一级| 成人午夜精彩视频在线观看| 国产精品国产三级国产av玫瑰| 最近的中文字幕免费完整| 蜜桃在线观看..| 精品人妻视频免费看| 国产免费视频播放在线视频| 久久精品国产a三级三级三级| 国产av码专区亚洲av| 国产成人精品婷婷| 久久精品国产亚洲av天美| 美女主播在线视频| 丝袜脚勾引网站| 久久女婷五月综合色啪小说| 国产精品一区二区在线不卡| 国产成人aa在线观看| 直男gayav资源| 伦精品一区二区三区| av网站免费在线观看视频| 精品一区二区免费观看| 国产综合精华液| 国产精品久久久久久精品电影小说 | 建设人人有责人人尽责人人享有的 | 老司机影院成人| 成年av动漫网址| 尾随美女入室| 国产免费一级a男人的天堂| 日韩不卡一区二区三区视频在线| 日韩强制内射视频| 国产亚洲精品久久久com| 亚洲精品国产av蜜桃| 人妻 亚洲 视频| 精品熟女少妇av免费看| 国产一区二区在线观看日韩| 国产亚洲最大av| 毛片女人毛片| 亚洲图色成人| 十八禁网站网址无遮挡 | 日韩,欧美,国产一区二区三区| 久久久亚洲精品成人影院| 爱豆传媒免费全集在线观看| av在线播放精品| 天堂俺去俺来也www色官网| av专区在线播放| av.在线天堂| 最新中文字幕久久久久| 观看美女的网站| 少妇 在线观看| 国产淫语在线视频| 精品熟女少妇av免费看| 少妇人妻久久综合中文| 一二三四中文在线观看免费高清| 成人二区视频| 水蜜桃什么品种好| 99视频精品全部免费 在线| 国产伦精品一区二区三区视频9| 亚洲精品久久午夜乱码| 99热6这里只有精品| 男人添女人高潮全过程视频| 精品熟女少妇av免费看| 久久久久久伊人网av| 毛片一级片免费看久久久久| 女的被弄到高潮叫床怎么办| 人人妻人人爽人人添夜夜欢视频 | 嘟嘟电影网在线观看| 国产伦在线观看视频一区| 久久久午夜欧美精品| 日韩av免费高清视频| 久久久色成人| 欧美一级a爱片免费观看看| 国产av码专区亚洲av| 国产成人免费观看mmmm| 精品久久久久久久末码| 欧美成人午夜免费资源| 国产精品.久久久| 免费播放大片免费观看视频在线观看| 欧美一区二区亚洲| 啦啦啦啦在线视频资源| 99re6热这里在线精品视频| 高清av免费在线| 中文字幕精品免费在线观看视频 | 午夜老司机福利剧场| 蜜桃久久精品国产亚洲av| 性高湖久久久久久久久免费观看| 看非洲黑人一级黄片| 午夜福利视频精品| 亚洲图色成人| 美女脱内裤让男人舔精品视频| 国产成人91sexporn| 国产在视频线精品| 一级爰片在线观看| 制服丝袜香蕉在线| 一边亲一边摸免费视频| 水蜜桃什么品种好| 蜜桃在线观看..| 久久99蜜桃精品久久| 欧美一区二区亚洲| 韩国高清视频一区二区三区| 一个人看视频在线观看www免费| 美女主播在线视频| 嫩草影院入口| av在线app专区| 人妻夜夜爽99麻豆av| 中文乱码字字幕精品一区二区三区| 永久网站在线| 在现免费观看毛片| 国产免费一级a男人的天堂| 2021少妇久久久久久久久久久| 亚洲三级黄色毛片| 午夜日本视频在线| 日本av手机在线免费观看| 内地一区二区视频在线| 国产精品久久久久久久电影| 国产亚洲欧美精品永久| 亚洲精品第二区| 国产在线视频一区二区| 九九久久精品国产亚洲av麻豆| 夜夜骑夜夜射夜夜干| 欧美97在线视频| 午夜日本视频在线| 精品少妇久久久久久888优播| 丝瓜视频免费看黄片| 男女免费视频国产| 中国国产av一级| 中文字幕免费在线视频6| 一个人看的www免费观看视频| 美女国产视频在线观看| 国产精品嫩草影院av在线观看| 18+在线观看网站| 少妇丰满av| 热99国产精品久久久久久7| 欧美变态另类bdsm刘玥| 日本av免费视频播放| 欧美xxxx黑人xx丫x性爽| 一级毛片aaaaaa免费看小| 精品人妻视频免费看| 18禁裸乳无遮挡免费网站照片| 99久久精品一区二区三区| 男女边吃奶边做爰视频| 午夜免费男女啪啪视频观看| 91久久精品国产一区二区三区| 欧美一级a爱片免费观看看| 菩萨蛮人人尽说江南好唐韦庄| 91精品国产九色| 汤姆久久久久久久影院中文字幕| 日本一二三区视频观看| 国产黄片美女视频| 嫩草影院新地址| 国产又色又爽无遮挡免| 天堂8中文在线网| 日本欧美视频一区| 日本av免费视频播放| 日本欧美国产在线视频| 91狼人影院| 777米奇影视久久| 如何舔出高潮| 中文天堂在线官网| 国产精品久久久久久av不卡| 国产在线男女| 国产精品秋霞免费鲁丝片| 下体分泌物呈黄色| 女人久久www免费人成看片| 日韩av免费高清视频| 中文字幕制服av| 中文字幕av成人在线电影| 99久久综合免费| 熟女av电影| 亚洲av福利一区| 中文字幕免费在线视频6| 中文字幕av成人在线电影| 王馨瑶露胸无遮挡在线观看| 亚洲精品一二三| 久久久久人妻精品一区果冻| 国产成人一区二区在线| 一级毛片黄色毛片免费观看视频| 高清不卡的av网站| 一个人看视频在线观看www免费| 成人漫画全彩无遮挡| 91精品一卡2卡3卡4卡| 狂野欧美激情性xxxx在线观看| 99久久精品一区二区三区| 2018国产大陆天天弄谢| 男人添女人高潮全过程视频| 中文精品一卡2卡3卡4更新| 大又大粗又爽又黄少妇毛片口| 九色成人免费人妻av| 亚洲三级黄色毛片| 99热网站在线观看| 男人狂女人下面高潮的视频| 亚洲精品亚洲一区二区| 成人无遮挡网站| 人人妻人人爽人人添夜夜欢视频 | 另类亚洲欧美激情| 亚洲国产欧美在线一区| 国产在线一区二区三区精| 国内少妇人妻偷人精品xxx网站| 一区二区三区乱码不卡18| www.av在线官网国产| 日韩av免费高清视频| 乱码一卡2卡4卡精品| 26uuu在线亚洲综合色| 韩国高清视频一区二区三区| 国产高潮美女av| 毛片一级片免费看久久久久| 亚洲,欧美,日韩| 狂野欧美激情性xxxx在线观看| 中文字幕久久专区| 我的女老师完整版在线观看| 国产欧美日韩一区二区三区在线 | 啦啦啦视频在线资源免费观看| 欧美日本视频| 日韩av免费高清视频| 国产一区有黄有色的免费视频| 菩萨蛮人人尽说江南好唐韦庄| 久久久久久久大尺度免费视频| 免费人妻精品一区二区三区视频| 国产人妻一区二区三区在| 熟女电影av网| 六月丁香七月| 网址你懂的国产日韩在线|