• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于復合冪函數(shù)修正G1法的商戶綜合評價

    2016-11-01 18:26:27李忠洵華錦芝劉震鄭建賓
    計算機應用 2016年9期
    關鍵詞:賦權商戶排序

    李忠洵 華錦芝 劉震 鄭建賓

    摘要:

    針對多指標綜合評價問題中主客觀權重相悖時客觀權重淹沒主觀權重的問題,以G1法和客觀賦權法為基礎,提出了復合冪函數(shù)修正G1法的組合賦權模型。首先,建立指標體系并通過G1法確定各指標主觀排序和主觀初始向量;然后,利用客觀賦權法計算各指標客觀向量;其次,在不改變主觀排序的情況下利用復合冪函數(shù)算出主客觀結合的綜合權重;最后,利用各指標標準化后的值和綜合權重計算綜合評價值。采用大眾點評網(wǎng)的商戶數(shù)據(jù)進行綜合評價實驗:該模型的均方根誤差(RMSE)為3.891,均低于G1熵權法的8.818和標準差修正G1法的4.752,且覆蓋率優(yōu)于兩種對比方法;分別修改主觀初始向量和主觀排序進行對比實驗,修改主觀排序的均方根誤差為5.430,高于修改主觀初始向量的1.17。實驗結果表明,該模型得到的評價值與大眾點評網(wǎng)官方的評分的一致性較高,且該模型弱化了主觀初值對評分結果的影響,體現(xiàn)了主觀排序的基礎作用。

    關鍵詞:

    多指標綜合評價;序關系分析;權重;主觀排序;主客觀評價結合

    中圖分類號:

    TP311

    文獻標志碼:A

    Abstract:

    Considering the issue of objective weight overwhelming subjective weight when the subjective weight and objective weight is inconsistent in multiindex evaluation problem, based on G1 method and the objective weighting method, an assembled weighting model combined with G1 method improved by composite power function was proposed. Firstly, an index system was built, and the subjective ranking and subjective initial vector were determined by G1 method. Thus, each objective index vector was calculated by objective weighting method. Secondly, without changing the ranking order, the comprehensive weights integrated with both subjective and objective components were obtained by utilizing composite power function. Lastly, comprehensive evaluation was calculated by using standardized values of indices and comprehensive weights. Merchants data crawled from Dianping.com was adopted for the experiments of comprehensive evaluation. The RootMeanSquare Error (RMSE) of the new model was 3.891, which is lower than the result of 8.818 obtained by the G1entropy weighting and the result of 4.752 obtained by the standard deviation improved G1. Meanwhile, the coverage rate obtained by the new model was better than the two baseline models as well. On the other hand, the comparison results performed by changing subjective initial vector and subjective ranking order showed that 英摘太長,這句可不要the RMSE obtained by changing subjective ranking order is 5.430, which is higher than the result of 1.17 that obtained by changing subjective initial vector. The experimental results demonstrate that the evaluation values obtained by the new model highly match with the counterparts given by the Dianping.com, and the model can significantly weaken the effect of initial subjective values, which reflects the fundamental status of the subjective ranking.

    英文關鍵詞Key words:

    multiindex comprehensive evaluation; rank correlation analysis; weight; subjective order; combination of subjective and objective evaluations

    0引言

    隨著電子商務的飛速發(fā)展,利用大量數(shù)據(jù)對商戶進行全面評價的系統(tǒng)被運用到了各類電商網(wǎng)站當中,對評價結果的準確性和合理性的要求也越來越高,精確合理地評價模型對電商網(wǎng)站發(fā)展和推廣有著重要的作用[1]。對商戶進行評價受到多種評價因素的影響,因此可以利用多指標綜合評價的理論建立評價模型。目前,國內外利用多指標綜合評價理論進行商戶評價的研究尚處于起步階段,需借鑒多指標綜合評價在其他領域的應用和研究。多指標綜合評價也叫作綜合評價,是指人們根據(jù)不同的評價目的,選擇相應的評價形式,據(jù)此選擇多個評價因素或者指標轉化為能反映評價對象總體特征的信息[2]。怎樣進行科學、合理的評價是綜合評價的核心問題。在多指標綜合評價中,指標的選擇、權重的確定和評價模型的選擇將直接影響評價結果的合理性[3]。賦權方法通常分為主觀賦權法、客觀賦權法和主客觀組合賦權法。利用主觀的層次分析法(Analytic Hierarchy Process, AHP)與客觀賦權法進行結合是目前國內外應用較為普遍的組合賦權方法,例如AHP和熵權法結合的方法已經(jīng)被廣泛使用[4]。在國際上,利用各種方法修正和改進AHP被運用到了各個領域的綜合評價當中。Rodriguez等[5]提出了利用模糊推理系統(tǒng)改進模糊層次分析法的方法,用于信息技術項目的風險評估;Oztaysi[6]利用灰色系統(tǒng)理論和TOPSIS(Technique for Order Preference by Similarity to an Ideal Solution)法改進AHP,用于信息系統(tǒng)的決策和綜合評價;Sivakumar等[7]利用Taguchi損失函數(shù)修正AHP進行采礦業(yè)外包供應商的綜合評價。在國內,王學軍等[8]提出了序關系分析法(Rank Correlation Analysis,也被稱為G1法),解決了AHP法中構造判斷矩陣很難達到一致性的難題。李剛等[9]提出了基于標準差修正G1組合賦權的方法(improved G1 by Standard Deviation, SDG1),利用標準差確定指標的重要性之比,解決了相鄰指標重要性之比人為主觀確定的問題;但該方法沒能解決主客觀權重相悖時客觀權重淹沒主觀權重的問題:當相鄰指標的標準差比值與主觀排序相反時,會判斷兩個指標同等重要、權重相等;當標準差比值過大時,會使得修正后比值過大,往往與實際情況不符。本文以大眾點評網(wǎng)的商戶為例進行綜合評價,提出了復合冪函數(shù)修正G1(G1 method improved by Composite Power function, CPG1)法,以解決主客觀權重相悖時客觀權重淹沒主觀權重的問題,并為商戶綜合評價提供一種合適的方法。

    1點評網(wǎng)商戶綜合評價指標體系

    合理的綜合評價指標體系是實施綜合評價的基礎[3]。點評網(wǎng)商戶的部分指標之間具有不同的性質,反映不同性質的指標之間往往難以進行合適的比較,因此指標體系應選用層次結構。將總的評價目標根據(jù)不同性質分為不同的部分,并逐步細分,構建層次結構,將反映類似性質的指標劃入同一部分。此外,還利用了皮爾森系數(shù)在關聯(lián)性和方向性上對指標進行檢測,保證各指標和最終評價目標之間是相關的,并且與預期的方向一致,即預期為正相關的指標不能成負相關性[10]。根據(jù)以上要求最終構建的點評網(wǎng)商戶綜合評價指標體系如圖1所示。

    點評網(wǎng)商戶綜合評價指標體系總共分為五個層面的中級指標,每個中級指標又由各自的基礎指標構成。用戶評分層面由用戶評分基礎指標決定。商戶人氣層面由有效評論數(shù)基

    礎指標決定。商戶信譽層面,點評網(wǎng)用戶評論分為有效評論、默認評論、全部評論三類。在全部評論中通過一定的篩選原則選取更公正客觀、更有參考價值的評論作為默認評論,在默認評論中過濾掉違規(guī)評論等無效評論得到有效評論。因此,被過濾掉的商戶比例越大,商戶存在刷分、違規(guī)的可能性越大,商戶信譽也就越低。潛力指數(shù)層面由四個基礎指標決定。人均價格層面由人均價格基礎指標決定。

    2CPG1確定組合權重的原理

    權重的確定是綜合評價體系中重要的組成部分,不同的權重往往會使評價結果大相徑庭,影響評價結果的合理性以及客觀性。構權方法一般分為主觀賦權法、客觀賦權法和主客觀結合的組合賦權法。主觀賦權法通常需要賦予一定的初值,通過計算或者分析得到最終權重。雖然人為地對指標重要性排序往往符合實際情況,有一定專業(yè)性和合理性,但是初值的設定往往具有隨意性,而且容易受到人為偏好的影響;而客觀賦權法基于客觀數(shù)據(jù),通過一定的數(shù)學方法確定權重,雖然不依賴人的主觀判斷、避免了人為的偏見,但算出的權重往往會脫離實際,不能真實反映實際的需要和重要程度。

    通常來說,主觀確定各指標的重要性排序往往是合理的,但主觀賦予的初值往往是隨意和不可靠的[11]。復合冪函數(shù)修正G1法(CPG1)以G1法中用到的主觀排序為基礎,在不改變主觀排序的情況下利用客觀賦權法通過復合冪函數(shù)修正主觀賦予的初值,從而得到主客觀結合的組合權重。本文采用標準差法作為客觀賦權法,利用標準差的比值通過復合冪函數(shù)修正G1法確定權重。不同于通常使用的算數(shù)平均法、幾何平均法等確定組合權重的方法,該方法強調主觀對各指標進行排序的重要性,但又弱化了主觀設定的初值的作用;它在保證主觀排序不變的情況下,利用客觀數(shù)據(jù)對主觀初值進行修正,做到了主客觀結合,是一種新型的構權方法。

    2.1G1法原理

    G1法也叫序關系分析法,是對AHP的改進。AHP是解決多目標決策問題的常見方法,在綜合評價中利用AHP可以確定主觀權重,但在應用AHP解決實際問題的過程中常遇到判斷矩陣不能通過一致性檢驗而導致無法決策的問題[12]。而G1法無需進行判斷矩陣的一致性檢驗,計算量成倍減少。G1法需要對評價指標進行主觀排序,并設置主觀初始向量T,再通過計算得到各指標權重。

    G1法構造權重具體步驟[8]如下:

    1)設同一層次下有m個評價指標。若指標xi重要程度不弱于指標xj則記為xi≥xj。

    2)確定序關系。根據(jù)專家意見或評價需要對m個評價指標進行兩兩比較,按重要程度的遞減方式排序得到關系式:x1≥x2≥…≥xm。

    3)根據(jù)專家意見或評價需要主觀賦予相鄰評價指標xi與xi+1(i=1,2,…,m-1)的重要程度之比ti(ti≥1),得到主觀初始向量T={t1, t2,…,tm-1 }。

    4)設任意兩個指標xi和xj的重要性比值為rij,則:

    其中,xij表示第i個評價對象的第j個指標標準化后的值。利用指標標準差的比值反映指標的重要程度之比。

    2.3組合權重的確定

    主客觀結合的賦權法往往存在主客觀權重相悖時客觀權重淹沒主觀權重的情況,使得最終確定的組合權重值與實際情況相悖,甚至組合權重的排序與實際情況不符。而常用的組合權重合成方法如算術平均法、幾何平均法等不能有效地解決該問題。

    通常主觀確定各指標的重要性排序是合理可靠的,但主觀賦予的初值具有隨意性且不那么可靠,需要一種能夠不改變主觀排序的組合賦權方法。CPG1法確定權重,利用復合冪函數(shù)修正G1法中的初始向量T,并將修正后的初始向量T′代回G1法計算出組合權重。該方法能保證各指標主觀排序不變的情況下,利用指標標準差的比值對主觀初值進行合理的修正。

    CPG1法構造權重具體步驟如下:

    1)確定主觀排序:按照G1法主觀確定m個評價指標的重要程度排序x1≥x2≥…≥xm。

    2)確定主觀初始向量T:根據(jù)G1法主觀賦予相鄰評價指標xi與xi+1(i=1,2,…,m-1)的重要程度之比ti(ti≥1),得到主觀初始向量T={t1, t2,…,tm-1 }。

    3)確定客觀向量R:根據(jù)相鄰指標標準差的比值確定指標的客觀比值。設相鄰指標xi與xi+1(i=1,2,…,m-1)的標準差之比為ri:

    求出每一子層次的綜合評價值之后,再用加權求和評分法,便可得到商戶總的綜合評價值。

    3點評網(wǎng)商戶綜合評價實例分析

    3.1數(shù)據(jù)選擇和處理

    3.1.1原始數(shù)據(jù)選擇

    考慮到數(shù)據(jù)的完整性和合理性,本文以2014年大眾點評網(wǎng)北京站爬取的數(shù)據(jù)為基礎,從中選出評論數(shù)不小于10的火鍋行業(yè)數(shù)據(jù)作為原始數(shù)據(jù),共1645條。評論數(shù)限制為不小于10是為了過濾掉信息不完整的商戶的影響,限定為特定行業(yè)是因為特定行業(yè)的商戶才有可比性,不同行業(yè)商戶進行比較意義不大。原始數(shù)據(jù)片斷如表1所示。最后一列“點評網(wǎng)評分”是點評網(wǎng)對商戶進行官方評分的最終結果,用于跟本文算法得到的評分結果進行對比分析。官方評分中,5星商戶打50分,4星半商戶打45分,以此類推。

    3.1.2指標數(shù)據(jù)轉換

    根據(jù)點評網(wǎng)商戶綜合評價指標體系,將原始數(shù)據(jù)轉換為綜合評價指標體系所需的數(shù)據(jù),部分指標需要轉換和處理。

    3.1.4主觀排序和初值設定

    按照G1法的原理根據(jù)商戶綜合評價的評價需要和行業(yè)經(jīng)驗設定各指標的重要性排序。在中級指標層面:主觀評價≥商戶人氣≥商戶信譽≥潛力指數(shù)≥人均價格。商戶信譽層面:被過濾的默認評論≥被過濾的全部評論。潛力指數(shù)層面:收藏數(shù)≥瀏覽總數(shù)≥一周瀏覽數(shù)≥商圈是否熱門。

    在同一層次下比較兩兩相鄰的指標,主觀賦予重要性比值,得到主觀初始向量。設中級指標層面初始向量為T,商戶信譽層面初始向量為T1,潛力指數(shù)層面初始向量為T2。根據(jù)評價需要和行業(yè)經(jīng)驗,主觀初始向量設為:T={5,1.2,1.2,2},T1={1},T2={1.2,1.2,1.6}。

    沒有特別說明的情況下,本文的實驗都采用以上的主觀排序和主觀初始向量。

    3.2對比方法的選擇

    選擇傳統(tǒng)的G1熵權乘法合成構權方法(G1Entropy method,EG1)以及基于標準差修正G1組合賦權法(SDG1)這兩種方法作為對比方法。EG1法和SDG1法的數(shù)據(jù)選擇和處理參考3.1節(jié)的設定,并根據(jù)式(7)生成綜合評價值。

    3.2.1EG1法

    3.3重合率實驗

    設點評網(wǎng)商戶集合為X,X中任意一家商戶為x,點評網(wǎng)官方評分為y(x),其中0≤y(x)≤50。 設閾值為a,y(x)≥a的商戶有n家,而這n家商戶在CPG1法求得的結果中排名前n的商戶中占了m家,則重合率p=m/n。按照前文的設定進行實驗,實驗結果如圖3所示。

    圖3中,用戶評分曲線是指點評網(wǎng)官方評分與用戶評分(用戶評分的計算方法見3.1.2節(jié))之間的重合率。從圖3中

    可以看出,采用CPG1法比用戶評分有著更高的重合率,即CPG1法與官方評價結果更為接近,也就是說CPG1法構造的綜合評價模型比單純采用用戶評分為依據(jù)進行商戶評級更準確。EG1曲線是指EG1法算出的評分與用戶評分之間的重合率,由于存在主觀權重被客觀權重淹沒的問題,指標之間的主觀排序發(fā)生了改變,影響了最終結果,因此重合率比CPG1法低。SDG1曲線是指SDG1法算出的評分與用戶評分之間的重合率,可以看出SDG1法效果比CPG1法差。

    圖3中,當閾值a=40時,重合率大于0.8,說明官方評分四星級以上商戶在CPG1法求得的結果中往往也評分靠前,在一定程度上反映了模型的合理性。

    3.4均方根誤差實驗

    均方根誤差(Root Mean Square Error, RMSE)是衡量“平均誤差”的一種較方便的方法,用來衡量觀測值同真值之間的偏差。均方根誤差是均方誤差的算術平方根。設有n個觀測值,第i個觀測值與真值之間的誤差為di,則這組觀測值的均方根誤差為:

    Re=1n∑ni=1di2

    (16)

    以商戶點評網(wǎng)的官方評分作為真值,CPG1法求得的評分作為觀測值,計算均方根誤差,共1645家商戶求得均方根誤差Re=3.891。因為商戶評分是50分制的,RMSE值3.891的相對誤差3.891/50<1屬于可以接受的范圍,說明了模型具有一定的準確性。計算官方評分與EG1的均方根誤差,得Re=8.818,比CPG1法得到的均方根誤差大得多。計算官方評分與SDG1的均方根誤差,得Re=4.752,比EG1誤差小,但比CPG1法大。由于1645家商戶數(shù)量過多不便于作圖觀察,隨機比較50家商戶的官方評分、CPG1法評分、EG1法評分、SDG1法并作圖,如圖4所示。

    從圖4中可以看出各評分在總體趨勢上都很接近,而EG1法的評分與官方評分之間的差距最大。主要原因是EG1法存在主觀權重被客觀權重淹沒的問題,指標之間的主觀排序發(fā)生了改變,影響了評價效果。而SDG1法雖然保證了主觀排序不變,但在本例中存在相鄰指標標準差之比小于1的情況,求出的相鄰指標重要性相等,使得主觀排序的影響被弱化了。而CPG1法雖然相鄰指標標準差之比小于1,但由于復

    合冪函數(shù)的作用,使得重要性排序依然能較好地發(fā)揮作用,因此效果好于SDG1法。

    3.5主觀初始向量的實驗

    根據(jù)3.1.4節(jié)的設定,主觀初始向量為:T={5,1.2,12,2},T1 ={1},T2 ={1.2,1.2,1.6}。將主觀初始向量改為:T={1.2,1.8,2,1.2},T1 ={1.6},T2={2,1.4,1.8}。以修改前的初始向量算出的評分作為真值,修改后的初始向量求得的評分作為觀測值,計算均方根誤差,共1645家商戶求得均方根誤差Re= 1.170。隨機比較50家商戶主觀初始向量修改前的評分和修改后的評分并作圖,如圖5所示。從RMSE的結果和圖5結果可以看出,主觀初始向量的變化對結果的影響不大,說明CPG1法模型在主客觀結合的情況下弱化了主觀設定的初值的影響。

    3.6主觀排序的實驗

    根據(jù)3.1.4節(jié)的設定,中級指標層面主觀排序為:主觀評價≥商戶人氣≥商戶信譽≥潛力指數(shù)≥人均價格。將排序修改為:潛力指數(shù)≥商戶信譽≥商戶人氣≥主觀評價≥人均價格。以修改前的排序算出的評分作為真值,修改后的排序求得的評分作為觀測值,計算均方根誤差,共1645家商戶求得均方根誤差Re= 5.430,相對誤差5.430/50>1。隨機比較50家商戶主觀初始向量修改前的評分和修改后的評分并作圖,如圖6所示。

    從RMSE結果和圖6可以看出,修改主觀排序之后的評價結果與之前出入較大,修改主觀排序造成的影響比修改主觀初始向量造成的影響大很多,說明CPG1法模型在主客觀結合的情況下強化主觀排序的作用。從總體來說,修改主觀排序之后的結果與之前還是具有一致性,表明了CPG1模型具有一定的魯棒性,排序的改變不會對結果造成根本的改變。

    4結語

    1)采用CPG1法進行商戶的綜合評價與官方評價有著較

    高的重合率和一致性,驗證了方法的有效性和可行性。該方法做到了主觀與客觀的結合,在保證主觀排序不變的情況下,用客觀權重進行修正,避免了客觀權重與主觀權重相悖淹沒主觀權重的問題。該方法強調了主觀排序的重要性,弱化了主觀初值的作用。

    2)利用計算機可以在大量數(shù)據(jù)上進行快速批量的綜合評價,適用于需要強調主觀排序或主觀排序較為可靠的各類綜合評價問題。

    3)本文選用標準差賦權法作為客觀賦權法,也可以選用其他的客觀賦權法,具體效果有待進一步研究。

    4)該方法的前提是主觀排序較為可靠,不適用于主觀排序不可靠的情形。怎么保證主觀排序的可靠性以及在主觀排序不可靠的情形下該怎么改進需要進一步研究。

    參考文獻:

    [1]

    呂品,鐘珞,唐琨皓.在線產(chǎn)品評論用戶滿意度綜合評價研究[J].電子學報,2014,42(4):740-746.(LYU P, ZHONG L,TANG K H. Customer satisfaction degree evaluation of online product review [J]. Acta Electronica Sinica, 2014, 42(4): 740-746.)

    [2]

    李鵬,俞國燕.多指標綜合評價方法研究綜述[J].機電產(chǎn)品開發(fā)與創(chuàng)新,2009,22(4):24-25.(LI P,YU G Y. Survey on the multiindex comprehensive evaluation method [J]. Development and Innovation of Machinery and Electrical Products, 2009, 22(4): 24-25.)

    [3]

    HOU H, GUO Y, YI P, et al. The rationality of comprehensive evaluation and a holistic solution [C]// Proceedings of the 2011 International Conference on Business Management and Electronic Information. Piscataway, NJ: IEEE, 2011, 5: 172-176.

    [4]

    LI L, LIU F, LI C B. Customer satisfaction evaluation method for customized product development using entropy weight and analytic hierarchy process [J]. Computers and Industrial Engineering, 2014, 77(C): 80-87.

    [5]

    RODRGUEZ A, ORTEGA F, CONCEPCIN R. A method for the evaluation of risk in IT projects [J]. Expert Systems with Applications: An International Journal, 2016, 45(C): 273-285.

    [6]

    OZTAYSI B. A decision model for information technology selection using AHP integrated TOPSISGrey: the case of content management systems [J]. KnowledgeBased Systems, 2014, 70(C): 44-54.

    [7]

    SIVAKUMAR R, KANNAN D, MURUGESAN P. Green vendor evaluation and selection using AHP and Taguchi loss functions in production outsourcing in mining industry [J]. Resources Policy, 2015, 46: 64-75.

    [8]

    王學軍,郭亞軍,蘭天.構造一致性判斷矩陣的序關系分析法[J].東北大學學報(自然科學版),2006,27(1):115-118.(WANG X J, GUO Y J, LAN T. Rank correlation analysis of formation of consistent judgment matrix [J]. Journal of Northeastern University (Natural Science), 2006, 27(1): 115-118.)

    [9]

    李剛,張明,宋兆杰,等.基于標準差修正G1組合賦權的科技評價模型及實證[J].科技管理研究,2011,31(20): 47-50.(LI G, ZHANG M, SONG Z J, et al. The science and technology evaluation model based on revised G1 by standard deviation and empirical research [J]. Science and Technology Management Research, 2011, 31(20): 47-50.)

    [10]

    PJ Benesty,J Chen,Y Huang, et al. Pearson correlation coefficient [J]. Noise Reduction in Speech Processing, 2009, 2: 1-4.

    BENESTY PJ, CHEN J, HUANG Y, et al. Pearson correlation coefficient [C]// Noise Reduction in Speech Processing, Springer Topics in Signal Processing 2. Berlin: Springer, 2009: 1-4.

    [11]

    秦志斌,錢國平,馬文彬.基于熵權的瀝青路面使用性能多目標綜合評價[J].中南大學學報(自然科學版),2013,44(8):3474-3478.(QIN Z B, QIAN G P, MA W B. Multiobjective comprehensive evaluation for performance of asphalt concrete pavement based on fuzzy entropy [J]. Journal of Central South University (Science and Technology), 2013, 44(8): 3474-3478.)

    [12]

    DONG Q, COOPER O. A peertopeer dynamic adaptive consensus reaching model for the group AHP decision making [J]. SSRN Electronic Journal, 2014, 250(2): 521-530.

    [13]

    寧寶權,彭望書,郭樹勤,等.基于動態(tài)組合賦權的農(nóng)業(yè)機械綜合評價研究[J].農(nóng)機化研究,2015(7):79-82.(NING B Q, PENG W S, GUO S Q, et al. Research on comprehensive evaluation of agricultural machinery based on dynamic combination weighting [J]. Journal of Agricultural Mechanization Research, 2015(7): 79-82.)

    猜你喜歡
    賦權商戶排序
    論鄉(xiāng)村治理的有效賦權——以A縣扶貧項目為例
    中國西部(2022年2期)2022-05-23 13:28:20
    排序不等式
    企業(yè)數(shù)據(jù)賦權保護的反思與求解
    南大法學(2021年6期)2021-04-19 12:27:30
    恐怖排序
    試論新媒體賦權
    活力(2019年15期)2019-09-25 07:22:12
    節(jié)日排序
    江蘇贛榆農(nóng)商行 上線商戶回訪管理系統(tǒng)
    金融周刊(2018年13期)2018-12-26 09:09:38
    “543”工作法構建黨建共同體
    基于改進AHP熵博弈賦權的輸變電工程評價
    測控技術(2018年6期)2018-11-25 09:50:24
    刻舟求劍
    兒童繪本(2018年5期)2018-04-12 16:45:32
    国产高清激情床上av| 国产精品国产三级国产av玫瑰| 国产高清不卡午夜福利| 晚上一个人看的免费电影| а√天堂www在线а√下载| 成人三级黄色视频| 日韩国内少妇激情av| 秋霞在线观看毛片| 一级毛片久久久久久久久女| 亚洲成人中文字幕在线播放| 少妇熟女aⅴ在线视频| 中文字幕制服av| av卡一久久| 国产精品人妻久久久影院| 天天躁夜夜躁狠狠久久av| 午夜视频国产福利| 中文字幕制服av| 亚洲欧美清纯卡通| 长腿黑丝高跟| 精品人妻偷拍中文字幕| 欧美日本视频| 内地一区二区视频在线| 日韩高清综合在线| 亚洲一级一片aⅴ在线观看| 日本黄大片高清| 一本一本综合久久| 噜噜噜噜噜久久久久久91| 免费观看人在逋| 国产老妇伦熟女老妇高清| 人妻少妇偷人精品九色| 精品无人区乱码1区二区| 精品日产1卡2卡| 成人欧美大片| 黄色一级大片看看| 男人舔奶头视频| ponron亚洲| 此物有八面人人有两片| 亚洲自拍偷在线| 有码 亚洲区| 欧美性猛交黑人性爽| 我的女老师完整版在线观看| 国产精品一及| 在线观看av片永久免费下载| 中文字幕av成人在线电影| 久久热精品热| 三级经典国产精品| 级片在线观看| 九色成人免费人妻av| 久久这里只有精品中国| 亚洲欧洲国产日韩| 亚洲一区二区三区色噜噜| 亚洲最大成人中文| 黄色一级大片看看| 国产麻豆成人av免费视频| 精品人妻偷拍中文字幕| a级一级毛片免费在线观看| 一本久久精品| 成人特级av手机在线观看| 人妻夜夜爽99麻豆av| 久久这里有精品视频免费| 又爽又黄无遮挡网站| 午夜亚洲福利在线播放| 我的女老师完整版在线观看| 国产三级中文精品| 国产精品国产三级国产av玫瑰| 一个人免费在线观看电影| 国产淫片久久久久久久久| 美女高潮的动态| 亚洲无线观看免费| 精品一区二区三区人妻视频| 波多野结衣高清作品| 亚洲欧美日韩卡通动漫| 晚上一个人看的免费电影| 免费一级毛片在线播放高清视频| 99久久久亚洲精品蜜臀av| 一区福利在线观看| 一级毛片电影观看 | 久久精品国产清高在天天线| 日韩成人av中文字幕在线观看| 毛片女人毛片| 国产综合懂色| 九草在线视频观看| 久久欧美精品欧美久久欧美| 国产精品久久久久久精品电影| 好男人视频免费观看在线| 国产69精品久久久久777片| 国内精品久久久久精免费| 国内精品美女久久久久久| 久久亚洲精品不卡| 久久久精品欧美日韩精品| 麻豆乱淫一区二区| 国产成人a区在线观看| av.在线天堂| 亚洲自拍偷在线| 村上凉子中文字幕在线| 在线观看美女被高潮喷水网站| 干丝袜人妻中文字幕| 欧美高清成人免费视频www| 日产精品乱码卡一卡2卡三| 18禁黄网站禁片免费观看直播| 国产高清有码在线观看视频| 午夜激情福利司机影院| 看片在线看免费视频| 中文亚洲av片在线观看爽| 又粗又爽又猛毛片免费看| 狂野欧美激情性xxxx在线观看| 男人和女人高潮做爰伦理| 直男gayav资源| 国产精品乱码一区二三区的特点| 美女大奶头视频| 综合色av麻豆| 久久久国产成人免费| 久久精品国产鲁丝片午夜精品| 国产老妇女一区| 国产极品精品免费视频能看的| 国产日韩欧美在线精品| 亚洲乱码一区二区免费版| 网址你懂的国产日韩在线| 黄色日韩在线| 色综合色国产| 天堂av国产一区二区熟女人妻| 国产久久久一区二区三区| 一区二区三区免费毛片| av免费观看日本| 色5月婷婷丁香| 亚洲欧美精品综合久久99| 国产精华一区二区三区| 国产av不卡久久| 国产一区二区在线观看日韩| 亚洲精品亚洲一区二区| 国产成人一区二区在线| 久久久久久久亚洲中文字幕| 免费人成在线观看视频色| 国产爱豆传媒在线观看| 国产一区亚洲一区在线观看| 国产精品人妻久久久影院| 成人av在线播放网站| 久久久久久久亚洲中文字幕| av天堂中文字幕网| 国产精品av视频在线免费观看| 欧美激情在线99| 免费看日本二区| 91精品一卡2卡3卡4卡| 久久久久久九九精品二区国产| 国产精品国产三级国产av玫瑰| 亚洲高清免费不卡视频| 亚洲av电影不卡..在线观看| 久久久久久久久久成人| 国产精品久久久久久亚洲av鲁大| 99在线人妻在线中文字幕| 免费观看的影片在线观看| 中文字幕人妻熟人妻熟丝袜美| 色综合色国产| 婷婷色综合大香蕉| 国产精品精品国产色婷婷| 99热6这里只有精品| 免费一级毛片在线播放高清视频| 我的老师免费观看完整版| 免费不卡的大黄色大毛片视频在线观看 | 99久久精品国产国产毛片| 免费黄网站久久成人精品| 夫妻性生交免费视频一级片| 午夜a级毛片| 成人午夜高清在线视频| 亚洲精品456在线播放app| 国产伦在线观看视频一区| 久久99精品国语久久久| 午夜a级毛片| 国产黄片视频在线免费观看| 麻豆乱淫一区二区| 在线国产一区二区在线| 22中文网久久字幕| 国产成人福利小说| 久久精品夜色国产| 国产精品人妻久久久久久| 欧美+亚洲+日韩+国产| 亚洲精品粉嫩美女一区| 亚洲四区av| 国产高清三级在线| 欧美区成人在线视频| 最好的美女福利视频网| 91久久精品国产一区二区成人| 欧美另类亚洲清纯唯美| 亚洲国产精品合色在线| 免费观看a级毛片全部| 美女黄网站色视频| 男人和女人高潮做爰伦理| 观看免费一级毛片| 精品人妻偷拍中文字幕| 久久久久久大精品| 国产黄色视频一区二区在线观看 | 欧美激情久久久久久爽电影| 深夜a级毛片| 91在线精品国自产拍蜜月| 色尼玛亚洲综合影院| 99视频精品全部免费 在线| 99热网站在线观看| videossex国产| 精品人妻一区二区三区麻豆| 亚洲国产高清在线一区二区三| 亚洲av.av天堂| 亚洲国产精品成人综合色| 国产91av在线免费观看| 网址你懂的国产日韩在线| 国产精品av视频在线免费观看| av卡一久久| 高清在线视频一区二区三区 | 黄色日韩在线| 国产精品久久久久久精品电影| 午夜老司机福利剧场| 直男gayav资源| 99视频精品全部免费 在线| 热99在线观看视频| 一个人免费在线观看电影| 国产一级毛片在线| 看免费成人av毛片| 我的老师免费观看完整版| 床上黄色一级片| 亚洲国产精品成人久久小说 | 国产亚洲91精品色在线| 精品久久久久久久末码| 中文字幕人妻熟人妻熟丝袜美| 你懂的网址亚洲精品在线观看 | 精品国产三级普通话版| 亚洲婷婷狠狠爱综合网| 99久久成人亚洲精品观看| 亚洲人成网站在线播放欧美日韩| 亚州av有码| 给我免费播放毛片高清在线观看| 亚洲三级黄色毛片| 欧美一区二区精品小视频在线| 亚洲精品粉嫩美女一区| 在线免费观看不下载黄p国产| 欧美高清成人免费视频www| 亚洲乱码一区二区免费版| 日本爱情动作片www.在线观看| 成人亚洲精品av一区二区| 亚洲色图av天堂| 国产精品一及| 亚洲av免费高清在线观看| 99精品在免费线老司机午夜| 国产精品久久久久久亚洲av鲁大| 青青草视频在线视频观看| 久久99热6这里只有精品| 亚洲无线观看免费| 日本色播在线视频| 两个人视频免费观看高清| 亚洲人成网站在线播| .国产精品久久| 亚洲综合色惰| 男插女下体视频免费在线播放| 成人美女网站在线观看视频| av在线蜜桃| 91久久精品国产一区二区三区| 亚洲成a人片在线一区二区| 国产欧美日韩精品一区二区| 久久99精品国语久久久| 岛国在线免费视频观看| 中出人妻视频一区二区| .国产精品久久| 日韩三级伦理在线观看| 亚洲欧美中文字幕日韩二区| 中文资源天堂在线| 少妇丰满av| 国产成人影院久久av| 国产探花在线观看一区二区| 国产精品福利在线免费观看| 岛国在线免费视频观看| 观看免费一级毛片| 久久久久久九九精品二区国产| 毛片一级片免费看久久久久| 久久久久久久久中文| 一本—道久久a久久精品蜜桃钙片 精品乱码久久久久久99久播 | 看免费成人av毛片| 色综合站精品国产| 老师上课跳d突然被开到最大视频| 国产午夜精品久久久久久一区二区三区| 亚洲精品国产av成人精品| 久久久久久久久久成人| 精品久久久久久久久av| 欧美极品一区二区三区四区| 神马国产精品三级电影在线观看| 久久久久九九精品影院| 国内精品一区二区在线观看| 久久久久久大精品| 成人美女网站在线观看视频| 成人国产麻豆网| 一本一本综合久久| 亚洲国产日韩欧美精品在线观看| 久久久午夜欧美精品| 日日干狠狠操夜夜爽| 尤物成人国产欧美一区二区三区| 国产女主播在线喷水免费视频网站 | 色吧在线观看| 日韩 亚洲 欧美在线| 麻豆成人av视频| 99久久精品热视频| 乱系列少妇在线播放| 搞女人的毛片| 99久久中文字幕三级久久日本| 国产麻豆成人av免费视频| 日韩国内少妇激情av| 日日撸夜夜添| 少妇人妻精品综合一区二区 | 亚洲成人av在线免费| 国产黄a三级三级三级人| 成人鲁丝片一二三区免费| 国产老妇女一区| 亚洲国产欧美人成| 午夜精品国产一区二区电影 | 日本免费一区二区三区高清不卡| 一夜夜www| 国产亚洲av片在线观看秒播厂 | 日本免费a在线| 亚洲精品乱码久久久v下载方式| 我的老师免费观看完整版| 天美传媒精品一区二区| 99热这里只有是精品50| 国产午夜精品久久久久久一区二区三区| 一边摸一边抽搐一进一小说| 欧美高清成人免费视频www| 搡女人真爽免费视频火全软件| 国产真实乱freesex| 国产精品乱码一区二三区的特点| 精品午夜福利在线看| 国产视频内射| 内射极品少妇av片p| 国产蜜桃级精品一区二区三区| 麻豆成人午夜福利视频| 人妻制服诱惑在线中文字幕| 波多野结衣高清作品| 国产单亲对白刺激| 中文亚洲av片在线观看爽| 噜噜噜噜噜久久久久久91| 别揉我奶头 嗯啊视频| 精品人妻偷拍中文字幕| 国产高清有码在线观看视频| 联通29元200g的流量卡| av免费观看日本| 亚州av有码| 国产单亲对白刺激| 中文亚洲av片在线观看爽| 久久久精品94久久精品| 精品无人区乱码1区二区| 日本成人三级电影网站| 久久婷婷人人爽人人干人人爱| 人妻久久中文字幕网| 91久久精品电影网| а√天堂www在线а√下载| 99久久精品一区二区三区| 日韩精品有码人妻一区| 亚洲五月天丁香| 天堂网av新在线| 大型黄色视频在线免费观看| 亚洲va在线va天堂va国产| 欧美日韩国产亚洲二区| 五月玫瑰六月丁香| 午夜福利成人在线免费观看| 国产乱人视频| 在线观看午夜福利视频| 中国美白少妇内射xxxbb| 99久久中文字幕三级久久日本| 久久精品久久久久久久性| 国产极品精品免费视频能看的| 搡老妇女老女人老熟妇| 国产高清三级在线| 亚洲精品久久久久久婷婷小说 | 人妻制服诱惑在线中文字幕| 亚洲熟妇中文字幕五十中出| 中文字幕免费在线视频6| 久久热精品热| 一边摸一边抽搐一进一小说| 91狼人影院| 国产黄a三级三级三级人| 99久久人妻综合| 3wmmmm亚洲av在线观看| 青春草国产在线视频 | 综合色丁香网| 特级一级黄色大片| 偷拍熟女少妇极品色| 91狼人影院| 国产精品精品国产色婷婷| 国产在线男女| 丰满乱子伦码专区| 麻豆一二三区av精品| 欧美日韩在线观看h| 99久久无色码亚洲精品果冻| 午夜免费男女啪啪视频观看| 深夜精品福利| 蜜桃久久精品国产亚洲av| 日产精品乱码卡一卡2卡三| 免费观看人在逋| 青春草国产在线视频 | 在线观看免费视频日本深夜| 搡女人真爽免费视频火全软件| 女人十人毛片免费观看3o分钟| 久久精品久久久久久久性| 中文字幕久久专区| 1000部很黄的大片| 中文精品一卡2卡3卡4更新| 人妻少妇偷人精品九色| 欧美变态另类bdsm刘玥| 日日啪夜夜撸| 亚洲av第一区精品v没综合| 久久午夜亚洲精品久久| 午夜精品一区二区三区免费看| 亚洲成人久久性| 亚洲欧美日韩卡通动漫| 国产伦精品一区二区三区四那| 国内少妇人妻偷人精品xxx网站| 综合色丁香网| 日韩成人伦理影院| 深爱激情五月婷婷| 国产免费男女视频| 欧美zozozo另类| 色综合色国产| 一边摸一边抽搐一进一小说| 日本黄色视频三级网站网址| 亚洲四区av| 一区二区三区高清视频在线| 久久精品夜色国产| 欧美又色又爽又黄视频| 又爽又黄无遮挡网站| 五月伊人婷婷丁香| 亚洲国产精品久久男人天堂| 免费av毛片视频| 国产在视频线在精品| 国产成年人精品一区二区| 大又大粗又爽又黄少妇毛片口| 国产黄a三级三级三级人| 欧美变态另类bdsm刘玥| 偷拍熟女少妇极品色| 国产成人freesex在线| 卡戴珊不雅视频在线播放| 国产黄片美女视频| 亚洲精品国产av成人精品| 身体一侧抽搐| 欧美xxxx性猛交bbbb| 日本与韩国留学比较| 国产精品蜜桃在线观看 | 亚洲av免费高清在线观看| 久久久久久九九精品二区国产| 99热6这里只有精品| 精品人妻视频免费看| 99热这里只有精品一区| 免费电影在线观看免费观看| 国产探花在线观看一区二区| 淫秽高清视频在线观看| 麻豆成人av视频| 91久久精品国产一区二区成人| 在线观看66精品国产| 日本欧美国产在线视频| 亚洲精品亚洲一区二区| 女人被狂操c到高潮| 欧美bdsm另类| 亚洲美女搞黄在线观看| 日韩三级伦理在线观看| 少妇的逼水好多| 青春草亚洲视频在线观看| 亚洲国产精品合色在线| 一本久久中文字幕| 12—13女人毛片做爰片一| 久久精品国产亚洲网站| 看非洲黑人一级黄片| 精品久久久久久久久久久久久| 亚洲自偷自拍三级| 国产成人午夜福利电影在线观看| 91在线精品国自产拍蜜月| 欧美日本视频| 亚洲av第一区精品v没综合| av福利片在线观看| 成人av在线播放网站| 久久99精品国语久久久| 亚洲图色成人| 长腿黑丝高跟| 欧美激情国产日韩精品一区| 亚洲精品久久国产高清桃花| 天天躁夜夜躁狠狠久久av| 性欧美人与动物交配| 久久亚洲精品不卡| 精品国内亚洲2022精品成人| 欧美日韩乱码在线| 中文亚洲av片在线观看爽| 国产人妻一区二区三区在| 中文欧美无线码| 亚洲精品乱码久久久v下载方式| 国产精品人妻久久久影院| 97超碰精品成人国产| 欧美在线一区亚洲| 国产免费一级a男人的天堂| 亚洲成a人片在线一区二区| 一区福利在线观看| 久久精品影院6| 在线国产一区二区在线| 色播亚洲综合网| 国内精品美女久久久久久| 人妻系列 视频| 一区福利在线观看| 99精品在免费线老司机午夜| 搡老妇女老女人老熟妇| 免费观看在线日韩| 色视频www国产| 草草在线视频免费看| 联通29元200g的流量卡| 日本爱情动作片www.在线观看| 九九在线视频观看精品| 午夜爱爱视频在线播放| 国产一区二区三区av在线 | 国产精品三级大全| 欧美激情久久久久久爽电影| 1024手机看黄色片| 日本色播在线视频| 国产精品麻豆人妻色哟哟久久 | 丰满人妻一区二区三区视频av| 赤兔流量卡办理| 亚洲国产精品成人综合色| 国产精品一区二区性色av| 干丝袜人妻中文字幕| 久久久久久伊人网av| 欧美变态另类bdsm刘玥| 国产精品久久久久久av不卡| 亚洲中文字幕一区二区三区有码在线看| 亚洲成人久久爱视频| 免费观看a级毛片全部| 久久久久久久亚洲中文字幕| 激情 狠狠 欧美| 三级经典国产精品| 最近2019中文字幕mv第一页| 亚洲欧洲国产日韩| 免费观看精品视频网站| 国产高清有码在线观看视频| 三级国产精品欧美在线观看| 国产单亲对白刺激| 国产精品一区二区三区四区久久| 国产免费男女视频| 久久久色成人| 欧美日本亚洲视频在线播放| 国产av一区在线观看免费| 久久精品综合一区二区三区| 白带黄色成豆腐渣| 国产精品一区www在线观看| 日韩中字成人| 免费人成在线观看视频色| 岛国在线免费视频观看| 国产高潮美女av| 中文字幕制服av| 变态另类丝袜制服| 欧美日韩国产亚洲二区| 禁无遮挡网站| 成人三级黄色视频| 精品久久久久久久久久免费视频| 免费大片18禁| 精品熟女少妇av免费看| 久久草成人影院| 久久人人爽人人爽人人片va| 国产精品国产高清国产av| 一本一本综合久久| 黄片wwwwww| 啦啦啦韩国在线观看视频| 91在线精品国自产拍蜜月| 亚洲成人久久性| 精品99又大又爽又粗少妇毛片| 国产精品三级大全| 波野结衣二区三区在线| 免费在线观看成人毛片| 国产精品免费一区二区三区在线| 色5月婷婷丁香| 给我免费播放毛片高清在线观看| 日本色播在线视频| 国产精品电影一区二区三区| 毛片一级片免费看久久久久| 日日啪夜夜撸| 国产亚洲av片在线观看秒播厂 | 91aial.com中文字幕在线观看| 国产色爽女视频免费观看| 少妇裸体淫交视频免费看高清| 亚洲一区二区三区色噜噜| 老司机福利观看| 男女边吃奶边做爰视频| 在线a可以看的网站| 99热这里只有是精品在线观看| 日韩三级伦理在线观看| 亚洲国产精品合色在线| 狂野欧美白嫩少妇大欣赏| 亚洲av男天堂| 麻豆成人av视频| 禁无遮挡网站| eeuss影院久久| 赤兔流量卡办理| 一本久久中文字幕| 亚洲成人中文字幕在线播放| 国产伦精品一区二区三区四那| 欧美xxxx黑人xx丫x性爽| 日产精品乱码卡一卡2卡三| 日本一本二区三区精品| 亚洲av熟女| 亚洲精品亚洲一区二区| 最近最新中文字幕大全电影3| 一夜夜www| 在线观看av片永久免费下载| 成熟少妇高潮喷水视频| 淫秽高清视频在线观看| 亚洲电影在线观看av| 亚洲av电影不卡..在线观看| 综合色av麻豆| 亚洲第一区二区三区不卡| 精品日产1卡2卡| 日韩强制内射视频| 永久网站在线| 高清毛片免费看| 免费看美女性在线毛片视频| 国产高潮美女av| 中文字幕人妻熟人妻熟丝袜美| 一个人免费在线观看电影| 国内少妇人妻偷人精品xxx网站|