• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    新集成IT系統(tǒng)在線運(yùn)行評價(jià)系統(tǒng)的研究

    2012-08-10 03:42:02朱治國吳連勇
    電信科學(xué) 2012年12期
    關(guān)鍵詞:診斷法故障評價(jià)

    朱治國,吳連勇,孫 毅

    (中國聯(lián)合網(wǎng)絡(luò)通信集團(tuán)有限公司 北京 100033)

    1 研究背景

    IT系統(tǒng)業(yè)務(wù)質(zhì)量的評價(jià)不是單純的主觀評價(jià),它不單依賴于顧客的感知,還有很多客觀的評價(jià)指標(biāo)。業(yè)務(wù)質(zhì)量評價(jià)不但要考慮業(yè)務(wù)的整體效率性能,還要考慮用戶對服務(wù)質(zhì)量的要求。傳統(tǒng)IT運(yùn)行評價(jià)體系存在諸多問題。

    首先,傳統(tǒng)IT運(yùn)行評價(jià)體系不能全面反映客戶體驗(yàn)。質(zhì)量指標(biāo)體系局限于設(shè)備和系統(tǒng)范疇,難以全面反映業(yè)務(wù)端到端的運(yùn)行質(zhì)量和客戶實(shí)際使用感知。傳統(tǒng)網(wǎng)絡(luò)質(zhì)量指標(biāo)與用戶投訴之間存在著明顯的不一致或反向關(guān)聯(lián),通過提高傳統(tǒng)網(wǎng)絡(luò)質(zhì)量評價(jià)指標(biāo)來提升客戶滿意度效果不是十分明顯。

    第二,傳統(tǒng)IT運(yùn)行評價(jià)體系不適應(yīng)數(shù)據(jù)業(yè)務(wù)快速發(fā)展的需要。隨著數(shù)據(jù)業(yè)務(wù)在總業(yè)務(wù)收入中的比重越來越大,由于數(shù)據(jù)業(yè)務(wù)相對于傳統(tǒng)話音業(yè)務(wù)具有種類多、變化快、涉及的網(wǎng)元多、用戶行為復(fù)雜及顯著的時(shí)間突發(fā)性、空間聚集性等特點(diǎn),用傳統(tǒng)的網(wǎng)絡(luò)維護(hù)手段維護(hù)數(shù)據(jù)業(yè)務(wù)網(wǎng)絡(luò)很難達(dá)到令人滿意的結(jié)果。

    可見,傳統(tǒng)的質(zhì)量評價(jià)方法只能反映網(wǎng)絡(luò)或設(shè)備的性能,不能兼顧客戶體驗(yàn)和反映所承載業(yè)務(wù)的質(zhì)量。隨著多QoS等級的增值業(yè)務(wù)的涌現(xiàn),為了滿足所有業(yè)務(wù)的質(zhì)量評價(jià)需求,需要提出通用的業(yè)務(wù)質(zhì)量評價(jià)方法。實(shí)現(xiàn)實(shí)時(shí)、細(xì)粒度、動態(tài)、自動化和可擴(kuò)展的定量業(yè)務(wù)質(zhì)量評價(jià),盡快建立適應(yīng)我國IT運(yùn)維服務(wù)市場需求的IT系統(tǒng)運(yùn)行評價(jià)體系成為迫在眉睫的需求。因此,建立IT運(yùn)維質(zhì)量的運(yùn)行評價(jià)系統(tǒng),有助于第一時(shí)間掌握IT系統(tǒng)的運(yùn)行情況,為運(yùn)維管理提供依據(jù),保證業(yè)務(wù)系統(tǒng)的安全穩(wěn)定運(yùn)行,給企業(yè)的發(fā)展帶來巨大的經(jīng)濟(jì)效益。

    2 系統(tǒng)總體目標(biāo)及設(shè)計(jì)原則

    2.1 總體目標(biāo)

    IT系統(tǒng)在現(xiàn)運(yùn)行評價(jià)系統(tǒng)對業(yè)務(wù)質(zhì)量評估的主要目標(biāo)是利用主觀、客觀或主客觀結(jié)合的方法,對現(xiàn)有的業(yè)務(wù)質(zhì)量進(jìn)行評估,得出業(yè)務(wù)質(zhì)量好壞的評估結(jié)論。

    (1)運(yùn)維管理評價(jià)要整合多種安全技術(shù)

    運(yùn)維管理評價(jià)過程中要用到多種技術(shù)手段,如入侵檢測、系統(tǒng)審計(jì)等,需要更好地將這些技術(shù)整合到一起,提供綜合性的風(fēng)險(xiǎn)分析工具。

    (2)運(yùn)維管理評價(jià)結(jié)果要具有預(yù)測性

    運(yùn)維管理評價(jià)要在狀態(tài)分析、趨勢分析和性能分析方面具有更好的預(yù)見性。

    (3)運(yùn)維管理評價(jià)方法要逐步向智能化的決策支持系統(tǒng)發(fā)展

    運(yùn)維管理評價(jià)不是單純地按照定制的控制措施為用戶提供解決方案,而是根據(jù)專家經(jīng)驗(yàn),進(jìn)行推理分析后給出最佳的、具有創(chuàng)新性質(zhì)的控制方法,能夠?yàn)槠胀ㄓ脩粼诿鎸Ω鞣N安全事故時(shí)提供專家級的解決方案。

    (4)向定量化方向發(fā)展

    目前運(yùn)維管理評價(jià)的量化主要對性能重要性和風(fēng)險(xiǎn)大小等進(jìn)行排序,提示用戶重大風(fēng)險(xiǎn)需要首先處理,但對系統(tǒng)性能水平和運(yùn)維風(fēng)險(xiǎn)會帶來多大的經(jīng)濟(jì)損失尚不能量化,而管理人員所關(guān)心的正是經(jīng)濟(jì)損失的問題。因此,運(yùn)維管理評價(jià)方法應(yīng)向定量化的風(fēng)險(xiǎn)預(yù)測方向發(fā)展。

    2.2 設(shè)計(jì)原則

    2.2.1 性能指標(biāo)

    服務(wù)響應(yīng)能力可以通過服務(wù)響應(yīng)異常判斷規(guī)則 (8個規(guī)則)、服務(wù)響應(yīng)穩(wěn)定性判斷 (極差圖)、Cp(capability of precision)(服務(wù)響應(yīng)過程精密度指數(shù))、Ca(capability of accuracy)(服務(wù)響應(yīng)過程準(zhǔn)確度)進(jìn)行精確量化。

    系統(tǒng)吞吐能力可以通過趨勢圖進(jìn)行對比分析和趨勢預(yù)測。

    服務(wù)可用性可以通過Ppk(服務(wù)過程性能指數(shù))、1-P圖(服務(wù)可用率控制圖)進(jìn)行量化和評價(jià)。

    系統(tǒng)持續(xù)運(yùn)行能力通過Cpk(持續(xù)運(yùn)行過程能力指數(shù))進(jìn)行量化和評估。

    系統(tǒng)故障診斷和恢復(fù)能力通過Pareto圖分析法、散布圖因果分析法、業(yè)務(wù)流程診斷法、探測驗(yàn)證診斷法、關(guān)聯(lián)分析診斷法、業(yè)務(wù)仿真診斷法等多種方法進(jìn)行問題原因分析、故障診斷和恢復(fù)。

    2.2.2 主要設(shè)計(jì)原則

    IT系統(tǒng)在線運(yùn)行評價(jià)系統(tǒng)的主要設(shè)計(jì)原則如下。

    (1)科學(xué)、準(zhǔn)確的IT系統(tǒng)運(yùn)行狀態(tài)和運(yùn)行能力評價(jià)

    系統(tǒng)可提供多種性能評測指標(biāo),全面評測系統(tǒng)的運(yùn)行能力和服務(wù)質(zhì)量。針對不同的評測指標(biāo),給出不同的、具有完全針對性的評測方法,提供基于數(shù)值的、定量的評測方法;能夠根據(jù)客戶評價(jià)需求,動態(tài)調(diào)節(jié)業(yè)務(wù)質(zhì)量評價(jià)參數(shù),具有良好的靈活性;可以實(shí)現(xiàn)多種粒度的質(zhì)量評價(jià);具有良好的擴(kuò)展性。對于新業(yè)務(wù)類型的出現(xiàn),用戶只要定義該業(yè)務(wù)的KQI模板和業(yè)務(wù)質(zhì)量評價(jià)模板就能進(jìn)行新業(yè)務(wù)類型的質(zhì)量評價(jià)。

    (2)消除系統(tǒng)潛在隱患,準(zhǔn)確評估IT系統(tǒng)運(yùn)行風(fēng)險(xiǎn)度

    系統(tǒng)評估系統(tǒng)的運(yùn)行狀態(tài),判斷系統(tǒng)運(yùn)行是否存在異常,評估當(dāng)前IT系統(tǒng)的運(yùn)行風(fēng)險(xiǎn)度,能夠根據(jù)問題和故障事件發(fā)生的頻度、系統(tǒng)的健康度、薄弱環(huán)節(jié)的綜合影響度,得出當(dāng)前IT系統(tǒng)的運(yùn)行風(fēng)險(xiǎn)度,能發(fā)現(xiàn)業(yè)務(wù)流程中潛在問題和評估故障發(fā)生的概率。

    (3)全面排查問題和故障原因,迅速完成故障恢復(fù)

    系統(tǒng)能夠判斷IT系統(tǒng)存在的主要問題、影響業(yè)務(wù)質(zhì)量的主要因素;能分析服務(wù)流程中的主要缺陷形式、影響服務(wù)品質(zhì)的關(guān)鍵工序;能夠分析影響服務(wù)品質(zhì)的主要和次要原因及其影響度如何;利用實(shí)例邏輯上的關(guān)聯(lián)、業(yè)務(wù)上相關(guān)的業(yè)務(wù)操作關(guān)聯(lián)等各種關(guān)聯(lián)進(jìn)行問題和故障的溯源;可提供一個完整的業(yè)務(wù)仿真方案。

    (4)優(yōu)化系統(tǒng)服務(wù)流程,提供決策支持

    系統(tǒng)能夠根據(jù)服務(wù)的質(zhì)量特性與變化因素之間的相關(guān)關(guān)系,確定改進(jìn)服務(wù)質(zhì)量的有效手段;能通過對以往問題的統(tǒng)計(jì)分析、故障原因的深入挖掘,判斷系統(tǒng)性能和安全瓶頸,給出系統(tǒng)改善方案;能全程跟蹤服務(wù)流程、判斷服務(wù)流程中的薄弱環(huán)節(jié),提出流程改進(jìn)的方案;能根據(jù)IT系統(tǒng)性能指標(biāo)的評測結(jié)果,給出系統(tǒng)優(yōu)化方案。

    3 系統(tǒng)主要功能及性能

    本文提出了一種新集成IT系統(tǒng)在線運(yùn)行評價(jià)系統(tǒng)。該系統(tǒng)通過對IT基礎(chǔ)架構(gòu)、業(yè)務(wù)流程和服務(wù)管理流程進(jìn)行科學(xué)和有效的評價(jià)。

    IT系統(tǒng)在線運(yùn)行評價(jià)系統(tǒng)是一個包含多項(xiàng)性能指標(biāo)的評價(jià)體系,包括服務(wù)響應(yīng)能力、系統(tǒng)吞吐能力、服務(wù)可用性、系統(tǒng)持續(xù)運(yùn)行能力、系統(tǒng)問題分析和故障診斷能力。

    3.1 服務(wù)響應(yīng)能力

    在業(yè)務(wù)處理過程中,對于一個業(yè)務(wù)請求有響應(yīng)時(shí)間的限制。一方面,需要工作人員協(xié)同合作,在處理服務(wù)請求的時(shí)候應(yīng)該有時(shí)間的概念;同時(shí)也要求系統(tǒng)能實(shí)時(shí)地監(jiān)控整個服務(wù)的響應(yīng)時(shí)間;如果該事件的響應(yīng)或解決超過了時(shí)限,需要系統(tǒng)做相應(yīng)的記錄,以備服務(wù)響應(yīng)能力評估之用。

    服務(wù)響應(yīng)能力評價(jià)性能指標(biāo)包括:服務(wù)響應(yīng)異常判斷、服務(wù)響應(yīng)穩(wěn)定性判斷、服務(wù)響應(yīng)過程精密度、服務(wù)響應(yīng)過程準(zhǔn)確度。

    (1)服務(wù)響應(yīng)異常判斷

    服務(wù)響應(yīng)異常判斷主要通過繪制服務(wù)響應(yīng)控制圖,并根據(jù)8個判斷異常的規(guī)則進(jìn)行判定。

    · 2/3A原則:3點(diǎn)中有2點(diǎn)在A區(qū)或A區(qū)以外。

    · 4/5B原則:5點(diǎn)中有4點(diǎn)在B區(qū)或B區(qū)以外。

    ·6連串:連續(xù)6點(diǎn)持續(xù)地上升或下降。

    ·8缺C原則:有8點(diǎn)在中心線的兩側(cè),但C區(qū)并沒有點(diǎn)。

    · 9單側(cè)原則:連續(xù)9點(diǎn)在C區(qū)或C區(qū)以外。

    ·14升降原則:連續(xù)14點(diǎn)交互著一升一降。

    ·15C原則:連續(xù)15點(diǎn)在中心線的上下兩側(cè)的C區(qū)。

    · 1界外原則:有1點(diǎn)在A區(qū)之外。

    (2)服務(wù)響應(yīng)穩(wěn)定性判斷

    IT系統(tǒng)在線運(yùn)行評價(jià)系統(tǒng)從提高客戶的網(wǎng)絡(luò)滿意度出發(fā),建立新型的基于客戶感知的業(yè)務(wù)端到端質(zhì)量評估體系,能科學(xué)地反映與用戶使用和感知最密切的服務(wù)質(zhì)量情況,使運(yùn)營商能根據(jù)客戶實(shí)際需求提供優(yōu)質(zhì)、滿意的服務(wù),使網(wǎng)絡(luò)運(yùn)營商和廣大客戶獲得雙贏,同時(shí)也有利于繁榮海淀區(qū)乃至北京市的經(jīng)濟(jì),推動以擴(kuò)大內(nèi)需為導(dǎo)向的經(jīng)濟(jì)社會發(fā)展。

    為使現(xiàn)場的質(zhì)量狀況達(dá)到目標(biāo),均需加以管理。這里所說的“管理”作業(yè),一般用檢測產(chǎn)品的質(zhì)量特性來判斷“管理”作業(yè)是否正常。而質(zhì)量特性會隨著時(shí)間產(chǎn)生顯著高低的變化。那么,到底高到何種程度或低到何種狀態(tài)才算所說的異常?故設(shè)定合理的高低界限,作為分析現(xiàn)場制程狀況是否符合“管理”狀態(tài),即是控制圖的基本根源。

    (3)服務(wù)響應(yīng)過程精密度

    過程精密度計(jì)算式和分級如表1所示。

    (4)服務(wù)響應(yīng)過程準(zhǔn)確度

    過程準(zhǔn)確度計(jì)算式和分級如表2所示。

    3.2 系統(tǒng)吞吐能力

    系統(tǒng)的吞吐能力對應(yīng)服務(wù)的業(yè)務(wù)量,主要是通過趨勢圖分析業(yè)務(wù)吞吐量和吞吐能力的走勢以及未來趨勢的預(yù)測,需要顯示一定時(shí)期的運(yùn)行和發(fā)展趨勢,有利于同類數(shù)據(jù)對比。同類數(shù)據(jù)用“層別法”處理后,圖1所示為不同層別對比情況。

    表1 過程精密度計(jì)算式和分級

    表2 過程準(zhǔn)確度計(jì)算式和分級

    3.3 服務(wù)可用性

    系統(tǒng)考核指標(biāo):服務(wù)過程性能分析、服務(wù)可用率控制圖分析。

    (1)服務(wù)過程性能分析

    服務(wù)過程性能分析有助于識別、測量和分析各種噪聲引起系統(tǒng)偏差的原因,從而采取措施減少和防范這種偏差,使過程趨于穩(wěn)定。穩(wěn)定的過程中,它的可度量特征或過程性能的基礎(chǔ)分布是始終如一的。

    對服務(wù)過程性能的度量與分析是實(shí)現(xiàn)過程有效管理、實(shí)施過程改進(jìn)的重要途徑之一,也是業(yè)界研究的熱點(diǎn)之一。服務(wù)過程性能計(jì)算式和分級如表3所示。

    (2)服務(wù)可用率分析(1-P 圖)

    服務(wù)可用率計(jì)算式如表4所示。

    3.4 系統(tǒng)持續(xù)運(yùn)行能力

    系統(tǒng)考核指標(biāo):系統(tǒng)運(yùn)行風(fēng)險(xiǎn)度評估、持續(xù)運(yùn)行過程能力。

    系統(tǒng)運(yùn)行風(fēng)險(xiǎn)度評估是指系統(tǒng)正常運(yùn)行中,業(yè)務(wù)風(fēng)險(xiǎn)度的估計(jì),它是衡量系統(tǒng)穩(wěn)定性的一個標(biāo)志。持續(xù)運(yùn)行過程能力是指正常狀態(tài)下,業(yè)務(wù)服務(wù)過程提供達(dá)到預(yù)定服務(wù)水平的能力。它是衡量服務(wù)質(zhì)量的一種標(biāo)志。對服務(wù)過程能力進(jìn)行分析,可隨時(shí)掌握服務(wù)流程中各環(huán)節(jié)保證服務(wù)質(zhì)量的能力,從而為保證和提高服務(wù)質(zhì)量提供必要的信息和依據(jù)。

    持續(xù)運(yùn)行過程能力指數(shù)計(jì)算式和分級如表5所示。

    3.5 系統(tǒng)問題分析和故障診斷能力

    (1)Pareto圖分析法

    Pareto圖可以指出改進(jìn)的重點(diǎn),適用于各個行業(yè)、各類工業(yè)企業(yè)的服務(wù)質(zhì)量改進(jìn)活動。這種方法應(yīng)用的主要形式有:分析服務(wù)流程中的主要缺陷形式、影響服務(wù)品質(zhì)的關(guān)鍵工序以及影響服務(wù)品質(zhì)的主要和次要原因等。

    (2)散布圖因果分析法

    散布圖是分析研究兩個變量之間相關(guān)關(guān)系的圖形。圖中以縱軸表示結(jié)果,以橫軸表示原因,用點(diǎn)表示分布形態(tài),根據(jù)分布形態(tài)判斷兩者的相互關(guān)系。散布圖是以因果關(guān)系的方式來表示其關(guān)聯(lián)性的。本系統(tǒng)中用散布圖判斷質(zhì)量特性與某一變化因素之間或者兩個因素之間存在的相關(guān)關(guān)系,進(jìn)而確定改進(jìn)產(chǎn)品質(zhì)量因素的有效手段。

    表3 服務(wù)過程性能計(jì)算式和分級

    表4 服務(wù)可用率計(jì)算式

    表5 持續(xù)運(yùn)行過程能力指數(shù)計(jì)算式和分級

    (3)業(yè)務(wù)流程診斷法

    業(yè)務(wù)流程診斷法針對業(yè)務(wù)流程化處理過程中發(fā)生的相關(guān)故障告警,通過業(yè)務(wù)流監(jiān)控視圖定位業(yè)務(wù)流程各環(huán)節(jié)是否存在告警或異常,從而判斷可能的故障原因。同時(shí),也可預(yù)測針對相關(guān)環(huán)節(jié)的影響,從而采取相應(yīng)的措施避免故障的發(fā)生。

    (4)探測驗(yàn)證診斷法

    探測驗(yàn)證診斷法是通過固化以往處理故障的措施和方法推斷本次故障發(fā)生的原因。在發(fā)生一個故障后,通常的做法是檢查相關(guān)的設(shè)置、指標(biāo)值或通過腳本驗(yàn)證自己的判斷。探測驗(yàn)證診斷法可以事先將這些檢查腳本、驗(yàn)證方法存入系統(tǒng),在故障發(fā)生時(shí)依次執(zhí)行以判斷是哪種情況導(dǎo)致了本地的故障。

    (5)關(guān)聯(lián)分析診斷法

    關(guān)聯(lián)分析診斷法是指利用實(shí)例邏輯上的關(guān)聯(lián)、業(yè)務(wù)上相關(guān)的業(yè)務(wù)操作關(guān)聯(lián)、實(shí)體生命周期事件等各種關(guān)聯(lián)找到可能的根源故障或事故原因,建立在SID(security identifier)的統(tǒng)一實(shí)體模型基礎(chǔ)上的模型框架,可以很方便地建立實(shí)體之間的通用關(guān)聯(lián)關(guān)系以及特定業(yè)務(wù)關(guān)聯(lián)。

    (6)業(yè)務(wù)仿真診斷法

    能夠模擬用戶在業(yè)務(wù)系統(tǒng)的實(shí)際操作過程,自動地訪問各個頁面,并記錄各頁面系統(tǒng)處理和響應(yīng)時(shí)間以及處理結(jié)果等信息。通過模擬仿真,可以查看服務(wù)各個環(huán)節(jié)的服務(wù)質(zhì)量包括(服務(wù)響應(yīng)能力、服務(wù)可用性),有利于發(fā)現(xiàn)業(yè)務(wù)流程中潛在的問題和查找故障的原因。

    根據(jù)以上分析,可知本系統(tǒng)的創(chuàng)新點(diǎn)如下。

    ·將質(zhì)量管理體系的異常判斷規(guī)則、穩(wěn)定性判定原則、過程精密度(Cp)計(jì)算和過程準(zhǔn)確度(Ca)計(jì)算引入IT系統(tǒng)運(yùn)行評價(jià)體系,使對IT系統(tǒng)服務(wù)響應(yīng)能力的評價(jià)更加嚴(yán)謹(jǐn)科學(xué),使得通過服務(wù)響應(yīng)能力的評估中,實(shí)現(xiàn)對服務(wù)響應(yīng)能力更全面系統(tǒng)的考察。

    · 將服務(wù)過程性能指數(shù)Ppk和服務(wù)可用率分析圖(1-P圖)引入IT系統(tǒng)運(yùn)行評價(jià)體系,使服務(wù)可用性的評價(jià)更加直觀、準(zhǔn)確。

    ·將服務(wù)過程能力概念引入IT系統(tǒng)在線運(yùn)行評價(jià)體系,通過服務(wù)過程能力指數(shù)Cpk的計(jì)算,可以精確地判定IT系統(tǒng)的持續(xù)運(yùn)行能力。

    ·提出系統(tǒng)運(yùn)行健康度和系統(tǒng)運(yùn)行風(fēng)險(xiǎn)度概念。

    · 系統(tǒng)故障診斷中引入Pareto圖分析法、散布圖問題原因分析法、業(yè)務(wù)流程診斷法、探測驗(yàn)證診斷法、關(guān)聯(lián)分析診斷法、業(yè)務(wù)仿真診斷法等多個方法,實(shí)現(xiàn)實(shí)時(shí)、多粒度、不同維度的直觀故障分析診斷。

    4 與其他系統(tǒng)的優(yōu)勢對比

    IT系統(tǒng)在線運(yùn)行評價(jià)系統(tǒng)是集運(yùn)行評價(jià)、問題分析和故障診斷、流程的優(yōu)化和改進(jìn)為一體的軟件系統(tǒng),其與國內(nèi)外同類項(xiàng)目系統(tǒng)的主要功能比較如表6所示。

    5 結(jié)束語

    本文提出了一種新集成IT系統(tǒng)在線運(yùn)行評價(jià)系統(tǒng)。該系統(tǒng)通過對IT系統(tǒng)基礎(chǔ)架構(gòu)、業(yè)務(wù)流程和服務(wù)管理流程進(jìn)行科學(xué)和有效的評價(jià),使其業(yè)務(wù)戰(zhàn)略能夠和IT戰(zhàn)略有效地整合,實(shí)現(xiàn)IT系統(tǒng)運(yùn)作與服務(wù)水平的持續(xù)提高以及IT戰(zhàn)略的可持續(xù)發(fā)展;達(dá)到保障企業(yè)IT系統(tǒng)資源高可用性、降低IT系統(tǒng)運(yùn)行風(fēng)險(xiǎn)度、改善服務(wù)管理水平、優(yōu)化業(yè)務(wù)流程、降低企業(yè)IT系統(tǒng)總運(yùn)營成本、提高企業(yè)IT系統(tǒng)對業(yè)務(wù)的貢獻(xiàn)度和提高客戶服務(wù)滿意度的目的。

    表6 本系統(tǒng)與國內(nèi)外同類系統(tǒng)的主要功能比較

    1 周憲,余隋懷,黃婷等.面向委托設(shè)計(jì)的多目標(biāo)網(wǎng)絡(luò)評價(jià)系統(tǒng).科學(xué)技術(shù)與工程,2006(12)

    2 李艷紅.信息系統(tǒng)敏捷性及其相關(guān)技術(shù)的研究.大連理工大學(xué)博士學(xué)位論文,2002

    3 邊文浩.綜合評價(jià)決策支持系統(tǒng)開發(fā).吉林大學(xué)碩士學(xué)位論文,2005

    4 Stallings W.Wireless Communications and Networks.北 京 : 電 子工業(yè)出版社,2010

    5 陳云.接口與通信技術(shù)原理與應(yīng)用.北京:中國電力出版社,2009

    6 Klaus Finkenzeller K著.吳曉峰,陳大才譯.射頻識別技術(shù).北京:電子工業(yè)出版社,2006

    7 Kimball R,Ross M著.譚明金譯.數(shù)據(jù)倉庫工具箱:維度建模的完全指南(第二版).北京:電子工業(yè)出版社,2009

    8 Inmon W H著.王志海,林友芳等譯.?dāng)?shù)據(jù)倉庫(原書第三版).北京:機(jī)械工業(yè)出版社,2010

    猜你喜歡
    診斷法故障評價(jià)
    SBR改性瀝青的穩(wěn)定性評價(jià)
    石油瀝青(2021年4期)2021-10-14 08:50:44
    卡車液壓故障診斷法的應(yīng)用研究
    隱匿性骨折診斷中多層螺旋CT與核磁共振成像的臨床應(yīng)用
    故障一點(diǎn)通
    藏醫(yī)試探性診斷法探討
    車型漏水的預(yù)防及診斷
    奔馳R320車ABS、ESP故障燈異常點(diǎn)亮
    故障一點(diǎn)通
    基于Moodle的學(xué)習(xí)評價(jià)
    江淮車故障3例
    青春草视频在线免费观看| 秋霞在线观看毛片| 日本与韩国留学比较| 亚洲最大成人中文| 黄色欧美视频在线观看| 亚洲性久久影院| 成年版毛片免费区| 亚洲激情五月婷婷啪啪| www日本黄色视频网| 亚洲av美国av| 亚洲av一区综合| 久久6这里有精品| 国内精品宾馆在线| 亚洲精品乱码久久久v下载方式| 免费人成在线观看视频色| 又黄又爽又免费观看的视频| 男人舔奶头视频| 一a级毛片在线观看| 国内少妇人妻偷人精品xxx网站| 国产成人91sexporn| 久久久久久大精品| 亚洲最大成人手机在线| 特大巨黑吊av在线直播| 欧美日本视频| 黄色配什么色好看| 久久精品夜夜夜夜夜久久蜜豆| 变态另类丝袜制服| 亚洲五月天丁香| 国产片特级美女逼逼视频| 精品午夜福利视频在线观看一区| 免费观看精品视频网站| 一进一出抽搐gif免费好疼| 午夜a级毛片| 精品久久久久久久久av| 99riav亚洲国产免费| 能在线免费观看的黄片| 真实男女啪啪啪动态图| 人妻制服诱惑在线中文字幕| 在线观看av片永久免费下载| 黑人高潮一二区| 天美传媒精品一区二区| 久久精品国产99精品国产亚洲性色| 老司机福利观看| 啦啦啦观看免费观看视频高清| 久久久久久久久久成人| 男人舔奶头视频| 国产黄a三级三级三级人| 六月丁香七月| 国产v大片淫在线免费观看| 欧美一级a爱片免费观看看| 搞女人的毛片| 人人妻,人人澡人人爽秒播| 九色成人免费人妻av| 欧美xxxx黑人xx丫x性爽| 欧美xxxx性猛交bbbb| 校园春色视频在线观看| 搞女人的毛片| 亚洲欧美日韩无卡精品| 卡戴珊不雅视频在线播放| 一级黄片播放器| 中文在线观看免费www的网站| 看免费成人av毛片| 国产男靠女视频免费网站| 亚洲成人中文字幕在线播放| 久久综合国产亚洲精品| 秋霞在线观看毛片| 真人做人爱边吃奶动态| 日韩欧美 国产精品| АⅤ资源中文在线天堂| 精品一区二区三区视频在线| 欧美一级a爱片免费观看看| 免费无遮挡裸体视频| 国产一级毛片七仙女欲春2| 99热只有精品国产| 亚洲精品久久国产高清桃花| 国产精品久久电影中文字幕| 国产精品乱码一区二三区的特点| 久久热精品热| 久久精品国产清高在天天线| 成人性生交大片免费视频hd| 成人美女网站在线观看视频| 在线天堂最新版资源| h日本视频在线播放| 国产三级中文精品| 男人舔奶头视频| 精品久久国产蜜桃| 成人性生交大片免费视频hd| 可以在线观看毛片的网站| 亚洲色图av天堂| 91久久精品电影网| 天美传媒精品一区二区| 亚洲精品456在线播放app| 国产精品野战在线观看| 国产熟女欧美一区二区| 我的女老师完整版在线观看| 日本a在线网址| 亚洲av熟女| 毛片一级片免费看久久久久| 亚洲精品久久国产高清桃花| 最近在线观看免费完整版| 最近在线观看免费完整版| 国产国拍精品亚洲av在线观看| 日韩精品有码人妻一区| 精品午夜福利在线看| 丰满的人妻完整版| 99久久中文字幕三级久久日本| 久久亚洲精品不卡| 97超视频在线观看视频| 长腿黑丝高跟| a级毛片a级免费在线| a级毛片a级免费在线| 日韩av在线大香蕉| 久久午夜亚洲精品久久| 久久精品国产99精品国产亚洲性色| 国产大屁股一区二区在线视频| 97超碰精品成人国产| 欧美激情久久久久久爽电影| 伦精品一区二区三区| 国产探花在线观看一区二区| 中文字幕免费在线视频6| 久久久欧美国产精品| 亚洲一区二区三区色噜噜| 日韩制服骚丝袜av| 久久久久国内视频| 最近最新中文字幕大全电影3| 看黄色毛片网站| 2021天堂中文幕一二区在线观| 精品久久久久久久久av| 熟女人妻精品中文字幕| 亚洲欧美成人精品一区二区| 日韩一本色道免费dvd| 97在线视频观看| 国产欧美日韩一区二区精品| 啦啦啦韩国在线观看视频| 国产午夜福利久久久久久| 国产精品一及| 亚洲五月天丁香| 亚洲成人久久爱视频| 亚洲性久久影院| 人人妻人人澡欧美一区二区| 国产一区二区三区在线臀色熟女| 欧美色欧美亚洲另类二区| 亚洲丝袜综合中文字幕| 日韩精品青青久久久久久| 久久中文看片网| 亚洲高清免费不卡视频| 免费看日本二区| 欧美最新免费一区二区三区| 久久婷婷人人爽人人干人人爱| 亚洲七黄色美女视频| 国产亚洲欧美98| 97超碰精品成人国产| 97碰自拍视频| 亚洲精品国产成人久久av| 99riav亚洲国产免费| 天堂影院成人在线观看| 亚洲国产高清在线一区二区三| 亚洲综合色惰| 春色校园在线视频观看| 黄色欧美视频在线观看| 一a级毛片在线观看| 欧美成人a在线观看| 亚洲精品乱码久久久v下载方式| 欧美激情久久久久久爽电影| 久久久成人免费电影| 亚洲国产精品成人综合色| 亚洲av不卡在线观看| 亚洲欧美成人精品一区二区| 一个人看视频在线观看www免费| 一进一出抽搐动态| 1000部很黄的大片| 一个人看视频在线观看www免费| 赤兔流量卡办理| 久久久久久久久中文| 一个人看的www免费观看视频| 国产爱豆传媒在线观看| 无遮挡黄片免费观看| 日韩欧美一区二区三区在线观看| 波多野结衣高清作品| 日韩成人av中文字幕在线观看 | 久久午夜亚洲精品久久| av黄色大香蕉| 日韩欧美在线乱码| 国产伦在线观看视频一区| 又粗又爽又猛毛片免费看| 成年女人永久免费观看视频| 最近的中文字幕免费完整| 免费一级毛片在线播放高清视频| 12—13女人毛片做爰片一| 久久精品影院6| 人妻少妇偷人精品九色| 国产精品99久久久久久久久| 成人国产麻豆网| 亚洲av第一区精品v没综合| 国产久久久一区二区三区| 伦理电影大哥的女人| 最新中文字幕久久久久| 一本久久中文字幕| 少妇的逼水好多| 久久久午夜欧美精品| 久久精品综合一区二区三区| 老女人水多毛片| 国产午夜福利久久久久久| 国产男人的电影天堂91| 日韩 亚洲 欧美在线| 人妻制服诱惑在线中文字幕| 国产精品免费一区二区三区在线| 欧美色视频一区免费| 波多野结衣巨乳人妻| 国产精品福利在线免费观看| 欧美激情在线99| 国产精品久久电影中文字幕| 亚洲成人精品中文字幕电影| 亚洲欧美中文字幕日韩二区| 成年版毛片免费区| 亚洲av一区综合| 成人美女网站在线观看视频| 久久久成人免费电影| 久久久久性生活片| av在线蜜桃| 亚洲欧美日韩卡通动漫| 久久久久免费精品人妻一区二区| 国产欧美日韩精品亚洲av| 久久草成人影院| 1000部很黄的大片| 午夜免费激情av| av在线亚洲专区| 天堂动漫精品| 午夜激情欧美在线| 亚洲第一区二区三区不卡| 天堂动漫精品| 成人二区视频| 国产精品1区2区在线观看.| 欧美日本亚洲视频在线播放| 六月丁香七月| 欧美最黄视频在线播放免费| 大型黄色视频在线免费观看| 99九九线精品视频在线观看视频| 国产精品一二三区在线看| 九九在线视频观看精品| 亚洲最大成人av| 中出人妻视频一区二区| 国产精品99久久久久久久久| 变态另类成人亚洲欧美熟女| 成人性生交大片免费视频hd| 久久午夜亚洲精品久久| 欧洲精品卡2卡3卡4卡5卡区| 国产精品人妻久久久久久| 亚洲激情五月婷婷啪啪| 狂野欧美激情性xxxx在线观看| 毛片女人毛片| 在线播放国产精品三级| 国产欧美日韩精品一区二区| 成年女人看的毛片在线观看| 久久99热这里只有精品18| 69av精品久久久久久| 精品午夜福利视频在线观看一区| 一级毛片aaaaaa免费看小| 一区二区三区高清视频在线| 丰满人妻一区二区三区视频av| 国产一区二区三区在线臀色熟女| 高清毛片免费观看视频网站| 成人亚洲精品av一区二区| 亚洲中文字幕日韩| 偷拍熟女少妇极品色| 欧美高清性xxxxhd video| 精品福利观看| 国产精品免费一区二区三区在线| 免费看av在线观看网站| 在线天堂最新版资源| 在线观看一区二区三区| 日韩av在线大香蕉| 成人高潮视频无遮挡免费网站| 99热网站在线观看| 美女 人体艺术 gogo| 免费无遮挡裸体视频| 丰满人妻一区二区三区视频av| 特大巨黑吊av在线直播| 国产极品精品免费视频能看的| 久久久久久久午夜电影| 九九爱精品视频在线观看| 我的老师免费观看完整版| 色哟哟·www| 亚洲国产精品成人久久小说 | 成熟少妇高潮喷水视频| 国产黄片美女视频| 国产一区二区亚洲精品在线观看| 久久久久性生活片| 免费无遮挡裸体视频| a级毛片免费高清观看在线播放| 干丝袜人妻中文字幕| av福利片在线观看| 淫秽高清视频在线观看| 中文字幕免费在线视频6| av中文乱码字幕在线| 欧美成人一区二区免费高清观看| 欧美日本视频| 日韩在线高清观看一区二区三区| avwww免费| 久久午夜亚洲精品久久| 国产精品一区二区三区四区免费观看 | 99热这里只有是精品在线观看| 真人做人爱边吃奶动态| 成人三级黄色视频| 99riav亚洲国产免费| 色5月婷婷丁香| 99热网站在线观看| 成年免费大片在线观看| 午夜福利在线观看免费完整高清在 | 亚洲色图av天堂| 国产不卡一卡二| 久久国内精品自在自线图片| 国产伦一二天堂av在线观看| 国产av不卡久久| 又爽又黄无遮挡网站| 波野结衣二区三区在线| 91麻豆精品激情在线观看国产| 99久国产av精品| 日本-黄色视频高清免费观看| 激情 狠狠 欧美| 国产久久久一区二区三区| 男人舔奶头视频| 国模一区二区三区四区视频| 亚洲精华国产精华液的使用体验 | 欧美绝顶高潮抽搐喷水| 天美传媒精品一区二区| 成人一区二区视频在线观看| 久久亚洲精品不卡| 色视频www国产| 欧美+日韩+精品| 亚洲欧美成人综合另类久久久 | 久久精品夜夜夜夜夜久久蜜豆| 久久午夜亚洲精品久久| 亚洲国产精品合色在线| 国国产精品蜜臀av免费| 免费看av在线观看网站| 亚洲精品日韩av片在线观看| 亚洲最大成人手机在线| 99久久九九国产精品国产免费| 男女边吃奶边做爰视频| 欧美高清性xxxxhd video| 久久热精品热| 一级毛片久久久久久久久女| 亚洲人成网站在线观看播放| 久久久久久伊人网av| 色视频www国产| 国产一级毛片七仙女欲春2| 69人妻影院| 观看免费一级毛片| 久久人人精品亚洲av| 非洲黑人性xxxx精品又粗又长| 一级黄色大片毛片| 一夜夜www| 午夜精品一区二区三区免费看| 亚洲欧美日韩无卡精品| 久久精品国产亚洲网站| 国产精品福利在线免费观看| 精品一区二区三区视频在线| 欧美日韩综合久久久久久| 听说在线观看完整版免费高清| 日本在线视频免费播放| 国产精品无大码| 男人和女人高潮做爰伦理| 国内精品一区二区在线观看| 亚洲国产欧美人成| 精品久久久久久久久久免费视频| 97人妻精品一区二区三区麻豆| 性欧美人与动物交配| 三级男女做爰猛烈吃奶摸视频| 亚洲无线在线观看| av在线老鸭窝| 少妇丰满av| 少妇熟女欧美另类| 精品一区二区三区视频在线观看免费| 99riav亚洲国产免费| 日韩,欧美,国产一区二区三区 | h日本视频在线播放| 亚洲无线在线观看| 欧美最黄视频在线播放免费| 男女下面进入的视频免费午夜| 午夜精品在线福利| 国产精品一区二区三区四区免费观看 | 蜜臀久久99精品久久宅男| 亚洲aⅴ乱码一区二区在线播放| 国产乱人偷精品视频| 午夜福利在线在线| 最近手机中文字幕大全| 人妻夜夜爽99麻豆av| 精品久久久久久久末码| 欧美日韩国产亚洲二区| 九九热线精品视视频播放| 中文字幕人妻熟人妻熟丝袜美| 亚洲乱码一区二区免费版| 成人性生交大片免费视频hd| 小说图片视频综合网站| 国产黄色小视频在线观看| 99热精品在线国产| 亚洲综合色惰| 性欧美人与动物交配| 12—13女人毛片做爰片一| 久久久久国内视频| 亚洲经典国产精华液单| 男女之事视频高清在线观看| 一本精品99久久精品77| 日韩三级伦理在线观看| 内地一区二区视频在线| 久久国产乱子免费精品| 99热6这里只有精品| av在线蜜桃| 性插视频无遮挡在线免费观看| 小蜜桃在线观看免费完整版高清| 日韩欧美三级三区| 久久精品国产亚洲av天美| 国产三级在线视频| 日韩 亚洲 欧美在线| 成年女人看的毛片在线观看| 欧美zozozo另类| 免费av观看视频| 亚洲熟妇熟女久久| 欧美国产日韩亚洲一区| 美女大奶头视频| 国产精品嫩草影院av在线观看| 亚洲国产精品合色在线| 18禁裸乳无遮挡免费网站照片| 亚洲欧美精品自产自拍| 秋霞在线观看毛片| 在线观看66精品国产| 变态另类丝袜制服| 赤兔流量卡办理| 偷拍熟女少妇极品色| 国产毛片a区久久久久| 97热精品久久久久久| 高清午夜精品一区二区三区 | 国内久久婷婷六月综合欲色啪| 免费av毛片视频| av在线老鸭窝| 露出奶头的视频| 一个人看视频在线观看www免费| 久久韩国三级中文字幕| 亚洲电影在线观看av| 人妻少妇偷人精品九色| 少妇人妻一区二区三区视频| 色尼玛亚洲综合影院| 久久中文看片网| 亚洲丝袜综合中文字幕| 校园春色视频在线观看| 久久久久久久久大av| 国产色婷婷99| 激情 狠狠 欧美| 欧美激情久久久久久爽电影| 久久国内精品自在自线图片| 欧美又色又爽又黄视频| 精品日产1卡2卡| 久久久久久久久大av| 欧美最黄视频在线播放免费| av在线天堂中文字幕| 成人高潮视频无遮挡免费网站| 97热精品久久久久久| 国产高潮美女av| 日本黄色片子视频| 国产精品av视频在线免费观看| 老女人水多毛片| 国国产精品蜜臀av免费| 看免费成人av毛片| 欧美成人精品欧美一级黄| 一a级毛片在线观看| 老女人水多毛片| 久久久久久国产a免费观看| 日日摸夜夜添夜夜添av毛片| 色播亚洲综合网| 亚洲欧美精品自产自拍| 麻豆av噜噜一区二区三区| 久久精品久久久久久噜噜老黄 | 国产91av在线免费观看| 十八禁网站免费在线| 亚洲欧美成人精品一区二区| 亚洲五月天丁香| 身体一侧抽搐| 色视频www国产| 国产蜜桃级精品一区二区三区| 精品一区二区三区av网在线观看| 99九九线精品视频在线观看视频| 亚洲av二区三区四区| 午夜精品在线福利| av在线观看视频网站免费| 欧洲精品卡2卡3卡4卡5卡区| 精品久久久久久久久av| 亚洲,欧美,日韩| 亚洲婷婷狠狠爱综合网| 日韩av不卡免费在线播放| 亚洲av不卡在线观看| 亚洲自偷自拍三级| 亚洲,欧美,日韩| 日韩高清综合在线| 99国产极品粉嫩在线观看| 九九爱精品视频在线观看| 长腿黑丝高跟| 久久鲁丝午夜福利片| 亚洲四区av| 婷婷精品国产亚洲av在线| 午夜精品国产一区二区电影 | 狠狠狠狠99中文字幕| 亚洲国产高清在线一区二区三| 秋霞在线观看毛片| 国产伦精品一区二区三区视频9| 一级毛片aaaaaa免费看小| 91在线精品国自产拍蜜月| 成年女人看的毛片在线观看| 欧美3d第一页| 国产精品,欧美在线| 97超碰精品成人国产| 男女视频在线观看网站免费| 精品人妻偷拍中文字幕| 欧美高清性xxxxhd video| 精品久久国产蜜桃| 成年版毛片免费区| 国产黄色视频一区二区在线观看 | 欧美日本亚洲视频在线播放| 乱码一卡2卡4卡精品| 舔av片在线| 婷婷精品国产亚洲av| 国产黄色视频一区二区在线观看 | 国产真实伦视频高清在线观看| 中文在线观看免费www的网站| or卡值多少钱| 欧美区成人在线视频| 麻豆乱淫一区二区| 免费av毛片视频| 亚洲成av人片在线播放无| 久久午夜福利片| 久久欧美精品欧美久久欧美| 久久久久久久久久久丰满| 男女边吃奶边做爰视频| 亚洲av二区三区四区| 久久精品夜色国产| 免费av毛片视频| 欧美日本视频| 国产精华一区二区三区| 国产 一区精品| 黄色欧美视频在线观看| 岛国在线免费视频观看| 久久久久久九九精品二区国产| 国产91av在线免费观看| 一级毛片电影观看 | 最近最新中文字幕大全电影3| 最近视频中文字幕2019在线8| 成人亚洲欧美一区二区av| 秋霞在线观看毛片| 美女黄网站色视频| 一个人看视频在线观看www免费| 男人和女人高潮做爰伦理| 亚洲成人中文字幕在线播放| 啦啦啦韩国在线观看视频| 免费人成视频x8x8入口观看| 中文亚洲av片在线观看爽| 久久午夜亚洲精品久久| 国产爱豆传媒在线观看| 麻豆乱淫一区二区| 国产 一区精品| 国内久久婷婷六月综合欲色啪| 在线免费观看的www视频| 日韩欧美国产在线观看| 日本精品一区二区三区蜜桃| 十八禁国产超污无遮挡网站| 国产国拍精品亚洲av在线观看| 亚洲人成网站在线观看播放| 听说在线观看完整版免费高清| 国产成人一区二区在线| 女人十人毛片免费观看3o分钟| 一级黄色大片毛片| 欧美色视频一区免费| 亚洲激情五月婷婷啪啪| 成人鲁丝片一二三区免费| av国产免费在线观看| 精品久久久久久成人av| 精品一区二区免费观看| 欧美一级a爱片免费观看看| a级毛片免费高清观看在线播放| 伦精品一区二区三区| 国产精品久久久久久av不卡| 欧美三级亚洲精品| 能在线免费观看的黄片| 村上凉子中文字幕在线| 99热这里只有精品一区| 国产精品一及| 国产伦精品一区二区三区四那| 听说在线观看完整版免费高清| 黄色一级大片看看| 午夜福利视频1000在线观看| 三级国产精品欧美在线观看| 美女 人体艺术 gogo| 欧美日韩精品成人综合77777| 久久精品国产亚洲av天美| 九色成人免费人妻av| 亚洲色图av天堂| 国产视频内射| 深夜精品福利| 国产黄片美女视频| 最新在线观看一区二区三区| 少妇的逼好多水| 欧美区成人在线视频| 国产v大片淫在线免费观看| 欧美一区二区国产精品久久精品| 全区人妻精品视频| 极品教师在线视频| 国产一区二区激情短视频| 亚洲专区国产一区二区| 亚洲精品456在线播放app| 丰满乱子伦码专区| 熟女电影av网| 精品午夜福利视频在线观看一区| 亚洲无线在线观看| 精品一区二区三区视频在线观看免费| 国产精品久久电影中文字幕| a级毛片a级免费在线|