基于層次模型的搜索引擎評(píng)價(jià)研究

宋余慶 陸 琳

(江蘇大學(xué)科技信息研究所 鎮(zhèn)江 212013)

基于層次模型的搜索引擎評(píng)價(jià)研究

宋余慶 陸 琳

(江蘇大學(xué)科技信息研究所 鎮(zhèn)江 212013)

以馬斯洛需求層次理論為基礎(chǔ)，建立網(wǎng)絡(luò)用戶需求層次金字塔。綜述搜索引擎性能評(píng)價(jià)體系，總結(jié)以往學(xué)者提到的性能評(píng)價(jià)指標(biāo)，并結(jié)合本文所建立的網(wǎng)絡(luò)用戶需求層次金字塔，建立相應(yīng)的搜索引擎評(píng)價(jià)層次模型。最后以百度和有道為例，運(yùn)用定標(biāo)比超分析和層次模型相結(jié)合的方法，進(jìn)行實(shí)證研究。

搜素引擎 評(píng)價(jià) 層次 體系 指標(biāo)

1 引言

隨著因特網(wǎng)和萬(wàn)維網(wǎng)的迅速發(fā)展，網(wǎng)絡(luò)信息資源日趨豐富，基于網(wǎng)絡(luò)資源的各類信息檢索服務(wù)也得到了迅速的發(fā)展。一些常用網(wǎng)站更是把互聯(lián)網(wǎng)搜索作為門戶網(wǎng)站必不可少的基礎(chǔ)性服務(wù)，當(dāng)然這一切都離不開(kāi)搜索引擎。搜索引擎為人們檢索Web信息資源提供了一條有效的途徑。

自搜索引擎開(kāi)始出現(xiàn)以來(lái)，它的評(píng)價(jià)問(wèn)題一直是傳統(tǒng)信息檢索的核心研究領(lǐng)域之一。隨著網(wǎng)絡(luò)信息的數(shù)量不斷增長(zhǎng)和信息技術(shù)的不斷發(fā)展，搜索引擎評(píng)價(jià)面臨著更多的問(wèn)題。傳統(tǒng)的Cranfield評(píng)價(jià)體系由于其評(píng)價(jià)過(guò)程所需巨大的人力物力資源，以及較長(zhǎng)的評(píng)價(jià)周期無(wú)法滿足搜索引擎系統(tǒng)全面快速的評(píng)價(jià)要求。而用戶行為分析在本世紀(jì)初逐漸得到國(guó)內(nèi)外研究界和產(chǎn)業(yè)界的關(guān)注，有著廣泛的研究意義和實(shí)際的應(yīng)用價(jià)值［1］。在分析用戶行為和需求的基礎(chǔ)上，尋找一種更具現(xiàn)實(shí)意義的評(píng)價(jià)方法或者評(píng)價(jià)模型用以對(duì)現(xiàn)有的眾多搜索引擎進(jìn)行性能評(píng)價(jià)和相互比較，逐漸成為學(xué)者和用戶關(guān)注的焦點(diǎn)。

2 基于馬斯洛需求層次理論的網(wǎng)絡(luò)用戶需求層次金字塔的構(gòu)建

馬斯洛需求層次理論，又稱需求層次理論，是由美國(guó)著名人本主義心理學(xué)家亞伯拉罕·馬斯洛于1943年在《人才動(dòng)機(jī)理論》一文中提出的。馬斯洛通過(guò)對(duì)杰出人物的研究得出人類有5種基本的需要，包括生理的需要、安全的需要、社交的需要、尊重的需要和自我實(shí)現(xiàn)的需要。馬斯洛認(rèn)為，上述5種需要是逐級(jí)得到滿足的，按級(jí)別依次為生理需要、安全需要、社交需要、尊重需要和自我實(shí)現(xiàn)的需要。［2］

自馬斯洛需求層次理論產(chǎn)生以來(lái)，由于其合理性、實(shí)用性、直觀性的人性化分析，被較多的應(yīng)用在經(jīng)濟(jì)領(lǐng)域和管理領(lǐng)域，用以分析客戶或員工的不同需求，提高企業(yè)生產(chǎn)管理水平。隨著學(xué)科間的交流與融合，不同學(xué)科間交叉使用成熟理論的現(xiàn)象趨于頻繁。隨著學(xué)科交叉和融合的現(xiàn)象趨于頻繁，馬斯洛需求層次理論也被應(yīng)用到建筑設(shè)計(jì)、居民生活質(zhì)量評(píng)價(jià)等其他領(lǐng)域，如方曉麗、張麗琴［3］根據(jù)馬斯洛的需求層次理論分析人的需求對(duì)工程地質(zhì)結(jié)構(gòu)分區(qū)合理的建設(shè)用地影響研究建設(shè)用地規(guī)劃的舒適度以實(shí)現(xiàn)城市用地的生態(tài)價(jià)值。張姣姣［4］綜合運(yùn)用了馬斯洛需求層次論、經(jīng)濟(jì)增長(zhǎng)與經(jīng)濟(jì)發(fā)展理論、以人為中心的社會(huì)發(fā)展理論，初步構(gòu)建出城市獨(dú)居老人生活質(zhì)量評(píng)價(jià)指標(biāo)體系框架。王潔［5］以馬斯洛層次理論為基礎(chǔ)，以層次分析模型為手段，構(gòu)建了適合于當(dāng)下的幸福指數(shù)評(píng)價(jià)體系，最后將該評(píng)價(jià)體系應(yīng)用于實(shí)踐中。

但是，從文獻(xiàn)調(diào)查的結(jié)果來(lái)看，并未見(jiàn)馬斯洛需求層次理論應(yīng)用到搜索引擎評(píng)價(jià)領(lǐng)域。因此，本文的研究思路是嘗試以馬斯洛需求層次理論為基礎(chǔ)，先建立網(wǎng)絡(luò)用戶的需求層次，然后再依據(jù)網(wǎng)絡(luò)用戶的需求層次建立相應(yīng)的搜索引擎評(píng)價(jià)指標(biāo)層次模型。

首先要?jiǎng)澐志W(wǎng)絡(luò)用戶的需求層次，分析哪些指標(biāo)是用戶最關(guān)心的、相對(duì)重要的，然后依據(jù)需求層次建立相應(yīng)的評(píng)價(jià)指標(biāo)層次模型，進(jìn)行指標(biāo)的匯總和填充。縱觀搜索引擎的性能評(píng)價(jià)體系，從顯而易見(jiàn)的界面分析到后臺(tái)運(yùn)行的爬蟲(chóng)算法，從用戶直接接觸的檢索結(jié)果到用戶不正面感知的數(shù)據(jù)庫(kù)建設(shè)，都具有一定的區(qū)別和層次，可進(jìn)行分層和歸并，用戶的需求也會(huì)隨著搜索引擎所能提供的服務(wù)發(fā)送變化。因而，根據(jù)“用戶需求”的優(yōu)先等級(jí)來(lái)劃分性能指標(biāo)的重要程度，具有一定的可行性。

根據(jù)對(duì)需求層次特點(diǎn)的分析，網(wǎng)絡(luò)用戶具有求知和自我實(shí)現(xiàn)的需求，而且在基本需求滿足的情況下，人們都有求知和分享的追求，當(dāng)人們獲得到求知的需求后，人們會(huì)很樂(lè)意分享自己的知識(shí)，來(lái)實(shí)現(xiàn)自我的價(jià)值［6］。本文將互聯(lián)網(wǎng)環(huán)境下的網(wǎng)絡(luò)用戶的需求分為四個(gè)部分:基本需求、社會(huì)需求、尊重需求和自我實(shí)現(xiàn)價(jià)值，建立網(wǎng)絡(luò)用戶需求層次金字塔，如圖1所示。

圖1 網(wǎng)絡(luò)用戶需求層次金字塔

(1)基本需求?；拘枨笫蔷W(wǎng)絡(luò)用戶在檢索信息中的最基本的需求，具體包括各種信息需求，如信息查詢、信息傳遞、信息瀏覽等各項(xiàng)信息服務(wù);各種安全需求，如網(wǎng)速，網(wǎng)站內(nèi)容質(zhì)量、可信度及更新?tīng)顩r、網(wǎng)站穩(wěn)定性等。網(wǎng)絡(luò)環(huán)境下，用戶的上網(wǎng)行為總是為了滿足一定的上網(wǎng)目的而進(jìn)行的，必然將最基本的需求信息定位于此。

(2)社會(huì)需求。網(wǎng)絡(luò)用戶的基本需求滿足之后，就會(huì)產(chǎn)生社會(huì)需求，需要滿足資源的上傳下載、問(wèn)答式交流等人機(jī)交互的需求;滿足用戶之間構(gòu)成一個(gè)網(wǎng)絡(luò)社會(huì)運(yùn)行的信息交流、資源共享、話題討論等需求。從單獨(dú)的個(gè)人到網(wǎng)絡(luò)團(tuán)體的需求的變化，使得網(wǎng)站信息更加細(xì)化和復(fù)雜，形成虛擬信息社區(qū)化。

(3)尊重需求。在處理所捕獲的資源后，實(shí)現(xiàn)資源價(jià)值、挖掘數(shù)據(jù)，從獲得的信息中得到潛在的價(jià)值是用戶的進(jìn)一步的需求。此時(shí)的檢索過(guò)程更加深入和需要特色化建設(shè)，用戶渴望在網(wǎng)站中獲得個(gè)性化服務(wù)，變被動(dòng)需求為主動(dòng)需求。在團(tuán)體交往中，獲得別人的尊重和自我尊重，為網(wǎng)絡(luò)團(tuán)體所認(rèn)可，獲得認(rèn)知和榮譽(yù)。

(4)自我實(shí)現(xiàn)價(jià)值。在最高層次的建立中，網(wǎng)絡(luò)用戶發(fā)揮自己的最大潛能，創(chuàng)造信息和價(jià)值，建立屬于自己的信息品牌，實(shí)現(xiàn)自己的個(gè)人目標(biāo)。

金字塔的四個(gè)層次的需求由下至上逐步提升，反映出用戶的需求從被動(dòng)的獲取資源到主動(dòng)的尋求資源到相互的分享資源到自主的創(chuàng)新資源，對(duì)網(wǎng)絡(luò)信息的需求不斷的細(xì)化和個(gè)性化。用戶的需求變化會(huì)導(dǎo)致用戶的行為變化，而在搜索引擎評(píng)價(jià)中，最終目的是為了滿足用戶的需求，依據(jù)用戶需求的層次所建立的模型將更加貼切的反應(yīng)出用戶的需求和行為，使評(píng)價(jià)方法更加的合理和具有實(shí)際意義。

3 搜索引擎評(píng)價(jià)研究現(xiàn)狀

3.1 搜索引擎評(píng)價(jià)綜述

在搜索引擎的研究領(lǐng)域，美國(guó)和英國(guó)是強(qiáng)者，在數(shù)量上和質(zhì)量上占據(jù)領(lǐng)先水平。國(guó)內(nèi)搜索引擎的發(fā)展起步較晚而發(fā)展較快，中國(guó)學(xué)者在該領(lǐng)域也有出色的表現(xiàn)。然而，在評(píng)價(jià)體系的建設(shè)中，即使是走在發(fā)展前沿的美國(guó)、英國(guó)、德國(guó)等國(guó)家，目前還缺乏統(tǒng)一的有效的評(píng)價(jià)方法對(duì)搜索引擎進(jìn)行優(yōu)劣評(píng)價(jià)?？v觀國(guó)內(nèi)外關(guān)于搜索引擎評(píng)價(jià)的研究，眾說(shuō)紛紜，仁者見(jiàn)仁、智者見(jiàn)智。

就國(guó)內(nèi)而言，蘇君華［7］認(rèn)為搜索引擎的評(píng)價(jià)是搜索引擎發(fā)展的依據(jù)，也是用戶選擇的依據(jù)。作者依據(jù)Saracevic的信息檢索交互模型，借鑒數(shù)字圖書(shū)館評(píng)價(jià)的概念框架，從內(nèi)容、技術(shù)、界面、用戶、服務(wù)、環(huán)境等六個(gè)方面系統(tǒng)地梳理了搜索引擎的評(píng)價(jià)研究。通過(guò)討論和分析得出，搜索引擎的評(píng)價(jià)模型應(yīng)該是一個(gè)綜合性的評(píng)價(jià)模型，整合系統(tǒng)、用戶、用戶與系統(tǒng)之間的交互以及用戶與系統(tǒng)所處的環(huán)境。葉鳳云、汪傳雷［8］兩位學(xué)者在ACSI(美國(guó)客戶滿意度指數(shù))模型基礎(chǔ)上，構(gòu)建 Web搜索引擎滿意度(簡(jiǎn)稱WSES)模型，將用戶滿意度設(shè)為最終所求的目標(biāo)變量，預(yù)期質(zhì)量、網(wǎng)站聲譽(yù)、感知質(zhì)量和感知價(jià)值設(shè)為用戶滿意度的原因變量，持續(xù)使用則是用戶滿意度的結(jié)果變量，根據(jù)Web搜索引擎的特點(diǎn)建立Web搜索引擎滿意度模型，并基于該模型提出研究假設(shè)和測(cè)量指標(biāo)體系。王靜疆［9］針對(duì)目前搜索引擎評(píng)價(jià)指標(biāo)體系研究現(xiàn)狀，總結(jié)當(dāng)前我國(guó)評(píng)價(jià)指標(biāo)體系研究的特點(diǎn)，提出技術(shù)和用戶是搜索引擎評(píng)價(jià)體系中的兩大重要指標(biāo)?？虑?、成穎等［10］學(xué)者創(chuàng)新性的提出搜索引擎可用性評(píng)價(jià)指標(biāo)體系構(gòu)建，分析搜索引擎評(píng)價(jià)與搜索引擎可用性分析兩者的關(guān)系，并結(jié)合搜索引擎查詢信息的三階段特點(diǎn)分析搜索引擎可用性評(píng)價(jià)的要求，基于可用性評(píng)價(jià)指標(biāo)的4大來(lái)源構(gòu)建搜索引擎可用性評(píng)價(jià)指標(biāo)層次模型，并用德?tīng)柗品ㄓ?jì)算評(píng)價(jià)的權(quán)重，最終形成一個(gè)具有應(yīng)用價(jià)值的體系，為評(píng)價(jià)搜索引擎可用性提供了一套操作性很強(qiáng)的評(píng)價(jià)標(biāo)準(zhǔn)。張國(guó)海、馬曉英、閏立光［11］三位學(xué)者在回顧搜索引擎評(píng)價(jià)研究現(xiàn)狀的基礎(chǔ)上，分析搜索引擎評(píng)價(jià)指標(biāo)的基本構(gòu)成因素，創(chuàng)造性地將熵權(quán)理論引入搜索引擎評(píng)價(jià)領(lǐng)域，建立熵權(quán)值模型，并通過(guò)科學(xué)計(jì)算，構(gòu)建出基于熵權(quán)的搜索引擎評(píng)價(jià)指標(biāo)體系，更加注重評(píng)價(jià)指標(biāo)體系中指標(biāo)自身的重要程度，充分利用了被評(píng)價(jià)指標(biāo)的信息量，有效地彌補(bǔ)了傳統(tǒng)評(píng)價(jià)方法的缺陷。

從國(guó)外的研究來(lái)看，Bar-Ilan［12］評(píng)估了在一段時(shí)間內(nèi)的搜索引擎的表現(xiàn)，作為一個(gè)整體描述搜索引擎的功能隨著時(shí)間推移的變化。通過(guò)必要的設(shè)置和案例的實(shí)施，提出應(yīng)設(shè)立一套標(biāo)準(zhǔn)措施評(píng)價(jià)搜索引擎的表現(xiàn)，從數(shù)據(jù)庫(kù)覆蓋范圍、查詢響應(yīng)時(shí)間、用戶所需努力和檢索效果來(lái)評(píng)估搜索引擎的性能。Spink、Park和Koshman［13］提出以用戶為中心的評(píng)價(jià)方法，包括有效性(基于用戶對(duì)他們的信息問(wèn)題和信息尋求階段的互動(dòng)的影響)、可用性(包括界面布局和供用戶使用的系統(tǒng)功能)，以評(píng)估Web元搜索引擎。依據(jù)國(guó)內(nèi)外學(xué)者的研究總結(jié)現(xiàn)狀，搜索引擎的評(píng)價(jià)方法及其評(píng)價(jià)體系的構(gòu)建得到了很大的發(fā)展，綜合運(yùn)用了其他學(xué)科的方法，不僅在思路上拓寬了搜索引擎評(píng)價(jià)的理念和方法論，在具體的實(shí)現(xiàn)技術(shù)上也進(jìn)行了大膽探索和嘗試，充分結(jié)合了各個(gè)學(xué)科之間的交叉優(yōu)勢(shì)，為搜索引擎評(píng)價(jià)開(kāi)辟了新的道路。同時(shí)，由于沒(méi)有統(tǒng)一的方法和體系，不同學(xué)者對(duì)搜索引擎的性能評(píng)價(jià)及其體系的構(gòu)建還是有較大的差距，且大多數(shù)學(xué)者都是從總體的角度對(duì)性能評(píng)價(jià)的各個(gè)方面進(jìn)行闡述，沒(méi)有明確的指出層次性以及實(shí)踐方式，使得在實(shí)際應(yīng)用方面缺乏可行性和操作性，造成體系超前發(fā)展而實(shí)際應(yīng)用匱乏的局面。不可否認(rèn)的是，這些學(xué)術(shù)成果為今后搜索引擎評(píng)價(jià)指標(biāo)體系的構(gòu)建研究提供了科學(xué)的參考依據(jù)和寶貴的借鑒材料。

3.2 搜索引擎評(píng)價(jià)指標(biāo)匯總

通過(guò)文獻(xiàn)調(diào)研，筆者總結(jié)歸納出了國(guó)內(nèi)外已有的有代表性的搜索引擎性能評(píng)價(jià)指標(biāo)，如表1所示。

表1 搜索引擎評(píng)價(jià)指標(biāo)

將以上所列指標(biāo)去重、精煉，歸納出關(guān)鍵指標(biāo)，在此不做一級(jí)指標(biāo)和二級(jí)指標(biāo)的劃分，將其作為一個(gè)同等級(jí)別的指標(biāo)進(jìn)行歸并和層次分類。

4 基于層次模型的搜索引擎評(píng)價(jià)

4.1 評(píng)價(jià)方法

用戶認(rèn)知和需求的馬斯洛演進(jìn)規(guī)律，可根據(jù)時(shí)間和環(huán)境進(jìn)行分析，如:在網(wǎng)上中文信息匱乏的年代，其階段下的用戶認(rèn)知和需求以瀏覽更豐富的互聯(lián)網(wǎng)中文內(nèi)容為主;在內(nèi)容為主的門戶網(wǎng)站崛起后，上一階段的主要需求高峰過(guò)去，高一級(jí)的用戶認(rèn)知和需求開(kāi)始從“被動(dòng)閱讀”向“主動(dòng)性”轉(zhuǎn)變;在主動(dòng)性的搜索、通信和游戲普及之后，上一階段的主要需求依然存在，只是開(kāi)始向著細(xì)分和多元的更高級(jí)需求方向發(fā)展。跟蹤用戶需求層次的變化，滿足用戶的基本需求，激發(fā)用戶的附屬和細(xì)分需求，引導(dǎo)用戶的高層次需求。作為一個(gè)成功的搜索引擎需要在用戶需求的變化時(shí)，及時(shí)的調(diào)整發(fā)展戰(zhàn)略，甚至預(yù)測(cè)到用戶的下一個(gè)需求，才能在眾多搜索引擎中獨(dú)占鰲頭。

依據(jù)搜索引擎能否滿足用戶的檢索需求對(duì)搜索引擎的評(píng)價(jià)，是評(píng)測(cè)該搜索引擎的發(fā)展階段和發(fā)展?jié)摿Φ囊粋€(gè)側(cè)面。用戶的需求變化會(huì)導(dǎo)致用戶檢索行為的變化，進(jìn)而影響到用戶的滿意度導(dǎo)致對(duì)搜索引擎的忠誠(chéng)度的變化，關(guān)系到搜索引擎的檢索量和用戶群體的穩(wěn)定性及市場(chǎng)的占有率。如果能依據(jù)用戶不同層次的需求變化制定相應(yīng)的評(píng)價(jià)體系，不同的需求層次對(duì)應(yīng)不同的評(píng)價(jià)指標(biāo)，就可以清楚的知道搜索引擎現(xiàn)階段已經(jīng)滿足了用戶的哪些需求，到達(dá)了發(fā)展的第幾個(gè)層次，下一個(gè)階段的發(fā)展需要滿足用戶的哪些需求，從而制定發(fā)展計(jì)劃和戰(zhàn)略決策，使其更具有現(xiàn)實(shí)依據(jù)性和實(shí)用性。

根據(jù)網(wǎng)絡(luò)用戶的需求層次理論建立的搜索引擎評(píng)價(jià)層次等級(jí)，分為基本層次、價(jià)值層次、特色層次和品牌層次四個(gè)層次的評(píng)價(jià)。根據(jù)馬斯洛需求層次的設(shè)計(jì)思路，四個(gè)層次像階梯一樣從低到高，按層次逐級(jí)遞升，對(duì)搜索引擎各方面的指標(biāo)建設(shè)要求越來(lái)越高。面向用戶的搜索引擎不能只看到自身的發(fā)展戰(zhàn)略，重點(diǎn)應(yīng)落在結(jié)合用戶需求與自身的發(fā)展，根據(jù)指標(biāo)建設(shè)的規(guī)律性和層次性進(jìn)行搜索引擎檢索性能的評(píng)價(jià)和建設(shè)。依據(jù)一個(gè)需求等級(jí)建立一個(gè)評(píng)價(jià)等級(jí)的原則構(gòu)建性能評(píng)價(jià)的層次模型:基本需求對(duì)應(yīng)基本層次的評(píng)價(jià)，社會(huì)需求對(duì)應(yīng)價(jià)值層次的評(píng)價(jià)，尊重需求對(duì)應(yīng)特色層次的需求，自我實(shí)現(xiàn)需求對(duì)應(yīng)品牌層次的評(píng)價(jià)來(lái)構(gòu)建評(píng)價(jià)層次模型，然后將匯總后的評(píng)價(jià)指標(biāo)填入相應(yīng)的層次中，得出的層次模型的設(shè)計(jì)圖如圖2所示。

圖2 搜索引擎評(píng)價(jià)的層次模型設(shè)計(jì)

四個(gè)層次的評(píng)價(jià)指標(biāo)不是簡(jiǎn)單的匯總和分類，而是依據(jù)用戶的需求變化進(jìn)行對(duì)應(yīng)的指標(biāo)評(píng)估，從基本層次用戶最直接接觸到搜索引擎評(píng)價(jià)的相關(guān)方面，包括視覺(jué)系列和安全系列，到價(jià)值層次是對(duì)檢索過(guò)程以及檢索結(jié)果的評(píng)價(jià)，是搜索引擎建設(shè)的主要方面，所能帶給用戶最直接的價(jià)值和結(jié)果，到特色層次上用戶不再滿足于搜索引擎自身的價(jià)值，更多的要求給出潛在價(jià)值，提供更深入和獨(dú)特而又全面的檢索服務(wù)，最后上升到對(duì)一個(gè)品牌的忠誠(chéng)。在這一構(gòu)建過(guò)程中充分考慮了用戶的檢索需求和行為，旨在使系統(tǒng)的構(gòu)建符合客觀發(fā)展的規(guī)律。具體填充規(guī)則如下:

(1)基本層次的評(píng)價(jià):需滿足用戶對(duì)搜索引擎檢索的最基本的要求，也指搜索引擎之所以能夠成為用戶檢索的工具的基本條件，包括響應(yīng)速度、用戶界面、用戶負(fù)擔(dān)、信息過(guò)濾、穩(wěn)定性等基礎(chǔ)性條件的評(píng)價(jià)。通過(guò)基本層次的評(píng)價(jià)，我們主要是區(qū)別用戶檢索信息的不同方式，指出搜索引擎區(qū)別于數(shù)據(jù)庫(kù)、門戶網(wǎng)站這些同類型網(wǎng)站的基本要點(diǎn)，包括不同搜索引擎能提供用戶不同的檢索方式、檢索主題等。

(2)價(jià)值層次的評(píng)價(jià):需使用戶看到搜索引擎所檢索到的信息的有用性和有效性，也是某搜索引擎能夠?yàn)橛脩羲J(rèn)可，脫穎而出的方面，包括數(shù)據(jù)庫(kù)的構(gòu)成、檢索性能、檢索結(jié)果、查全率、查準(zhǔn)率等指標(biāo)，能將搜索引擎的性能、使用價(jià)值體現(xiàn)給用戶的評(píng)價(jià)。通過(guò)價(jià)值層次評(píng)價(jià)的各項(xiàng)指標(biāo)，用戶主要關(guān)注的在某搜索引擎的檢索過(guò)程中能否滿足自身的檢索需求，搜索引擎反饋的信息的是否有價(jià)值，也就是學(xué)者們普遍所討論的搜索引擎性能評(píng)價(jià)方面的研究。

(3)特色層次的評(píng)價(jià):更多的滿足用戶的個(gè)性化需求，也指搜索引擎之于其他競(jìng)爭(zhēng)者所擁有的獨(dú)特的作用，包括精品推薦、個(gè)性服務(wù)、幫助服務(wù)等指標(biāo)，如有道搜索的翻譯服務(wù)，愛(ài)問(wèn)的資源共享平臺(tái)，搜搜的網(wǎng)絡(luò)預(yù)覽功能等［14］。在搜索引擎如雨后春筍般成長(zhǎng)的今天，只有擁有更好的特色服務(wù)，才能讓用戶更能記住這個(gè)特定的網(wǎng)站。作為搜索引擎本身，就更應(yīng)該以用戶為主，分析用戶日志，在Web2.0不斷發(fā)展的技術(shù)支持下，建立自身的特色服務(wù)。

(4)品牌層次的評(píng)價(jià):在最高層次的評(píng)價(jià)中，用戶關(guān)注自我價(jià)值的實(shí)現(xiàn)，關(guān)系到用戶會(huì)否持續(xù)使用資源。從搜索引擎創(chuàng)立者本身所具有的形象和價(jià)值出發(fā)，我們都知道用戶行為具有偏向性，那么搜索引擎公司自身的企業(yè)形象都會(huì)影響到搜索引擎評(píng)價(jià)，因而，搜索引擎逐漸變得更加商業(yè)化，越來(lái)越多的將市場(chǎng)營(yíng)銷和形象推廣運(yùn)用到搜索引擎的建設(shè)中去。

本搜索引擎性能評(píng)價(jià)的層次模型的最大特殊之處不僅在于融合了用戶需求金字塔理論，最重要的是加強(qiáng)了實(shí)際操作中的可行性。四個(gè)層次的評(píng)價(jià)逐步深入和細(xì)化，給搜索引擎的評(píng)價(jià)作出了更簡(jiǎn)潔明了的歸納和分層，使我們可以在具體實(shí)施時(shí)一步步的深入，一層層的對(duì)比，這樣有層次有節(jié)奏的評(píng)價(jià)過(guò)程對(duì)搜索引擎性能評(píng)價(jià)的他評(píng)和自評(píng)都是一個(gè)簡(jiǎn)單而實(shí)用的體系。在他評(píng)中，這樣的評(píng)價(jià)體系打破了以往的分級(jí)指標(biāo)的評(píng)價(jià)過(guò)程，轉(zhuǎn)為層次遞升的逐步評(píng)測(cè)，加強(qiáng)了他評(píng)過(guò)程中的目的性和結(jié)果的直觀性，在評(píng)價(jià)中不用處理紛亂的評(píng)價(jià)指標(biāo)，進(jìn)行漫無(wú)目的的測(cè)評(píng)，為進(jìn)行進(jìn)一步的情報(bào)分析和數(shù)據(jù)挖掘提供依據(jù)?？v觀以往的評(píng)價(jià)系統(tǒng)，都屬于專業(yè)技能型評(píng)測(cè)，作為搜索引擎缺乏評(píng)測(cè)專門人員時(shí)，這樣的一套直觀的模型能夠使公司最底層的員工也有思路和方法進(jìn)行自我評(píng)定。無(wú)論是在自身功能完善或是與競(jìng)爭(zhēng)對(duì)手的比較，層次模型能讓搜索引擎公司進(jìn)行自我評(píng)價(jià)的時(shí)候更加具有目的性，老的搜索引擎可以根據(jù)自身用戶的最廣大需求對(duì)應(yīng)相應(yīng)的指標(biāo)，找到優(yōu)勢(shì)指標(biāo)與劣勢(shì)指標(biāo)，進(jìn)行完善;新的搜索引擎也能根據(jù)評(píng)價(jià)層次逐步的建設(shè)自身，逐層的提高搜索引擎的性能，循序漸進(jìn)，滿足用戶的特定需求。

搜索引擎的評(píng)價(jià)正在越來(lái)越多的結(jié)合情報(bào)學(xué)分析方法，如德?tīng)柗品ā⒍?biāo)比超法，目的在于不僅需要得到評(píng)價(jià)結(jié)果，更重要的是為搜索引擎的發(fā)展提供具有建設(shè)性的意見(jiàn)。以往的評(píng)價(jià)指標(biāo)體系構(gòu)建比較成熟，但是卻鮮少有人在實(shí)踐中運(yùn)用，主要就是這樣的評(píng)價(jià)方式僅僅是停留在學(xué)術(shù)理論的基礎(chǔ)上，對(duì)于搜索引擎公司來(lái)說(shuō)，它不能很好的運(yùn)用到這樣的評(píng)測(cè)結(jié)果完善自身。而層次模型彌補(bǔ)了這樣的不足，強(qiáng)調(diào)了現(xiàn)實(shí)實(shí)用性和可操作性，馬斯洛需求層次理論本身就是經(jīng)濟(jì)學(xué)的理論，經(jīng)濟(jì)學(xué)理論的傳承和發(fā)展最重要的一點(diǎn)就是具有可行性和利益性，將這樣的一個(gè)經(jīng)典理論結(jié)合到圖書(shū)情報(bào)專業(yè)中來(lái)可以很好的彌補(bǔ)理論有余而功利欠缺的現(xiàn)象，使是搜索引擎公司看到這樣的一個(gè)層次模型能給它帶來(lái)的利益和幫助，從而推廣性能評(píng)價(jià)層次模型的利用。

4.2 評(píng)價(jià)實(shí)例

為顯示本模型的優(yōu)勢(shì)，選用定標(biāo)比超方法與層次模型結(jié)合，進(jìn)行實(shí)例分析。定標(biāo)比超法是將本企業(yè)的各項(xiàng)活動(dòng)與從事該項(xiàng)活動(dòng)的最佳企業(yè)進(jìn)行比較，修正自身的不足，從而定出最佳的行動(dòng)方案，參與市場(chǎng)競(jìng)爭(zhēng)，達(dá)到預(yù)期目標(biāo)［15］。搜索引擎公司作為一個(gè)單獨(dú)的企業(yè)，有著各自的競(jìng)爭(zhēng)對(duì)手，定標(biāo)比超法使其獲得最快速的成長(zhǎng)，對(duì)競(jìng)爭(zhēng)對(duì)手的定標(biāo)比超，可以獲取大量的競(jìng)爭(zhēng)對(duì)手?jǐn)?shù)據(jù)，了解競(jìng)爭(zhēng)對(duì)手的產(chǎn)品、服務(wù)、管理模式和戰(zhàn)略，從而可以詳細(xì)地了解競(jìng)爭(zhēng)對(duì)手的情況，在此基礎(chǔ)上，學(xué)習(xí)競(jìng)爭(zhēng)對(duì)手的長(zhǎng)處，吸取競(jìng)爭(zhēng)對(duì)手的經(jīng)驗(yàn)，從而盡可能地少走彎路。定標(biāo)比超的第一步也是最重要的一步在于確定“定標(biāo)”對(duì)象和“定標(biāo)”內(nèi)容，需要考慮哪種評(píng)價(jià)指標(biāo)是最迫切需要定標(biāo)的，在此過(guò)程中結(jié)合評(píng)價(jià)層次模型將使定標(biāo)過(guò)程更加合理和符合用戶需求。具體操作步驟為:確定定標(biāo)比超的對(duì)象，根據(jù)每一層的指標(biāo)搜集定標(biāo)比超的數(shù)據(jù)，確定目前的績(jī)效差距，根據(jù)差距分析，計(jì)劃未來(lái)的執(zhí)行水平，并確定這些目標(biāo)應(yīng)該如何獲得及保持，最后確立要實(shí)現(xiàn)的目標(biāo)，形成行動(dòng)計(jì)劃。

由于競(jìng)爭(zhēng)對(duì)手與自身企業(yè)在某種程度上有一定的相似性，定標(biāo)比超所得的結(jié)果在實(shí)施上比較容易，有的方法甚至可以幾乎不加改變地予以采納，可以說(shuō)競(jìng)爭(zhēng)對(duì)手的定標(biāo)比超，對(duì)于企業(yè)戰(zhàn)勝對(duì)手，贏得領(lǐng)先地位是非常有效的。然而，定標(biāo)比超法具有片面性、靜態(tài)性以及局部性的不足之處［16］，在實(shí)施過(guò)程中輔以評(píng)價(jià)層次模型正是為了盡量的克服這一缺陷。在實(shí)際評(píng)價(jià)過(guò)程中，確定本搜索引擎的評(píng)價(jià)層次使目的和定位更加準(zhǔn)確和清晰，是基本層次的對(duì)比還是價(jià)值層次或是特色層次都有相應(yīng)的指標(biāo)，依據(jù)層次中的指標(biāo)與某一特定搜索引擎進(jìn)行比較，就可以方便的找出應(yīng)該定標(biāo)比超的某個(gè)指標(biāo)進(jìn)行改進(jìn)和建設(shè)。以下以有道搜索引擎為例，以百度搜索引擎為定標(biāo)比超對(duì)象，進(jìn)行評(píng)價(jià)試驗(yàn)，并提出現(xiàn)實(shí)可行的建設(shè)意見(jiàn)。

百度是全球最大的中文搜索引擎，自1999年創(chuàng)建以來(lái)，收到了大眾的青睞，而有道搜索作為網(wǎng)易自主研發(fā)的全新中文搜索引擎于2007年正式推出，致力于為互聯(lián)網(wǎng)用戶提供更快更好的中文搜索服務(wù)。將這兩者作為評(píng)價(jià)對(duì)象進(jìn)行分析可以清楚的看到“老字號(hào)”與“后起之秀”各自發(fā)展的側(cè)重點(diǎn)和建設(shè)的特殊性。實(shí)例具體所研究的內(nèi)容是如何利用所構(gòu)建的評(píng)價(jià)層次模型方便、快捷的對(duì)兩個(gè)搜索引擎的各方面進(jìn)行簡(jiǎn)單的對(duì)比，從而找出各自優(yōu)缺點(diǎn)，為具體進(jìn)行效率和效能改善提供依據(jù)。本文以“Honey”為主題詞進(jìn)行搜索和結(jié)果分析，側(cè)重主觀分析。

首先從基本層次來(lái)說(shuō)，有道的搜索界面簡(jiǎn)潔明了，界面親和度好，響應(yīng)速度也比較快，檢索方式、檢索功能也比較齊全，基本能滿足用戶的檢索需求。在實(shí)際檢索過(guò)程中，有道的檢索頁(yè)面最上端會(huì)有贊助商鏈接，信息的過(guò)濾性不強(qiáng)。

從價(jià)值層次上來(lái)說(shuō)，有道的檢索結(jié)果顯示清晰，就檢索結(jié)果來(lái)說(shuō)，檢全率比較高，側(cè)重學(xué)術(shù)，包括外文資料、維基百科資料等，信息的價(jià)值量大。新穎性和相關(guān)度比較好。對(duì)比百度來(lái)說(shuō)，兩者在價(jià)值層次上的指標(biāo)基本滿足用戶的需求。

從特色層次上來(lái)說(shuō)，有道的翻譯頁(yè)面服務(wù)非常便捷，在頁(yè)面的低端也有滿意度調(diào)查，以及頁(yè)面左側(cè)的網(wǎng)頁(yè)結(jié)果分類、搜索歷史等，都是特色之處，使用戶獲得更多的附加服務(wù)以及拓展服務(wù)。相對(duì)于百度來(lái)說(shuō)，也還是有許多不如百度的地方。如:百度搜索頁(yè)面左上角的天氣預(yù)報(bào)，會(huì)更加令用戶感到貼心;精品推薦、附加服務(wù)也沒(méi)有百度做的精細(xì)。

從品牌層次上來(lái)說(shuō)，百度號(hào)稱中文搜索引擎的龍頭老大，它的用戶忠誠(chéng)度和權(quán)威性比有道高出許多，有道的品牌形象和品牌推廣需進(jìn)一步提高。百度中的百度貼吧讓用戶有更多實(shí)現(xiàn)自身價(jià)值和榮譽(yù)的機(jī)會(huì)，有道需要進(jìn)一步加強(qiáng)。

通過(guò)四個(gè)層次的分析，運(yùn)用定標(biāo)比超法，我們就可以快速方便的總結(jié)出對(duì)有道搜索引擎行之有效的發(fā)展策略。上述分析表明:目前有道的基礎(chǔ)設(shè)施已基本完善，價(jià)值層次的建設(shè)與百度相差也不大，最需解決的是個(gè)性化、附加功能的建設(shè)，今后更應(yīng)該關(guān)注特色層次和品牌層次的建設(shè)，才能在眾多搜索引擎中找到發(fā)展之路。因此，定標(biāo)比超的層次定位在第三層次——價(jià)值層次，定標(biāo)比超的內(nèi)容為第三層次中的各項(xiàng)指標(biāo)，在簡(jiǎn)單的分析之后進(jìn)行相關(guān)數(shù)據(jù)搜集，進(jìn)行比超計(jì)劃。

5 結(jié)論

本文基于馬斯洛需求層次理論，構(gòu)建了網(wǎng)絡(luò)用戶需求層次金字塔。再根據(jù)網(wǎng)絡(luò)用戶的需求層次，建立了搜索引擎評(píng)價(jià)的層次模型，即基本層次、價(jià)值層次、特色層次評(píng)價(jià)、品牌層次的評(píng)價(jià)，使搜索引擎的評(píng)價(jià)更具有可操作性。然后運(yùn)用定標(biāo)比超和層次模型相結(jié)合的方法，比較分析有道與百度的建設(shè)側(cè)重點(diǎn)，通過(guò)逐層分析突出層次模型使用的方便和實(shí)用性，并提出了實(shí)際建設(shè)意見(jiàn)。

筆者下一步的工作是希望通過(guò)引進(jìn)專家調(diào)查法和賦值法使層次模型的結(jié)構(gòu)更加合理，指標(biāo)填充更加科學(xué)，評(píng)價(jià)過(guò)程更加量化，從而使得層次理論能真正具有可操作性和科學(xué)合理性。

［1］岑榮偉.基于用戶行為分析的搜索引擎評(píng)價(jià)研究［D］.北京:清華大學(xué)，2010.

［2］孫戰(zhàn)彪.需求層次理論在圖書(shū)館管理中的應(yīng)用［J］.科技情報(bào)開(kāi)發(fā)與經(jīng)濟(jì)，2010(17):28-30.

［3］方曉麗，張麗琴.馬斯洛理論在建設(shè)用地規(guī)劃舒適度評(píng)價(jià)研究中的應(yīng)用［J］.科技資訊，2008(3):92-93.

［4］張姣姣.城市獨(dú)居老人生活質(zhì)量評(píng)價(jià)指標(biāo)體系構(gòu)建研究［D］.杭州:杭州師范大學(xué)，2012.

［5］王 潔.基于AHP模型居民幸福指數(shù)評(píng)價(jià)指標(biāo)體系構(gòu)建與研究［J］.南方農(nóng)村，2012(11):71-73，78.

［6］胡小華.基于用戶的智能問(wèn)答系統(tǒng)的設(shè)計(jì)與研究［D］.天津:天津師范大學(xué)，2012.

［7］蘇君華.搜索引擎評(píng)價(jià)研究綜述［J］.情報(bào)雜志，2011 (4):28-33，65.

［8］葉鳳云，汪傳雷.Web搜索引擎滿意度模型與評(píng)價(jià)指標(biāo)體系構(gòu)建［J］.圖書(shū)情報(bào)工作，2011(22):124-127，46.

［9］王靜疆.搜索引擎評(píng)價(jià)指標(biāo)體系比較研究［J］.圖書(shū)情報(bào)工作，2008(10):136-138，116.

［10］柯 青，成 穎，鄭彥寧，等.搜索引擎可用性評(píng)價(jià)指標(biāo)體系構(gòu)建［J］.現(xiàn)代圖書(shū)情報(bào)技術(shù)，2011(11):24-30.

［11］張國(guó)海，馬曉英，閏立光.基于熵權(quán)的搜索引擎評(píng)價(jià)指標(biāo)體系的構(gòu)建［J］.圖書(shū)情報(bào)工作，2010(12):74-77.

［12］Bar-Ilan J.Methods for measuring search engine performance over time［J］.Journal of the American Society for Information Science and Technology，2002，53(4): 308-319.

［13］Spink A，Park M，Koshman S.Factors affecting assigned information problem ordering during Web search:An exploratory study［J］.Information Processing and Management，2006(42):1366-1378.

［14］莫純銳.國(guó)內(nèi)著名搜索引擎的對(duì)比分析與評(píng)價(jià)——以搜搜、搜狗、有道和愛(ài)問(wèn)為例［J］.電腦知識(shí)與技術(shù)，2011(7):1474-1476，1492.

［15］王永勝，李 敏，任寶石.國(guó)內(nèi)競(jìng)爭(zhēng)情報(bào)分析方法研究綜述［J］.科技情報(bào)開(kāi)發(fā)與經(jīng)濟(jì)，2011(35):164-166.

［16］謝新洲，吳淑燕.競(jìng)爭(zhēng)情報(bào)分析方法——定標(biāo)比超［J］.北京大學(xué)學(xué)報(bào)(哲學(xué)社會(huì)科學(xué)版)，2003(2):137 -151.

(責(zé)任編校 田麗麗)

Evaluation of Search Engines Based on the Hierarchy Model

Song Yuqing，Lu Lin
Institute of Science and Technology Information，Jiangsu University，Zhenjiang 212013，China

Based on Maslow’s hierarchy of needs，we create the hierarchy of Internet users’needs.Then we present an overview of the evaluation index systems of search engines and summarize evaluation indicators.Furthermore，we create a hierarchy model for the evaluation of search engines according to the hierarchy of Internet users’needs.At last，by combining the bench-marking and the hierarchymodel，we carry on a case study of Baidu and Youdao.

search engine;evaluation;hierarchy;system;index

G350

宋余慶，男，1959年生，教授，江蘇大學(xué)副校長(zhǎng)，博士生導(dǎo)師，主要研究方向?yàn)樾畔踩?、醫(yī)學(xué)圖像處理，發(fā)表論文數(shù)篇;陸 琳，女，1989年生，2012級(jí)情報(bào)學(xué)碩士研究生。