[摘要]針對目前搜索引擎評價(jià)指標(biāo)體系研究現(xiàn)狀，在對國內(nèi)外幾個核心學(xué)者和國內(nèi)若干篇較新文章的搜索引擎評價(jià)指標(biāo)體系進(jìn)行介紹，并對研究內(nèi)容及其側(cè)重點(diǎn)進(jìn)行對比的基礎(chǔ)上，總結(jié)當(dāng)前我國評價(jià)指標(biāo)體系研究的特點(diǎn)，提出對指標(biāo)評價(jià)體系的發(fā)展展望。
　　[關(guān)鍵詞]搜索引擎　評價(jià)指標(biāo)體系　特點(diǎn)　發(fā)展
　　[分類號]G354.4
　　1　引言
　　
　　據(jù)CNNIC第21次中國互聯(lián)網(wǎng)調(diào)查報(bào)告數(shù)據(jù)顯示，中國目前2.1億網(wǎng)民中，經(jīng)常使用搜索引擎的人數(shù)高達(dá)72.4％，他們?nèi)粘Ｉ钚畔⒂?0％以上是通過網(wǎng)絡(luò)獲得的。
　　在信息爆炸的今天，互聯(lián)網(wǎng)海量信息需要經(jīng)過篩選進(jìn)入人們的視野，從傳播學(xué)角度講，需要一個信息把關(guān)人的角色，將海量信息分類、匯總、準(zhǔn)確地傳輸?shù)叫枨笳呙媲埃粡木W(wǎng)絡(luò)功能講，沒有任何互聯(lián)網(wǎng)工具比搜索引擎更適合這個角色了。
　　有需求，自然就會產(chǎn)生市場。網(wǎng)絡(luò)巨頭紛紛把利潤中心轉(zhuǎn)向搜索引擎市場，除了google、baidu、yahoo!等專業(yè)搜索機(jī)構(gòu)，甚至連sina、sohu等門戶也開始介入搜索引擎領(lǐng)域，一時(shí)間，搜索引擎成為網(wǎng)絡(luò)經(jīng)營公司的重要產(chǎn)品。搜索引擎評價(jià)指標(biāo)體系，為我們提供了一個了解、分辨、選擇搜索引擎的學(xué)術(shù)標(biāo)準(zhǔn)，充分了解分析這個指標(biāo)體系，是我們研究搜索引擎的首要條件。
　　
　　2　評價(jià)指標(biāo)體系分析
　　
　　　本部分主要對國內(nèi)外幾個核心學(xué)者的評價(jià)體系進(jìn)行對比分析，并且結(jié)合若干篇較新的論文中的評價(jià)指標(biāo)，討論它們之間的區(qū)別和繼承性，并總結(jié)當(dāng)前搜索引擎評價(jià)指標(biāo)體系研究的重點(diǎn)與不足。
　　
　　2.1　Lancaster評價(jià)指標(biāo)體系
　　1973年，美國學(xué)者Lancaster和Fayen曾列出6項(xiàng)衡量信息檢索系統(tǒng)的評價(jià)指標(biāo)：覆蓋范圍、查全率、查準(zhǔn)率、響應(yīng)時(shí)間、用戶負(fù)擔(dān)和檢索結(jié)果輸出格式。這是傳統(tǒng)書目聯(lián)機(jī)檢索的評價(jià)指標(biāo)，顯然，他們當(dāng)時(shí)無法考察目前復(fù)雜網(wǎng)絡(luò)檢索甚至搜索引擎的檢索情況，但已經(jīng)從技術(shù)以及用戶需求方面給后來者們建立了一個基本框架，奠定了從技術(shù)和用戶角度出發(fā)的搜索引擎評價(jià)指標(biāo)體系發(fā)展方向，隨后的許多評價(jià)體系都是按照這個脈絡(luò)建立的。這個評價(jià)指標(biāo)體系從檢索源、檢索效果、檢索輸出以及用戶使用角度考慮了信息檢索系統(tǒng)可能的評價(jià)點(diǎn)，并強(qiáng)調(diào)了檢索輸出格式的重要性，這與書目聯(lián)機(jī)檢索特點(diǎn)是分不開的。這套體系并未預(yù)料到若干年后網(wǎng)絡(luò)條件下的檢索源復(fù)雜度、檢索技術(shù)多樣性和用戶要求，所提出的評價(jià)指標(biāo)可以作為目前搜索引擎評價(jià)指標(biāo)體系的基礎(chǔ)評價(jià)指標(biāo)。
　　
　　2.2　Heting Chu、Marilyn Rosenthal評價(jià)指標(biāo)體系
　　Heting Chu、Marilyn Rosenthal在對Alta Vista、Excite和LyCOS三個搜索引擎進(jìn)行比較研究之后提出應(yīng)該從標(biāo)引、檢索能力、檢索效果、輸出和用戶負(fù)擔(dān)方面評價(jià)搜索引擎。Alta Vista、Excite的特點(diǎn)使得研究者注意到了搜索引擎檢索中標(biāo)引水平和檢索能力的重要作用�？梢钥闯�，搜索引擎評價(jià)指標(biāo)體系的發(fā)展，是同搜索引擎技術(shù)的發(fā)展分不開的，隨著搜索引擎檢索能力的提高，其評價(jià)指標(biāo)體系也開始逐步豐富擴(kuò)展，直接針對核心新技術(shù)產(chǎn)生了相應(yīng)的評價(jià)指標(biāo)體系。
　　
　　
　　2.3　Bar-Ila評價(jià)指標(biāo)體系
　　Bar-Ila提出應(yīng)從數(shù)據(jù)庫覆蓋范圍、查詢響應(yīng)時(shí)間、用戶所需努力和檢索效果來評估搜索引擎的性能。國外搜索引擎評價(jià)研究最主要的一個特點(diǎn)是強(qiáng)調(diào)“人性化”。因此，他們在確定評價(jià)指標(biāo)的過程中，在充分強(qiáng)調(diào)檢索效率重要性的同時(shí)，常常把用戶負(fù)擔(dān)放在第一位。與Lancaster評價(jià)指標(biāo)、體系相比，這個指標(biāo)體系沒有本質(zhì)的增加，但是將查全率以及查準(zhǔn)率作為檢索效果進(jìn)行描述，是搜索引擎評價(jià)指標(biāo)系統(tǒng)化思想的一個體現(xiàn)。
　　
　　2.4　曾民族綜合評價(jià)指標(biāo)體系
　　1997年，國內(nèi)學(xué)者曾民族在綜合國內(nèi)外搜索引擎評價(jià)研究成果的基礎(chǔ)上，提出了以下6類評價(jià)指標(biāo)：數(shù)據(jù)庫規(guī)模和內(nèi)容、索引方法、檢索功能、檢索結(jié)果、用戶界面、查準(zhǔn)率和響應(yīng)時(shí)間。
　　這套評價(jià)指標(biāo)，是在考察當(dāng)時(shí)網(wǎng)絡(luò)信息資源特點(diǎn)、網(wǎng)絡(luò)查詢工具、www查詢引擎、網(wǎng)絡(luò)自動檢索技術(shù)和Internet搜索引擎實(shí)例，并總結(jié)已有國外搜索引擎評價(jià)研究成果的基礎(chǔ)上提出的，是對當(dāng)時(shí)研究領(lǐng)域與搜索相關(guān)的各項(xiàng)技術(shù)指標(biāo)的整合，具有較高的理論覆蓋度和理論價(jià)值。但是，因?yàn)槟壳皼]有搜索引擎可以做到集成最新索引、檢索技術(shù)、用戶服務(wù)，所以這套評價(jià)指標(biāo)體系只能作為一個綜合備選庫，而實(shí)際對某些搜索引擎進(jìn)行評價(jià)時(shí)，可以從這個指標(biāo)庫當(dāng)中抽取需要的指標(biāo)進(jìn)行組合。
　　需要注意的是，曾民族對傳統(tǒng)檢索效果部分沒有統(tǒng)一指明，而是在第六點(diǎn)的其他部分點(diǎn)出查準(zhǔn)率和響應(yīng)時(shí)間，是由其對目前網(wǎng)絡(luò)條件下信息資源特點(diǎn)的分析所得出的。曾教授認(rèn)為：“信息源分散、無序、更迭、消亡無法預(yù)測。信息源的無政府狀態(tài)迫使人們更改相關(guān)性判斷的概念和標(biāo)準(zhǔn)。用戶無法判斷網(wǎng)上有多少信息同自己需求有關(guān)，查全率等檢索評價(jià)標(biāo)準(zhǔn)需要重新定義�！苯⒃谀壳熬W(wǎng)絡(luò)信息源巨量化、分散、無序、不可預(yù)知的基礎(chǔ)上，資源總量已經(jīng)無法確定，所以查全率也就不得而知。筆者認(rèn)為，面對全網(wǎng)絡(luò)的搜索引擎檢索，查全率之說固然不現(xiàn)實(shí)，但許多專業(yè)領(lǐng)域搜索引擎評價(jià)中，查全率也是一個非常重要且實(shí)際的指標(biāo)，鑒于曾教授對整個網(wǎng)絡(luò)資源進(jìn)行評價(jià)指標(biāo)體系設(shè)計(jì)，不考慮查全率也無可厚非，但對于具體的搜索引擎實(shí)例，查全率理應(yīng)成為評價(jià)指標(biāo)體系的一部分。
　　
　　2.5　宛玲等提出的10種評價(jià)指標(biāo)體系
　　宛玲等在《試析中文搜索引擎的評價(jià)標(biāo)準(zhǔn)》一文中，提出了10種中文搜索引擎的評價(jià)指標(biāo)，分別是：收錄信息范圍、反饋的信息量及內(nèi)容的準(zhǔn)確性、反饋的查詢結(jié)果錯誤率、報(bào)道與內(nèi)容更新速度、檢索性能、響應(yīng)時(shí)間、檢索界面友好性、精品推薦、與其他搜索引擎的友情鏈接、系統(tǒng)性能、點(diǎn)擊率、附加功能等。
　　這套指標(biāo)除包含數(shù)據(jù)庫規(guī)模、檢索性能、檢索效果、用戶界面等類型指標(biāo)之外，還強(qiáng)調(diào)了精品推薦、與其他搜索引擎的友情鏈接、系統(tǒng)性能等與用戶使用相關(guān)的方面，這是國內(nèi)搜索引擎評價(jià)指標(biāo)研究的一個提高，在領(lǐng)悟國外強(qiáng)調(diào)“人性化”的基礎(chǔ)上，將用戶使用體驗(yàn)列為搜索引擎評價(jià)的重要內(nèi)容。
　　隨著web使用技術(shù)的提高，web用戶服務(wù)意識不斷增強(qiáng)，其對搜索引擎的使用已經(jīng)不簡單局限在技術(shù)要求上，“人性化”要求也越來越多，精品推薦、友情鏈接等服務(wù)內(nèi)容也開始出現(xiàn)，將其作為搜索引擎評價(jià)指標(biāo)來研究具有很大的創(chuàng)新意義。就這篇論文的評價(jià)指標(biāo)體系來說，似乎有過于強(qiáng)調(diào)用戶體驗(yàn)的嫌疑，前幾種評價(jià)指標(biāo)沒有進(jìn)行很好的體系構(gòu)建，過于松散和用戶化。
　　
　　2.6　韓圣龍關(guān)于查準(zhǔn)率的改進(jìn)
　　韓圣龍?jiān)凇毒W(wǎng)絡(luò)信息檢索工具評價(jià)指標(biāo)》一文討論了網(wǎng)絡(luò)信息環(huán)境下傳統(tǒng)的信息檢索評價(jià)指標(biāo)體系遇到的困難，并在介紹“相關(guān)性范疇”和“命中記錄查準(zhǔn)率”概念后對查準(zhǔn)率公式作了改進(jìn)。查準(zhǔn)率仍舊是搜索引擎評價(jià)指標(biāo)體系 的核心，查準(zhǔn)率的提高直接反映出搜索引擎的性能，仍舊是當(dāng)今學(xué)者研究的熱點(diǎn)。
　　文章結(jié)尾部分補(bǔ)充了對輸出格式的靈活性、數(shù)據(jù)更新頻率、鏈接的可靠性和用戶界面友好程度4個方面的展望，也充分說明了當(dāng)前學(xué)者對用戶體驗(yàn)指標(biāo)重視程度的提高。
　　
　　2.7　劉偉成關(guān)于元搜索引擎評價(jià)的研究
　　劉偉成在《元搜索引擎性能評價(jià)體系研究》一文中提出關(guān)于元搜索引擎一些主要性能的評價(jià)指標(biāo)。由于元搜索引擎不同于單個搜索引擎的特點(diǎn)，關(guān)注搜索范圍和結(jié)果顯示是元搜索引擎評價(jià)的一個重要方面。元搜索引擎緩解了web數(shù)據(jù)的增長對單個搜索引擎索引網(wǎng)絡(luò)數(shù)據(jù)收集速度的影響，在覆蓋率方面有著明顯的優(yōu)勢，評價(jià)元搜索引擎的搜索指標(biāo)，覆蓋范圍必不可少。從使用角度講，元搜索引擎的搜索功能和效果特點(diǎn)不是非常突出，檢索控制與提問功能則是需要注意的。此外，檢索結(jié)果的輸出及用戶界面是元搜索引擎評價(jià)的另外一個重點(diǎn)，對比單個搜索引擎來說，由于元搜索引擎沒有非常強(qiáng)的核心技術(shù)，其用戶體驗(yàn)評價(jià)變得重要起來。
　　
　　3　評價(jià)指標(biāo)體系研究特點(diǎn)及發(fā)展
　　
　　從以上7種評價(jià)指標(biāo)體系的介紹不難看出，搜索引擎評價(jià)指標(biāo)體系的發(fā)展是一個指標(biāo)內(nèi)容逐漸豐富、指標(biāo)性質(zhì)逐漸商業(yè)化的過程，見表1。
　　在眾評價(jià)指標(biāo)體系中，檢索能力(查全率、查準(zhǔn)率)、用戶負(fù)擔(dān)、檢索結(jié)果都是作為核心指標(biāo)出現(xiàn)的，是對搜索引擎基本功能的描述，代表了搜索引擎評價(jià)的最低要求。用戶體驗(yàn)評價(jià)是近年來搜索引擎評價(jià)指標(biāo)發(fā)展的一個特點(diǎn)，在搜索引擎功能發(fā)展到一定階段的同時(shí)，能否使用戶獲得優(yōu)良的使用體驗(yàn)，成為目前搜索引擎商業(yè)化成功與否的重要評價(jià)指標(biāo)。
　　總體來說，我國搜索引擎評價(jià)指標(biāo)體系的發(fā)展，建立在綜合國外研究成果的基礎(chǔ)之上，并結(jié)合了我國搜索引擎的現(xiàn)狀是綜合并呈一定體系的發(fā)展過程。一方面，沿用了國外評價(jià)指標(biāo)發(fā)展重技術(shù)、重用戶的特征，在體系建設(shè)具有全面、豐富的特點(diǎn)，形成了全面建設(shè)加專攻一面的發(fā)展格局；另一方面，顯示了搜索引擎商業(yè)化發(fā)展對相關(guān)研究的影響。精品推薦、點(diǎn)擊率、附加功能、鏈接可靠性等評價(jià)指標(biāo)的出現(xiàn)，要求研究者們更需要注重用戶體驗(yàn)層次上的商業(yè)效益。
　　就目前發(fā)展?fàn)顩r來看，評價(jià)指標(biāo)體系已經(jīng)較為成熟，但還存在以下問題：
　　
　　3.1　技術(shù)主導(dǎo)
　　目前國內(nèi)學(xué)者的研究，多數(shù)是從檢索性能和效果方面重點(diǎn)建立指標(biāo)評價(jià)體系。對搜索引擎檢索功能的評價(jià)文章頗多，對檢索效果方面也有更為深入的研究，而且日漸成熟。查全率、查準(zhǔn)率是技術(shù)評價(jià)的核心，如何能使搜索引擎全面、準(zhǔn)確地反饋網(wǎng)絡(luò)信息資源，將是長盛不衰的主題。
　　檢索功能的特點(diǎn)越來越突出，內(nèi)容越來越豐富。從布爾檢索、關(guān)鍵詞判斷到概念檢索、上下文關(guān)鍵詞的評價(jià)，反映了搜索引擎技術(shù)日臻成熟，其評價(jià)指標(biāo)也越來越全面。但隨著技術(shù)的發(fā)展，搜索引擎的未來不得而知，所以檢索功能評價(jià)指標(biāo)也有著很大的發(fā)展空間。
　　
　　3.2　系統(tǒng)化研究
　　評價(jià)指標(biāo)系統(tǒng)化、體系化是促進(jìn)研究全面、健康發(fā)展的重要手段。搜索引擎的評價(jià)指標(biāo)之間是存在聯(lián)系的，是一個和諧、功能互補(bǔ)的整體，關(guān)注他們之間的聯(lián)系要比關(guān)注評價(jià)點(diǎn)本身更有意義。
　　搜索引擎評價(jià)指標(biāo)體系的建立，主要遵循了從覆蓋范圍到技術(shù)核心，由檢索結(jié)果到用戶體驗(yàn)的信息傳遞流程。在某個小范圍的指標(biāo)族當(dāng)中，也有著很強(qiáng)的體系關(guān)系，研究這些體系關(guān)系，對于原有指標(biāo)的修改、新指標(biāo)的提出乃至整個指標(biāo)體系的發(fā)展都有著重要的意義。
　　
　　3.3　重視用戶體驗(yàn)
　　國外搜索引擎評價(jià)研究最主要的一個特點(diǎn)是強(qiáng)調(diào)“人性化”。在確定評價(jià)指標(biāo)的過程中，充分強(qiáng)調(diào)檢索效率重要性的同時(shí)，常常把用戶負(fù)擔(dān)放在第一位。
　　隨著用戶服務(wù)意識的提高，關(guān)注用戶負(fù)擔(dān)已經(jīng)遠(yuǎn)遠(yuǎn)不能滿足用戶使用搜索引擎的需求，還需要增加用戶體驗(yàn)。
　　
　　3.4　品牌評價(jià)有待提高
　　筆者認(rèn)為，在建立現(xiàn)階段搜索引擎評價(jià)指標(biāo)體系的同時(shí)，不妨引入“品牌”概念。在經(jīng)濟(jì)高速發(fā)展的今天，搜索引擎已經(jīng)不單單是一項(xiàng)技術(shù)研究，更是一款有著廣大用戶知名度的產(chǎn)品，“品牌忠誠度”、“品牌美譽(yù)度”完全可以成為搜索引擎評價(jià)指標(biāo)體系的借鑒，畢竟，衡量搜索引擎產(chǎn)品的好壞，用戶的評價(jià)才最關(guān)鍵。
　　品牌對于一個網(wǎng)絡(luò)產(chǎn)品的作用是不言而喻的。首先，品牌能夠幫助搜索引擎吸引用戶和保留用戶，用戶的使用和回饋又成為搜索引擎品牌積累的成本；其次，品牌效應(yīng)能夠使搜索引擎的地位得到提升，這已經(jīng)不是搜索功能能夠做到的了，一個好的搜索引擎的成長，不僅需要具備良好的搜索功能，更需要強(qiáng)勢的業(yè)界地位，良性的壓力才能促進(jìn)其發(fā)展；再次，品牌是搜索引擎產(chǎn)品覆蓋率的象征，隨著社會經(jīng)濟(jì)化、產(chǎn)業(yè)化的發(fā)展，品牌的效用會越來越突出，一個成功的、強(qiáng)勢的品牌也將成為搜索引擎評價(jià)的一項(xiàng)重要指標(biāo)。
　　
　　4　小結(jié)
　　
　　技術(shù)、用戶是計(jì)算機(jī)技術(shù)產(chǎn)品市場化始終需要面對的兩個問題。搜索引擎的發(fā)展，是從用戶需要開始的，經(jīng)歷了長時(shí)間的技術(shù)研究，并最終實(shí)現(xiàn)搜索引擎產(chǎn)品，得到市場推廣，接著，由推廣效果得到改進(jìn)意見，進(jìn)而優(yōu)化產(chǎn)品，再推廣。在這個過程中，搜索業(yè)界的學(xué)者開始對搜索引擎評價(jià)研究，目的是給搜索引擎的發(fā)展提供一套系統(tǒng)化、科學(xué)化的參考意見。
　　搜索引擎評價(jià)從搜索對象出發(fā)，歷經(jīng)搜索功能、搜索效果、搜索結(jié)果評價(jià)最終到達(dá)用戶層面，這個過程，就是搜索引擎評價(jià)指標(biāo)體系的基本框架�？梢哉f，現(xiàn)階段搜索引擎評價(jià)體系已經(jīng)頗為成熟，至少在短時(shí)間內(nèi)，整個體系的提高多數(shù)只是小范圍的修修補(bǔ)補(bǔ)和某個具體指標(biāo)新技術(shù)出現(xiàn)所帶來的評價(jià)指標(biāo)的變化，搜索引擎評價(jià)指標(biāo)體系的發(fā)展已經(jīng)變得全面而趨穩(wěn)。
　　搜索引擎，歸根到底是為用戶提供服務(wù)的，其評價(jià)指標(biāo)體系的各個方面，都是試圖給用戶提供更好更優(yōu)秀的檢索結(jié)果。如何能讓用戶更簡單、更迅速、更準(zhǔn)確的獲取所需要的信息，才是搜索引擎評價(jià)的重點(diǎn)。搜索引擎用戶評價(jià)指標(biāo)的發(fā)展，不僅僅要從系統(tǒng)功能和用戶需求角度出發(fā)，還需要考慮社會化需求的各個方面，在結(jié)合搜索結(jié)果、用戶需求和社會文化影響等層面的要求下做出合理的、系統(tǒng)化的用戶評價(jià)指標(biāo)。

相關(guān)熱詞搜索：指標(biāo)體系 評價(jià) 搜索引擎 搜索引擎評價(jià)指標(biāo)體系比較研究 評價(jià)搜索引擎效果的指標(biāo) 搜索引擎的評價(jià)標(biāo)準(zhǔn)