科技情報開發(fā)與經(jīng)濟文章編號:１００５－６０３３（２００９）０４－0155-03SCI -TECH INFORMATION DEVELOPMENT ＆ECONOMY ２００9年第１9卷第4期收稿日期:２

科技情報開發(fā)與經(jīng)濟

文章編號:１００５－６０３３（２００９）０４－0155-03

SCI -TECH INFORMATION DEVELOPMENT ＆ECONOMY ２００9年第１9卷第4期

收稿日期:２００８－１１－２３

國外元搜索引擎評價研究綜述

賈素娜

（華南師范大學經(jīng)濟與管理學院，廣東廣州，５１０００６）

摘要：闡述了元搜索引擎研究評價的必要性，總結和分析了國外元搜索引擎的評價

研究現(xiàn)狀，對元搜索引擎提出了一些建議。關鍵詞：元搜索引擎；評價研究；評價方式中圖分類號：G354文獻標識碼：A

目前，互聯(lián)網(wǎng)的技術與應用在飛速發(fā)展，如何在與日俱增的

眾多站點更好地找到有用的信息，迫切需要一種好的信息檢索工具，于是搜索引擎便應運而生。如何獲得一個既準確、又全面且令人滿意的結果，就必須反復使用多個搜索引擎（Search Engine ），在此基礎上元搜索引擎（Meta Search Engine ）便應運而

有相當部分的比較研究是關于搜生。但是就目前研究情況來看，

索引擎的評價研究，而關于元搜索引擎評價研究的數(shù)量卻很小，

技主要的出版物在性質(zhì)上也都是描述性的。元搜索引擎的性能、

術、服務、應用等方面的問題是促進或制約自身發(fā)展的內(nèi)在力量，評價的重要性迫在眉睫。國外對于元搜索引擎評價的研究在逐步發(fā)展并受到關注。本文從研究元搜索引擎評價的必要性出發(fā)，對國外元搜索引擎評價的研究現(xiàn)狀進行綜述。

２國外元搜索引擎評價研究內(nèi)容

目前，從已發(fā)表的論文來看，關于國外元搜索引擎評價研究

主要分為以下幾個方法：

２. １基于調(diào)查的比較研究的評價方式

基于調(diào)查的比較研究的評價方式的文獻占據(jù)多數(shù)。調(diào)查是最受歡迎的一種評價方式，主要由新聞界行業(yè)、貿(mào)易行業(yè)或計算機行業(yè)組織的，其主要內(nèi)容是針對不同元搜索引擎的易用性、搜索速度、用戶界面的設計、覆蓋范圍等特點進行比較研究。例如www . searchenginewatch . com 定期對網(wǎng)上的搜索系統(tǒng)進行調(diào)查研究；www . searchengineshowdown . com ，www . llrx . com 都做類似的工作并公布其調(diào)查結果，一些專家學者也采用這種評價方法。

Repman 和carlson （１９９９）主要對１６個元搜索引擎進行了調(diào)查，通過比較各元搜索引擎的結果輸出方式、結果重復率的排除、包含的搜索引擎的數(shù)量、是否支持詞組查詢、布爾邏輯查詢、多語種檢索等評價指標，提出判斷一個元搜索引擎是否是一個成功的檢索工具的標準，是能夠將滿足用戶需求的最相關的結果列在結果顯示頁面的第一頁上；同時提出個性化定制和高級檢索功能也是吸引用戶和圖書館專業(yè)人士的一個重要因素。

Tomaiuolo （１９９９）以比較研究的方法，以查全率和查準率為標準，比較了４個元搜索引擎和２個搜索引擎，結果發(fā)現(xiàn)元搜索引擎比搜索引擎有較好的表現(xiàn)，元搜索引擎能檢索到與搜索引擎同樣的信息，但通過元搜索引擎，用戶有更多的機會獲得更多的相關資源。

Zhang J ，Cheung Ch 調(diào)查了２０個元搜索引擎，將其分為２大

從搜索引擎的覆蓋范圍、結果的類，即pseudo MSE 和real MSE ，

輸出方式、搜索控制、檢索式的構造方法（query specification ）、系統(tǒng)監(jiān)控（system monitoring ）和其他特點包括權限控制、可視化、集群分析等，對這２０個元搜索引擎進行了比較和分析，評價出surfwax （頁元素綜述，網(wǎng)頁指標，出版日期，權限控制），kartoo （可視化），Ixquick （遠程搜索），metor （avisualisation check ），webcrawler （主題路徑），metacrawler （query observation 查詢觀察）和mamma （域名過濾器）表現(xiàn)最好。

Glander－Hoebel，Cornelia 等調(diào)查比較了７個元搜索引擎、７個普通搜索引擎和７個專業(yè)搜索引擎（化學或環(huán)境專業(yè)），以點擊次數(shù)、相關性、來源等為評價標準，并采用了統(tǒng)計與數(shù)學評價方法，即hassedigram 技術和The posas method 。

此外，美國匹茲堡大學和賓夕法尼亞州的一個dogpile 研究所進行了一項調(diào)查，以查全率為標準，將３個搜索引擎與元搜索引擎比較，發(fā)現(xiàn)使用單一的搜索引擎易遺漏相當部分的來自其他搜索引擎的檢索的相關結果，而使用元搜索引擎像dogpile 則

155

１對元搜索引擎評價的目的和必要性

在信息及知識經(jīng)濟社會的今天，通過對元搜索引擎的評價，一方面能更好地了解元搜索引擎的優(yōu)劣，為用戶選擇合適的元搜索引擎提供依據(jù)；另一方面可以促進元搜索引擎的提供者改

系統(tǒng)的分析和評價，進服務標準，因此有必要對它們進行詳細、

以達到幫助用戶方便使用的目的，并為今后元搜索引擎的發(fā)展提供借鑒。通過已有的文獻來看，總結其必要性主要集中在以下三點：

１. １通過評價發(fā)現(xiàn)問題并及時控制

在元搜索引擎評價過程中，需要依據(jù)一定的標準、使用科學的評價方法，不斷進行階段性評價，以總結已取得的成績和發(fā)現(xiàn)不足，為以后的系統(tǒng)開發(fā)和建設提供借鑒及決策指導。另外，從

用戶需求的用戶的角度來看，元搜索引擎需要隨著社會的進步、

變化而不斷對其進行周期性的評價，找出當前與不斷發(fā)展變化的用戶需求之間的差距，及時改進，這對提高元搜索引擎各方面的質(zhì)量、技術、服務特色化等具有重要意義。１. ２通過評價建立元搜索引擎發(fā)展的有效機制

元搜索引擎對社會的發(fā)展有著重大影響，通過評價，發(fā)現(xiàn)并相互交流各元搜索引擎的優(yōu)缺點、服務特色、性能等，共享已取得的成果。這一方面可以使元搜索引擎在發(fā)展過程中借鑒已經(jīng)成功的經(jīng)驗，少走彎路，節(jié)約社會成本；同時又可以相互學習，共

技術，促進元搜索同改善元搜索引擎，提高元搜索引擎的性能、

引擎的發(fā)展。

１. ３通過評價結果為用戶提供導航

元搜索引擎評價能夠顯示各不同元搜索引擎在性能、服務、技術等方面的情況，用戶可以根據(jù)自己的信息需求及其他條件選擇適合自己的元搜索引擎，從而起到為用戶提供參考和導航的作用。

賈素娜國外元搜索引擎評價研究綜述本刊E -mail:bjb＠m(xù)ail．sxinfo．net綜述

提高了獲得相關信息資源的可能性，而且這些相關資源都往往是在其他搜索引擎中排名都靠前的結果。

文獻［７］也是采用這種方法對１２個元搜索引擎進行了描述和評價。

２. ２基于系統(tǒng)日志或問卷的評價方式

日志記錄了大量系統(tǒng)用戶進行查詢的行為。這種方法基于這樣一種假想，即系統(tǒng)用戶的行為可以表征系統(tǒng)的性能。

問卷則是一種定性的評價方式，要求參與者在進行檢索前填寫一份設計好的問卷，即pre－Questionnaire，在每個參與者完成檢索任務后再填寫一份問卷，即post－Questionnaire，目的是進行前后的比較，以獲得用戶在檢索前后的不同。同時要求參與者對一些相關問題給出自己的看法和原因，以進行定性分析。

Amanda Spink 采用的是日志和問卷相結合的方法，評價了人機互動過程中inquirus 的信息的可獲得性和有效性。采用以用戶為中心的評價方法，評價標準包括人機互動的效率和inquirus 的使用性能。信息可獲得性結果顯示inquirus 被用戶評為最好，且用戶在檢索前后，在檢索能力和檢索知識等方面經(jīng)歷了不同程度的變化，這原因歸結于用戶與inquirus 的互動。

文獻［１１］也是基于問卷的評價方式。除了采用這種定性方法評價４種信息檢索系統(tǒng)的優(yōu)點與缺點外，還采用了定量方法

實用性、系統(tǒng)的性能、界面設計、內(nèi)容的覆來評價，包括查準率、

蓋范圍等。評價結果顯示用戶對元搜索引擎并不熟悉，但用戶認為元搜索引擎有高級搜索選項，資源類型豐富，包括了各種搜索引擎，搜索結果也是很有效的，很樂意使用；但存在的問題是檢索結果易出現(xiàn)重復性、且每次搜索的結果都不同、用戶界面復雜等。

２. ３以實驗為基礎的評價

以實驗為基礎的評價即用不同的元搜索引擎來檢索網(wǎng)頁，其效果被比較評價，類似于典型的IR 評價（在實驗室，這種評價常用來比較不同的檢索算法）。在這種評價方法中，查詢式的構

可歸納為以下３造和選擇是一個重要的方面。根據(jù)先前的評價，

種選擇查詢式的方法：

）通過專家用戶，根據(jù)他們專業(yè)領域構造的查詢式或由實（１

驗者設計的查詢式。即參與實驗者都是具有高素質(zhì)的人員，有深厚的使用計算機和運用各種檢索策略的背景知識，他們對元搜索引擎的特征、檢索方法等都非常熟悉。根據(jù)用戶需求和每個元搜索引擎的特點，實驗者需要將適合每個元搜索引擎的最準確的表達式構造出來。具體說就是根據(jù)用戶需求，實驗者需要設計出能將最相關文獻檢索到的檢索式。

文獻［１２］實驗者基于用戶相關反饋的方法設計查詢式，利用以用戶為中心的評價方法。評價結果表明，這種方法不僅提高了對元搜索引擎的性能分析，還進一步提高了檢索結果的精確度。

（２）查詢式取自現(xiàn)實生活，例如，來自元搜索引擎日志文件。Claudia Oliveira ，Luis Gustavo 等在實驗中采用的查詢式來自韓國一個商業(yè)搜索引擎產(chǎn)生的日志文件，包括７８１５５０個查詢式。實

）的累積結果來對驗主要基于熱門查詢（popularity query

popularity－drivencaching 算法進行了評價。

（３）由一些組織設計的查詢，如TREC 和日本的NTCIR 。由NTST （美國國家標準技術局）舉辦的文本信息檢索會議（Text Retrieval Conference ，TREC ）是文本信息檢索領域一個國際性的標準評價類型的比賽，它向各參加者發(fā)布標準測試數(shù)據(jù)和檢索問題，并在規(guī)定時間內(nèi)提交檢索結果，由組織者根據(jù)結果作出標準答案，并對各結果進行評價。由TREC 提供的測試數(shù)據(jù)在信息檢索領域具有較高的可信度，利用這些數(shù)據(jù)對檢索系統(tǒng)性能評

價工作也開展得較多。在日本，日本的國家信息研究所已舉行了

類似于TREC ，但主要集中在日本的IR 。幾次NTCIR 工作，

Shengli Wu 和Jieyu Li 在實驗中采用的１２個查詢式，選自２００２年TREC 關于網(wǎng)絡話題中的檢索問題，對兩類網(wǎng)絡檢索服務———Web 搜索引擎和元搜索引擎的性能進行了實證性評價。在研究中采用了２００２年TREC 提出的二元判斷（相關/無關）的

盡管方法，此外，還使用了平均精度進行評價。評價結果顯示，

Web 搜索引擎和元搜索引擎的技術是不同的，但平均來看，性能表現(xiàn)卻相當接近，因此聲稱元搜索引擎比Web 搜索引擎更有效是得不到支持的。

Hsinchun Chen 和Haiyan Fan 從NTST 的５０個主題中選了６個主題，這６個主題是由NTST 和DARRA 主辦的TREC 中的測試問題。實驗者使用了元搜索引擎下不同的搜索引擎，評價了每個搜索引擎在幫助實驗者定位相關性信息的效率和有效性，

花采用了查全率和查準率評價了Metaspider 獲取信息的有效性；

費時間的長短、文獻的瀏覽次數(shù)等評價了其獲取信息的效率；同時還采用了Think aloud 的定性方法。評價結果顯示，Metaspider 的查準率最高，歸因于它采用了文獻檢索和自動化分類整合技術，大大減少了要求用戶瀏覽和搜索的人工努力。２. ４以任務為中心的評價方法（task－centeredapproaches ）

這種評價方法有助于更好地理解用戶/IR 系統(tǒng)交互過程。通過集中在用戶的任務解決上，一些研究提出了新的IR 評價措施，包括Su （１９９８）提出的將檢索結果的評價作為一個整體的方法，還有Tague 和Schultz （１９８９）提出informativeness 方法。Reid （２０００）高度強調(diào)了以任務為中心的評價方法對信息檢索系統(tǒng)的重要性。Greisdorf 和Spink （２００１）提出median measure 作為查全率和查準率的補充。但以任務為中心的評價方法并未考慮用戶與系統(tǒng)交互中的信息檢索的過程，用戶的任務是多樣的，用戶檢索信息的過程在不斷發(fā)生變化，他們的信息需求也會發(fā)生演化或改變。

３結語

元搜索引擎是未來搜索引擎發(fā)展的必然趨勢，元搜索引擎的評價是一個動態(tài)的過程，由于元搜索引擎的不斷發(fā)展及其在信息經(jīng)濟時代中的應用日益廣泛，對其評價問題更需要深入研究，如何評價獨立搜索引擎質(zhì)量至今沒有定論。元搜索引擎作為調(diào)用多個獨立搜索引擎工作的引擎，它的評價更是難中之難。目前無論從評價標準、評價方法和評價范圍來看，研究還不夠深入，缺乏統(tǒng)一的標準和權威的評價指標體系，還要從理論上進行深入探討，并開展更具規(guī)模和系統(tǒng)性的分析和評價工作，形成權威的評價站點和元搜索引擎評價指標體系。本文對當前國外的元搜索引擎評價研究狀況做簡要綜述，以拋磚引玉，推動對其進一步的關注和研究。

參考文獻

［１］Echo G . How they work :the metasearch engines :covering the waterfront ［EB /OL ］（. ２００６－０３－０４）. www . editors－service. com . ［２］Liu J . Guide tometa –searchengines ［EB /OL ］（. ２００６－０３－０４）. www . indiana . edu /,librcsd /search /meta . html .

［３］Sherman C . The big four metasearch engines ［EB /OL ］. （２００６－０３－０４）. http ://searchenginewatch . com /searchday /article . php /２１６０７８１. ［４］Bazac D . The meta search engines :a web searcher ’s best friends ［EB /OL ］（. ２００６－０３－０４）. www . llrx . com /features /metasearch . htm .

科技情報開發(fā)與經(jīng)濟

文章編號：１００５－６０３３（２００９）０４－0157-04

SCI -TECH INFORMATION DEVELOPMENT ＆ECONOMY ２００9年第１9卷第4期

收稿日期：２００８－１１－１１

色譜法在國內(nèi)維生素E 測定中的應用研究進展*

馬為民１，林小虎１，馬衛(wèi)東２，周印富１

（１河北科技師范學院，河北秦皇島，０６６００４；２. 昌黎縣熱力公司，河北昌黎，０６６６００）摘要：綜述了測定維生素E 時常用的氣相色譜法與高效液相色譜法的主要方法、原

理及樣品前處理程序和方法，提出了各種方法目前存在的問題以及今后的研究方向和重點。關鍵詞：維生素E ；氣相色譜法；高效液相色譜法；研究進展中圖分類號：R927文獻標識碼：A

１維生素E 簡介

維生素E 是Evans 在２０世紀２０年代發(fā)現(xiàn)并命名的, 它是具

有A－生育酚（簡稱A－T）生物活性的所有生育酚和生育三烯酚的總稱。已從植物性原料中分離到至少８種具有維生素E 活性的化合物, 其中生育酚有:A－生育酚（A－T）、B－生育酚（B－T）、C－生育

）和D－生育酚（D－T）；生育三烯酚有:A－生育三烯酚（A－酚（C－T）、B－生育三烯酚（B－T－３）、C－生育三烯酚（C－T－３）和D－生育T－３三烯酚（D－T－３）。在８種化合物中以A－T生物活性最高。維生素─────────────────

*本文為“十一五”國家科技支撐計劃重大項目

）成果之一。（２００６BAB０２A０８－９

［５］Bradely P . Multi －searchengines －acomparison ［EB /OL ］.

（２００６－０３－０４）. www . philb . com /msengine . htm . ［６］Glander－HoebelCornelia ，Voigt Kristina ，Welzl Gerhard ，et al . Comparing search engines with respect to environmental chemistry using statistical and mathematical evaluation methods ［J ］. Online Information ２００１Proceedings , ２００１（４）：１８７－１９５.

［７］Michael Gordon , Praveen Pathak . Finding information on the

. World Wide Web :the retrieval eectiveness of search engines ［J ］

Information Processing and Management , １９９９（３５）:１４１-１８０.

［８］Amanda Spink . A user－centeredapproach to evaluating human interaction with Web search engines :an exploratory study ［J ］. Information Processing ＆Management , ２００２（３）:４０１－４２６. ［９］Hong （Iris ）Xie . Online IR system evaluation :online databases

. Online Information Review , ２００４versus Web search Engines ［J ］

（２８）：２１１.

［１０］Surviving the storm :Using Metasearch Engines Effectively ［EB /OL ］（. ２００６－０３－０４）. www . infotoday . com /climag /may９９/repman＋carlson . htm .

E （生育酚）除具有重要的生理功能以外, 也是迄今為止發(fā)現(xiàn)的唯一無毒的油脂類食品的天然抗氧化劑。生育酚和三烯生育酚的結構母環(huán)見圖１。

R 1

HO

2

R 2

CH 3

O CH 3

CH 33' 4'

7' CH 38'

11CH 3

CH 3

圖1生物酚的化學結構

維生素E （VitaminE , VE ）又稱抗不孕維生素、生殖維生素、生育酚等，天然VE 是一種性能優(yōu)良的細胞內(nèi)抗氧化劑及營養(yǎng)劑, ［１１］Zhang J ，Cheung Ch．Meta—search —engine feature analysis ［J ］. Online Information Review , ２００３（６）：４３３－４４１.

［１２］Alireza Isfandyari Moghaddam , Mehri Parirokh . A comparative study on overlapping of search results in metasearch engines and their common underlying search engines ［J ］. Library Review , ２００６（５）：３０１. ［１３］朱紅濤，劉永. 國內(nèi)數(shù)字圖書館質(zhì)量評價研究綜述［J ］. 現(xiàn)代

２００７（６）：８２－８５. 情報，

［１４］趙華. 一種搜索引擎性能的簡便評價方法和實例［J ］. 圖書館數(shù)字化技術平臺，２００５（６）：１１４－１１.

［１５］劉偉成. 元搜索引擎性能評價體系研究［J ］. 高校圖書館工

２００６（１）：１７－１９. 作，

（部分參考文獻因著錄項目不全被刪除）

（責任編輯：戚米莎）

─────────────────

第一作者簡介：賈素娜，女，１９８３年１０月生，現(xiàn)為華南師范

廣東省廣大學經(jīng)濟管理學院圖書館學專業(yè)２００７級碩士研究生，

州市大學城，５１０００６.

A Review on the Research on the Evaluation of Foreign Meta Search Engines

JIA Su-na

ABSTRACT :This paper expounds the necessity of researching and evaluating the meta search engines , sums up and

analyzes the present situation of the evaluation and research on the foreign meta search engines , and puts forward some suggestions on the evaluation on the meta search engines .

KEY WORDS :meta search engine ; evaluation and research ; evaluation method

157