国外元搜索引擎评价研究综述_贾素娜
科技情报开发与经济文章编号:１００５－６０３３（２００９）０４－0155-03SCI -TECH INFORMATION DEVELOPMENT ＆ECONOMY ２００9年第１9卷第4期收稿日期:２
科技情报开发与经济
文章编号:１００５－６０３３（２００９）０４－0155-03
SCI -TECH INFORMATION DEVELOPMENT ＆ECONOMY ２００9年第１9卷第4期
收稿日期:２００８－１１－２３
国外元搜索引擎评价研究综述
贾素娜
（华南师范大学经济与管理学院，广东广州，５１０００６）
摘要：阐述了元搜索引擎研究评价的必要性，总结和分析了国外元搜索引擎的评价
研究现状，对元搜索引擎提出了一些建议。关键词：元搜索引擎；评价研究；评价方式中图分类号：G354文献标识码：A
目前，互联网的技术与应用在飞速发展，如何在与日俱增的
众多站点更好地找到有用的信息，迫切需要一种好的信息检索工具，于是搜索引擎便应运而生。如何获得一个既准确、又全面且令人满意的结果，就必须反复使用多个搜索引擎（Search Engine ），在此基础上元搜索引擎（Meta Search Engine ）便应运而
有相当部分的比较研究是关于搜生。但是就目前研究情况来看，
索引擎的评价研究，而关于元搜索引擎评价研究的数量却很小，
技主要的出版物在性质上也都是描述性的。元搜索引擎的性能、
术、服务、应用等方面的问题是促进或制约自身发展的内在力量，评价的重要性迫在眉睫。国外对于元搜索引擎评价的研究在逐步发展并受到关注。本文从研究元搜索引擎评价的必要性出发，对国外元搜索引擎评价的研究现状进行综述。
２国外元搜索引擎评价研究内容
目前，从已发表的论文来看，关于国外元搜索引擎评价研究
主要分为以下几个方法：
２. １基于调查的比较研究的评价方式
基于调查的比较研究的评价方式的文献占据多数。调查是最受欢迎的一种评价方式，主要由新闻界行业、贸易行业或计算机行业组织的，其主要内容是针对不同元搜索引擎的易用性、搜索速度、用户界面的设计、覆盖范围等特点进行比较研究。例如www . searchenginewatch . com 定期对网上的搜索系统进行调查研究；www . searchengineshowdown . com ，www . llrx . com 都做类似的工作并公布其调查结果，一些专家学者也采用这种评价方法。
Repman 和carlson （１９９９）主要对１６个元搜索引擎进行了调查，通过比较各元搜索引擎的结果输出方式、结果重复率的排除、包含的搜索引擎的数量、是否支持词组查询、布尔逻辑查询、多语种检索等评价指标，提出判断一个元搜索引擎是否是一个成功的检索工具的标准，是能够将满足用户需求的最相关的结果列在结果显示页面的第一页上；同时提出个性化定制和高级检索功能也是吸引用户和图书馆专业人士的一个重要因素。
Tomaiuolo （１９９９）以比较研究的方法，以查全率和查准率为标准，比较了４个元搜索引擎和２个搜索引擎，结果发现元搜索引擎比搜索引擎有较好的表现，元搜索引擎能检索到与搜索引擎同样的信息，但通过元搜索引擎，用户有更多的机会获得更多的相关资源。
Zhang J ，Cheung Ch 调查了２０个元搜索引擎，将其分为２大
从搜索引擎的覆盖范围、结果的类，即pseudo MSE 和real MSE ，
输出方式、搜索控制、检索式的构造方法（query specification ）、系统监控（system monitoring ）和其他特点包括权限控制、可视化、集群分析等，对这２０个元搜索引擎进行了比较和分析，评价出surfwax （页元素综述，网页指标，出版日期，权限控制），kartoo （可视化），Ixquick （远程搜索），metor （avisualisation check ），webcrawler （主题路径），metacrawler （query observation 查询观察）和mamma （域名过滤器）表现最好。
Glander－Hoebel，Cornelia 等调查比较了７个元搜索引擎、７个普通搜索引擎和７个专业搜索引擎（化学或环境专业），以点击次数、相关性、来源等为评价标准，并采用了统计与数学评价方法，即hassedigram 技术和The posas method 。
此外，美国匹兹堡大学和宾夕法尼亚州的一个dogpile 研究所进行了一项调查，以查全率为标准，将３个搜索引擎与元搜索引擎比较，发现使用单一的搜索引擎易遗漏相当部分的来自其他搜索引擎的检索的相关结果，而使用元搜索引擎像dogpile 则
155
１对元搜索引擎评价的目的和必要性
在信息及知识经济社会的今天，通过对元搜索引擎的评价，一方面能更好地了解元搜索引擎的优劣，为用户选择合适的元搜索引擎提供依据；另一方面可以促进元搜索引擎的提供者改
系统的分析和评价，进服务标准，因此有必要对它们进行详细、
以达到帮助用户方便使用的目的，并为今后元搜索引擎的发展提供借鉴。通过已有的文献来看，总结其必要性主要集中在以下三点：
１. １通过评价发现问题并及时控制
在元搜索引擎评价过程中，需要依据一定的标准、使用科学的评价方法，不断进行阶段性评价，以总结已取得的成绩和发现不足，为以后的系统开发和建设提供借鉴及决策指导。另外，从
用户需求的用户的角度来看，元搜索引擎需要随着社会的进步、
变化而不断对其进行周期性的评价，找出当前与不断发展变化的用户需求之间的差距，及时改进，这对提高元搜索引擎各方面的质量、技术、服务特色化等具有重要意义。１. ２通过评价建立元搜索引擎发展的有效机制
元搜索引擎对社会的发展有着重大影响，通过评价，发现并相互交流各元搜索引擎的优缺点、服务特色、性能等，共享已取得的成果。这一方面可以使元搜索引擎在发展过程中借鉴已经成功的经验，少走弯路，节约社会成本；同时又可以相互学习，共
技术，促进元搜索同改善元搜索引擎，提高元搜索引擎的性能、
引擎的发展。
１. ３通过评价结果为用户提供导航
元搜索引擎评价能够显示各不同元搜索引擎在性能、服务、技术等方面的情况，用户可以根据自己的信息需求及其他条件选择适合自己的元搜索引擎，从而起到为用户提供参考和导航的作用。
,贾素娜国外元搜索引擎评价研究综述本刊E -mail:bjb＠mail．sxinfo．net综述
提高了获得相关信息资源的可能性，而且这些相关资源都往往是在其他搜索引擎中排名都靠前的结果。
文献［７］也是采用这种方法对１２个元搜索引擎进行了描述和评价。
２. ２基于系统日志或问卷的评价方式
日志记录了大量系统用户进行查询的行为。这种方法基于这样一种假想，即系统用户的行为可以表征系统的性能。
问卷则是一种定性的评价方式，要求参与者在进行检索前填写一份设计好的问卷，即pre－Questionnaire，在每个参与者完成检索任务后再填写一份问卷，即post－Questionnaire，目的是进行前后的比较，以获得用户在检索前后的不同。同时要求参与者对一些相关问题给出自己的看法和原因，以进行定性分析。
Amanda Spink 采用的是日志和问卷相结合的方法，评价了人机互动过程中inquirus 的信息的可获得性和有效性。采用以用户为中心的评价方法，评价标准包括人机互动的效率和inquirus 的使用性能。信息可获得性结果显示inquirus 被用户评为最好，且用户在检索前后，在检索能力和检索知识等方面经历了不同程度的变化，这原因归结于用户与inquirus 的互动。
文献［１１］也是基于问卷的评价方式。除了采用这种定性方法评价４种信息检索系统的优点与缺点外，还采用了定量方法
实用性、系统的性能、界面设计、内容的覆来评价，包括查准率、
盖范围等。评价结果显示用户对元搜索引擎并不熟悉，但用户认为元搜索引擎有高级搜索选项，资源类型丰富，包括了各种搜索引擎，搜索结果也是很有效的，很乐意使用；但存在的问题是检索结果易出现重复性、且每次搜索的结果都不同、用户界面复杂等。
２. ３以实验为基础的评价
以实验为基础的评价即用不同的元搜索引擎来检索网页，其效果被比较评价，类似于典型的IR 评价（在实验室，这种评价常用来比较不同的检索算法）。在这种评价方法中，查询式的构
可归纳为以下３造和选择是一个重要的方面。根据先前的评价，
种选择查询式的方法：
）通过专家用户，根据他们专业领域构造的查询式或由实（１
验者设计的查询式。即参与实验者都是具有高素质的人员，有深厚的使用计算机和运用各种检索策略的背景知识，他们对元搜索引擎的特征、检索方法等都非常熟悉。根据用户需求和每个元搜索引擎的特点，实验者需要将适合每个元搜索引擎的最准确的表达式构造出来。具体说就是根据用户需求，实验者需要设计出能将最相关文献检索到的检索式。
文献［１２］实验者基于用户相关反馈的方法设计查询式，利用以用户为中心的评价方法。评价结果表明，这种方法不仅提高了对元搜索引擎的性能分析，还进一步提高了检索结果的精确度。
（２）查询式取自现实生活，例如，来自元搜索引擎日志文件。Claudia Oliveira ，Luis Gustavo 等在实验中采用的查询式来自韩国一个商业搜索引擎产生的日志文件，包括７８１５５０个查询式。实
）的累积结果来对验主要基于热门查询（popularity query
popularity－drivencaching 算法进行了评价。
（３）由一些组织设计的查询，如TREC 和日本的NTCIR 。由NTST （美国国家标准技术局）举办的文本信息检索会议（Text Retrieval Conference ，TREC ）是文本信息检索领域一个国际性的标准评价类型的比赛，它向各参加者发布标准测试数据和检索问题，并在规定时间内提交检索结果，由组织者根据结果作出标准答案，并对各结果进行评价。由TREC 提供的测试数据在信息检索领域具有较高的可信度，利用这些数据对检索系统性能评
价工作也开展得较多。在日本，日本的国家信息研究所已举行了
类似于TREC ，但主要集中在日本的IR 。几次NTCIR 工作，
Shengli Wu 和Jieyu Li 在实验中采用的１２个查询式，选自２００２年TREC 关于网络话题中的检索问题，对两类网络检索服务———Web 搜索引擎和元搜索引擎的性能进行了实证性评价。在研究中采用了２００２年TREC 提出的二元判断（相关/无关）的
尽管方法，此外，还使用了平均精度进行评价。评价结果显示，
Web 搜索引擎和元搜索引擎的技术是不同的，但平均来看，性能表现却相当接近，因此声称元搜索引擎比Web 搜索引擎更有效是得不到支持的。
Hsinchun Chen 和Haiyan Fan 从NTST 的５０个主题中选了６个主题，这６个主题是由NTST 和DARRA 主办的TREC 中的测试问题。实验者使用了元搜索引擎下不同的搜索引擎，评价了每个搜索引擎在帮助实验者定位相关性信息的效率和有效性，
花采用了查全率和查准率评价了Metaspider 获取信息的有效性；
费时间的长短、文献的浏览次数等评价了其获取信息的效率；同时还采用了Think aloud 的定性方法。评价结果显示，Metaspider 的查准率最高，归因于它采用了文献检索和自动化分类整合技术，大大减少了要求用户浏览和搜索的人工努力。２. ４以任务为中心的评价方法（task－centeredapproaches ）
这种评价方法有助于更好地理解用户/IR 系统交互过程。通过集中在用户的任务解决上，一些研究提出了新的IR 评价措施，包括Su （１９９８）提出的将检索结果的评价作为一个整体的方法，还有Tague 和Schultz （１９８９）提出informativeness 方法。Reid （２０００）高度强调了以任务为中心的评价方法对信息检索系统的重要性。Greisdorf 和Spink （２００１）提出median measure 作为查全率和查准率的补充。但以任务为中心的评价方法并未考虑用户与系统交互中的信息检索的过程，用户的任务是多样的，用户检索信息的过程在不断发生变化，他们的信息需求也会发生演化或改变。
３结语
元搜索引擎是未来搜索引擎发展的必然趋势，元搜索引擎的评价是一个动态的过程，由于元搜索引擎的不断发展及其在信息经济时代中的应用日益广泛，对其评价问题更需要深入研究，如何评价独立搜索引擎质量至今没有定论。元搜索引擎作为调用多个独立搜索引擎工作的引擎，它的评价更是难中之难。目前无论从评价标准、评价方法和评价范围来看，研究还不够深入，缺乏统一的标准和权威的评价指标体系，还要从理论上进行深入探讨，并开展更具规模和系统性的分析和评价工作，形成权威的评价站点和元搜索引擎评价指标体系。本文对当前国外的元搜索引擎评价研究状况做简要综述，以抛砖引玉，推动对其进一步的关注和研究。
参考文献
［１］Echo G . How they work :the metasearch engines :covering the waterfront ［EB /OL ］（. ２００６－０３－０４）. www . editors－service. com . ［２］Liu J . Guide tometa –searchengines ［EB /OL ］（. ２００６－０３－０４）. www . indiana . edu /,librcsd /search /meta . html .
［３］Sherman C . The big four metasearch engines ［EB /OL ］. （２００６－０３－０４）. http ://searchenginewatch . com /searchday /article . php /２１６０７８１. ［４］Bazac D . The meta search engines :a web searcher ’s best friends ［EB /OL ］（. ２００６－０３－０４）. www . llrx . com /features /metasearch . htm .
,科技情报开发与经济
文章编号：１００５－６０３３（２００９）０４－0157-04
SCI -TECH INFORMATION DEVELOPMENT ＆ECONOMY ２００9年第１9卷第4期
收稿日期：２００８－１１－１１
色谱法在国内维生素E 测定中的应用研究进展*
马为民１，林小虎１，马卫东２，周印富１
（１河北科技师范学院，河北秦皇岛，０６６００４；２. 昌黎县热力公司，河北昌黎，０６６６００）摘要：综述了测定维生素E 时常用的气相色谱法与高效液相色谱法的主要方法、原
理及样品前处理程序和方法，提出了各种方法目前存在的问题以及今后的研究方向和重点。关键词：维生素E ；气相色谱法；高效液相色谱法；研究进展中图分类号：R927文献标识码：A
１维生素E 简介
维生素E 是Evans 在２０世纪２０年代发现并命名的, 它是具
有A－生育酚（简称A－T）生物活性的所有生育酚和生育三烯酚的总称。已从植物性原料中分离到至少８种具有维生素E 活性的化合物, 其中生育酚有:A－生育酚（A－T）、B－生育酚（B－T）、C－生育
）和D－生育酚（D－T）；生育三烯酚有:A－生育三烯酚（A－酚（C－T）、B－生育三烯酚（B－T－３）、C－生育三烯酚（C－T－３）和D－生育T－３三烯酚（D－T－３）。在８种化合物中以A－T生物活性最高。维生素─────────────────
*本文为“十一五”国家科技支撑计划重大项目
）成果之一。（２００６BAB０２A０８－９
［５］Bradely P . Multi －searchengines －acomparison ［EB /OL ］.
（２００６－０３－０４）. www . philb . com /msengine . htm . ［６］Glander－HoebelCornelia ，Voigt Kristina ，Welzl Gerhard ，et al . Comparing search engines with respect to environmental chemistry using statistical and mathematical evaluation methods ［J ］. Online Information ２００１Proceedings , ２００１（４）：１８７－１９５.
［７］Michael Gordon , Praveen Pathak . Finding information on the
. World Wide Web :the retrieval eectiveness of search engines ［J ］
Information Processing and Management , １９９９（３５）:１４１-１８０.
［８］Amanda Spink . A user－centeredapproach to evaluating human interaction with Web search engines :an exploratory study ［J ］. Information Processing ＆Management , ２００２（３）:４０１－４２６. ［９］Hong （Iris ）Xie . Online IR system evaluation :online databases
. Online Information Review , ２００４versus Web search Engines ［J ］
（２８）：２１１.
［１０］Surviving the storm :Using Metasearch Engines Effectively ［EB /OL ］（. ２００６－０３－０４）. www . infotoday . com /climag /may９９/repman＋carlson . htm .
E （生育酚）除具有重要的生理功能以外, 也是迄今为止发现的唯一无毒的油脂类食品的天然抗氧化剂。生育酚和三烯生育酚的结构母环见图１。
R 1
HO
2
R 2
CH 3
O CH 3
CH 33' 4'
7' CH 38'
11CH 3
CH 3
图1生物酚的化学结构
维生素E （VitaminE , VE ）又称抗不孕维生素、生殖维生素、生育酚等，天然VE 是一种性能优良的细胞内抗氧化剂及营养剂, ［１１］Zhang J ，Cheung Ch．Meta—search —engine feature analysis ［J ］. Online Information Review , ２００３（６）：４３３－４４１.
［１２］Alireza Isfandyari Moghaddam , Mehri Parirokh . A comparative study on overlapping of search results in metasearch engines and their common underlying search engines ［J ］. Library Review , ２００６（５）：３０１. ［１３］朱红涛，刘永. 国内数字图书馆质量评价研究综述［J ］. 现代
２００７（６）：８２－８５. 情报，
［１４］赵华. 一种搜索引擎性能的简便评价方法和实例［J ］. 图书馆数字化技术平台，２００５（６）：１１４－１１.
［１５］刘伟成. 元搜索引擎性能评价体系研究［J ］. 高校图书馆工
２００６（１）：１７－１９. 作，
（部分参考文献因著录项目不全被删除）
（责任编辑：戚米莎）
─────────────────
第一作者简介：贾素娜，女，１９８３年１０月生，现为华南师范
广东省广大学经济管理学院图书馆学专业２００７级硕士研究生，
州市大学城，５１０００６.
A Review on the Research on the Evaluation of Foreign Meta Search Engines
JIA Su-na
ABSTRACT :This paper expounds the necessity of researching and evaluating the meta search engines , sums up and
analyzes the present situation of the evaluation and research on the foreign meta search engines , and puts forward some suggestions on the evaluation on the meta search engines .
KEY WORDS :meta search engine ; evaluation and research ; evaluation method
157