浅谈搜索引擎的分类及特点

《浅谈搜索引擎的分类及特点》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、浅谈搜索引擎的分类及特点◆李艳红(西安外事学院计算机中心)【摘要】随着信息技术的发展，网络的迅速普及，搜索引擎在网络用三、元搜索引擎户的生活中扮演着越来越重要的地位，本文就爬虫式的搜索引擎、元搜索引擎也叫做MultipleSearchEngine，元搜索引擎在接受目录搜索引擎和元搜索引擎做了详尽的分析比较，并对目前的搜索用户查询请求时，同时在其他多个引擎上进行搜索，将结果进行相引擎的特点进行了描述。关处理，以整体统一的格式反馈给用户。它的特点是本身并没有【关键词】搜索引擎分类爬虫元搜索引擎存放网页信息的数据库。严格意义上来讲，元搜索引擎只能算是一种用户代理，而不是真正

2、的搜索引擎。多数元搜索引擎在处理目前Internet上的搜索引擎按其工作方式主要可分为三种，分其它的搜索引擎返回结果时，只提取出每个搜索引擎的结果中考别是爬虫式的搜索引擎(SpiderBasedSearchEngine)，目录搜索引前的条目，然后将这些条目合并在一起返回给用户，因此最后结果擎(SearchDirectory)和元搜索引擎(MetaSearchEngine)。的数量可能会远少于直接在一个搜索引擎上进行查找所得到的一、爬虫式的搜索引擎数量。基于爬虫(也叫Spider)的搜索引擎利用一个称为Spider的程元搜索引擎实现起比较简单，但是它也有一定的局限性，例

3、如序自动访问Web站点，提取站点上的网页，并根据网页中的链接进多数元搜索引擎都只能访问少数几个搜索引擎，并且通常不支持一步提取其它网页或转移到其它站点上。Robot搜集的网页被加这些搜索引擎的高级搜索功能，在处理逻辑查询时也常常会出现入到搜索引擎的数据库中供用户查询使用。基于Spider的搜索引错误。著名的元搜索引擎有InfoSpaee，Dogpile，Vivisimo等(元搜索擎山三个主要部分构成Spider，Index和搜索软件。爬虫从一个事引擎列表)。在搜索结果排列方面，有的直接按来源引擎排列搜索先制定好的URLs列表出发，这个列表中的URLs通常是从以往访结果

4、，如Dogpile，有的则按自定的规则将结果重新排列组合，如问记录中提取出来的，特别是一些热门站点和“WhatgNew”网页，Vivisimo。从Usenet等地方检索得到的URLs也常被用作起始URLs，很多搜在这几中检索工具中，目录式搜索引擎虽有成本高，信息t少索引擎还接受用户提交的URLs，这些URLs也会被安排在列表中的缺点，但它的信息准确这一优点是另二者所无法比拟的，故在一供爬虫问列表中，如此递归地访问Web。定的领域，一定的时问，它仍会被使用：机器人搜索引擎是当前各爬虫作为一个程序，可以用C，Perl，Java等语言来编写，可以种搜索引擎的主流；但随着网络

5、信息量的不断增加，单一的搜索引运行在Unix，Solaris，Windows，NT，OS2和MAC等平台上。爬虫擎已经难已满足其要求，结合目录式搜索引擎，机器人搜索引擎的设计是否合理将直接影响它访问Web的效率，影响搜索数据库的优势，以元搜索引擎核心的多层代理搜索引擎是搜索引擎的发展质量，另外在设计爬虫时还必须考虑它对网络和被访问站点的影方向。响，因为爬虫一般都运行在速度快，带宽高的主机上，如果它快速搜索引擎技术从出现至今已获得了飞速的发展，现在的搜索访问一个速度比较慢的目标站点，就有可能会导致该站点出现阻引擎功能越来越强大，提供的服务也越来越全面，它们的目标不仅塞甚

6、至当机。Robot还应遵守一些协议，以便被访问站点的管理员仅是提供单纯的查询功能，而是把自己发展成为用户首选的Inter—能够确定哪些内容能被访问，哪些不能。Index是一个庞大的数据net人口站点。目前的搜索引擎主要有以下几个主要特点：库，爬虫提取的网页将被放人到Index中以便建立索引，不同的搜1．多样化和个性化的服务。现在绝大多数搜索引擎都提供多索引擎会采取不同方式来建立索引，有的对整个HTML文件的所样化的服务，以吸引更多的用户，商业搜索引擎尤其注重这一点。有单词都建立索引，有的只分析HTML文件的标题或前几段内容，以Yahoo为例，用户可以从它的首页中查看新

7、闻，金融证券，天气还有的能处理HTML文件中的META标记或其它小可见的特殊标预报等信息，还可以进行网上购物，拍卖或者使用Email等服务。记。当用户查询一个关键词时，搜索软件将搜索Index，找出所有可以说多样化和个性化的服务既满足了用户更多的需求，也为搜与关键词相符合的网页，有时候这些网页可能有成千上万，等级值索引擎网站带来了更多的利润。的用途就是作为一种排序的依据，搜索软件将按照等级值从高到2．强大的查询功能。与最早的搜索引擎相比，现在的搜索引低的顺序把搜索结果送回到用户的浏览器中。擎在查询功能方面已有了很大的改进。除了简单的AND，OR和这类