在提供搜索时也会有效率方面的问题。因此,许多搜索引擎的网络蜘蛛只抓取那些重要的网页,而评价重要性的主要依据是某个网页的链接深度。
有人会认为搜索引擎在接收到搜索请求时,会实时地从全球所有的服务器上查询信息,并把查询结果展示在用户面前,其实这是一种误解。如果搜索引擎是这样工作的,那么查询一条信息可能要等上好几年才能得到搜索结果,这还不包括期间网页发生的变化。实际上,搜索引擎会预先去拜访大量的网站,并把这些网页的部分信息预先存储在自己的服务器上,这样,当用户搜索的时候,其实是在搜索引擎自己的服务器中进行查询,就像我们在自己的电脑中查询文件一样。搜索引擎是非常复杂的技术,但是其基本原理并不复杂,其基本技术包括抓取、索引、排序。
一、抓取
搜索引擎首先会派出一种被称做“蜘蛛”或者是“机器人”的软件,根据一定规则扫描存在于互联网上的网站,并沿着网页上的链接从一个网页到另一个网页,从一个网站到另一个网站。为保证采集的资料最新,它还会回访已抓取过的网页。
二、索引
由分析索引系统程序对收集回来的网页进行分析,提取相关的网页信息(包括网页所在URL、编码类型、页面内容包含的所有关键词、关键词位置、生成时间、大小、与其他网页的链接关系等),根据一定的相关度算法进行大量复杂计算,得到每个网页针对页面文字中及超链接中每个关键词的相关度(或重要性),然后用这些相关信息建立网页索引数据库。
三、排序
当用户输入关键词搜索后,由搜索系统程序从网页索引数据库中找到符合该关键词的所有相关网页。因为所有相关网页针对该关键词的相关度早已算好,所以只需按照现成的相关度数值排序,相关度越高,排名越靠前。最后,由检索器将搜索结果的链接地址和页面内容摘要等内容组织起来,返回给用户。
3.3 主要搜索引擎介绍
国内目前的搜索引擎主要有百度、Google、雅虎中文、易搜、有道、SOSO、爱问、搜狗等,正像搜索引擎的定义一样,每个搜索引擎都有数量巨大的使用者,但就目前来说,百度、Google和雅虎是国内网民最常使用的搜索引擎软件。
一、Google
Google是目前被公认的全球规模最大的搜索引擎,也是世界上5大最受欢迎的网站之一,在全球范围内拥有无数的用户,也是
本章未完,请点击下一页继续阅读!