当前位置:刘锭博客 > seo基础 > 正文
201107/20

什么是搜索引擎的蜘蛛(爬行器、机器人)?

刘锭-苏州SEO seo基础 Tag:/ 搜索引擎/ 关键词/ 蜘蛛/ Comments 围观:

苏州seo所知,搜索引擎要知道网上的新生事物,就得派东东(也就是在什么是搜索引擎提到了搜索蜘蛛)出去收集,每天都有新的网站产生,每天都有网站内容的更新,而且这些产生的网站数量、更新的网站内容是爆炸式的,靠人工是不可能完成这个任务的,所以搜索引擎的发明者就设计了计算机程序,派它们来执行这个任务。

探测器有很多叫法,也叫Crawler(爬行器)、spider(蜘蛛)、robot(机器人)。这些形象的叫法是描绘搜索引擎派出的蜘蛛机器人爬 行在互联网上探测新的信息,Google 把它的探测器叫做Googlebot,百度就叫Baiduspider,Yahoo 称为Slurp,无论它们叫什么,它们都是人们编制的计算机程序,由它们不分昼夜的访问各个网站,取回网站的内容、标签、图片等,然后依照搜索引擎的算法 给它们定制索引。

系统程序从网页索引数据库中找到符合该关键词的所有相关网页。因为所有相关网页针对该关键词的相关度早已算好,所以只需按照现成的相关度数值排序,相关度越高,排名越靠前。

最后,由检索器将搜索结果的链接地址和页面内容摘要等内容组织起来,返回给用户。

本文地址:
版权所有 @ 转载时必须以链接形式注明作者和原始出处!