首页 > SEO基础知识 > 什么叫搜索引擎蜘蛛
2017
05-19

什么叫搜索引擎蜘蛛

搜索引擎必须有内容给用户搜索才可以称之为搜索引擎。所以每个搜索引擎都需要开发自己的一套程序,用于抓取互联网上数万亿的网页,而这个程序就叫“蜘蛛”,也叫“爬虫”。

之所以这样命名,主要是由于百度给自己的搜索引擎程序取名baiduspider,中文叫“百度蜘蛛”。因为百度在中国占领绝大部分的搜索引擎市场份额,所以大部分SEO做的都是针对百度搜索引擎进行网站优化,所以普遍就把搜索引擎的抓取程序叫做蜘蛛了。

不同的搜索引擎命名不同,像谷歌的抓取程序叫googlebot,中文叫“谷歌机器人”。360搜索的抓取程序叫360Spider,搜狗的抓取程序叫Sogouspider。微软的bing抓取程序msnbot,有道蜘蛛叫Youdaobot。

但不论如何,做SEO优化的人员只需要知道蜘蛛、爬虫、机器人这些都是代表搜索引擎抓取页面的程序就可以了。


留下一个回复

你的email不会被公开。