Seo介绍：介绍搜索引擎蜘蛛

查找引擎蜘蛛是查找引擎的一个自动程序。它的作用是访问互联网上的网页、图片、视频等内容，建立索引数据库，使用户能在查找引擎中查找到您网站的网页、图片、视频等内容。

一般用法为“ spider+URL”，后边的URL(网址)是查找引擎的痕迹，假如要检查某查找引擎是否来爬取过你们的网站，可检查服务器的日志里是否有该URL,一起还能检查来的时间、频率等…

1、百度蜘蛛：能够依据服务器的负载才能调节访问密度，大大降低服务器的服务压力。依据以往的经验百度蜘蛛通常会过度重复地抓取同样的页面，导致其他页面无法被抓取到而不能被录入。这种情况能够采取 robots协议的方法来调节。

2、谷歌蜘蛛：谷歌蜘蛛属于比较活跃的网站扫描东西，其距离28天左右就派出“蜘蛛”检索有更新或许有修改的网页。与百度蜘蛛最大的不同点是谷歌蜘蛛的爬取深度要比百度蜘蛛多一些。

3、yahoo中国蜘蛛：假如某个网站在谷歌网站下没有很好的录入，在yahoo下也不会有很好的录入和匍匐。yahoo蜘蛛的数量巨大，但均匀的效率不是很高，相应的查找结果质量不高。

4、微软必应蜘蛛：必应与yahoo有着深度的合作关系，所以根本运转模式和yahoo蜘蛛差不多。

5、搜狗蜘蛛：搜狗蜘蛛的爬取速度比较快，抓取的数量比起速度来说略微少点。最大的特点是不抓取 robot. text文件。

6、搜搜蜘蛛：搜搜早期是运用谷歌的查找技术，谷歌有录入，搜搜肯定也会录入。2011年搜搜已经宣告选用自己的独立查找技术，但搜搜蜘蛛的特性和谷歌蜘蛛的特点仍是有着相似的地方。

8、有道蜘蛛：和其他查找引擎蜘蛛相同，但凡高权重网站的链接一般都能将其录入。匍匐原理也是经过链接之间的匍匐。