国内各大搜索引擎蜘蛛名称

搜索引擎蜘蛛也叫搜索引擎爬虫、搜索引擎robot。

 

国内各大搜索引擎蜘蛛名称：

 

百度：baiduspider

 

谷歌：googlebot

 

搜狗：sogouspider

 

搜搜：Sosospider

 

360搜索：360Spider

 

有道：YodaoBot

 

雅虎：YahooSlurp

 

必应：msnbot

 

Msn:msnbot

 

以上是常见的搜索引擎蜘蛛（爬虫），如果你的网站不想让让某些蜘蛛抓取，那么可以通过robots.txt来限制爬虫的抓取。