各大搜索引擎 蜘蛛 user agent | 网赚,网络营销,seo优化和网络安全-骚鱼博客
0

各大搜索引擎 蜘蛛 user agent

已有 2,223 人阅读此文 - -

每次都得找半天 收集一下 以后备用

百度蜘蛛

Baiduspider+(+http://www.baidu.com/search/spider.htm)
Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

Google 蜘蛛

Googlebot/2.1 (+http://www.google.com/bot.html)
Googlebot/2.1 (+http://www.googlebot.com/bot.html)
Goolgle : Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

0
相关文章!