当天蜘蛛爬行记录:
以下为国内常用蜘蛛。
Google Spider:
蜘蛛类型=>Googlebot: 爬行次数=42 最后爬行时间:12:14:08
蜘蛛类型=>Googlebot-Image: 爬行次数=0
蜘蛛类型=>Googlebot-Mobile: 爬行次数=0
蜘蛛类型=>Feedfetcher-Google: 爬行次数=0
Baidu Spider:
蜘蛛类型=>Baiduspider: 爬行次数=108 最后爬行时间:13:03:19
蜘蛛类型=>Baiduspider-image: 爬行次数=0
bingbot Spider:
蜘蛛类型=>bingbot: 爬行次数=1613 最后爬行时间:13:18:27
蜘蛛类型=>msnbot-media: 爬行次数=0
Sogou Spider:
蜘蛛类型=>Sogou web spider: 爬行次数=2292 最后爬行时间:13:18:50
Soso Spider:
蜘蛛类型=>Sosospider: 爬行次数=0
以下为垃圾蜘蛛,可屏蔽抓取。
Jike Spider:
蜘蛛类型=>JikeSpider: 爬行次数=0
Easou Spider:
蜘蛛类型=>EasouSpider: 爬行次数=0
YisouSpider:
蜘蛛类型=>YisouSpider: 爬行次数=5 最后爬行时间:05:18:16
YandexBot Spider:
蜘蛛类型=>YandexBot: 爬行次数=60 最后爬行时间:13:16:39
Mail.RU Spider:
蜘蛛类型=>Mail.RU_Bot: 爬行次数=7 最后爬行时间:11:53:05
AcoonBot Spider:
蜘蛛类型=>AcoonBot: 爬行次数=0
Exabot Spider:
蜘蛛类型=>Exabot: 爬行次数=0
spbot Spider:
蜘蛛类型=>spbot: 爬行次数=0

蜘蛛爬行分析图:
日期:2019-05-25
蜘蛛一共爬行4127次:
  • google:42次(1%)
  • baidu:108次(2%)
  • bing:1613次(39%)
  • sogou:2292次(55%)
  • soso:0次(0%)
  • else:72次(3%)