当天蜘蛛爬行记录:
以下为国内常用蜘蛛。
Google Spider:
蜘蛛类型=>Googlebot: 爬行次数=104 最后爬行时间:17:51:12
蜘蛛类型=>Googlebot-Image: 爬行次数=0
蜘蛛类型=>Googlebot-Mobile: 爬行次数=0
蜘蛛类型=>Feedfetcher-Google: 爬行次数=0
Baidu Spider:
蜘蛛类型=>Baiduspider: 爬行次数=176 最后爬行时间:17:40:42
蜘蛛类型=>Baiduspider-image: 爬行次数=0
bingbot Spider:
蜘蛛类型=>bingbot: 爬行次数=1635 最后爬行时间:17:51:18
蜘蛛类型=>msnbot-media: 爬行次数=0
Sogou Spider:
蜘蛛类型=>Sogou web spider: 爬行次数=1667 最后爬行时间:17:51:26
Soso Spider:
蜘蛛类型=>Sosospider: 爬行次数=0
以下为垃圾蜘蛛,可屏蔽抓取。
Jike Spider:
蜘蛛类型=>JikeSpider: 爬行次数=0
Easou Spider:
蜘蛛类型=>EasouSpider: 爬行次数=0
YisouSpider:
蜘蛛类型=>YisouSpider: 爬行次数=117 最后爬行时间:17:50:04
YandexBot Spider:
蜘蛛类型=>YandexBot: 爬行次数=7 最后爬行时间:13:08:01
Mail.RU Spider:
蜘蛛类型=>Mail.RU_Bot: 爬行次数=0
AcoonBot Spider:
蜘蛛类型=>AcoonBot: 爬行次数=0
Exabot Spider:
蜘蛛类型=>Exabot: 爬行次数=0
spbot Spider:
蜘蛛类型=>spbot: 爬行次数=0

蜘蛛爬行分析图:
日期:2020-04-01
蜘蛛一共爬行3706次:
  • google:104次(2%)
  • baidu:176次(4%)
  • bing:1635次(44%)
  • sogou:1667次(44%)
  • soso:0次(0%)
  • else:124次(6%)