18910140161

这玩意儿是百度蜘蛛吗?怎么天天爬?需要屏蔽吗

顺晟科技

2021-08-17 14:19:28

282

8.134.65.20[?]    这个ip一直爬,爬那么多?用log好显示是百度蜘蛛,但是这个应该不是百度蜘蛛吧?这软件不靠谱啊。。。。这种不是百度蜘蛛的ip要屏蔽吗?


顺晟科技:

2、这种ip没必要去专门的屏蔽,网站被模拟蜘蛛或者其他蜘蛛来访都是正常的,只要他的抓取并没有使得你网站打不开,或者不稳定,可以忽略即可。

相关文章
我们已经准备好了,你呢?
2024我们与您携手共赢,为您的企业形象保驾护航