蜘蛛爬取网站内容但是不收录的原因?蜘蛛爬取页面没有收录是什么情况?
网站优化有段时间了,可是问题是蜘蛛爬取页面没有记录,也没有被收录内容,当蜘蛛爬取后没有任何记录这是什么情况,为什么蜘蛛爬取页面不被收录了?我找了很多也没有找到原因,网站蜘蛛无效的爬取怎么解决?如何引导
顺晟科技
2023-02-22 18:01:01
16
蜘蛛日志大量抓网站不存在的zip、rar等不存在的文件和路径<p><br></p><p>死链有坚持提交,已经一周多了暂时无缓解,网站的抓取降了很多,请问有什么办法解决吗<br></p>
顺晟科技:
你这个应该不是抓取,应是扫你站点的,具体看下网站日志进行分析。
06
2023-04
06
2023-04
17
2023-03
08
2023-03
26
2023-02
26
2023-02