为什么网站日志百度蜘蛛抓取的都是404页面？

2025-02-23 22:36:22

推荐回答（5个）

回答1：

你的404页面设置可能有错误，正常情况下错误的不存在的页面返回的应该是404页面，你可能设置的是跳转例如301或是302，也就是当出现错误页面的时候页面301或是302跳转到到了这个404页面

回答2：

在百度的审核期，对网站进行改动，死在了萌芽中，很难复活，更新文章频率有点儿高…个人观点

回答3：

robots屏蔽了也会爬取的但是不会显示出来，就是不会在搜索结果里面显示出来，你这个情况过一段时间就好了

回答4：

百度是不是死链，与您提交给运行你的，它不应该看一组新的机器人。

回答5：

百度没有用新的robot设置和你提交的死链去跑，你过一阵子吧再看看应该自己就没有了。