robots.txt文件里需要对网站404页面进行屏蔽设置吗?

2025-03-10 06:59:58
推荐回答(2个)
回答1:

如前面所说的,404是不需要收录的,收录了反而不好。屏蔽是最保险的做法。该怎么做?如果你的404页面是 /404.html ,那在你网站根目录下的robots.txt文件中加一条:Disallow: /404.html就行了

回答2:

我的建议是404做robots.txt做好404的页面404不需要收录