这些页面是可以被抓取的

Rvrdsg596

例如：第1页（301）> 第2页（404） 这时访客和搜索引擎都无法访问最终的 URL，所以这种情况是很不好的。访客会离开你的网站，而大多数搜索引擎也会放弃对网站内容的抓取。 你可以使用 HTTP 状态代码检查器一次性检查多达 100 个链接的错误情况。 301 404 如果你想要查看更多页面，可以使用 Ahrefs 的网站诊断板块中的内页报告来查看“失效的重定向”。 broken redirect error 修复这些问题有两种方法： 如果是不小心删除了原页面，将其恢复即可； 删除指向该 URL 的内部链接。 6. 404 重定向页面 返回 404 错误代码的页面是无效页面，浏览器会返回一个类似下图的页面： 404 error 有时，用户应该看到这样的页面。例如，当用户输入进浏览器的 URL 有误时，这个页面就可以告诉他/她输入是有误的。在上图中，你会发现返回一个 404 错误页面是完全合理的。 话虽如此，404 错误的页面依然会是个问题，特别是出现以下情况的时候： 这些页面是可以被抓取的。可以被抓取通常意味着可以被点击。如果他们是可以被点击的，一些用户在点击内部链接后就会去到这个页面。这样对用户体验是很不好的。

他们保有外链。因为 404 页面是无法被访问的，这样任何指向 404 页面的外链 电子邮件营销列表 就相当于被浪费掉了。 要解决第一个问题，可以在 Ahrefs 的网站诊断板块的内部链接报告中查看“404 页面”的错误。 404 page error site audit 点击此处可以查看爬虫在抓取网站时遇到的所有 404 错误页面。 接着，点击“管理栏目”按钮，添加“dofollow 外链数量”一栏，点击“应用”，然后将此栏按数量“从多到少”排列。 404 backlinks site audit 在 Ahrefs 网站分析板块的外链报告中寻找可能拥有1个或多个Dofollow外链的页面。这些外链有可能是有价值的。如果是这样的话，你可以需要将他们 301 重定向到网站上另外相关的资源。 重要 将 404 页面重定向到相关的内容是这里的关键。Google 对 301 和 404 重定向等量齐观，因此，除非你将他们指向相似或者相关的页面，否则单纯的重定向不会带来什么好处。 来自 Google 的 John Mueller 在这则视频中解释了更多细节。





如果没有相似或者相关的页面，而你网站上的某个 404 页面又拥有大量的高质量外链，老实说，这就值得你把这个页面的内容重新发布在完全相同的位置了。 你可以这样想： 如果这个无效页面的价值很大，一开始就吸引了众多高质量的外链，那么就值得去考虑为什么它会不复存在。这显然是人们感兴趣的话题。 至于那些没有 dofollow 外链的页面，可以试着用以下方式修复： 把无效页面恢复到指定的 URL 把无效页面 301 重定向到另外一个相关页面 移除或替换所有指向无效页面的内部链接 重要提示。如果你使用第 3 种方法，记得不仅要替换内部链接，如有必要还需要替换锚文本和周围的文字。 7. 将 302 或元更新重定向替换成 301 重定向 永远不要使用 302 或者元更新（meta refresh）重定向来做永久重定向。 302 重定向是为了临时移动，而 Google 也建议如果有可能的话，在任何时候都不要使用元更新重定向。