在Screaming Frog中修复不可索引的URLs

艾萨克-亚当斯-汉斯 - 在Screaming Frog中修复不可索引的URLs

在 Screaming Frog 中修复不可索引的 URL 确实很麻烦。幸运的是,有一种简单的方法可以做到这一点。这篇博文将告诉您如何在几分钟内修复它们。因此,如果您在让 URL 索引请继续阅读!我们将向您展示如何在 Screaming Frog 中修复这些问题,让您的网站在 Google 搜索结果中获得更高的排名。

如何在Screaming Frog中修复不可索引的URLs

  1. 可索引状态代码

    可索引状态代码

    有四个主要的可索引状态代码:2XX、3XX、4XX和5XX。

    200代码:搜索引擎可以成功访问该网页。
    301代码:该页已被永久地移到一个新的位置。
    302代码:该页已被暂时移到一个新的位置。
    404代码。 无法找到该页面。
    500代码提示:服务器遇到客户端错误。

    这些代码对于了解搜索引擎如何与你的网站互动至关重要。

    了解这些可索引性状态代码可以让你更好地控制尖叫蛙在扫描你的网站时如何遇到错误。

  2. 200状态代码

    劝阻搜索引擎

    在大多数情况下,一个无索引标签已经被应用到网站上,形成一个不可索引的状态。

    如果你有一个WordPress网站,你可以查看 设置 >> 阅读 >> 搜索引擎可见性 来查看是否勾选了导致该网站被设置为无索引的方框。

    如果这还不能解决你的问题,你可以检查个别页面是否有无索引标签;如果你使用Yoast插件,你可以在页面层面上检查在 高级 >> 允许搜索引擎在搜索结果中显示本页面?

    允许搜索引擎

    你也可以检查你的Robots.TXT文件,它可以在你的网站上找到,方法是进入域名,然后是domain.com/robots.txt。你将寻找一个 不允许。/ 设置。

    最后,你可以看一下你的页面的canonical标签

    冠词标签

    浏览器中的URL和 rel="canonical标签" 应该匹配。如果它们不正确(如:。 继电器 设置为 HTTP 而网页设置为 HTTPS),可以使用 更好的搜索'n 替换插件 或 Yoast 插件。

  3. 3XX错误代码

    当你看到3XX错误代码时,URL被重定向了。你将需要手动修复你网站上的URL重定向,或者使用一个 插件.3XX错误意味着搜索引擎只能索引最终目的地。

  4. 404错误代码

    重定向插件

    如果你遇到了4XX错误,你可以手动修复链接,或使用像Redirection这样的插件。404错误是不可索引的,因为它们是 "找不到网页" 警告页。

    403错误在大多数情况下表明,一个外部网站出于安全和保障的原因,阻挡了你的爬行程序。

  5. 5XX错误代码

    内部服务器错误

    5XX错误代码意味着发生了一个内部服务器错误。这个错误通常是由于Screaming Frog的扫描速度太快,服务器无法跟上而变得过载,耗尽了服务器资源(内存)。

    为了解决这个错误,你可以升级你网站的服务器,或者减慢爬虫扫描你网站的速度。

    在Screaming Frog中,您可以通过以下方式更新爬行速度 配置 >> 速度 >> 最大线程。

    速度

总结

按照我们的指南在 Screaming Frog 中修复不可索引的页面或不可索引的规范标签,您可以确保尽可能多的人看到您的网站。这将有助于提高您的网站在谷歌搜索结果页面上的排名,并增加潜在客户在网上找到您的企业的机会。如需了解更多信息或教程,您可以访问 Screaming Frog 网站,或聘请搜索引擎优化专家为您进行这些技术性搜索引擎优化。

常见问题

  • 如何在 Screaming Frog SEO Spider 中识别和修复不可索引的 URL?

发表于:2022-09-26
更新日期: 2024-05-07

艾萨克-亚当斯-手的头像

艾萨克-亚当斯-汉斯

Isaac Adams-Hands是SEO North公司的SEO总监,该公司提供搜索引擎优化服务。作为一名搜索引擎优化专家,Isaac在网页搜索引擎优化、非网页搜索引擎优化和技术性搜索引擎优化方面拥有相当丰富的专业知识,这使他在竞争中占据了优势。
zh_CNChinese