在Screaming Frog中修复不可索引的URLs

艾萨克-亚当斯-汉斯 - 在Screaming Frog中修复不可索引的URLs

在Screaming Frog中修复不可索引的URL可能是一个真正的痛苦。幸运的是,有一个简单的方法可以做到这一点。这篇博文将告诉你如何在短短几分钟内修复它们。所以,如果你在让你的URL被索引时遇到困难,请继续阅读我们将告诉你如何在Screaming Frog中修复它们,并使你的网站在谷歌搜索结果中排名更高。

如何在Screaming Frog中修复不可索引的URLs

  1. 可索引状态代码

    可索引状态代码

    有四个主要的可索引状态代码:2XX、3XX、4XX和5XX。

    200代码:搜索引擎可以成功访问该网页。
    301代码:该页已被永久地移到一个新的位置。
    302代码:该页已被暂时移到一个新的位置。
    404代码。 无法找到该页面。
    500代码:服务器遇到了一个错误。

    这些代码对于了解搜索引擎如何与你的网站互动至关重要。

    了解这些可索引性状态代码可以让你更好地控制尖叫蛙在扫描你的网站时如何遇到错误。

  2. 200状态代码

    劝阻搜索引擎

    在大多数情况下,一个无索引标签已经被应用到网站上,形成一个不可索引的状态。

    如果你有一个WordPress网站,你可以查看 设置 >> 阅读 >> 搜索引擎可见性 来查看是否勾选了导致该网站被设置为无索引的方框。

    如果这还不能解决你的问题,你可以检查个别页面是否有无索引标签;如果你使用Yoast插件,你可以在页面层面上检查在 高级 >> 允许搜索引擎在搜索结果中显示本页面?

    允许搜索引擎

    你也可以检查你的Robots.TXT文件,它可以在你的网站上找到,方法是进入域名,然后是domain.com/robots.txt。你将寻找一个 不允许。/ 设置。

    最后,你可以看一下你的页面的canonical标签

    冠词标签

    浏览器中的URL和 rel="canonical标签" 应该匹配。如果它们不正确(如:。 继电器 被设置为HTTP,而网页被设置为HTTPS),你可以用以下方法纠正URL 更好的搜索'n 替换插件.

  3. 3XX错误代码

    当你看到3XX错误代码时,URL被重定向了。你将需要手动修复你网站上的URL重定向,或者使用一个 插件.3XX错误意味着搜索引擎只能索引最终目的地。

  4. 404错误代码

    重定向插件

    如果你遇到了4XX错误,你可以手动修复链接,或使用像Redirection这样的插件。404错误是不可索引的,因为它们是 "找不到网页" 警告页。

    403错误在大多数情况下表明,一个外部网站出于安全和保障的原因,阻挡了你的爬行程序。

  5. 5XX错误代码

    内部服务器错误

    5XX错误代码意味着发生了一个内部服务器错误。这个错误通常是由于Screaming Frog的扫描速度太快,服务器无法跟上而变得过载,耗尽了服务器资源(内存)。

    为了解决这个错误,你可以升级你网站的服务器,或者减慢爬虫扫描你网站的速度。

    在Screaming Frog中,您可以通过以下方式更新爬行速度 配置 >> 速度 >> 最大线程。

    速度

总结

通过遵循我们关于在Screaming Frog中修复不可索引页面的指南,你可以确保尽可能多的人看到你的网站。这将有助于提高您的网站在谷歌搜索结果页面上的排名,并增加潜在客户在网上找到您的业务的机会。

常见问题

  • 在Screaming Frog中,non-indexable是什么意思?
  • 在Screaming Frog中,可索引是什么意思?

发表于:2022-09-26
更新日期: 2022-10-28

艾萨克-亚当斯-手的头像

艾萨克-亚当斯-汉斯

Isaac Adams-Hands是SEO North公司的SEO总监,该公司提供搜索引擎优化服务。作为一名搜索引擎优化专家,Isaac在网页搜索引擎优化、非网页搜索引擎优化和技术性搜索引擎优化方面拥有相当丰富的专业知识,这使他在竞争中占据了优势。
zh_CNChinese