在Screaming Frog中修复不可索引的URLs

艾萨克-亚当斯-汉斯 - 在Screaming Frog中修复不可索引的URLs

Fixing non-indexable URLs in Screaming Frog can be a real pain. Fortunately, there is an easy way to do it. This blog post will show you how to fix them in just a few minutes. So, if you’re having trouble getting your URLs indexed, read on! We’ll show you how to fix them in Screaming Frog and get your website ranking higher in Google search results.

如何在Screaming Frog中修复不可索引的URLs

  1. 可索引状态代码

    可索引状态代码

    有四个主要的可索引状态代码:2XX、3XX、4XX和5XX。

    200代码:搜索引擎可以成功访问该网页。
    301代码:该页已被永久地移到一个新的位置。
    302代码:该页已被暂时移到一个新的位置。
    404代码。 无法找到该页面。
    500代码: the server encountered a client error.

    这些代码对于了解搜索引擎如何与你的网站互动至关重要。

    了解这些可索引性状态代码可以让你更好地控制尖叫蛙在扫描你的网站时如何遇到错误。

  2. 200状态代码

    劝阻搜索引擎

    在大多数情况下,一个无索引标签已经被应用到网站上,形成一个不可索引的状态。

    如果你有一个WordPress网站,你可以查看 设置 >> 阅读 >> 搜索引擎可见性 来查看是否勾选了导致该网站被设置为无索引的方框。

    如果这还不能解决你的问题,你可以检查个别页面是否有无索引标签;如果你使用Yoast插件,你可以在页面层面上检查在 高级 >> 允许搜索引擎在搜索结果中显示本页面?

    允许搜索引擎

    你也可以检查你的Robots.TXT文件,它可以在你的网站上找到,方法是进入域名,然后是domain.com/robots.txt。你将寻找一个 不允许。/ 设置。

    最后,你可以看一下你的页面的canonical标签

    冠词标签

    浏览器中的URL和 rel="canonical标签" 应该匹配。如果它们不正确(如:。 继电器 is set to HTTP and the webpage is set to HTTPS), you can correct the canonical URL using the 更好的搜索'n 替换插件 or in the Yoast plugin.

  3. 3XX错误代码

    当你看到3XX错误代码时,URL被重定向了。你将需要手动修复你网站上的URL重定向,或者使用一个 插件.3XX错误意味着搜索引擎只能索引最终目的地。

  4. 404错误代码

    重定向插件

    如果你遇到了4XX错误,你可以手动修复链接,或使用像Redirection这样的插件。404错误是不可索引的,因为它们是 "找不到网页" 警告页。

    403错误在大多数情况下表明,一个外部网站出于安全和保障的原因,阻挡了你的爬行程序。

  5. 5XX错误代码

    内部服务器错误

    5XX错误代码意味着发生了一个内部服务器错误。这个错误通常是由于Screaming Frog的扫描速度太快,服务器无法跟上而变得过载,耗尽了服务器资源(内存)。

    为了解决这个错误,你可以升级你网站的服务器,或者减慢爬虫扫描你网站的速度。

    在Screaming Frog中,您可以通过以下方式更新爬行速度 配置 >> 速度 >> 最大线程。

    速度

总结

By following our guide on fixing non-indexable pages or non-indexable canonical tags in Screaming Frog, you can ensure that as many people see your website as possible. This will help improve your site’s ranking on Google search results pages and increase the chances that potential customers will find your business online. For more information or tutorials, you can visit the Screaming Frog website or get an SEO expert who would do these technical SEO for you.

常见问题

  • How can you identify and fix non-indexable URLs in Screaming Frog SEO Spider?

发表于:2022-09-26
Updated on: 2024-05-07

艾萨克-亚当斯-手的头像

艾萨克-亚当斯-汉斯

Isaac Adams-Hands是SEO North公司的SEO总监,该公司提供搜索引擎优化服务。作为一名搜索引擎优化专家,Isaac在网页搜索引擎优化、非网页搜索引擎优化和技术性搜索引擎优化方面拥有相当丰富的专业知识,这使他在竞争中占据了优势。
zh_CNChinese