Cómo bloquear el bot de SEMRush

SEMRush es una poderosa herramienta que le permite ver el rendimiento de su sitio web en cuanto a tráfico y palabras clave. Sin embargo, SEMRush también puede ser una molestia para los propietarios de sitios web, ya que puede enviar bots que rastrean su sitio y generan mucho tráfico. Esto puede consumir rápidamente su ancho de banda y ralentizar su sitio.

sembrador

Afortunadamente, hay algunas maneras de bloquear los bots semrush que se enumeran a continuación.

Cómo bloquear el bot de SEMRush de su sitio web

Si has visto un montón de tráfico extraño procedente de semrush.com, es posible que desees bloquear el bot semrush. Aquí te explicamos cómo bloquear el rastreador SEMRush. Esto ayudará a mantener su sitio web seguro y a salvo de accesos no autorizados.

  1. Utiliza Robots.TXT para bloquear el bot de SEMRush

    Utiliza Robots.TXT para bloquear el bot de SEMRush

    Añade el siguiente código a tu Robots.txt archivo. Este archivo le dice a los motores de búsqueda que no indexen ciertas partes de su sitio, y puede usarlo para excluir al bot semrush de rastrear su sitio.

    Agente de usuario: SemrushBot
    Disallow: /

    Descargue un Plantilla Robots.TXT que bloqueará el bot de SEMRush.

  2. Probar el bloque de bots de SEMRush

    archivo robots-txt

    Después de añadir la información disallow a su archivo Robots.TXT, siempre es una buena idea asegurarse de que el proceso se hizo correctamente.

    Puede probar esto yendo a su sitio web y añadiendo /robots.txt a la URL.

    Por ejemplo, ejemplo.com/robots.txt

Cómo encontrar y editar su archivo robots.txt

El archivo robots.txt se encuentra en el directorio raíz de su sitio web y puede editarse con un editor de texto como CyberDuck. Para editar el archivo, ábralo en su editor de texto y haga los cambios necesarios. Asegúrese de guardar el archivo después de realizar los cambios y, si es necesario, súbalo a su servidor. Con unas pocas y sencillas modificaciones, podrá controlar la forma en que los robots de los motores de búsqueda indexan su sitio web y asegurarse de que sólo se incluyan en los resultados de las búsquedas las páginas que usted desea que se indexen.

Utilizando WordPress, puede crear y editar el archivo robots.txt utilizando la función Plugin Yoast. En WordPress, haga clic en Yoast SEO >> Herramientas >> Editor de archivos >> robots.txt

* Si no tiene un archivo robots.txt, puede generar uno aquí.

* Debe colocar un archivo robots.txt en cada subdominio si tiene subdominios.

Cómo decirle a SEMRushBot que rastree más lentamente su sitio web

Este código añadido a su archivo Robots.txt le dice al bot que rastree una URL cada minuto.

Agente de usuario: SemrushBot
Retraso de rastreo: 60
Bot de SEMRush

Cómo bloquear rastreadores específicos de SEMRush

Para bloquear a SemrushBot para que no rastree su sitio desde el Auditoría técnica SEO:

Agente de usuario: SiteAuditBot
Disallow: /

Para bloquear a SemrushBot para que no rastree su sitio para el Herramienta de auditoría de backlinks:

Agente de usuario: SemrushBot-BA
Disallow: /

Para bloquear a SemrushBot para que no rastree su sitio para el SEO en la página Herramienta de comprobación y herramientas similares:

Agente de usuario: SemrushBot-SI
Disallow: /

Para bloquear a SemrushBot para que no compruebe las URLs de su sitio web para el Herramienta SWA:

Agente de usuario: SemrushBot-SWA
Disallow: /

Para bloquear SemrushBot de rastrear su sitio para Contenido Analizador y Herramientas de seguimiento de puestos:

Agente de usuario: SemrushBot-CT
Disallow: /

Para bloquear SemrushBot de rastrear su sitio para Seguimiento de la marca:

Agente de usuario: SemrushBot-BM
Disallow: /

Para bloquear SplitSignalBot de rastrear su sitio para el Herramienta SplitSignal:

Agente de usuario: SplitSignalBot
Disallow: /

Para bloquear SemrushBot-COUB de rastrear su sitio para el Herramienta de creación de esquemas de contenido:

Agente de usuario: SemrushBot-COUB
Disallow: /

Conclusión

Ahora que entiendes cómo bloquear el Bot de SEMRush y tienes algunos consejos para mejorar el SEO de tu sitio web, es hora de ponerlos en práctica. Contratar a un SEO profesional puede ayudar a llevar su sitio web al siguiente nivel y mejorar su presencia en línea. ¿Está listo para empezar?

PREGUNTAS FRECUENTES

  • ¿Qué es el bot de SEMrush?
  • ¿Por qué el bot de SEMRush rastrea tu sitio web?
  • ¿Qué utiliza SemrushBot con los datos recogidos?
  • ¿Con qué frecuencia comprueba SEMRush su archivo Robots.txt?
  • ¿Qué bot utiliza SEMRush para rastrear?

Publicado en: 2022-08-20
Actualizado el: 2024-09-16

Avatar de Isaac Adams-Hands

Isaac Adams-Hands

Isaac Adams-Hands es el director de SEO en SEO North, una empresa que ofrece servicios de optimización de motores de búsqueda. Como profesional de SEO, Isaac tiene una considerable experiencia en SEO On-page, SEO Off-page y SEO Técnico, lo que le da una ventaja frente a la competencia.
es_ESSpanish