Cómo bloquear el bot de SEMRush

SEMRush es una poderosa herramienta que le permite ver el rendimiento de su sitio web en cuanto a tráfico y palabras clave. Sin embargo, SEMRush también puede ser una molestia para los propietarios de sitios web, ya que puede enviar bots que rastrean su sitio y generan mucho tráfico. Esto puede consumir rápidamente su ancho de banda y ralentizar su sitio.

Afortunadamente, hay algunas maneras de bloquear los bots semrush que se enumeran a continuación.

Cómo bloquear el bot de SEMRush de su sitio web

If you’ve seen a lot of strange traffic coming from semrush.com, you may want to block the semrush bot. Here’s how to block the SEMRush crawler. This will help keep your website safe and secure from unauthorized access.

Cómo encontrar y editar su archivo robots.txt

El archivo robots.txt se encuentra en el directorio raíz de su sitio web y puede editarse con un editor de texto como CyberDuck. Para editar el archivo, ábralo en su editor de texto y haga los cambios necesarios. Asegúrese de guardar el archivo después de realizar los cambios y, si es necesario, súbalo a su servidor. Con unas pocas y sencillas modificaciones, podrá controlar la forma en que los robots de los motores de búsqueda indexan su sitio web y asegurarse de que sólo se incluyan en los resultados de las búsquedas las páginas que usted desea que se indexen.

Utilizando WordPress, puede crear y editar el archivo robots.txt utilizando la función Plugin Yoast. En WordPress, haga clic en Yoast SEO >> Herramientas >> Editor de archivos >> robots.txt

* Si no tiene un archivo robots.txt, puede generar uno aquí.

* Debe colocar un archivo robots.txt en cada subdominio si tiene subdominios.

Cómo decirle a SEMRushBot que rastree más lentamente su sitio web

Este código añadido a su archivo Robots.txt le dice al bot que rastree una URL cada minuto.

Agente de usuario: SemrushBot
Retraso de rastreo: 60

Cómo bloquear rastreadores específicos de SEMRush

Para bloquear a SemrushBot para que no rastree su sitio desde el Auditoría técnica SEO:

Agente de usuario: SiteAuditBot
Disallow: /

Para bloquear a SemrushBot para que no rastree su sitio para el Herramienta de auditoría de backlinks:

Agente de usuario: SemrushBot-BA
Disallow: /

Para bloquear a SemrushBot para que no rastree su sitio para el SEO en la página Herramienta de comprobación y herramientas similares:

Agente de usuario: SemrushBot-SI
Disallow: /

Para bloquear a SemrushBot para que no compruebe las URLs de su sitio web para el Herramienta SWA:

Agente de usuario: SemrushBot-SWA
Disallow: /

Para bloquear SemrushBot de rastrear su sitio para Contenido Analizador y Herramientas de seguimiento de puestos:

Agente de usuario: SemrushBot-CT
Disallow: /

Para bloquear SemrushBot de rastrear su sitio para Seguimiento de la marca:

Agente de usuario: SemrushBot-BM
Disallow: /

Para bloquear SplitSignalBot de rastrear su sitio para el Herramienta SplitSignal:

Agente de usuario: SplitSignalBot
Disallow: /

Para bloquear SemrushBot-COUB de rastrear su sitio para el Herramienta de creación de esquemas de contenido:

Agente de usuario: SemrushBot-COUB
Disallow: /

Conclusión

Ahora que entiendes cómo bloquear el Bot de SEMRush y tienes algunos consejos para mejorar el SEO de tu sitio web, es hora de ponerlos en práctica. Contratar a un SEO profesional puede ayudar a llevar su sitio web al siguiente nivel y mejorar su presencia en línea. ¿Está listo para empezar?

PREGUNTAS FRECUENTES

Publicado en: 2022-08-20
Actualizado el: 2022-11-15

Isaac Adams-Hands

Isaac Adams-Hands es el director de SEO en SEO North, una empresa que ofrece servicios de optimización de motores de búsqueda. Como profesional de SEO, Isaac tiene una considerable experiencia en SEO On-page, SEO Off-page y SEO Técnico, lo que le da una ventaja frente a la competencia.