Como bloquear a SEMRush Bot

SEMRush é uma ferramenta poderosa que lhe permite ver como seu website funciona no tráfego e nas palavras-chave. No entanto, a SEMRush também pode ser uma dor para os proprietários de websites, pois pode enviar bots que rastejam seu site e geram muito tráfego. Isto pode rapidamente consumir sua largura de banda e diminuir a velocidade de seu site.

Felizmente, existem algumas maneiras de bloquear os semrush bots listados abaixo.

Como bloquear a SEMRush Bot de seu site

If you’ve seen a lot of strange traffic coming from semrush.com, you may want to block the semrush bot. Here’s how to block the SEMRush crawler. This will help keep your website safe and secure from unauthorized access.

Como encontrar e editar seu arquivo robots.txt

O arquivo robots.txt está localizado no diretório raiz de seu website, e pode ser editado usando um editor de texto como CyberDuck. Para editar o arquivo, abra-o em seu editor de texto e faça as alterações necessárias. Certifique-se de salvar o arquivo após fazer quaisquer alterações, e carregue-o em seu servidor, se necessário. Com algumas edições simples, você pode controlar como os motores de busca indexam seu website e garantir que somente as páginas que você deseja indexar sejam incluídas nos resultados da busca.

Usando o WordPress, você pode criar e editar o arquivo robots.txt usando o Plugin de levedura. Em WordPress, você clica em Yoast SEO >> Ferramentas >> Editor de arquivos >> robots.txt

* Se você não tiver um arquivo robots.txt, você pode gerar um aqui.

* Você deve colocar um arquivo robots.txt em cada subdomínio se você tiver subdomínios.

Como dizer à SEMRushBot para desacelerar o rastejamento de seu website

Este código adicionado ao seu arquivo Robots.txt diz ao bot para rastrear uma URL a cada minuto.

Agente-usuário: SemrushBot
Atraso de rastejamento: 60

Como bloquear os rastejadores SEMRush específicos

Para bloquear o SemrushBot de rastrear seu site a partir do Auditoria Técnica SEO:

Agente-usuário: SiteAuditBot
Não é permitido: /

Para bloquear o SemrushBot de rastrear seu site para o Ferramenta de auditoria de backklink:

Agente-usuário: SemrushBot-BA
Não é permitido: /

Para bloquear o SemrushBot de rastrear seu site para o SEO On-Page Ferramenta Checker e ferramentas similares:

Agente-usuário: SemrushBot-SI
Não é permitido: /

Para bloquear o SemrushBot de verificar URLs em seu site para o Ferramenta SWA:

Agente-usuário: SemrushBot-SWA
Não é permitido: /

Para bloquear o SemrushBot de rastrear seu site para Conteúdo Analisador e Ferramentas Post Tracking:

Agente-usuário: SemrushBot-CT
Não é permitido: /

Para bloquear o SemrushBot de rastrear seu site para Monitoramento da marca:

Agente-usuário: SemrushBot-BM
Não é permitido: /

Para bloquear o SplitSignalBot de rastrear seu site para o Ferramenta SplitSignal:

Agente-usuário: SplitSignalBot
Não é permitido: /

Para bloquear o SemrushBot-COUB de rastrear seu site para o Ferramenta Construtor de Esboço de Conteúdo:

Agente-usuário: SemrushBot-COUB
Não é permitido: /

Conclusão

Agora que você entendeu como bloquear a SEMRush Bot e tem algumas dicas para melhorar seu site SEO, é hora de colocá-las em prática. Contratando um SEO profissional pode ajudar a levar seu site ao próximo nível e melhorar sua presença on-line. Você está pronto para começar?

Perguntas frequentes

Publicado em: 2022-08-20
Atualizado em: 2022-11-15

Isaac Adams-Hands

Isaac Adams-Hands é o Diretor de SEO da SEO North, uma empresa que presta serviços de Search Engine Optimization. Como profissional de SEO, Isaac tem uma experiência considerável em SEO On-page, SEO Off-page e SEO Técnico, o que lhe dá uma vantagem contra a concorrência.