SEMRushボットをブロックする方法

SEMRushは、あなたのウェブサイトのトラフィックやキーワードのパフォーマンスを確認できる強力なツールです。それはあなたのサイトをクロールし、多くのトラフィックを生成するボットを送信することができますようにしかし、SEMRushはまた、ウェブサイトの所有者のための苦痛になることができます。これはすぐにあなたの帯域幅を食い、あなたのサイトを遅くすることができます。

はんげつばん

幸いなことに、以下に挙げるsemrushボットをブロックする方法がいくつかあります。

あなたのウェブサイトからSEMRushボットをブロックする方法

If you’ve seen a lot of strange traffic coming from semrush.com, you may want to block the semrush bot. Here’s how to block the SEMRush crawler. This will help keep your website safe and secure from unauthorized access.

  1. Robots.TXTを使用してSEMRushボットをブロックする

    Robots.TXTを使用してSEMRushボットをブロックする

    以下のコードをあなたの Robots.txt ファイルを作成します。このファイルは、検索エンジンにサイトの特定の部分をインデックスしないように指示するもので、このファイルを使用して、semrushボットがあなたのサイトをクロールするのを除外することができます。

    ユーザーエージェントSemrushBot
    不許可/

    ダウンロード Robots.TXTテンプレート で、SEMRush Botをブロックします。

  2. SEMRushボットブロックのテスト

    robots-txtファイル

    Robots.TXT ファイルに不許可情報を追加したら、そのプロセスが正しく行われたことを常に確認することをお勧めします。

    あなたのウェブサイトにアクセスし、URLに/robots.txtを追加することでテストすることができます。

    例)example.com/robots.txt

robots.txtファイルの見つけ方と編集方法

robots.txtファイルは、ウェブサイトのルート・ディレクトリにあり、次のようなテキストエディタで編集できます。 サイバーダック.ファイルを編集するには、テキストエディターでファイルを開き、必要な変更を加えます。変更後は必ずファイルを保存し、必要であればサーバーにアップロードしてください。いくつかの簡単な編集で、検索エンジンのボットがあなたのウェブサイトをインデックスする方法を制御し、インデックスさせたいページだけが検索結果に含まれるようにすることができます。

WordPressを使用して、robots.txtファイルを作成・編集するには、以下のようにします。 Yoastプラグイン.WordPressの場合、クリックすると Yoast SEO >> ツール >> ファイルエディタ >> robots.txt

* robots.txt ファイルがない場合、以下のようになります。 こちらで生成する.

* サブドメインがある場合は、各サブドメインに robots.txt ファイルを配置する必要があります。

SEMRushBotにあなたのウェブサイトをクロールする速度を遅くするように指示する方法

Robots.txtファイルに追加されたこのコードは、1分ごとに1つのURLをクロールするようにボットに指示します。

ユーザーエージェントSemrushBot
クロール遅延。60
SEMRushボット

特定のSEMRushクローラーをブロックする方法

からのSemrushBotのクロールをブロックするには、次のようにします。 SEOテクニカルオーディット:

ユーザーエージェントSiteAuditBot
許可しない/

について、SemrushBotがあなたのサイトをクロールするのをブロックするには、次のようにします。 バックリンク監査ツール:

ユーザーエージェントSemrushBot-BA
不許可/

について、SemrushBotがあなたのサイトをクロールするのをブロックするには、次のようにします。 オンページSEO チェッカーツール などがあります。

ユーザーエージェントSemrushBot-SI
を不許可とする。/

SemrushBotがあなたのサイトのURLをチェックするのをブロックするには、次のようにします。 SWAツール:

ユーザーエージェントSemrushBot-SWA
不許可/

SemrushBotがあなたのサイトをクロールするのをブロックするには、次のようにします。 コンテンツ アナライザーポストトラッキングツール:

ユーザーエージェントSemrushBot-CT
を不許可とする。/

SemrushBotがあなたのサイトをクロールするのをブロックするには、次のようにします。 ブランドモニタリング:

ユーザーエージェントSemrushBot-BM
を不許可とする。/

SplitSignalBotがあなたのサイトをクロールするのをブロックするには、次のようにします。 スプリットシグナルツール:

ユーザーエージェントSplitSignalBot
を不許可とする。/

SemrushBot-COUBがあなたのサイトをクロールするのをブロックするには、次のようにします。 コンテンツアウトラインビルダーツール:

ユーザーエージェントSemrushBot-COUB
を不許可とする。/

結論

SEMRush Botをブロックする方法を理解し、WebサイトのSEOを改善するためのヒントを得たところで、いよいよ実践です。を雇う プロフェッショナルSEO エージェンシーは、あなたのウェブサイトを次のレベルに引き上げ、オンラインプレゼンスを向上させるお手伝いをします。準備はできていますか?

よくあるご質問

  • SEMrush Botとは何ですか?
  • なぜSEMRushボットはあなたのウェブサイトをクロールするのですか?
  • SemrushBotは収集したデータを何に使用するのですか?
  • SEMRushはどのくらいの頻度でRobots.txtファイルをチェックするのですか?
  • SEMRushはどのボットを使ってクロールしているのですか?

公開日: 2022-08-20
更新日: 2022-11-15

アイザック・アダムス=ハンズのアバター

アイザック・アダムス・ハンズ

アイザック・アダムス・ハンズは、検索エンジン最適化サービスを提供するSEO North社でSEOディレクターを務めています。SEOのプロフェッショナルとして、アイザックはオンページSEO、オフページSEO、テクニカルSEOの分野で豊富な専門知識を持ち、競合他社を圧倒している。
jaJapanese