SEMRushは、あなたのウェブサイトのトラフィックやキーワードのパフォーマンスを確認できる強力なツールです。それはあなたのサイトをクロールし、多くのトラフィックを生成するボットを送信することができますようにしかし、SEMRushはまた、ウェブサイトの所有者のための苦痛になることができます。これはすぐにあなたの帯域幅を食い、あなたのサイトを遅くすることができます。
幸いなことに、以下に挙げるsemrushボットをブロックする方法がいくつかあります。
目次
あなたのウェブサイトからSEMRushボットをブロックする方法
semrush.comから奇妙なトラフィックがたくさん来ているなら、semrushボットをブロックしたいかもしれない。以下はその方法です。 SEMRushクローラーをブロックする.これにより、ウェブサイトを不正アクセスから安全かつセキュアに保つことができます。
Robots.TXTを使用してSEMRushボットをブロックする
以下のコードをあなたの Robots.txt ファイルを作成します。このファイルは、検索エンジンにサイトの特定の部分をインデックスしないように指示するもので、このファイルを使用して、semrushボットがあなたのサイトをクロールするのを除外することができます。
ユーザーエージェントSemrushBot 不許可/
ダウンロード Robots.TXTテンプレート で、SEMRush Botをブロックします。
SEMRushボットブロックのテスト
Robots.TXT ファイルに不許可情報を追加したら、そのプロセスが正しく行われたことを常に確認することをお勧めします。
あなたのウェブサイトにアクセスし、URLに/robots.txtを追加することでテストすることができます。
例)example.com/robots.txt
robots.txtファイルの見つけ方と編集方法
robots.txtファイルは、ウェブサイトのルート・ディレクトリにあり、次のようなテキストエディタで編集できます。 サイバーダック.ファイルを編集するには、テキストエディターでファイルを開き、必要な変更を加えます。変更後は必ずファイルを保存し、必要であればサーバーにアップロードしてください。いくつかの簡単な編集で、検索エンジンのボットがあなたのウェブサイトをインデックスする方法を制御し、インデックスさせたいページだけが検索結果に含まれるようにすることができます。
WordPressを使用して、robots.txtファイルを作成・編集するには、以下のようにします。 Yoastプラグイン.WordPressの場合、クリックすると Yoast SEO >> ツール >> ファイルエディタ >> robots.txt
* robots.txt ファイルがない場合、以下のようになります。 こちらで生成する.
* サブドメインがある場合は、各サブドメインに robots.txt ファイルを配置する必要があります。
SEMRushBotにあなたのウェブサイトをクロールする速度を遅くするように指示する方法
Robots.txtファイルに追加されたこのコードは、1分ごとに1つのURLをクロールするようにボットに指示します。
ユーザーエージェントSemrushBot
クロール遅延。60
特定のSEMRushクローラーをブロックする方法
からのSemrushBotのクロールをブロックするには、次のようにします。 SEOテクニカルオーディット:
ユーザーエージェントSiteAuditBot
許可しない/
について、SemrushBotがあなたのサイトをクロールするのをブロックするには、次のようにします。 バックリンク監査ツール:
ユーザーエージェントSemrushBot-BA
不許可/
について、SemrushBotがあなたのサイトをクロールするのをブロックするには、次のようにします。 オンページSEO チェッカーツール などがあります。
ユーザーエージェントSemrushBot-SI
を不許可とする。/
SemrushBotがあなたのサイトのURLをチェックするのをブロックするには、次のようにします。 SWAツール:
ユーザーエージェントSemrushBot-SWA
不許可/
SemrushBotがあなたのサイトをクロールするのをブロックするには、次のようにします。 コンテンツ アナライザー と ポストトラッキングツール:
ユーザーエージェントSemrushBot-CT
を不許可とする。/
SemrushBotがあなたのサイトをクロールするのをブロックするには、次のようにします。 ブランドモニタリング:
ユーザーエージェントSemrushBot-BM
を不許可とする。/
SplitSignalBotがあなたのサイトをクロールするのをブロックするには、次のようにします。 スプリットシグナルツール:
ユーザーエージェントSplitSignalBot
を不許可とする。/
SemrushBot-COUBがあなたのサイトをクロールするのをブロックするには、次のようにします。 コンテンツアウトラインビルダーツール:
ユーザーエージェントSemrushBot-COUB
を不許可とする。/
結論
SEMRush Botをブロックする方法を理解し、WebサイトのSEOを改善するためのヒントを得たところで、いよいよ実践です。を雇う プロフェッショナルSEO エージェンシーは、あなたのウェブサイトを次のレベルに引き上げ、オンラインプレゼンスを向上させるお手伝いをします。準備はできていますか?
よくあるご質問
SEMrush Botとは何ですか?
なぜSEMRushボットはあなたのウェブサイトをクロールするのですか?
SemrushBotは収集したデータを何に使用するのですか?
SEMRushはどのくらいの頻度でRobots.txtファイルをチェックするのですか?
SEMRushはどのボットを使ってクロールしているのですか?
公開日: 2022-08-20
更新日: 2024-09-16