SEとDIY SEとDIY

ユーザエージェントでアクセス制限する.htaccess簡単作成

行儀の悪い検索ロボット(クローラ)のアクセスをユーザエージェントを使って制限する .htaccessルールとrobots.txtを生成します。

動作としては、まず、robots.txtで拒否を行います。これを無視した悪質なクローラについては、 .htaccessルールでアクセス禁止にするとなります。
拒否したいユーザエージェント
「yodaobot」「Baiduspider」のようなユーザエージェントを複数羅列してご記入ください。




作成した.htaccessルール
.htaccessファイルにコピペしてご利用ください。

作成したrobots.txtルール
robots.txtファイルにコピペしてご利用ください。

  • mod_rewrite.cを利用できる環境が必要です。
  • mod_rewrite.cやrobots.txtの規格に則り作成していますが、念のため、ご利用の前に動作を確認してください。
  • 本サービスで作成された.htaccessルールやrobots.txtの利用により生じた損害について、当サイトは一切の責任を負いません。

簡単作成ツール

SEとDY