2007年 3月 24日(土)

robot.txtを尊重しない百度とNaverは氏ね

.htaccessに以下を追加。

SetEnvIf User-Agent "Baiduspider" deny_user-agent

SetEnvIf User-Agent "Baiduspider+" deny_user-agent

SetEnvIf User-Agent "NaverBot" deny_user-agent

order allow,deny

allow from all

deny from env=deny_user-agent


Posted by thomas at 2007年03月24日 18:37 | トラックバック / アフィリエイトはエーハチネット

« PASMO提携利用記念スイカ購入 | Main | 投資信託購入 »

トラックバック

このエントリーのトラックバックURL:
http://test.uwan.net/mt-tb.cgi/1697

コメント

コメントしてください

サイン・インを確認しました、 さん。コメントしてください。 (サイン・アウト)

(いままで、ここでコメントしたことがないときは、コメントを表示する前にこのウェブログのオーナーの承認が必要になることがあります。承認されるまではコメントは表示されません。そのときはしばらく待ってください。)


情報を登録する?