さくらインターネット 質問 ..
[2ch|▼Menu]
116:名無しさん@お腹いっぱい。
08/03/22 10:16:23 0
>>88=84 遅ればせながら蛇足まで
検索エンジンからの(おそらくクローラの)アクセスを弾きたいと言うことなのだと思いますが、
Host name や IP address だけで弾こうとしても弾ききれず抜けが発生します

理由は、検索エンジン用クローラは日増しに悪質かつ巧妙になっているためで、
特に酷いものになると、IP address も User agent も検索エンジンと関係が無いような、
一般的なアクセス元やブラウザのように見せかけているものがあるので注意が必要です

なお、検索エンジンの探索のたぐいの通信の全てを弾きたいという意図もあるのでしたら、
検索エンジン製のツールバーや各種ツール(Google Desktop など)もクローラと同じ役割を
担当していますので、検索エンジンに関連する IP address だけでは弾ききれません

なぜなら、該当するツールバー類は任意のユーザーが使用しているだけなので、
検索エンジンとはまったく関係していない任意の IP address からアクセスがあるためです
このため、User agent での deny も併用してやっとのことで
検索エンジン関連のほぼ全てのアクセスを弾くことができるのが現状です


次ページ
最新レス表示
スレッドの検索
類似スレ一覧
話題のニュース
おまかせリスト
▼オプションを表示
暇つぶし2ch

5372日前に更新/290 KB
担当:undef