.htaccessによる海外IP制限とクローラー巡回について

お教えください。

現在、サイトを運営しておりますが、
契約の関係上、海外からサイトを見れないように、.htaccessを使用して、IPアクセス制限を掛けています。

参考：
----------------------
order deny,allow
deny from all

allow from 58.0.0.0/15
allow from 58.3.0.0/17
allow from 58.3.128.0/17
allow from 58.4.0.0/15
・
・
・　　（数百を羅列）
----------------------

この場合、各社が提供する検索エンジン用のクローラーもはじいてしまっている状態なのでしょうか？

特にYahoo!でのカテゴリ登録マークが表示されなくなってしまっており、検索順位の下降を心配しています。

詳しい方、クローラーをはじいてしまっているかどうか　＆　回避方法をご教授願えれば幸いです。

No.2 回答者： silvercat9 回答日時： 2008/10/11 14:28

参照URLが、海外のをはじく、という設定です。

ただし、crawlerが、海外にあれば、それらは、弾かれます。

Yahoo! は、Japanのことですよね。それでしたら、crawlerは、Japanだと思います。

　自分で、Yahoo!で、自分のサイトがマッチするという検索をかけて、出てくるか、どうかを調べるのが、まず第1歩ではないでしょうか。
　もし、順位が下でも出てくるのであれば、すくなくともサーバー側のアクセス制限の問題ではないでしょう。

　なお、日本でも、google使う人は多いので、googleのcrawlerがサーチ出来るような設定が望ましいです。googleのcrawlerの　IPはしりませんが。
　google.comをアクセスリストに追加しておくだけで、いいかもしれません。

参考URL：http://www.cgis.biz/tools/access.php

No.1 回答者： silvercat9 回答日時： 2008/10/10 22:04

この設定は、原則アクセス禁止。

リストしているところだけ、許可ですから、crawlerだろうとなんだろうと、httpアクセスは、許可されているソースIPしか出来ません。

この回答へのお礼

ご回答ありがとうございます。

ということは、この設定ではまずいんですね。

知識不足でお恥ずかしいかぎりです。

ちなみに、.htaccess　の設定がよく分かっていないのが根本的な
原因なのですが、もしよければ、海外IPのみをはじく設定のソースを紹介しているページなどあればお教え願えませんでしょうか？

お礼日時：2008/10/10 23:06