robot.txtが検索されるので、htaccessで特定ファイルをクロール拒否設定したい。

現在、クロールのみ拒否するrobot.txtを設置しているのですが、
robots.txt解析ツール
http://www.searchengineoptimization.jp/robots-tx …
で解析されると、robot.txtの中が見られてしまいます。

なんだか、拒否している事がみられるのは気分が悪いので、htaccessに特定のファイルのみクロールさせない記述方法はありますでしょうか。
ファイルの中を見られるのはいいのですが、検索されないようにしたいのです。

No.1 回答者： artoo 回答日時： 2015/02/14 13:13

拒否していることを知られずに拒否することは出来ません。

ユーザーエージェントがクローラーの時だけ拒否するようにhttpd.confや.htaccessに書けばいいと思いますが、アクセス権で拒否しても拒否されたことはわかります。

クロールを拒否したいというのが目的であれば robots.txt で拒否するのが簡単だと思いますよ。