dポイントプレゼントキャンペーン実施中!

baidu(百度)のクローラーをはじきたいのですが

robots.txtではじく方法を教えてください

下記のようにしていますがもっと良い書き方はありますか?

user-agent: Baiduspider
disallow: /

user-agent: BaiduImagespider
disallow: /

user-agent: BaiduMobaider
disallow: /

A 回答 (1件)

User-agent:Baiduspider


User-agent:Baiduspider-image
User-agent:Baiduspider-video
User-agent:Baiduspider-news
User-agent:Baiduspider-favo
User-agent:Baiduspider-cpro
User-agent:Baiduspider-ads

クローラーの種類です。
参考してください。(-_-)b

参考URL:http://www.baidu.com/search/spider_english.html
    • good
    • 0
この回答へのお礼

回答ありがとうございます
Baiduspiderがこんなに!?もうあきらめるしかないのでしょうか?
robots.txtでははじけないのでしょうか?

お礼日時:2013/11/11 18:53

お探しのQ&Aが見つからない時は、教えて!gooで質問しましょう!