ご感想やご質問は、コメント欄にお書きください。検索ロボット対策インターネットに於けるウェブサイトの目的は「コンテンツを世界中に公開する」ことにあります。いう意味では、基本的にいかなるアクセスも拒否すべきではありません。遵守しなかったり、短時間にアクセスを集中してサーバーに多大の負担を掛けるものが存在します。併用して、悪質クローラの効率的な撃退方法を記述してみます。Japan"は、2013年で更新が止まっていましたが、2015年3月で閉鎖したようです。検索サイトが閉鎖しても検索ロボットが動かない保障はありませんので、引き続き動向を監視する必要があります。携帯向けの"BaiduMobaider"は、DoCoMo・KDDI・SoftBankの検索ロボットとしても引き続き作動すると思われます。フランスの情報取集サイト。短時間に大量アクセス。中国最大の検索サイト。