先日行った検索ロボット対策ですが、昨日1日のアクセスログをみたところ、一定の効果が見られました。
まず、searchmsn,googlebot,yandexといった主要な検索ロボットが見事にrobots.txtを読みにいき、robots.txtを読んだ以降、サイト内を徘徊をしていないことが確認されました。
気になるのは、trendmicro.comのロボットです。
ものすごいログが記録されています。すべてtrendmicro.comからのものです。
一部情報では、トレンドマイクロ社の検索ロボットは、『セキュリティソフトの挙動として、セキュリティ対策ソフトをインストールしたPCから、WEBサイトアクセス毎にそのサイトの安全性をチェックしている』というものがあるんです。
この情報が正しければ、同社のロボットは一概に悪意のあるものとは言えないかもしれません。でもログチェック的には相当うざいんですけどね。
ロボット用に多くのIPアドレスを所有している節があるようですが、ちょっとやりすぎではありませんかトレンドマイクロさん。
