最近やたらと増えたIP150.70.84.xxからのアクセスは、
ウィルスバスターのリンク先チェッカーらしいです。
インデックス目的じゃなくて安全性を検査するんでしょうねたぶん。
ロボットの一種のくせにエージェントで名乗ってないのがいやらしい。
たぶんロボットじゃないからrobots.txtも関係ないんだろうな。
で最近不思議なことに気づきました。
150.70.84.xxからの「クロール」だけは、
パラメーターがSJISで来てよくこけてる。
そもそもうちのパラメータはUTF-8をエンコードしてつけてるはず。
ウィルスバスターって、わざわざdecodeしてutf-8からsjisに変換して、またencodeしてURLを再構築してる？
なんなんでしょう。 by ひつじ