2011年12月18日

実は嫌なクローラって多い?

前回「ezooms.botのイヤラシイ挙動?」なんて書いたけれども……。

実は嫌らしいクローラって多いのかな。別にどーでもいいし、なんて思ってたが、注意してログを見るとチマチマと妙ちくりんな事を試行するボットがある。まあ、認証を試みるようなクローラー!(笑)は幸いにもまだ見てないが、どうなんしょ。すでにもうサイト収集ではなくて、ただのアタックなんで、堂々とやる奴ぁ偽装っしょ。と、思いつつ、世界は広いので、ま、色々。かな。

今回は以下

IP : 180.19.***.***(一部晒しw)
UA : Mozilla/5.0 (compatible; heritrix/3.1.0 +http://www.dehenken.co.jp)

UA は、上記だけども本当に http://www.dehenken.co.jp と関係あるかは UA 自体信用できんし、問合せも面倒だから知らん。

が、このUAとIPでのクローラー。js 内のURLらしき文字列をURLとみなして、勝手につなげてくる。例えば、evernote の noteit.js を http://domain.com/a/ にあるページで読み込んでいる時、その js 内に "multipart/form-data" という文字列を見つけると、http://domain.com/a/multipart/form-data へのリクエストを試みてきなさる。一応、リファラに noteit.js が書かれているのは、まだ救いだが「リンクも無い」「存在もしない」ファイルを闇雲に探すと言うのは、一体どういう了見なんだろう? 名乗って堂々とやるにしても「節操がない」というもんじゃなかろーか?

自分が管理しているサイトのアクセス総量自体が少なくて知らないだけかも知れないが、こう言ったことは「普通」なんだろうか?

ちなみにIPは日本かつ京都OCNです ^^;;;;

posted by HiFa at 01:12 | 愛知 ☁ | Comment(0) | TrackBack(0) | よもやま | このブログの読者になる | 更新情報をチェックする