crawler のニューフェイス

Apache のログに見慣れない crawler を User-Agent を二つ発見。
一つは 当サイト では 1/6 の 15:43 に出現した新顔で、User-Agent は以下のようになっている。

"ichiro/1.0 (ichiro@NTTR.CO.JP)"*1

id:nminoru:20041230#p1 と同様に画像ファイルを中心に収集を行っている。

もう一つは exalead という新しい Web 検索サイトからクロールがかかっている。当サイトからはは 11/12 以降 日記のページを中心に収集していったようだ。User-Agent は以下のようになっている。

"NG/2.0"

*1:メールアドレスは spam 対策のため少し加工している。