2005-06-01から1日間の記事一覧
ただ "4" という User-agent。"3" (id:nminoru:20050422:p2) の仲間なのか？ 4隠すなよ。 hidden非互換性を強調されても。。。それに incompatible だろ。 Mozilla/4.0 (uncompatible; MAD_Engine3.73; Windows;)そのほか出自不明。 LinkWalker MOMONNGER Na…
![はてなブックマーク - [Crawler] そのほか変わり者 User-Agent](https://b.hatena.ne.jp/entry/image/https://nminoru.hatenablog.jp/entry/20050601/p2)
新しい検索サイト & 検索プロジェクトはどんどん生まれているようだ。新規に見つけた Web クローラーの足跡を記録しておく。 IRLbot/1.0 (+http://irl.cs.tamu.edu/crawler) MJ12bot/v1.0.0 (http://majestic12.co.uk/bot.php?+) NutchCVS/0.06-dev (Nutch; …
