crawler のニューフェイス
Apache のログに見慣れない crawler を User-Agent を発見。今日の 10 時からアクセスを開始して、30 分足らずの間に 180 ページも持って行った。アクセスが集中的な crawler だ。
"ConveraCrawler/0.4"
正体は不明。Crawler の動いている IP アドレスは逆引きできるのだが、そこから正引きするとホストが見つからない。かなり行儀が悪い crawler だ。
Apache のログに見慣れない crawler を User-Agent を発見。今日の 10 時からアクセスを開始して、30 分足らずの間に 180 ページも持って行った。アクセスが集中的な crawler だ。
"ConveraCrawler/0.4"
正体は不明。Crawler の動いている IP アドレスは逆引きできるのだが、そこから正引きするとホストが見つからない。かなり行儀が悪い crawler だ。