HTML アンカー(A) 要素の rel="nofollow" 属性って本当に有効なのか?
念願かなって自分の Web サイトにトラックバッカーを貼り付けることができた (12/11の日記)。
ところでこの貼り付けには C 言語で作った自作 SSI 用コマンドを使っているのだが、トラックバック関連のリンクは最初から A 要素に rel="nofollow"
を付けるように実装している。だからうちの Web ページの Trackback URL に直接リンクしようという酔狂な人が居ない限り、検索エンジンはトラックバッカーをクロールすることは理論上ない、、、、、、はずなのになぜかクロールしに来ている!!
トラックバッカーに GET を飛ばしてきた Web クローラは以下の通り。
Franklin Locator 1.8 Googlebot/2.1 (+http://www.google.com/bot.html) Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp) Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) http://www.almaden.ibm.com/cs/crawler [bc2] msnbot/0.9 (+http://search.msn.com/msnbot.htm)
私の記憶が正しければ Google はこの機能の提案主のはずなのだが (id:nminoru:20050119:p1)、なんで Googlebot まで来ているの?