
今月の23日か24日(どちらだったかは忘れた^^;)にYahoo!カテゴリに登録申請してみた。
登録されるか否かはYahoo!の中の人が申請サイトを見て決めるので、いつYahoo!の人が来るのかと、サーバーが吐き出す生ログを監視していたところ、25日にいつもとは違うクローラーが巡回してきた。
ログ
一応記録。
add03.dir.bbt.yahoo.co.jp - - [25/Mar/2008:06:43:15 +0900] "GET / HTTP/1.1" 200 61564 "http://add.yahoo.co.jp/bridge" "Mozilla/5.0 (compatible; Y!J-DSC 2.0; http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html)"
add12.dir.tnz.yahoo.co.jp - - [25/Mar/2008:06:43:18 +0900] "GET / HTTP/1.1" 200 61556 "http://add.dir.yahoo.co.jp/bridge" "Mozilla/5.0 (compatible; Y!J-DSC 2.0; http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html)"
add12.dir.tnz.yahoo.co.jp - - [25/Mar/2008:06:43:25 +0900] "GET / HTTP/1.1" 200 61556 "http://add.dir.yahoo.co.jp/bridge" "Mozilla/5.0 (compatible; Y!J-DSC 2.0; http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html)"
add11.dir.tnz.yahoo.co.jp - - [25/Mar/2008:06:44:20 +0900] "GET / HTTP/1.1" 200 61556 "http://add.dir.yahoo.co.jp/bridge" "Mozilla/5.0 (compatible; Y!J-DSC 2.0; http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html)"
add12.dir.tnz.yahoo.co.jp - - [25/Mar/2008:06:44:23 +0900] "GET / HTTP/1.1" 200 61556 "http://add.dir.yahoo.co.jp/bridge" "Mozilla/5.0 (compatible; Y!J-DSC 2.0; http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html)"
add11.dir.tnz.yahoo.co.jp - - [25/Mar/2008:06:55:40 +0900] "GET / HTTP/1.1" 200 61564 "http://add.dir.yahoo.co.jp/bridge" "Mozilla/5.0 (compatible; Y!J-DSC 2.0; http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html)"
add12.dir.tnz.yahoo.co.jp - - [25/Mar/2008:06:56:30 +0900] "GET / HTTP/1.1" 200 61556 "http://add.dir.yahoo.co.jp/bridge" "Mozilla/5.0 (compatible; Y!J-DSC 2.0; http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html)"
add11.dir.tnz.yahoo.co.jp - - [25/Mar/2008:06:56:51 +0900] "GET / HTTP/1.1" 200 61556 "http://add.dir.yahoo.co.jp/bridge" "Mozilla/5.0 (compatible; Y!J-DSC 2.0; http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html)"
add12.dir.tnz.yahoo.co.jp - - [25/Mar/2008:06:58:12 +0900] "GET / HTTP/1.1" 200 61556 "http://add.dir.yahoo.co.jp/bridge" "Mozilla/5.0 (compatible; Y!J-DSC 2.0; http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html)"
add11.dir.tnz.yahoo.co.jp - - [25/Mar/2008:06:59:34 +0900] "GET / HTTP/1.1" 200 61556 "http://add.dir.yahoo.co.jp/bridge" "Mozilla/5.0 (compatible; Y!J-DSC 2.0; http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html)"
add12.dir.tnz.yahoo.co.jp - - [25/Mar/2008:06:59:48 +0900] "GET / HTTP/1.1" 200 61556 "http://add.dir.yahoo.co.jp/bridge" "Mozilla/5.0 (compatible; Y!J-DSC 2.0; http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html)"
何故、何度もアクセスしてくるのだろうか?
巡回してきたクローラー
User-Agent
Y!J-DSC 2.0; http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html
ホストは以下の3つ
add03.dir.bbt.yahoo.co.jp
add12.dir.tnz.yahoo.co.jp
add11.dir.tnz.yahoo.co.jp
Y!J-DSCって何?
いつもお邪魔しているライオン丸さんのブログにこんな記事があった。古い記事だけど。
Y!J-DSCとY!J-BSC - Yahoo! JAPAN独自のクローラー :YSTロボットの伝 ::ヤフー(Yahoo!)の書
Yahoo! JAPANのカテゴリ登録サイトのトップページを巡回するクローラーだそうだ。
今のところは申請中で登録されてないのに、このクローラーが来るというのはどういうことだろうか?登録決定ということかな?
でも、Yahoo!の人が来た形跡は無かったよな・・・。
おもしろいブログがたくさんあります→BlogRanking


