文章详情

  • 游戏榜单
  • 软件榜单
关闭导航
热搜榜
热门下载
热门标签
php爱好者> php文档>Yahoo! JAPAN独自的爬虫

Yahoo! JAPAN独自的爬虫

时间:2008-09-27  来源:GREED

Yahoo! JAPAN独自爬虫——2个可疑的User-Agent。

Y!J-DSC 1.0 (http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html )
Y!J-BSC/1.0 (http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html)
Y!J-DSCIP :
211.14.8.254  
ont211014008254.yahoo.co.jp
User-Agent :
Y!J-DSC 1.0; http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html
爬取对象:
Yahoo! JAPAN上“カテゴリ”(雅虎大全)登録的网站的首页
DSC的意思:
Directory Site Crawler?
Y!J-BSCIP :
203.141.52.34

User-Agent :
Y!J-BSC/1.0 (http://help.yahoo.co.jp/help/jp/search/indexing/indexing-15.html)
爬取对象:
博客、Feed、特定网页
BSC的意思:
Blog Site Crawler?
相关阅读 更多 +
排行榜 更多 +
浴血混战官方下载

浴血混战官方下载

飞行射击 下载
检票员模拟器免广告下载

检票员模拟器免广告下载

模拟经营 下载
最终前哨最终版手机版下载

最终前哨最终版手机版下载

休闲益智 下载