码农的理想国

用0和1去编织梦想

Nutch中User Agent的问题

本人原创,转载请注明出处()。 Apache Nutch 1.7版本抓取某个网站的时候出现错误提示: 2013-11-25 15:23:37,793 INFO  api.HttpRobotRulesParser - Couldn't get robots.txt for http://w...

2013-11-26 10:04:27

阅读数:2449

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭