verina的博客

原创 Nutch 2.3+Hbase0.98.6+Solr4.4

Nutch 2.x 与 Nutch 1.x 相比，剥离出了存储层，放到了gora中，可以使用多种数据库，例如HBase, Cassandra, MySql来存储数据了。Nutch 1.7 则是把数据直接存储在HDFS上。 1.修改 conf/nutch-site.xml http.agent.name MyNutchSpider plugin.folders