使用说明

分布式爬虫环境搭建

需要以下工具/环境
1.jdk1.8
2.Hadoop2.x
3.Hbase1.2
4.Maven
5.eclipse

1. Hadoop环境搭建

参考文档 Hadoop部署。

2.Hbase部署

参考文档Hbase部署

3.Maven+eclipse部署

参考

http://blog.csdn.net/lichangzai/article/details/18409095

代码及说明：
https://github.com/danache/spiderINMaven