转载自火车头，爬虫的基础

1. html基础 了解网页的基本知识，帮助分析网页结构 http://www.w3school.com.cn/html/index.asp

2. 正则表达式的使用 http://www.regexlab.com/zh/regref.htm

3. Http协议的相关知识 Http请求抓包的方法 http://www.fiddler2.com/fiddler2/

4. Access,Mysql,Sqlserver,Sqlite,Oracle,Mongo数据库的使用

5. 代理服务器，FTP服务器相关知识

6. 常见的SQL语句

7. 插件需要PHP或C#编程功底的支持

8. Apache或IIS服务器架设，网站的安装