关于学习网络爬虫的一点建议

学习爬虫前的技术准备
（一）. Python基础语法：基础语法﹑运算符﹑数据类型﹑流程控制﹑函数﹑对象模块﹑文件操作﹑多线程﹑网络编程…等
（二）.W3C标准：HTML﹑CSS﹑JavaScript﹑Xpath﹑JSON
（三）.HTTP标准HTTP的请求过程﹑请求方式﹑状态码含义﹑头部信息以及Cookie状态管理（四）.数据库MySQL﹑ MongoDB ﹑Redis…
网络爬虫使用的技术
… 常用爬虫库：urllib requests selenium 以及scrapy爬虫框架
… 在数据解析方面相应的库包括：lxml beautifulsoup4 re pyquery…对于数据解析，主要是从 响应页面里提取所需的数据，常用的方法有：xpath路径表达式， Css选择器，正则表达式等
… xpath路径表达式，css选择器主要用于提取结构化的数据，而正则表达式主要用于提取非结构化的数据
… 数据存储：MySQL,MongoDB,Redis