数据分析
文章平均质量分 53
AosenZhang
golang python
展开
-
如何让你的scrapy爬虫不再被ban
根据scrapy官方文档: http://doc.scrapy.org/en/master/topics/practices.html#avoiding-getting-banned 里面的描述,要防止scrapy被ban,主要有以下几个策略。动态设置user agent 禁用cookies 设置延迟下载 使用 Google cache 使用IP地址池原创 2015-09-28 20:45:54 · 5729 阅读 · 1 评论 -
利用Python 的 Pandas进行数据分析
Python中用Pandas进行数据分析,最常用的就是Dataframe数据结构。文章介绍Pandas如何读取mysql数据到Dataframe,及如何将数据写回Mysql。1. Pandas读取Mysql数据要读取Mysql中的数据,首先要安装Mysqldb包。假设我数据库安装在本地,用户名位myusername,密码为mypassword,要读取mydb数据库中的数据,那么对应的代码如下:imp原创 2015-09-16 17:31:05 · 9677 阅读 · 0 评论