weixin_45615277的博客

原创 scrapy-redis 爬虫 scrapy cannot import name ‘Iterable‘ from ‘collections‘

scrapy-redis 在爬取的时候，遇到cannot import name ‘Iterable‘ from ‘collectons‘

原创 使用scrapy-redis 分布式爬虫的时候出现了no more duplicates will be shown

只需要在代码中添加：dont_filter=True即可如下yield scrapy.Request(xxxurl,callback=self.xxxx,dont_filter=True)问题在于提交的被爬取url出现了重复的，所以爬虫不能正常运行

原创 pandas遇到keyErrord的时候怎么做

最近在写数据分析相关的遇到pandas库中dataFrame，如何删除列名为空的索引列以下为报错代码data = pd.read_csv('二手房数据.csv')del data['Unnamed:0']下面为报错信息：显示keyerror但我知道肯定是这个名字只不过哪里出现了问题于是乎：打印了一下列名print(data.columns)将输出的index复制上去，发现出错的问题，在于空格即冒号后面还有一个空格的以上ps:虽然是一个小错误，但是却耗费了我大量的时间在

原创 MySQL 遇到不能初始化的解决办法

在网上看到了很多帖子都是在说：my.ini这个配置文件的错误于是，我也打开了这个文件，发现里面有部分是乱码的就是图示部分处理前总之，就是一句话在乱码前加# 注释掉现在已经安装成功...

原创 python 中反斜杠的用法

在python中，如何用斜杠和反斜杠来写文件路径

原创 scrapy和redis一起用，构成分布式爬虫

使用scrapy框架和redis构成分布式爬虫

原创 scrapy库安装及简单入门

scrapy库的安装和简单使用

原创 python实现对文本的随机篡改

import randomwith open("f:/hello.txt", encoding='utf-8') as f: char = f.read(1) newf = open('f:/hello_encoding.txt','w') while char: char = chr(ord(char)+random.randint(1, 9)) newf.write(char)![请添加图片描述](https://img-blog.csdni.

原创 Google地址