![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Python基础问题
weixin_43184252
这个作者很懒,什么都没留下…
展开
-
jupyter notebook占用内存空间过大打不开的解决办法(包括但不限于爬虫造成的)
jupyter notebook由于超过内存限制而“锁死”的解决这两天用爬虫爬数据的时候由于print了大量的爬取内容,让notebook内存溢出停止运行,连带着localhost:8888也崩溃了。Google Chrome的处理机制应该是杀掉内存溢出的页面,所以localhost:8888刷新一下就恢复了。但是!我的code找不回来了!不知道是什么机制,在文件里看到的大小只有不到45MB...原创 2020-02-06 14:17:59 · 18066 阅读 · 3 评论 -
Python爬虫遇到的问题——中文转URL编码
Python爬虫遇到的问题——中文转URL编码在用Python爬京东数据的时候,如果通过URL访问搜索页面,表面上看到的是这样的:但是用requests.get这串URL发现报错(如果“机器学习”是中文的话)而且注意到在粘贴到jupyter notebook的时候已经帮我们自动转换成了URL格式,即https://search.jd.com/Search?keyword=%E6%9C%BA...原创 2020-01-19 13:14:09 · 429 阅读 · 0 评论 -
pd.read_csv()中encoding='utf-8'和'utf-8-sig'的区别
Pandas.read_csv格式奇怪的问题除了常见的utf-8,gbk,今天发现还有utf-8-sig用默认格式打开是这样的:明显是编码问题,但是用utf-8打开文件发现是这样的:用open打开文件看到是这样的:可以看到在文件的首部有一个\ufeff字段,那么feff是什么意思呢?feff是一个BOM(Byte Order Mark),是一个不显示的标识字段,在utf-16或者...原创 2019-05-14 11:15:50 · 23737 阅读 · 0 评论