pandas memory error 跳坑记录

问题描述

使用pandas处理数据想必从事数据处理相关的童鞋没有不知道的，从csv文件用一个pd.read_csv 读入，之后随你怎么玩。最近在做数据预处理工作时，遇到了一个头疼事儿，程序每每执行到 pd.read_csv时，总是报memory error，本机8g内存，csv只有200m不到，怎么着也不应该啊！！最后各种翻stackoverflow，终于找到症结所在：

• 请把python换成x64

没错就这么简单！

附送

用过pandas的应该都知道，在win上装pandas，想顺顺利利不折腾简直就是不可能的事儿，各种依赖搞到头大，又加上国内这恶心死人不偿命的网络，所以把python换成X64可能还真没那么容易，稍安勿躁，神器来了：

• 请用 Anaconda，选一个X64的，直接下载安装就好，图形化，安装完自带一个python X64版本+全套数据分析包，当然其中就有pandas，而且还自带一个ipython及其他工具，不流氓，甚至强烈推荐第一次安装python就直接用这个。

The end