网上基本都说cpickle只是pickle的C编译版本,用法几乎相同。
但是在处理大批量(不是大容量,试过6000张图片5G多没问题,但12000张图片就1G时有问题)会出现memory error的报错
貌似是pickle存贮过程中未清理内存
然后使用cpickle就没有相应的报错,不得其解。
网上基本都说cpickle只是pickle的C编译版本,用法几乎相同。
但是在处理大批量(不是大容量,试过6000张图片5G多没问题,但12000张图片就1G时有问题)会出现memory error的报错
貌似是pickle存贮过程中未清理内存
然后使用cpickle就没有相应的报错,不得其解。