modin.pandas 说是可以提升pandas的运行效率(pandas替代方案)

最近偶尔看到modin.pandas 能提升效率,最近事情不多就开始验证一下。
1.首先需要的软件包:
    Python-3.7.6.tgz
    gcc-9.1.0.tar.gz
    glibc-2.17.tar.gz
    其他的比如pandas==0.25.3 , libffi-dev,xz-devel 等等。
2.安装python 
    首先最开始安装的是python3.8 由于后期安装 modin[ray] Ray 这个库的时候他最新支持python 3.7,
    modin.pandas最新支持pandas=0.25.3 最新的pandas版本已经到1.0以上了。所以还是以3.7.6 来验证。
    python安装: 
        tar -zxvf   Python-3.7.6.tgz
        ./configure --prefix=/usr/local/python37 LDFLAGS='-L/opt/local/lib -R/opt/local/lib'
        为什么要加 LDFLAGS='-L/opt/local/lib -R/opt/local/lib'  
        由于存在多版本的时候,会报出  No module named '_ctypes'需要重新编译, 
        yum install libffi-dev  这个安装了有时侯还是汇报,这边是重新编译安装python 成功。
        make &&make install

3.安装 modin.pandas:
    pip3 install   pandas==0.25.3  
    pip3 install  modin

  • 1
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值