当我执行一段报错需要pyarrow包的时候,我直接pip install安装上了,但是我运行的pyspark代码是指定的linux里的软件路径,本地安装并解决不了问题,于是我找到linux的安装目录,把pyarrow复制了进去,但是又报错没有pyarrow.lib ,我找了又找还是没有找到这个文件,后来考虑到python的版本不一致,将包又在linux里安装了一遍,成功解决了问题;后来又进去新下载的包里并没发现有什么不同,这一点还是没明白,暂时把问题定在版本上
在linux安装python第三方库:
先安装Python第三方库的管理工具:pip
yum install python-pip
然后就可以直接在linux系统里pip install 安装包
镜像源安装速度会快很多
pip install -i https://pypi.doubanio.com/simple/