Centos6.6 源码安装Python依赖包h3的过程记录

目录

一、背景

二、源码安装过程

2.1、git clone h3-py源码

2.2、进入h3-py目录后修改setup.py文件中红框部分如下：

2.3、修改.install.sh文件

2.3.1、修改.install.sh文件为红框内容如下：

2.3.2、注释h3c的git clone和删除目录部分

2.4、git clone h3c 并复制到h3-py目录

2.5、尝试编译是否成功

2.6、编译成功后，尝试install安装

三、打包成安装包

3.1、打包成egg包

3.2、scp上传到其他节点进一步安装

四、总结

---

一、背景

公司AI团队提出需要安装Python依赖包，于是按照往常一样安装Python包

1. 进入虚拟环境  source activate /data/python_dir/miniconda2/envs/test_copy_conda
2. conda install -c conda-forge h3

发现会报编译错误

尝试采用pip 安装方式

pip install h3

依然报和上面的错误一样，网上也找不到别的安装渠道，于是自己打算编译h3源码安装。

二、源码安装过程

2.1、git clone h3-py源码

git clone https://github.com/uber/h3-py.git && cd h3-py

2.2、进入h3-py目录后修改setup.py文件中红框部分如下：

（即修改中括号内容空为0和1）

2.3、修改.install.sh文件

2.3.1、修改.install.sh文件为红框内容如下：

cmake -DENABLE_FORMAT=OFF -DBUILD_SHARED_LIBS=ON -DENABLE_COVERAGE=OFF -DBUILD_BENCHMARKS=OFF -DBUILD_TESTING=OFF -DBUILD_GENERATORS=OFF -DBUILD_FILTERS=OFF .

2.3.2、注释h3c的git clone和删除目录部分

2.4、git clone h3c 并复制到h3-py目录

git clone https://github.com/uber/h3.git h3c

cp -r h3c h3-py

2.5、尝试编译是否成功

python setup.py build

如果成功的话应该如下所示：

可能也存在失败的情况

这种情况，我是因为虚拟环境因为ssh超时退出了，导致cc版本不一致了，于是，删除整个h3-py目录，重新按照前面的步骤执行就成功了。

2.6、编译成功后，尝试install安装

python setup.py install

三、打包成安装包

为了避免上生产后，在上百台节点上再执行类似的编译安装步骤，打算打包生成egg包，再到其他节点再安装

3.1、打包成egg包

与前面安装的步骤类似，只是最后传给setup.py的是bdist_egg

 

git clone https://github.com/uber/h3-py.git && cd h3-py
cp setup.py .
cp .install.sh .
cp -r h3c .
python setup.py bdist_egg

最终成功打包成h3-3.4.3-py2.7-linux-x86_64.egg

 

在/data/python_dir/h3-py_egg/dist目录中找到打包好的h3-3.4.3-py2.7-linux-x86_64.egg文件

3.2、scp上传到其他节点进一步安装

easy_install h3-3.4.3-py2.7-linux-x86_64.egg

安装完成后进一步导入验证

注意：安装时可能因为用了sudo 或者退出虚拟环境导致安装成功，但是验证导入时会失败的情况，本例是进入虚拟环境后不用sudo安装成功的

from h3 import h3


h3_address = h3.geo_to_h3(37.3615593, -122.0553238, 5)
hex_center_coordinates = h3.h3_to_geo(h3_address)
hex_boundary = h3.h3_to_geo_boundary(h3_address)

尝试函数调用后，确认没问题了

四、总结

安装这个h3好多次了，一直无法安装，经同事指点采用编译源码安装才成功，果然一山还有一山高，术业有专攻。

贴上环境信息

CMake版本：3.1.0

Centos版本：6.6

Python版本：2.7.15