在配置集群的时候,会遇到用pip安装大量包的情况,下面是用pip批量安装包的方法:
首先,在已经配置好的一台机器上,将需要的包导出到requirements.txt
pip freeze > requirements.txt
查看requirements.txt,内容如下
boto==2.49.0
boto3==1.9.184
botocore==1.12.184
certifi==2019.6.16
chardet==3.0.4
Click==7.0
docutils==0.14
Flask==1.1.1
gensim==3.7.3
gevent==1.4.0
greenlet==0.4.15
gunicorn==19.9.0
idna==2.8
itsdangerous==1.1.0
jieba==0.39
Jinja2==2.10.1
jmespath==0.9.4
MarkupSafe==1.1.1
numpy==1.16.4
pyltp==0.2.1
python-dateutil==2.8.0
requests==2.22.0
s3transfer==0.2.1
scipy==1.3.0
six==1.12.0
smart-open==1.8.4
urllib3==1.25.3
Werkzeug==0.15.4
然后,在集群的其他机器上执行
pip install -r requirements.txt
就可以完成批量安装包的工作了。