python本地镜像源搭建_构建快速部署的python pip环境及pypi本地源环境

前言：

大家用pip安装模块有没有遇见过这样的情况：

对的，这就是抽风的timeout

昨天看到一个朋友慢腾腾给所有节点搞tornado，他的源是官方的源，官方的源时不时的会抽风，会慢的。所以我推荐他用国内的源，或者是连接我们自己搭建的源。

由此

我就跟大家扯一下如何构建快速的python 模块的环境 ~

其实国内很多大公司都有自己的pypi源的，只是好多都私有环境的

下面都是国内速度比较快的节点

指定pypi源的方法：

也可以是全局的模式

在unix和macos，配置文件为：$HOME/.pip/pip.conf

在windows上，配置文件为：%HOME%\pip\pip.ini

需要在配置文件内加上：

以前我都是用豆瓣的源，现在豆瓣的源貌似有问题啦。。。哎，可惜啦

提示：

可以看到好多的节点的运行情况和速度。

我们的监控系统是python开发的，客户端当然也是python，时常需要大量的部署，最开始我们用的是反向代理做缓存，效果还是很不错的。

我们在用puppet批量部署监控客户端的时候，会让pip指定我们已经反向缓存的pypi的地址、版本库

比如：

意思就是从清华那里搞到包。我想大家都应该熟悉缓存代理吧，大家自己加个location指定proxy_pass就行啦~

一个例子：

(我这里就不详细说明意思了，大家可以看看我写过的nginx反向代理的文章。。。)

install

关键配置

我们讲了用国内国外的pypi节点来快速部署你的环境，来说下，我们线上的部署方法：

个人觉得这个适用于需要大批量部署，又有模块定制，而有些节点不能联外网情况下适用。

要是大家的环境不大，推荐用 -i 的方式。 毕竟搭建私有pypi服务是很折腾的事~

安装pypimirror

要是安装不上的话，可以用官方的方式：

安装完毕就要填写配置文件，需要填写的参数主要有：

mirror_file_path 下载的包的存放路径

base_url 服务器地址，这个注意要和Apache上的一致！

create_indexes 布尔类型，用来在下载的每个包目录下创建索引

package_matches 这个是用户自定义的，PyPI包无数，使用正则表达式有选择地下载，要不然硬盘要爆了

lock_file_name 设置运行时锁状态文件存放位置

log_filename 设置日志文件存放位置

生成配置索引

这里很慢的，就算你用国内的源，也会让你气的抽风，骂的吐血~

我是在公司线上机房做的测试，居然还是同步出问题，想看看抽风不？

也可以修改配置文件

更新

参数说明：

-i 创建索引

-U 更新镜像。

假设前面设置的下载文件存放路径为/data/pypi/files，下面把它链接到/var/www/目录下：

ln -s /data/pypi/files /var/www/pypi

重启Apache，访问http://xiaorui.cc/pypi/ 应该就可以了。这是最简单的配置，这时的base_url就是 http://xiaorui.cc/pypi/ 。

让他定期更新下

安装pypimirror遇到的问题：

大家把python升级到2.7就行了

需要说明的是，本地的pypi安装的时候，会出现各种各样的问题，请大家都尝试和搜下问题所在。 我们可以把问题都统计下来，好让也遇到这样的问题的人，能更好的定位和解决问题。

本文转自 rfyiamcool 51CTO博客，原文链接：http://blog.51cto.com/rfyiamcool/1290456，如需转载请自行联系原作者