python代理池好难啊_如何使用Python做代理池

随着社会的发展，代理ip已经被应用到很多工作场景中，给我们带来了极大的方便，是必不可少的良器，今天小编给大家介绍一下如何用Python来做这个代理IP池，请看下面的步骤(代码分为6个模块)。

1.Api:

api接口相关代码，目前api是由Flask实现，代码也非常简单。客户端请求传给Flask，Flask调用ProxyManager中的实现，包括get/delete/refresh/get_all；

2.DB:

数据库相关代码，目前数据库是采用SSDB。代码用工厂模式实现，方便日后扩展其他类型数据库；

3.Manager:

get/delete/refresh/get_all等接口的具体实现类，目前代理池只负责管理proxy，日后可能会有更多功能，比如代理和爬虫的绑定，代理和账号的绑定等等；

4.ProxyGetter:

代理获取的相关代码；

5.Schedule:

定时任务相关代码，现在只是实现定时去刷新代码，并验证可用代理，采用多进程方式；

6.Util:

存放一些公共的模块方法或函数，包含GetConfig:读取配置文件config.ini的类，ConfigParse: 集成重写ConfigParser的类，使其对大小写敏感，Singleton:实现单例，LazyProperty:实现类属性惰性计算。

其他文件:

配置文件:Config.ini,数据库配置和代理获取接口配置，可以在GetFreeProxy中添加新的代理获取方法，并在Config.ini中注册即可使用。

这就是小编给大家带来的分享了，有路过的程序员大牛可以试试效果哦，这个估计也就程序员能看懂了。。。