Proxy Pool 极简的爬虫代理池服务

Proxy Pool

包含http(s)/socks的极简代理池服务。
注:大佬就不用看了,你们分分钟撸一个自己的^_^

python3.6
windows

说明

  • 为什么叫极简?

    你可能已经搜过关于代理池,大多用到了数据库储存,打分,提前验证什么的,定时刷新(嗯..这个功能我用一种相比更简单的方式也加上了),复杂、不那么简单,动手做的过程中慢慢发现了问题。。。

    免费代理根本不需要用数据库做保存,也不需要验证好了放数据库,需要的时候拿。免费代理就像丢盔弃甲的残兵败将,有力气的还能挥两下钝剑,也就那两下,上一秒活着,下一秒就死了,又或者这一秒躺着像个死人,下一秒又爬起来走两步,

    极低的质量和极低的稳定性根本不值得提前做验证使用数据库当宝一样保存起来。

    这个代理池的核心部分也就100来行,即便是初学者,也能快速开始使用。建议你先从爬代理的两个py开始看。

  • 啥功能?

    通过requests get方法获取一个socks代理

    requests.get('localhost:5000/socks/').text

    通过requests get方法获取一个http(s)代理

    r

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值