采集数据的时候,过于频繁,ip经常被封怎么搞。
为了让更多的小伙伴免受封ip的困扰,今天咱们就来分享一下Python采集免费可用的ip代理。
效果展示
代码展示
import requests
from lxml import etree
with open('IP代理.txt','w',encoding='utf-8') as f:
for i in range(1,10):
# 发送给谁
url =f'http://www.66ip.cn/{i}.html'
print(f'正在获取{url}')
# 伪装自己
headers = {
'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.70 Safari/537.36'
}
# 发送请求
resp = requests.get(url,headers = headers)
# 设置编码 utf-8 gbk
resp.encoding ='gbk'
# 接收响应
# 处理结果
# 创建可以提取数据的对象
e = etree.HTML(resp.text)
# 提取IP
ips = e.xpath('//div[1]/table//tr/td[1]/text()')
# 提取Port
ports = e.xpath('//div[1]/table//tr/td[2]/text()')
# 提取地址
addrs = e.xpath('//div[1]/table//tr/td[3]/text()')
for i,p,a in zip(ips,ports,addrs):
# 保存文本
f.write(f'IP地址:{i}----port端口号:{p}-----地址:{a}\n')
人生苦短,我用Python,兄弟们快去试试吧~
学习资源推荐
除了上述分享,学好 Python 不论是就业还是做副业赚钱都不错,但要学会 Python 还是要有一个学习规划。最后大家分享一份全套的 Python 学习资料,给那些想学习 Python 的小伙伴们一点帮助!
包括:Python激活码+安装包、Python web开发,Python爬虫,Python数据分析,人工智能、自动化办公等学习教程。带你从零基础系统性的学好Python!
👉Python所有方向的学习路线👈
Python所有方向路线就是把Python常用的技术点做整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。(全套教程文末领取)
👉Python学习视频600合集👈
观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
温馨提示:篇幅有限,已打包文件夹,获取方式在:文末
👉Python70个实战练手案例&源码👈
光学理论是没用的,要学会跟着一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
👉Python大厂面试资料👈
我们学习Python必然是为了找到高薪的工作,下面这些面试题是来自阿里、腾讯、字节等一线互联网大厂最新的面试资料,并且有阿里大佬给出了权威的解答,刷完这一套面试资料相信大家都能找到满意的工作。
👉Python副业兼职路线&方法👈
学好 Python 不论是就业还是做副业赚钱都不错,但要学会兼职接单还是要有一个学习规划。
👉 这份完整版的Python全套学习资料已经上传,朋友们如果需要可以V扫描下方二维码联系领取
【保证100%免费
】