![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python爬虫
快乐的rainer
这个作者很懒,什么都没留下…
展开
-
采集网页静态文本内容
爬取政府工作报告(服从爬虫协议规范)#清除所有自定义变量 输入y%resetimport requestsimport datetimeimport sysfrom lxml import etreeimport re#输入任意字符input = input()#判断使用者输入是否为整数if input.isdigit()==True: input_year = int(input)else: print("输入类型不符请重试!") sys.exit()原创 2020-08-20 11:34:50 · 293 阅读 · 0 评论 -
python爬虫被检测频繁登录解决方法
当爬虫遇到频繁登录这是one段对静态网页爬取的python代码,下面的注释阐释了我的思路以及碰到的一些问题import requestsfrom lxml import etreeimport timeimport randomurl = 'http://www.job5156.com/qiye/hebei-0/'headers = { 'user-agent':'Mozi...原创 2020-01-15 11:12:07 · 5699 阅读 · 0 评论