Python
SeveCc
java小白
展开
-
Python获取User-Agent的优化和fake-useragent使用和解决Unresolved Reference问题
由于前面报418不能爬取到数据,需要添加模拟的浏览器信息HTTP Error 418错误,现在我就来优化一下如何随机的获取User-Agent和如何用fake-useragent包来获取。查看User-Agentfrom urllib.request import urlopen, Requestimport randomagent_list = [ "Mozilla/5.0 (...原创 2020-02-11 16:30:41 · 5627 阅读 · 1 评论 -
Python爬虫的urllib.error.HTTPError: HTTP Error 418错误
在家办公无聊,最近开始研究了下Python,刚了解了下爬虫,想自己尝试下,一上来就来了一个418的错误。from urllib.request import urlopenurl = 'https://movie.douban.com/top250?start=%s&filter='ret = urlopen(url)aa = ret.read().decode('utf-8')...原创 2020-02-10 14:26:57 · 32761 阅读 · 11 评论