- 博客(5)
- 收藏
- 关注
原创 210110_学习XHR和JSON/(报错)‘int‘ object is not iterable
Network:默认requests.get()请求没有取到QQ音乐的歌曲列表信息,所以需要在控制台的network下去查找爬取信息真正存在的请求,并拿到其url,network能够记录浏览器的所有请求。XHR/Fetch:在Network,有非常重要的一类请求是XHR(或Fetch),因为有它的存在,人们不必刷新/跳转网页,即可加载新的内容。随着技术发展,XHR的应用频率越来越高,我们常常需要在这里找我们想要的数据。 XHR的功能是传输数据,其中有非常重要的一种数据是用json格式...
2021-01-10 20:29:57
274
原创 201219_python继续教育_4
项目:爬下厨房【报错】IndexError: list index out of range按流程 requests.get(url)获取- BeautifulSoup解析 - find_all()提取后报错 排查到 find_all()提取的为一个空列表 打印response.status_code返回 404结论:requests.get()一开始并未请求成功,查询原因可能是因为需要模拟登陆,就用了直接在header里加入cookie的办法,在浏览器控制台network-Hearder找..
2020-12-26 16:06:29
129
原创 201211_python继续教育_3
BeautifulSoup库安装 - 第三方库,so需要终端安装pip3 install BeautifulSoup4引入from bs4 import BeautifulSoup解析数据test = BeautifulSoup(content.text,'html.parser')#test是一个beautifulsoup(简称bs)对象#content.text处必须是字符串内容#html.parser处是解析器提取数据 - find() / find_a...
2020-12-14 00:27:51
138
原创 201208_python继续教育_2
爬虫1获取数据之requests库(记得要在终端先安装 pip install requests,4kb/s的速度让人感动)import requestsrequests的get()方法:(就简单粗暴从网页拿东西)向服务器发送了一个请求,括号里的参数是你需要的数据所在的网址,然后服务器对请求作出了响应,返回的结果是个response对象res = requests.get('url')#get()方法获取的结果返回给res变量response的属性1:response.status_.
2020-12-08 21:51:44
100
原创 201120_python继续教育_1
周五夜晚燃起学习的小火焰安装python3.0!安装VS!安装pylint!亲测,macOS在终端输入这段能成功安装pylint,前提是网络要好,微笑curl https://bootstrap.pypa.io/get-pip.py | python3无线太慢只有连手机的热点,2分钟就安完了,无语10kb/s成功让我度过了非常充实的1小时安装时光一开始就这么成功满脸写满高兴...
2020-11-20 23:18:00
183
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人