终于采用Bs4成功爬虫一个简单的案例,小白问题多

碰到bs4模块不可用的时候:
文件——setting添加
在这里插入图片描述
基本步骤与正则表达式一样:
1.urlopen发出请求,获取响应对象
2.获得response的响应的对象,response.read()得到源码信息,是字节,decode转换成字符串
3.解析源码,创建BS对象
使用bs4的时候,需要创建bs4对象(如果提示模块不可以,用上面的解决方法)
from bs4 import BeautifulSoup as BS
#第一个参数:要处理的字符串信息(源码)
#第二个参数:要处理的信息类型,指定是html.parser
#bs=BS(转换的源码信息"html.parser")
select(标签名):例如 bs.select(“title”)
select(.class的属性值):例如 bs.select(".sister")
find(“标签名”,{“属性名”:“属性值”}):
例如 bs.find(“a”,{“href”:“http://example.com/elsie”}))
4.存储

另外用到一个.join() 功能:能够将迭代对象中的每个元素取出,形成字符串 将列表转换成字符串。

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值