Python小说爬虫

今天做的练习是在网站上爬虫某一部小说,并将其存入到文档中~~
首先,按照上一次爬虫的步骤,获取到该小说目录页的url
url=“https://www.kanunu8.com/book2/10881/
注:若print出该页内容为乱码时,因考虑到编码方式的转换;
在这次爬虫过程中,我们需要将编码进行转换,将其转换为gbk形式,所使用的语句如下:
txt=requests.get(url).content.decode(“gbk”)
具体实现代码如下:
在这里插入图片描述
过程中遇到过的错误:
expected string or bytes-like object 这是由于数据类型不匹配造成的
findall获取的为一个列表,而sub需要对字符串进行操作,所以此处需要现将列表中的字符串取出,再进行替换

接下来就是成果图了:
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
嗯嗯~~就是这样啦

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值