爬取小说案例-斗破苍穹(原创)

本文介绍了如何使用Python爬取网络小说《斗破苍穹》的实例,通过Python3、requests、os和re库实现小说的免费下载,方便在手机上阅读。代码已提供,供读者参考学习。
摘要由CSDN通过智能技术生成

      有时候看小说还要在网页看,下载还要付费,所以我用python直接下载好文件,传在手机就可以看,非常的方便,所以我就拿大家比较熟知的电子书斗破苍穹为例子提供大家参考

这个操作需要的工具:python3版本以上

一个编辑器建议:pycharm

第三方库:request os re

还要一个会粘贴复制而手

话不多说,代码在下面,需要的小伙伴拿去用吧

 

# 第三方库引用
import requests
import re
import os
import time
# 数据存放目录   会用到os库
if not os.path.exists('斗破苍穹'):
    os.makedirs('斗破苍穹')

# 请求头  会用到requests库
dou_1_url = "http://www.xbiquge.la/7/7877/"
headers = {
    'Host': 'www.xbiquge.la',
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.105 Safari/537.36'
}
response = requests.get(dou_1_url, headers=headers)
response.encoding = response.apparent_encoding
result_1 = response.text
# print(result_1)

# 正则表达式   提取目录 用到re库
result_2 = re.findall("<dd><a href='/7/7877/
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值