python实现下载小说并保存在本地

下载小说并保存在本地

import bs4,os,requests



i = 0
xiaoShuo_NeiRong = []#定义存储小说章节内容对象的列表
xiaoShuo_biaoTi = []##定义存储小说章节标题对象的列表
#从小说网站上下载小说,并保存在txt文档中
while True:
    
    if i < 20:
        resOne = requests.get('http://book.zongheng.com/chapter/457720'+'/'+str(7629918+i)+'.html')#下载小说网页
        i = i+1
        #根据是否下载成功,将解析后的对象分别存储在标题和内容的列表中
        if resOne.raise_for_status():
            bs4One = bs4.BeautifulSoup(resOne.text)
            xiaoShuo_NeiRong.append(bs4One.select('div#chapterContent'))#BeautifulSoup对象调用select()查找内容,返回Tag对象的列表,并放在内容列表中
            xiaoShuo_biaoTi.append(bs4One.select('h5'))#BeautifulSoup对象调用select()查找标题,返回Tag对象的列表,并放在内容列表中

    else:
        break
#将相关内容写入文件中
for j in range(0,len(xiaoShuo_NeiRong)):
        xiaZai_two = open('C:\\Users\\Nick\\Desktop\\python\\drawing\\2\\spam002.txt','a')
        xiaZai_two.write(xiaoShuo_biaoTi[j][0].getText())
        xiaZai_two.write(xiaoShuo_NeiRong[j][0].getText())
        xiaZai_two.close()

  • 1
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值