python爬取小说章节和其超链接_爬取小说（步骤四）python

假设各位老哥已经安装好了bs4 requests这些库了

这个小说是随便挑的，各位也就不用太介意(仅供各位学习)

python3 实现，网上用python2做爬虫的太多了，但用python3的还是比较少

虽说步骤四 是脱胎于之前的三个步骤，但确实为了更进一步而做的一点小突破

这步骤四中，将会爬取小说对对应的目录链接。

通过步骤四中 寻找到的那些url来对逐步访问，获取txt并写入(这个在之前也都讲过了)

没有看过 步骤一 的朋友们可以点击下面的链接看看步骤一先

点击查看步骤一

没有看过 步骤二 的朋友们可以点击下面的链接看看步骤二先

点击查看步骤二

没有看过 步骤三 的朋友们可以点击下面的链接看看步骤三先

点击查看步骤三

获取整部小说的章节数目

通过目录来进行判断，将那些跟小说无关的章节 筛选掉

现在有点晚了，先发一个获取到的目录代码，后续明早在后面补充。有兴趣的朋友可以点 ‘喜欢’ 这样就可以保存文章链接在之后的喜欢栏中接着看了。(我蛮喜欢这样做的hihi)

代码 版本一效果图

代码 版本一

import requests

from bs4 import BeautifulSoup

content_url = "http://www.biquge.com.tw/4_4038/"

kv = {&