pytho爬虫小说爬取及爬取网页中a标签中的超链接
已纵横网中某豆的某王小说为例
首先去到目录页中按f12,选择elements,就如下图显示
然后ctrl+shift+c,选择第一章节就出现如下图显示
就可以看到a标签的上级标签是li
然后代码就是:
import requests;
from bs4 import BeautifulSoup
import csv;
def headered():#可写可不写
header = {
# 浏览器的信息(User-Agent必须添加)
"User-Agent":
原创
2021-04-24 10:13:46 ·
974 阅读 ·
1 评论