pytho爬虫小说爬取及爬取网页中a标签中的超链接
已纵横网中某豆的某王小说为例首先去到目录页中按f12,选择elements,就如下图显示然后ctrl+shift+c,选择第一章节就出现如下图显示就可以看到a标签的上级标签是li然后代码就是:import requests;from bs4 import BeautifulSoupimport csv;def headered():#可写可不写 header = { # 浏览器的信息(User-Agent必须添加) "User-Agent":
原创
2021-04-24 10:13:46 ·
942 阅读 ·
1 评论