Python学习之路——抓取豆瓣小说单页（1）

最新推荐文章于 2023-04-26 23:56:53 发布

feedpy

最新推荐文章于 2023-04-26 23:56:53 发布

阅读量244

点赞数

分类专栏： python

本文链接：https://blog.csdn.net/adsfeed/article/details/102737920

版权

本文介绍使用Python进行网络爬虫，详细解析如何抓取豆瓣小说《解忧杂货店》的评分和评价人数，为初学者提供实战参考。

摘要由CSDN通过智能技术生成

注意后面的解释

from lxml import etree#导入lxml库中的etree模块
import requests#导入requests模块，

url = "https://book.douban.com/tag/小说?start=0&type=T"#变量赋值
s = requests.get(url).text#requests的get方法
n = etree.HTML(s)#将网页进行etree模块下HTML方法解析
name = n.xpath('//*[@id="subject_list"]/ul/li[1]/div[2]/h2/a/@title')[0]#通过定位获取元素
score = n.xpath('//*[@id="subject_list"]/ul/li[1]/div[2]/div[2]/span[2]/text()')#不加[0]的话，会显示【‘’】
people = n.xpath('//*[@id="subject_list"]/ul/li[1]/div[2]/div[2]/span[3]/text()')[0].strip().strip('(')#.strip（）删除空格
print(name)
print(score)
print(people)

解忧杂货店
[‘8.5’]
537281人评价)

from lxml import etree#导入lxml库中的etree模块
import requests#导入requests模块，

url = "https://book.douban.com/tag/小说?start=0&type=T"#变量赋值
s = requests.get(url).text#request