使用pyqery爬取知乎发现热门话题

最新推荐文章于 2022-01-30 20:26:34 发布

Anneaisun1995

最新推荐文章于 2022-01-30 20:26:34 发布

阅读量666

点赞数 1

分类专栏： python 文章标签：爬虫

本文链接：https://blog.csdn.net/anneaisun1995/article/details/93716627

版权

使用的库是pyquery,首先我们还是来分析一下知乎发现热门话题的网页结构，https://www.zhihu.com/explore
热门话题从class为explore-tab开始，每一个话题开始的class为explore-feed feed-item,话题在h2标签内
在这里插入图片描述
作者的class为author-link-line

回答的内容class为content

分析完让我们来编写代码

import requests
from pyquery import PyQuery as pq
url =  'https://www.zhihu.com/explore'
headers = {
    'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_12_3) AppleWebKit/537.36 (KHTML, like Gecko)