基于Python、requests、bs4库爬取百科词条
一、分析百科词条URL
1、在百科里输入词条,如:网络爬虫。显示如下图
![在这里插入图片描述](https://i-blog.csdnimg.cn/blog_migrate/dd16c8029e38004c1e75772fdede9953.png)
在地址栏中的url为: https://baike.baidu.com/item/网络爬虫,因此可按如下方式构建初始URL
url = "https://baike.baidu.com/item/{}".format(keyword)
二、利用requests获取响应并通过bs4库可以将信息以节点方式返回
利用requests库中的get函数获取页面信息,如下所示:
def