一.百度搜索关键词
最近在哔哩哔哩上学习网络爬虫,在百度搜索关键词进行采集遇到如图:
1.网页展示的url

2.浏览器请求的url

url涉及到中文转化问题
二.url中转化
参考文章:http://www.codeinn.net/misctech/1922.html
利用quote进行url转码
from urllib.parse import quote
keyword = '波晓张'
url = f'https://www.baidu.com/s?wd={quote(keyword)}&ie=utf-8&tn=38036936_10_hao_pg'
