利用百度接口,对接口的params值进行修改,实现将要搜索的内容的url地址:
import requests
keyword="英语"
try:
kv={'wd':keyword}
r=requests.get("http://www.baidu.com/s",params=kv)
print(r.request.url)
r.raise_for_status()
print(len(r.text))
except:
print("爬取失败")
程序返回要搜索信息的url链接,以及网页内容的长度