Python新手爬虫训练小项目《爬取彼岸图网》(超详细讲解版)
这是我的第一篇文章,作为一名新手爬虫,这个算是我这几天来的努力成果,虽然代码寥寥几行但花费了大半天,新手上路还是不能只看视频,真正做项目时,真的有点束手无策,所以谨以此篇做个小总结,也希望能和新学python爬虫的小可爱们都能继续坚持学习下去。
好啦,废话不多说了,上代码:
import requests
from bs4 import BeautifulSoup #导入requests,BeautifulSoup模块
first_url="https://pic.netbian.com/tupian/"
check_img=input("请输入你要查询照片的序号:") #输入照片序号
url=first_url+check_img+".html" #字符串的拼接
headers={
"User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36 Edg/91.0.864.70"} #UA伪装
response=requests.get(url=url,headers=headers)
soup=BeautifulSoup(response.content.decode("gbk"),"lxml"