w896932的博客

import requests from bs4 import BeautifulSoup import time #导入相应的库文件 headers = { 'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36' '(KHTML, like Gecko) Chrome/56.0.2924.87 Safari/537.36'#加入请求头 } def get...

够造主网页的url获取函数，从主网页中获取到详情页的链接，从详情页中获取到标题，价格，评论等内容 这里因为ip反爬，返回的是错误的网页，所以后续失败 #这里进行了反爬，返回的网页进行了重定向，不是自己要爬的网址 from bs4 import BeautifulSoup import requests import time #导入相应的库文件 url ="https://bj.xiaozhu.com/fangzi/1047842478.html" headers = { ..