from urlib.parse import urljoin
urljoin(url,url2)
url为当前页面本身的链接,url2为当前html页面内容中的链接,若url2为相对地址,则可以拼接得到绝对地址,若url2为绝对地址则返回url2
在scrapy中,可以直接调用response.urljoin(url)拼接当前response对应的请求的url和参数url
from urlib.parse import urljoin
urljoin(url,url2)
url为当前页面本身的链接,url2为当前html页面内容中的链接,若url2为相对地址,则可以拼接得到绝对地址,若url2为绝对地址则返回url2
在scrapy中,可以直接调用response.urljoin(url)拼接当前response对应的请求的url和参数url