python阿里巴巴_阿里图片采集，python selenium 采集阿里巴巴商品图片数据

[Python] 纯文本查看 复制代码#采集阿里巴巴商品图片数据

from selenium import webdriver

import time

import requests

import os

import re

def crawle(url):

browser = webdriver.Chrome()

browser.get(url=url)

# 将滚动条移动到页面的底部

js = "var q=document.documentElement.scrollTop=100000"

browser.execute_script(js)

time.sleep(5)

#打印当前网页源码

#print(browser.page_source)

#获取当前网页标题

title=browser.title

title=title.replace(" - 阿里巴巴","")

title= re.sub(r'[\|\/\\:\*\?\\\"]', "_", title)

print(title)

os.makedirs(f"alibb/{title}/", exist_ok=True)

#获取当前网页链接

website=browser.current_url

print(website)

#创建txt文档并保存商品数据

fname='spider'

shopping='%s%s%s%s'%(website,