利用selenium爬取京东男士衣服

import time

from selenium import webdriver
#获取属性
# wd.find_element().get_attribute()
#获取文本也是.text
#关闭弹窗
# wd.close()
# time.sleep(5)
# 创建驱动
# #wd.save_screenshot()截屏
# wd.execute_script()
# wd.find_elements()

wd=webdriver.Chrome(r"C:\Users\caixi\Downloads\chromedriver_win32\chromedriver.exe")//获取chrome的版本信息,通过设置找到版本
# 爬取网站
wd.get("https://www.jd.com/")
# 放大窗口
wd.maximize_window()
wd.find_element_by_css_selector("#key").send_keys("男士衣服")
#点击搜索
wd.find_element_by_css_selector("#search > div > div.form > button").click()
# 滑动
wd.execute_script("window.scrollTo(0,document.body.scrollHeight);")
li_all=wd.find_elements_by_css_selector("#J_goodsList > ul > li")
for i in li_all:
    price=i.find_element_by_css_selector("div > div.p-price > strong > i").text
    print(price)
    name=i.find_element_by_css_selector("div > div.p-shop > span > a").get_attribute("title")
    print(name)
# 直到不能翻页 翻到最后一页 不能翻
wd.page_source.find("pn-next disabled")
wd.find_element_by_class_name()

需要获取chrome的属性值,在下面这个网站下载,找到所需要的自己的版本的chrome,在chrome的帮助->关于谷歌中找到版本并下载,存在电脑路径中,不要带中文chromedriver.storage.googleapis.com/index.htmlicon-default.png?t=N3I4http://chromedriver.storage.googleapis.com/index.html

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值