Python爬虫 批量采集京东商品数据,实时了解商品价格走势

本文介绍了使用Python的selenium模块批量采集京东商品数据的流程,包括搜索商品、自动滚动页面、提取商品信息如标题、价格、评论量等,并将数据保存为CSV。文章还提供了部分代码示例,涉及页面元素定位、JS执行滚动和数据解析。
摘要由CSDN通过智能技术生成
  • time 内置模块,不需要安装,时间模块,主要用于延时等待;

流程解析

==============================================================

我们访问一个网站,要输入一个网址,所以代码也是这么写的。

首先导入模块

from selenium import webdriver

文件名或者包名不要命名为selenium,会导致无法导入。

webdriver可以认为是浏览器的驱动器,要驱动浏览器必须用到webdriver,支持多种浏览器。

实例化浏览器对象 ,我这里用的是谷歌,建议大家用谷歌,方便一点。

driver = webdriver.Chrome()

我们用get访问一个网址,自动打开网址。

driver.get(‘https://www.jd.com/’)

运行一下

在这里插入图片描述

打开网址后,以买口红为例。

我们首先要通过你想购买的商品关键字来搜索得到商品信息,用搜索结果去获取信息。

在这里插入图片描述

那我们也要写一个输入,空白处点击右键,选择检查。

选择element 元素面板

在这里插入图片描述

鼠标点击左边的箭头按钮,去点击搜索框,它就会直接定位到搜索标签。

在这里插入图片描述

在标签上点击右键,选择copy,选择copy selector 。

  • 11
    点赞
  • 28
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值