使用selenium+Chrome()无图版模拟浏览器进行抓取淘宝商品信息

说起淘宝,大家肯定先想起来的是各种各样的吃的喝的玩的,那么什么样的吃的喝的玩的销量高呢,有没有一种方法将商品信息抓下来我们做一个参考呢,下边就为大家带来我之前在崔庆才大神的参考下,将代码改写了,相对没有那么麻烦,喜欢的小伙伴快来看看吧。。

1,首先打开淘宝先让咱们看看,咱们要做的就是在下边的输入框中输入商品名称,通过selenium拿到相关商品的信息

打开f12,在Element中中找到输入框所在的位置,使用selenium的css选择器来定位,顺便配上代码


 

然后在找到搜索按钮,依旧使用css选择器定位

拿到了输入框的定位,那咱们怎么输入商品名称呢,别急,慢慢道来

上面的submit.click()是点击搜索按钮,以下会出结果:

我们要抓取前一百页,然后我们进行翻页,依旧是按照以上方式进行定位,定位找到数字输入框,然后点击确定按钮,就会翻转到下一页了,好了基本上就是这样了,下边附上全部代码,灰色部分是参照崔大神的代码,被注释掉了,没有注释的是我改写后的,如有错误,请大家指出!

下面是配置文件

以上就是使用selenium+chrome()模拟浏览器,对淘宝进行抓取,希望对大家有帮助!

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值