RPA(影刀)无需写代码抓取某东的商品信息

大家好,我是翔宇!

有的小伙伴不会写代码,但也想采集一些数据,RPA就是一个最好的选择。今天我就带大家用RPA(影刀)无需写代码抓取某东的商品信息,主要采集到的数据有以下字段,数据达到近5000条。

采集主页(翻页采集):

在这里插入图片描述

采集结果:当然这里就只单纯采集了三个字段,需要更多字段原理一致。
在这里插入图片描述

效果【视频】
视频在csdn上传了三次都上不来,请前往同名公众号观看

  1. 思路

​ RPA作为办公自动化的新方案,它的功能还是比较强大的。实际上,用影刀进行抓取网页上的数据下来,它和Python中的selenium着实很像,只是selenium用写代码的方式进行自动化操作,而RPA则是不需要你写代码(也不绝对不写代码,有些功能在里面写Python代码更方便,可以对比进行使用)。

​ 整个采集的过程,模仿人用鼠标与键盘的操作,进入到数据信息所在的页面后,通过获取元素或者同时拿到相似元素之间的文本内容的方式进行获取数据,得到字段值后,通过写入csv或者xlsx的方式写入excel表格。

  1. 实践

    2.1新建应用
    在这里插入图片描述

​ 2.2 设计流程

进入到数据所在的网页
在这里插入图片描述

拿到第一页中想要的几个字段数据。
在这里插入图片描述

例如获取一页中的价格信息
在这里插入图片描述

获取手机标题和评论条数同样原理

将第一页的数据存进excel表

在这里插入图片描述

循环从第二页开始采集每一页的数据存进excel表(csv)
在这里插入图片描述

  1. 结束语

通过20分钟左右的抓取,将近5000条数据顺利存进excel中,总的来说,配置用了近2个小时,数据成功拿到,整体效率还是比较高,对于一般的数据抓取需求还是比较容易满足,本次实践效果已经在文章开头展现

需要此RPA的配置流程的请在同名公众号后台回复【OPPO】获取。

我是翔宇,下期再见!

  • 4
    点赞
  • 19
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Python和数据分析

钟意作者

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值