spider-flow新手暴力入门

1.入口

链接跳转: spider-flow
在这里插入图片描述

或者本地有git软件直接输入gittt中的链接地址,回车键梭哈即可在这里插入图片描述

2.环境部署,必备jdk8+mysql

idea打开项目,重点修改如下
在这里插入图片描述
mysql用小皮软件(phpstudy)自带的mysql5,navicat软件导入sql文件
在这里插入图片描述
在这里插入图片描述

3 实践

这里随机选个受害者,菜鸟教程吧
https://www.runoob.com/
在这里插入图片描述

实践easy1

在这里插入图片描述

在这里插入图片描述在这里插入图片描述
参考官方手册,新手调试可以这样如下
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
这里调试的话可以对照帮助文档一一找到自己需要的函数进行调试,如下这样添加一个输出项
在这里插入图片描述

实践 easy2 感觉基本上固定这样流程了(最常用的)

发现上面 xpaths()里面的内容都聚合到一个info_test1里面去了,这就要改进了
引入 var 和循环两节点
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
说明思路如下
在这里插入图片描述
这时候细细话过滤了,单个xpath,selector,细细化过滤确实selector好用,xpath太笼统
过滤取决于你自己的需要,这么舒服就怎么来
在这里插入图片描述
在这里插入图片描述

4.总结

确实对于0基础爬虫玩家来说,并不很容易懂,得模仿demo,不停调试,才成功的。给大家个参考,如果觉得有帮助,不妨点个赞哦,资料仅供学习参考,别把自己爬进去了哈。

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值