![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
可视化爬虫
墨阳剑
这个作者很懒,什么都没留下…
展开
-
PyQt5整合Scrapy和matplotlib实现可视化爬虫by墨阳剑(一)
前言:之前花费2个月左右的碎片时间,基于python3的pyqt5和scrapy爬虫框架、matplotlib图表,实现了一个可视化的爬虫。并通过pyinstaller 打包成exe可执行程序。希望让所有无编程基础人都可以在window 64位操作系统使用。首先声明我并不是专业从事python 开发。是一个略懂后端的前端开发。很多东西都是自己摸索。有误的地方请指正。大神请飘过~,涉及技术模...原创 2019-12-29 22:25:12 · 1356 阅读 · 0 评论 -
PyQt5整合Scrapy和matplotlib实现可视化爬虫by墨阳剑(二)
part two接上一部分:https://blog.csdn.net/qq_30613521/article/details/103754741这部分主要讲PyQt5页面部分。主界面的功能就是收集用户输入的关键信息(搜索的关键字、百度AK、选择省份、excel数据本地存储路径、开启爬虫按钮,为了说清楚,首先一样化繁为简,化整为零分解。分为三部分: ① PyQt5界面布局...原创 2019-12-30 23:28:14 · 1065 阅读 · 0 评论 -
PyQt5整合Scrapy和matplotlib实现可视化爬虫by墨阳剑(三)
接上一部分:https://blog.csdn.net/qq_30613521/article/details/103758609part three上一部分讲到pyqt5界面部分,收集用户输入信息,并开启爬虫进程。这一部分主要讲scrapy爬虫,是主要核心功能,就是爬取数据,前面的PyQt5其实就是相当于给scrapy充值买个皮肤,不用可视化界面其实直接在代码里通过配置文件写入用户选...原创 2019-12-31 22:44:53 · 749 阅读 · 0 评论