- 博客(759)
- 资源 (6)
- 收藏
- 关注
爬虫项目开发中随机生成UserAgent头信息
爬虫项目开发中随机生成UserAgent头信息,安装后即可使用,简单便捷,可以帮助随机生成一个UserAgent 头信息,免去每次到浏览器中复制的烦恼。
使用手册可以参考博客:https://blog.csdn.net/weixin_45228198/article/details/121799182
博主有更多的技术总结文章,可以关注博主哦。
2023-04-01
rabbitmq 软件包
在windows 和 centos8平台的安装rabbitmq 的软件包,帮助学习者快速搭建rabbitmq环境,避免浪费太多时间。
如果从rabbitmq的官网下载,英文的官网对于初学者不太友好,另外下载速度也很慢。对于不同平台的安装,还要阅读英文指导文档,比较费劲。
这里直接将软件包准备好,供大家参考使用。
安装方法可以参考博主的linux专栏的文章https://blog.csdn.net/weixin_45228198/article/details/129767128
2023-03-25
minGW软件 可以在windows的命令行下编译C代码为动态链接库dll
这个软件是windows 下的编译C/C++的软件,专门在windows系统下使用,注意区分自己的操作系统是64bit还是32bit;软件包中有两个版本。
Linux环境直接安装gcc即可,sudo apt-get install gcc。
可以结合着博主的博客一起学习,能达到事半功倍的效果。
2023-03-16
scrapy-redis分布式爬虫实现案例
只需将该项目放到不同的机器,简单配置一下redis /mysql 就可以运行,实现分布式抓取数据,需配置相同的环境scrapy/scrapy-redis/itemadapter/redis/mysql
2021-05-31
爬虫+可视化 myspider.rar
输入一个电影的名字,爬取对应的评分信息及评论文本信息,数据存储于mongodb,并可视化展示;评分使用条形图展示,评论使用词云展示,综合案例实战
2021-05-12
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人