![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
文章平均质量分 92
清酒沾衣89
爬虫、java web、大数据存储系统
展开
-
基于Spring Cloud的全自动化微信公众号消息采集系统-PC端采集列表
前言 前面两篇文章介绍了系统流程和功能模块的封装,这篇文章将对消息列表的采集做以说明,此篇文章中注重思路而不是技术和源码,逻辑的代码千篇一律,可靠的算法万里挑一。 准备工作 1、采集来源 研究发现公众号文章访问获取的渠道有多种: 搜狗搜索:只能获取前10条; 公众号历史消息页,24H内公众号有次数限制(目前发现200+次数,不同微信号可能有所不同); 微信公众平台写图文消息引用其他公众号文章的查询接口,频繁后会限制查询,并且; ...原创 2021-05-07 11:52:24 · 341 阅读 · 0 评论 -
基于Spring Cloud的全自动化微信公众号消息采集系统-模块依赖和模块封装详解
系统搭建和模块详解 前言 上一篇文章已经对大致对系统做了整体的分析,并简单介绍了每个模块的功能,本篇文章将详细介绍系统各个模块一些重要的功能实现。 一、版本选择 Springboot选用的版本是2.1.4,于是spring cloud选择的对应的G版本(Greenwich.RELEASE),一定要选择和Springboot版本对应的版本,否则项目无法正常启动,详细的对应关系可自行百度。 Nacos选用的是1.4,可自行到官网下载。 RocketMq测试环境安装的是window版,版本号4.3.0,安装可原创 2021-04-30 16:15:31 · 338 阅读 · 0 评论 -
基于Spring Cloud的全自动化微信公众号消息采集系统
基于Spring Cloud的全自动化微信公众号消息消息采集系统 文章目录基于Spring Cloud的全自动化微信公众号消息消息采集系统前言一、系统简介二、系统架构技术架构存储缓存代理三、系统优劣性系统优点系统缺点:四、模块简介common-ws-starterredis-ws-starterrocketmq-ws-starterdb-ws-startersql-wx-spiderpc-wx-spiderjava-wx-spidermobile-wx-spider五、大体流程图六、运行截图PC和移动端原创 2021-04-29 15:50:13 · 2084 阅读 · 2 评论