![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
java语言
文章平均质量分 89
qq_BeBetterCoder
这个作者很懒,什么都没留下…
展开
-
kafka消息丢失的一次踩坑排查记录----全量拉取kafka消息的方法
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录前言 一、问题 二、代码 1.引入库 2.代码 总结前言公司项目现在使用了kafka,我们这边主要是消费端,其他项目组是生产端,然后kafka的服务器 --broker的集群是使用的aws托管的,运维来管理和配置----一把辛酸泪,开发这边什么权限都没有,连查看kafka的配置的权限都没有,只能去找运维来帮忙查看,这就为后面的问题埋下了伏笔,如果运维的小伙伴不是很靠谱,那这个坑就准备...原创 2020-09-25 15:05:17 · 1862 阅读 · 0 评论 -
java爬虫--利用java爬取网页数据的方法与思路,以爬取“食品许可公示的数据”为例
项目背景 先说下背景,前几天老哥让帮忙从网上抓点数据,因为他是做食品添加剂的推广工作的,所以需要知道有哪些工厂或者厂家可能需要食品添加剂,然后他给了我一个网址----某食品药品许可公示平台。既然是公示平台,数据应该就是公开的,爬起来应该不会被查水表吧,看这个警徽还是怕怕的 .......>_>如下:图已省略..........防止被查水表 抓取的数据类似...原创 2020-06-10 15:46:08 · 15183 阅读 · 6 评论