- 博客(12)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 kafka生产者数据重复
事务根据事务id（transactional.id，全局唯一）的hashcode%50计算出该事务处于哪个分区。生产者重启后，请求pid，事务协调器检查是否有已提交没完成的事务。这种情况下，有重复，就利用幂等性去重。生产者在使用事务功能前，必须先自定义一个唯一的事务id，有了事务id之后，即时客户端挂了，重启后也能继续处理未完成事物。leader接收数据并同步落盘之后挂了，没发应答，然后一个follower成为了新的leader，导致数据重复。开启事务，必须开启幂等性，因为事务底层依赖幂等性。
2023-08-26 01:44:04
237
原创 kafka启动
这条命令会报错 zookeeper is not a recognized option。在kafkf文件夹根目录下打开powershell，启动zookeeper。在kafkf文件夹根目录下删除数据文件夹（我用的是logs）。kafka版本：阿里云镜像下载的3.4.1。在该目录下打开cmd，输入下列命令。
2023-08-24 22:48:23
149
1
原创 【论文阅读】工控安全-入侵检测
State-Based Network Intrusion Detection Systems for SCADA Protocols: A Proof of Concept论文阅读笔记
2022-07-11 22:12:41
243
原创 使用scapy自定义协议时出现takes no argument的错误解决方式
使用scapy自定义协议时出现takes no argument的错误解决方式定义类时括号里没有加scapy.all.Packet
2021-12-07 10:50:43
219
原创 在使用虚拟机的时候主机与虚拟机相互ping不通
在使用虚拟机的时候，采用桥接模式，主机与虚拟机相互ping不通，修改了虚拟机的IP地址，关闭了主机的防火墙仍然不行。最后删除了VMware0重新建了一个，成功连接。
2021-01-20 14:04:11
108
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人