- 博客(12)
- 资源 (1)
- 收藏
- 关注
原创 kafka生产者数据重复
事务根据事务id(transactional.id,全局唯一)的hashcode%50计算出该事务处于哪个分区。生产者重启后,请求pid,事务协调器检查是否有已提交没完成的事务。这种情况下,有重复,就利用幂等性去重。生产者在使用事务功能前,必须先自定义一个唯一的事务id,有了事务id之后,即时客户端挂了,重启后也能继续处理未完成事物。leader接收数据并同步落盘之后挂了,没发应答,然后一个follower成为了新的leader,导致数据重复。开启事务,必须开启幂等性,因为事务底层依赖幂等性。
2023-08-26 01:44:04 252
原创 kafka启动
这条命令会报错 zookeeper is not a recognized option。在kafkf文件夹根目录下打开powershell,启动zookeeper。在kafkf文件夹根目录下删除数据文件夹(我用的是logs)。kafka版本:阿里云镜像下载的3.4.1。在该目录下打开cmd,输入下列命令。
2023-08-24 22:48:23 155 1
原创 【论文阅读】工控安全-入侵检测
State-Based Network Intrusion Detection Systems for SCADA Protocols: A Proof of Concept论文阅读笔记
2022-07-11 22:12:41 247
原创 使用scapy自定义协议时出现takes no argument的错误解决方式
使用scapy自定义协议时出现takes no argument的错误解决方式定义类时括号里没有加scapy.all.Packet
2021-12-07 10:50:43 222
原创 在使用虚拟机的时候主机与虚拟机相互ping不通
在使用虚拟机的时候,采用桥接模式,主机与虚拟机相互ping不通,修改了虚拟机的IP地址,关闭了主机的防火墙仍然不行。最后删除了VMware0重新建了一个,成功连接。
2021-01-20 14:04:11 110
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人