- 博客(10)
- 收藏
- 关注
原创 task异常模拟
kafka:建立同步任务把source中的config换成org.apache.kafka.connect.jsonJsonConverter。持续发消息一段时间,再替换成org.apache.kafka.connect.FloatConverter,然后查看status,
2023-06-01 14:57:44
94
1
原创 记录一个bug
2个kafka高可用集群(3个副本),访问方式为cluster ip(3个ip),在可视化界面创建双活或者热备策略后检查后台source、checkpoint、heartbeat三个config,查看目标集群与源集群ip只有一个,仔细一想,如果一个副本宕机,岂不是达不到高可用,同步会失败,加上3个ip后才正常,经过考虑与确认,反手一个bug踢了过去。
2023-05-26 11:26:26
88
1
原创 rides数据读写操作
hash写: hmsethashredisfor " abc "from10isters2000ok。zset 写: zaddscOredis;zaddscOred;zset读:zrangebyscoresc01000。集合 set 写: SADDjha [ b ]string写: setworldnihao。集合 set 读: SMEMBERSjh。list 读:IrangeIb010。string 读: getworld。hash读: hgetallhash。
2023-04-11 20:45:39
91
原创 kafka同步任务后台rest调用方法整理
最近一直在研究kafka,没前端只有在后端操作,所以整理一些操作命令,具体可在kafka官网查看。mm2name为config路径下的source文件中定义的同步任务名字。3.暂停pause,恢复resume,重启restart。1. 获取所有Connector的列表。2. 创建一个Connector。去掉status可查看配置。重启可用POST方法。
2023-03-24 16:09:47
230
原创 k8s基本命令整理
8. kubectl port-forward:将容器端口映射到主机端口,例如将容器的端口 8080 映射到主机的端口 80 kubectl port-forward [pod-name] 80:8080。2. kubectl describe:获取对象的详细信息,例如获取pod的详细信息 kubectl describe pod [pod-name]。7. kubectl logs:查看pod的日志,例如查看pod的日志 kubectl logs [pod-name]。
2023-03-24 15:50:03
604
原创 kafka避坑指南
2. **磁盘空间问题**:Kafka需要大量的磁盘空间来存储消息,因此需要注意及时清理过期的消息,否则可能会导致磁盘空间不足,进而影响整个Kafka集群的正常运行。3. **网络延迟问题**:Kafka是基于网络通信的,因此网络延迟可能会影响整个集群的性能和可靠性。4. **Java内存问题**:Kafka是使用Java编写的,因此需要注意Java虚拟机的内存管理问题。5. **硬件故障问题**:硬件故障是不可避免的,需要采取相应的备份和恢复策略,以保证数据的可靠性和可用性。
2023-03-24 11:23:11
237
原创 kafka使用个人总结整理,持续更新
2. 创建主题:./bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic topic_name。6. 消费消息:./bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic topic_name --from-beginning。
2023-03-24 11:18:00
66
原创 如何查web前端上某个菜单对应的数据库表
今天突发奇想,如何用笨方法查到前端某个菜单对应的数据库表名:1、手动在前端菜单做任意增删改查操作,记录关键字段,或者交易完成生成的流水都可,用于定位2、查找对应的日志,日志路径可在运维平台上找对应模块的配置3、根据关键字在日志中搜索,定位到大致位置,然后语句走查,会发现日志中多条查询或者更新语句,复制对应的表名,在数据库上打开,与前端参照,可模糊定位到数据库表...
2022-08-31 19:58:28
2785
原创 关于tester从低到高的变化
哈喽大家好,我是csdn无名新秀——柱间下面汇总下测试忍者从低到高的变化,不涉及性能(从仔细到粗糙?)一、见习1、设计用例:边界值,等价类,复制需求,无自己的见解2、测试技能:基本的测试管理工具,无敌点点点3、关注点:页面显示问题,字段,特殊符号的显示问题,基本的报错问题,基本功能4、解决思路:找组长,找开发二、下忍1、设计用例:基本功能,正反案例2、测试技能:缺陷管理工具,点点点,postman等3、关注点:字段,功能,报错类型4、解决思路:对照需求,找开.
2022-08-16 20:35:21
334
空空如也
kafka-connect告警
2023-05-29
TA创建的收藏夹 TA关注的收藏夹
TA关注的人