- 博客(33)
- 资源 (2)
- 收藏
- 关注
原创 Kafka 去 ZooKeeper 实战评估:KRaft 模式架构解析与生产落地决策指南
方向没有争议(4.0 已删掉 ZK,官方全部筹码在 KRaft);节奏自己掌握(3.6 起迁移可用,测试环境先行、新集群直上、存量按升级计划排期);红利按规模兑现(集群越多、分区越多,少养 zk 的收益越大)。你们生产上的 Kafka 什么版本了?开始迁 KRaft 了吗,还是在等 4.0 逼一把?评论区聊聊。基于内部技术评估整理;版本信息以 Apache Kafka 官方发布说明为准。
2026-08-28 20:07:58
347
原创 Kafka 常见问题排查手册:连接超时、Maxwell 数据倾斜、ZooKeeper 缓慢(附排障流程图)
报错信息都在指向"连接",但根因各不相同——hosts 解析、分区策略、资源上限。排障时先分层定位(网络通不通 → 认证过不过 → 行为对不对),再对症下药,比对着报错瞎猜快得多。你踩过最离谱的 Kafka 坑是什么?是 DNS 解析还是防火墙?评论区见。排查过程来自生产环境实测;文中 IP、密码均为示例。
2026-08-27 21:11:08
474
原创 Kafka 集群开启 SASL 认证实战(三):外置 ZooKeeper 完整版,quorum 认证 + ACL 访问控制
SASL 管身份、ACL 管路径、IP 白名单管入口。上线节奏建议:先在测试环境完整跑一遍第五节的验证清单,生产变更时按"zk → kafka → ACL"顺序推进,ACL 最后上。至此三步走完,你的 Kafka 从"裸奔"变成了"认证 + 白名单双保险"。评论区聊聊:你们的等保/安全整改还有哪些组件没过关?系列文章配置在 ZooKeeper 3.6.3 + Kafka 2.5.1 生产集群验证;示例密码请替换后使用。
2026-08-24 22:37:30
273
原创 Kafka 集群开启 SASL 认证实战(二):外置 ZooKeeper 之 kafka 与 zk 间认证
kafka 与 ZooKeeper 之间的通道必须锁——zk 里存着 broker 元数据,裸连可被一键清空。系列第二篇:外置 ZooKeeper 场景只做 kafka 与 zk 间 SASL 认证的最小配置:zk 三段式 JAAS、zoo.cfg quorum 认证参数逐项解析、kafka 侧单段 JAAS 与 zookeeper.client.sasl,业务客户端零改造。ZooKeeper 3.6.3 + Kafka 2.5.1 验证,附踩坑清单。
2026-08-24 22:34:40
266
原创 Kafka 集群开启 SASL 认证实战(一):内置 ZooKeeper 场景,JAAS 配置全流程
Kafka 默认裸奔,任何客户端都能生产消费。本篇是 Kafka SASL 认证实战系列第一篇:内置 ZooKeeper 场景的全套配置——五段式 JAAS 密钥文件逐段解析、server.properties 六行核心配置、四个启动脚本改造、命令行与 Spring Boot 客户端接入示例,附踩坑清单。SASL_PLAINTEXT + PLAIN 机制,Kafka 2.5 生产集群验证。
2026-08-24 22:32:29
335
原创 Elasticsearch 日志索引设计:按小时切分 + 小时内 Rollover 兜底(ILM 实战,附完整脚本)
Elasticsearch 日志索引怎么切?本文给出一套按整点小时切分 + 小时内 ILM Rollover 兜底的双层别名方案:外层 cron 每小时建索引对齐时间边界,内层 20GB/1亿文档自动 rollover 防单索引过大。ILM 策略、索引模板、cron 脚本、Java/Python 写入路由、验证与监控命令全套可复制,附踩坑清单与部署 Checklist。
2026-08-21 21:34:28
293
原创 ClickHouse 集群部署方案:双分片还是四节点?一份可落地的容量规划
本文针对 ClickHouse部署提供已验证方案,重点解决版本选择、容量规划和架构设计三大问题。推荐使用22.10.1.1877版本,兼容ARM/x86架构。提出两节点(单分片双副本)和四节点(双分片双副本)两种配置方案,分别适合月增量500GB/10MB以下和1TB/10MB以上场景,详细对比了性能、可用性和成本。核心方法是从实际写入量×20倍预留推算需求,存储容量按数据保留策略加20%索引、10%系统、35%预留系数计算。特别强调硬件配置需保留15倍余量应对实际负载波动,避免按理论值规划。方案已在实际业
2026-08-20 16:07:24
357
原创 Elasticsearch 压测利器 esrally 从安装到跑分全流程
esrally 是 Elastic 官方的 ES 压测工具。本文完整记录从 pip 安装、离线下载数据集、拉起被测节点到 benchmark-only 跑分的全流程,并给出机械盘与固态盘四组实测数据对比:平均吞吐从 11k 到 93k docs/s,磁盘类型对写入性能的影响是数量级的。文末附五个实战踩坑记录。
2026-08-19 21:09:53
373
原创 PVE 链接克隆批量部署 6 节点 Kylin + Elasticsearch 测试集群:标准时序与避坑
用一台 Kylin 模板机在 PVE 上批量铺出 6 节点 Elasticsearch 测试集群的完整时序:先清 SSH 密钥与 machine-id 再转模板,链接克隆 6 台,逐台加盘改 IP,es7/es8 分组安装,并留档 ES 8 在 Kylin 上的 glibc 兼容性证据。
2026-08-18 20:37:46
336
原创 ECharts 实现日志量异常检测:基线 ±Kσ 基带 + 灵敏度切换(Vue2 实战)
日志监控里固定阈值告警在业务高峰误报、深夜漏报。本文用 Vue2 + ECharts 实现动态基线异常检测图:堆叠面积画 ±Kσ 基带、scatter 标红越带异常点、灵敏度三档切换实时重算,并总结 y 轴负值、series 残留、dispose 等五个踩坑点。
2026-08-18 19:59:30
376
原创 5060Ti安装黑屏问题一解
首先,赞一下精粤这个品牌。但在本次的5060Ti的安装黑屏问题中,最终是靠着精粤主板官方bios的更新实现了问的完美处理。其中网易UU远程可以使用高分辨率,向日葵虽然是收费的vip版本,但也只能使用低分辨率,且不能修改。以下是本次用到的软件,大家酌情选择使用,如提示输入密码,鼠标点击默认输入。4、尝试了DDU,安全模式下清理所有驱动,重新安装步骤3中的所有驱动,结果和步骤3一样。5、上精粤官方网,找到使用的主板信号,看到了有4月份的bios更新。另:切记主板型号不一样,不能直接使用,千万找对应的主板型号。
2025-07-04 17:17:27
2170
原创 dbeaver 查询clickhouse,数据库时间差了8小时
通过上述调整,99% 的时区偏差问题可解决。若问题持续,可结合服务器日志与客户端配置进一步排查。或查询业务表的时间字段,确认显示时间与本地时间一致。若仍偏差,检查操作系统时区()是否与 ClickHouse 服务端一致。
2025-06-10 11:29:04
2140
原创 postgres的docker版本安装
测试和开发需要用到postgres,越快越好,想到了用docker进行安装。这是要配代理呗,尝试各种代理方式和镜像的配置,各种大学的,耗费无数时间,未果。最后,用离线安装搞定。我导出的postgres的文件放在网盘大家可以使用,也就不用配置了。
2025-05-16 11:19:17
989
原创 ComfyUI反推提示词工作流
点击“加载图像”中的upload,随便选个图片,然后点击“运行”看反推提示词和翻译的效果吧。翻译使用的是google引擎,无法访问的小伙伴请先禁用翻译部分。快捷键:ctrl+b。下载后解压,连同目录一起放在comfy\custom_nodes目录下。
2025-03-24 22:24:03
3012
原创 基于Flux模型的多模态可控图像生成工作流实践
通过Flux.1的多模态架构与ControlNet++的高效奖励机制,开发者能够在Canny与Depth控制间实现动态平衡,兼顾结构精确性与空间真实性。未来可进一步探索语义分割、光流估计等控制模态的融合,推动生成式AI在影视、工业设计等领域的落地应用。
2025-03-23 22:32:31
1212
原创 Flux 文生图技术解析与部署实践
FP8 精度模型通过动态范围压缩技术,将显存需求从 FP16 的 23.8GB 降低至 11.9GB[^用户数据],同时保持 95% 以上的生成质量。采用 E4M3 浮点格式实现显存-精度平衡,特别适合 RTX 4070Ti 等 12-24GB 显存设备。,通过结合扩散模型与 Transformer 的优势,实现了文本到图像生成领域的突破性进展。采用 120 亿参数规模的多模态混合架构,通过流匹配(Flow Matching)技术优化数据分布路径。工作流和模型均经过测试,可正常进行文生图操作。
2025-03-16 22:55:55
1216
原创 ComfyUI一键换衣-服装一致性
从好网上的文章中下载到了一键换装的工作流,其实也就是服装一致性。跑了几次下来,感觉和服装上的一致性还是有点差异的,不知道是模型替换的不对,还是参数设置问题。参数上没有做任何调整,提示词上做了调整,还有在模型加载的时候发现了一些模型找不到,因此将这些缺少的文件进行了补充。clip_l.safetensors我用ViT-L-14-TEXT-detail-improved-hiT-GmP-TE-only-HF.safetensors代替.上面的模型在不同的节点可能重复使用,代替的地方自己自行替换一下。
2025-03-03 20:58:10
1725
原创 ControlNet 1.1系列模型解析与下载指南
ControlNet 1.1是Stable Diffusion生态中功能强大的图像控制插件,包含14个生产级模型,支持建筑、设计、动画等多场景创作。。
2025-02-26 22:03:17
8245
原创 最简-win10部署ollama,deepseek开放给内网
重启ollama,右下角图标退出,从开始菜单再进入一次Ollama,看右下角图标出现就行。命令行执行命令:ollama pull deepseek-r1:1.5b。我的电脑(此电脑)-右键-属性-高级系统设置-环境变量。在局域网机器通过浏览器,访问部署ollama的服务,选择win下载,安装,一直下一步,装完。变量名:OLLAMA_HOST。看到如下界面,api服务可用。看到如下内容模型下载完毕。变量值:0.0.0.0。
2025-02-08 14:32:00
517
原创 提升多电脑办公效率神器——InputDirector深度体验
如果你经常需要同时操作多台电脑,InputDirector绝对是你的必备工具!它不仅提升了我的工作效率,还让我的桌面更加整洁,再也不用被一堆键盘鼠标缠住了。官网地址InputDirector官网备用下载(访问密码: 7846 点击输入框自动填写密码)适用系统#效率工具 #多电脑控制 #InputDirector #办公神器 #软件推荐。
2025-02-07 20:15:36
2841
原创 Zookeeper(Kafka内置)单独添加SASL认证及ACL
通常,我们会给Kafka增加SASL以加强对kafka的安全访问,以满足漏扫对于kafka的访问安全漏扫要求。但漏扫的时候也会同样会对Kafka集群中的zk集群进行扫描。所以zk集群同样涉及到要配置kafka的安全认证。
2023-07-16 16:41:33
2289
2
原创 Kafka集群新增数据及日志文件路径
Kafka集群的主题数据扩容 修改config/server.properties文件在原属性后增加新的路径,范例如下: 修改数据日志保留策略还是config/server.properties文件具体保留数量根据现场磁盘空间和行方磁盘告警要求进行调整。二、移动kafka的运行日志目录 新目录准备在/home下新增kafka/logs目录 修改kafka-run-class.sh文件
2023-07-13 11:59:40
1626
1
原创 git无法断点续传的下载办法
git init //找个空文件夹,初始化一个repogit fetch git://github.com/xmoeproject/KrkrExtract // 用http也会断,只有用git才行git checkout FETCH_HEAD // 成功提取也就ok了。中间可能碰到权限问题,需要去git上增加一个ssh的key“Please make sure you h...
2018-08-06 13:06:25
5463
原创 终于基本达成了图片提取的目标
感觉我的思路完全混沌啊~想哪写哪~ 没关系,反正我性子慢,慢慢来吧。 =========================== 谁发明的分割线 ================================ 经历了无数的尝试和折磨,终于基本上算是提取出来了。 最终是用KrkrExtract这个工具提取出来的,虽然提出来的立绘背景不是透明的,但可以用其他工具继续处理...
2018-08-06 13:04:41
1692
原创 慢慢整理一下用到的游戏相关工具
朋友要个游戏的立绘,说没在网上没找到,让我帮忙提取一下。一直都是这方面的小白,偶尔用工具提取一些素材。这次受托,借机会想亲自开刀一下,可惜,未果。没能成功提取出哪怕一丁点的立绘。不过提取别的老游戏倒是准确率挺高。本次针对的是后缀是xp3数据文件的游戏。不多说了,列举一下工具及下载地址吧。1、XP3Viewer 这东东还是比较傻瓜的,能拆的游戏,基本上不用.........
2018-08-03 16:01:11
43212
3
转载 yum 方式在centos上 mysql 安装过程
按照网上的教程,实践了一遍。必须能上网,其他的必要条件还不确定,我是安装了桌面版本的centos7.0[root@localhost Tools]# rpm -Uvh http://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpmRetrieving http://dev.mysql.c
2017-01-11 13:18:40
1206
VMware Unlocker for OS X 1.3
2014-12-10
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅