- 博客(11)
- 收藏
- 关注
原创 iLogtail 从核心概念到实战的完整教程
iLogtail(LoongCollector)是企业级日志采集的首选工具,轻量、高性能、稳定、易扩展,完美适配云原生与大规模场景。掌握它的安装、配置与调优,是构建可观测平台的基础。
2026-05-06 11:54:17
384
原创 【保姆级】Filebeat 完整教程(Linux版)从安装到实战
Filebeat 是 Elastic 官方推出的轻量级日志采集器,部署在需要采集日志的服务器上,核心作用是:实时监控指定路径的日志文件,读取日志内容,不存储日志(或本地存储),低CPU、低内存占用,可将日志输出到本地文件、Kafka等(本文重点适配本地存储,无任何额外依赖),是日志收集链路的“入口”。tar 压缩包安装无需依赖系统包管理工具,解压即可使用,路径可自由选择,适合无外网、无yum/rpm环境,或需要灵活部署的场景,无需依赖ES/Kibana,支持对接Kafka。
2026-04-24 20:41:44
744
原创 PostgreSQL(PGSQL)从入门到精通|零基础入门 + 常用命令 + 实战案例
PostgreSQL 功能强大、稳定可靠,是现代开发必备数据库,支持 JSON、GIS、高并发、复杂查询,非常适合业务系统、数仓、大数据平台。
2026-04-23 18:57:43
727
1
原创 Trae工具安装和使用教程(新手零基础入门,全程无坑)
在安装前,先快速了解Trae的核心信息,避免盲目操作,同时明确其适配场景:核心定位:字节跳动自研AI IDE,国内首个AI原生编程工具,由字节跳动旗下新加坡公司SPRING(SG)PTE.LTD.提供服务。适配系统:Windows(Win10及以上)、Mac(支持Apple Silicon/M1芯片)、Linux,本文重点讲解Windows和Mac两种主流系统的安装。核心优势:零配置开箱即用,无需配置环境变量、安装插件;全中文界面,支持中文对话交互;
2026-04-16 20:40:31
2054
原创 Hive函数高效使用指南:基础用法+高级技巧 工作必备!
Hive内置函数无法满足所有业务需求,此时需要自定义函数,分为3类,重点掌握UDF(最常用),UDAF和UDTF按需了解即可。单行输入 → 单行输出,适用于数据清洗、字段转换(如手机号脱敏、密码加密),开发步骤简单,实战最常用。使用步骤(Java实现):继承org.apache.hadoop.hive.ql.exec.UDF类;实现evaluate()方法(核心,定义函数逻辑);将Java代码打包为jar包,上传到Hive服务器;在Hive中注册函数,即可使用。多行输入 → 单行输出。
2026-04-14 20:30:21
568
原创 生产环境 HDFS 误删数据恢复实战(保姆级教程)
回收站 Trash:最快、最简单、优先用快照 Snapshot:目录级保护、适合重要数据DataNode 块恢复:刚删、块未被覆盖时可用元数据回滚:高风险、最后手段外部备份(distcp):最终兜底。
2026-04-10 20:26:13
470
原创 YARN 调度器与多队列配置逻辑
如果此时B再启动第二个job并且其它job还在运行,则它将会和B的第一个job共享B这个队列的资源,也就是B的两个job会用于四分之一的集群资源,而A的job仍然用于集群一半的资源,结果就是资源最终在两个用户之间平等的共享。除此之外,队列内部又可以垂直划分,这样一个组织内部的多个成员就可以共享这个队列资源了,在一个队列内部,资源的调度是采用的是先进先出(FIFO)策略。通过为每个组织分配专门的队列,然后再为每个队列分配一定的集群资源,这样整个集群就可以通过设置多个队列的方式给多个组织提供服务了。
2026-04-09 19:07:35
318
原创 Zookeeper 选举机制详解:从入门到彻底吃透
中配置的唯一编号(1、2、3…Zookeeper 事务 ID,越大表示数据越新,最终获得过半票数的节点 → 成为 Leader。
2026-04-08 19:17:46
413
原创 Shuffle 详解:Map 输出到 Reducer 之间到底发生了什么
在数据角度,k-v从Mapper离开,一直到传给Reducer方法,中间过程,叫做shuffle。
2026-04-08 18:57:58
322
原创 原生 Java API 操作 ZooKeeper 详解
的核心能力,是理解分布式协作原理、落地分布式解决方案的必备基础。无论是基于原生 ZooKeeper 客户端实现基础功能,还是使用 Curator 等简化框架提升开发效率,都需要从核心 API、连接机制、数据节点操作、监听机制、异常处理等维度系统学习。对于 Java 开发者而言,掌握。第一步:导入Curator工具包。
2026-04-07 20:37:22
207
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅