自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(11)
  • 收藏
  • 关注

原创 iLogtail 从核心概念到实战的完整教程

iLogtail(LoongCollector)是企业级日志采集的首选工具,轻量、高性能、稳定、易扩展,完美适配云原生与大规模场景。掌握它的安装、配置与调优,是构建可观测平台的基础。

2026-05-06 11:54:17 384

原创 【保姆级】Filebeat 完整教程(Linux版)从安装到实战

Filebeat 是 Elastic 官方推出的轻量级日志采集器,部署在需要采集日志的服务器上,核心作用是:实时监控指定路径的日志文件,读取日志内容,不存储日志(或本地存储),低CPU、低内存占用,可将日志输出到本地文件、Kafka等(本文重点适配本地存储,无任何额外依赖),是日志收集链路的“入口”。tar 压缩包安装无需依赖系统包管理工具,解压即可使用,路径可自由选择,适合无外网、无yum/rpm环境,或需要灵活部署的场景,无需依赖ES/Kibana,支持对接Kafka。

2026-04-24 20:41:44 744

原创 PostgreSQL(PGSQL)从入门到精通|零基础入门 + 常用命令 + 实战案例

PostgreSQL 功能强大、稳定可靠,是现代开发必备数据库,支持 JSON、GIS、高并发、复杂查询,非常适合业务系统、数仓、大数据平台。

2026-04-23 18:57:43 727 1

原创 Trae工具安装和使用教程(新手零基础入门,全程无坑)

在安装前,先快速了解Trae的核心信息,避免盲目操作,同时明确其适配场景:核心定位:字节跳动自研AI IDE,国内首个AI原生编程工具,由字节跳动旗下新加坡公司SPRING(SG)PTE.LTD.提供服务。适配系统:Windows(Win10及以上)、Mac(支持Apple Silicon/M1芯片)、Linux,本文重点讲解Windows和Mac两种主流系统的安装。核心优势:零配置开箱即用,无需配置环境变量、安装插件;全中文界面,支持中文对话交互;

2026-04-16 20:40:31 2054

原创 Hive函数高效使用指南:基础用法+高级技巧 工作必备!

Hive内置函数无法满足所有业务需求,此时需要自定义函数,分为3类,重点掌握UDF(最常用),UDAF和UDTF按需了解即可。单行输入 → 单行输出,适用于数据清洗、字段转换(如手机号脱敏、密码加密),开发步骤简单,实战最常用。使用步骤(Java实现):继承org.apache.hadoop.hive.ql.exec.UDF类;实现evaluate()方法(核心,定义函数逻辑);将Java代码打包为jar包,上传到Hive服务器;在Hive中注册函数,即可使用。多行输入 → 单行输出。

2026-04-14 20:30:21 568

原创 生产环境 HDFS 误删数据恢复实战(保姆级教程)

回收站 Trash:最快、最简单、优先用快照 Snapshot:目录级保护、适合重要数据DataNode 块恢复:刚删、块未被覆盖时可用元数据回滚:高风险、最后手段外部备份(distcp):最终兜底。

2026-04-10 20:26:13 470

原创 Linux常用命令大全 小白必看!

本文整理的Linux命令覆盖了新手入门到日常运维的核心场景,无需死记硬背,重点是多实操、多练习。

2026-04-09 20:31:48 201 1

原创 YARN 调度器与多队列配置逻辑

如果此时B再启动第二个job并且其它job还在运行,则它将会和B的第一个job共享B这个队列的资源,也就是B的两个job会用于四分之一的集群资源,而A的job仍然用于集群一半的资源,结果就是资源最终在两个用户之间平等的共享。除此之外,队列内部又可以垂直划分,这样一个组织内部的多个成员就可以共享这个队列资源了,在一个队列内部,资源的调度是采用的是先进先出(FIFO)策略。通过为每个组织分配专门的队列,然后再为每个队列分配一定的集群资源,这样整个集群就可以通过设置多个队列的方式给多个组织提供服务了。

2026-04-09 19:07:35 318

原创 Zookeeper 选举机制详解:从入门到彻底吃透

中配置的唯一编号(1、2、3…Zookeeper 事务 ID,越大表示数据越新,最终获得过半票数的节点 → 成为 Leader。

2026-04-08 19:17:46 413

原创 Shuffle 详解:Map 输出到 Reducer 之间到底发生了什么

在数据角度,k-v从Mapper离开,一直到传给Reducer方法,中间过程,叫做shuffle。

2026-04-08 18:57:58 322

原创 原生 Java API 操作 ZooKeeper 详解

的核心能力,是理解分布式协作原理、落地分布式解决方案的必备基础。无论是基于原生 ZooKeeper 客户端实现基础功能,还是使用 Curator 等简化框架提升开发效率,都需要从核心 API、连接机制、数据节点操作、监听机制、异常处理等维度系统学习。对于 Java 开发者而言,掌握。第一步:导入Curator工具包。

2026-04-07 20:37:22 207

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除