自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

有问题的请私信或关注v【技术印记】留言

Reading, Coding, Writing and Sharing

  • 博客(400)
  • 资源 (6)
  • 收藏
  • 关注

原创 Zookeeper 进行平滑迁移

借助Zookeeper observer进行平滑迁移

2026-01-26 08:51:48 531

原创 JAVA、SCALA 与尾递归

JAVA、SCALA 与尾递归

2025-12-10 08:59:28 1095

原创 Apache POI导出出现FontConfiguration中NULL

Apache POI 中使用SXSSFWorkbook出现Excel导出失败的NULL异常。

2025-11-29 11:36:13 1035

原创 HDFS元数据与auditlog结合Hive元数据统计分析

HDFS元数据与auditlog结合Hive元数据统计分析

2025-11-25 19:00:00 597

原创 Apache Doris与Elasticsearch对比分析

Apache Doris与Elasticsearch对比分析

2025-11-25 19:00:00 997

原创 【Flink实战】升级HDFS,对Flink SQL(On Yarn模式)的功能兼容性验证

Temporal Table Function 提供访问 Temporal Tables 在某一时间点的状态的能力。,将状态,checkpoints,savepoints等写入 file systems(HDFS)。验证在升级HDFS后,Flink在本身运行,以及涉及读写HDFS任务功能的兼容性。修改表的属性,官方示例没有说可以修改字段,可以验证一下。LOAD 语句用于加载内置的或用户自定义的模块。LOAD 语句用于加载内置的或用户自定义的模块。使用hdfs协议,指向HDFS的地址。

2025-10-24 19:53:11 1136

原创 【HDFS实战】HDFS 常用命令与Router连接

ls 命令可能读的是Editlog里面的时间。Fsimage里面的数据实际是有延迟的,hdfs操作的数据会先写入Editlog日志文件,hdfs会将旧的Fsimage文件与editlog文件合并形成新的fsimage。建立客户端连接,主要是将HDFS客户端的连接地址,从NN专向Router节点。若文件已经存在可以先删除后上传,也可以使用强行覆盖命令。实际结果不是这种展示方式,只是用图表进行示意。将文件上传至HDFS 并删除本地文件。删除HDFS上的文件夹下的东西。将本地文件上传至HDFS。

2025-10-24 18:01:21 445

原创 【Yarn实战】Yarn 2.9.1滚动升级到3.4.1调研与实践验证

Yarn滚动升级的调研与实践验证

2025-10-17 11:11:18 918

原创 【Hadoop实战】MapReduce任务的优化诊断的一种实现

利用MR History Server的API进行MR任务的优化诊断

2025-10-17 11:11:08 659

原创 【HDFS实战】社区版 HDFS 2.8.2滚动升级3.4.1实践

HDFS 升级

2025-10-09 20:20:39 940

原创 【ES实战】ES6.8到9.1.4的常用客户端变化

【ES实战】ES6.8到9.1.4的常用客户端变化

2025-10-09 20:06:23 1443

原创 【Yarn实战】Yarn3.4.1集成Kerberos实现账户认证

Yarn集成Kerberos实现账户认证

2025-09-30 14:00:00 865

原创 【HDFS实战】Router上开启Kerberos

HDFS Router开启Kerberos

2025-09-30 14:00:00 583

原创 【Hive实战】升级HDFS YARN对Hive的兼容性测试

升级HDFS YARN对Hive的兼容性测试

2025-09-26 08:48:11 899

原创 【Hive实战】hive-testbench的调研

hive-testbench的使用调研

2025-09-26 08:47:31 818

原创 【HDFS实战】HADOOP 机架感知能力-HDFS

HADOOP 机架感知能力 (HDFS)

2025-09-25 20:26:44 1251

原创 JDK Version 1.8 jstat命令使用说明

Oracle说明官网。

2025-09-25 20:26:19 916

原创 JVM本地内存的使用监控情况

JVM本地内存的使用监控情况

2025-07-08 20:00:19 1289

原创 【ES实战】ES客户端线程量分析

ES客户端线程量分析

2025-07-08 20:00:15 1236

原创 Zookeeper 3.8.4 安装部署帮助手册

Zookeeper 3.8.4的安装部署说明手册

2025-06-14 18:06:11 1270

原创 Kerberos快速入门之基本概念与认证基本原理

Kerberos快速入门 基本概念 认证基本原理

2025-06-14 18:01:14 1109

原创 【HDFS实战】HDFS 3.4.1 集成Kerberos 实现账户认证

HDFS 3.4.1 集成Kerberos 实现账户认证

2025-06-10 20:35:22 1452

原创 CentOS 7.3环境中部署Kerberos集群

部署Kerberos集群实现HA

2025-06-10 20:34:23 1393

原创 【ES实战】Elasticsearch中模糊匹配类的查询

Elasticsearch中能有模糊匹配效果的查询方式

2025-04-24 18:12:56 3303

原创 一种Spark程序运行指标的采集与任务诊断实现方式

一种Spark程序运行指标的采集与任务诊断实现方式

2025-04-24 18:12:37 1372 1

原创 Spark On Yarn的机器出现IO过高的告警

Spark on Yarn模式下Yarn节点出现IO过高的问题

2025-04-22 08:55:33 1285

原创 Zookeeper3.4.6+升级至3.5.5以上的升级方案

Zookeeper原地升级

2025-04-22 08:52:13 882

原创 AI小白用Dify搭建知识库

AI小白用Dify搭建知识库

2025-04-17 08:56:47 1403

原创 大模型业务领域应用落地探讨

上述两个大模型应用平台提供了核心的流程编排功能,可以实现可视化托拉拽的形式进行灵活的工作流设计。在验证AI应用化,可以带来实际的商用价值后,建议采用本地方式,保证数据的安全。对AI化的需求进行归类总结,进行产品化设计,将业务改革成AI化的产品。两种方式都需要使用大模型应用开发平台(如dify,coze),主要是打破不同模型供应商之间的壁垒,可以快速搭建大模型应用。结合主流模型,与上述的需求进行结合,分析出可以AI化的需求。根据不同需求选择不同模型,还要对比一下效果与费用。ConfyUI-批量做图神器。

2025-04-17 08:56:20 785

原创 【Doris实战】Doris上资源管理调研说明

Doris如何进行资源隔离。多租户使用Doris需要的资源管理

2025-02-11 17:11:17 1349

原创 【ES实战】治理项之索引模板相关治理

Elacticsearch索引模板治理。如何查询Flink on Yarn 模式下的Task Manager日志。

2025-01-26 18:38:15 1247

原创 【Doris实战】Doris表的生命周期管理调研

Doris表的数据生命周期管理

2025-01-20 18:58:40 1573

原创 【Doris实战】生命周期管理之动态分区

Doris表的数据生命周期管理

2025-01-20 18:58:28 1602

原创 封装echarts成vue component

为了减少一些公共代码和方便使用echarts的line图形,有限制条件的封装echats中的line类型的图,该Component名称为。定义了空数据的展示效果,舍弃了有数据状态下的。增加了窗口自适应写法,并确定初始化图标高度为。中需要先确认数据每条线显示的效果,即配置。来判断图形是否包含数据,意味着需要通过。属性,否则不能正常使用该。

2024-12-31 19:02:04 502

原创 【Yarn】通过JMX采集yarn相关指标的Flink任务核心逻辑

输出Kafka:huatuo_yarn_jmx_queue_metric。输出Kafka:huatuo_yarn_jmx_rm_metric。构建查询Active的RM中的核心指标Model。jmx中完整的bean中的name.key的值。一次性请求所有配置的指标。构造输出对象json。

2024-12-31 00:00:00 1854

原创 【Yarn】Yarn监控调研分析与实现设计

ResourceManager(Acticve状态)的JVM情况 (按时间序列)ResourceManager(Acticve状态)端口RPC情况(按时间序列)队列资源指标历史明细表(Doris明细模型)DUPLICATE KEY(RM指标信息历史明细表(Doris明细模型)DUPLICATE KEY(队列资源指标最新明细表(Doris主键模型)UNIQUE KEY(核心端口使用情况(操作数量,操作耗时,队列长度,连接数等)队列指标情况(按时间序列)队列指标情况(按时间序列)4.1写入Doris。

2024-12-30 23:30:00 2176

原创 Vue2集成Echarts使用案例

Vue2集成Echarts使用案例文章目录Vue2集成Echarts使用案例全局化echarts页面使用示例常用属性全局化echarts在main.js中引入echarts,并导出全局变量。import * as nativeEcharts from 'echarts';Vue.prototype.$nativeEcharts = nativeEcharts;页面使用示例<template> <div> <div id="line2"

2024-12-02 22:00:00 1072

原创 【Spark源码分析】规则框架-`optimization`阶段使用的规则

Finish Analysis: 对包括所有子查询在内的整个计划应用完成分析规则。操作优化的规则批 operatorOptimizationBatch。

2024-11-30 11:48:03 1181 1

原创 【Spark源码分析】规则框架- `analysis`分析阶段使用的规则

【代码】【Spark源码分析】规则框架- `analysis`分析阶段使用的规则。

2024-11-30 11:47:08 894

原创 【Spark源码分析】基于Spark3.4.2源码分析SparkSQL执行过程

** 为sql字符串创建逻辑计划 */// 获取构造器AstBuilder,将ParseTree转换为AST(visit模式)case _ =>command")// 将sql内容转换成字符流,并且转换成大写形式。词法解析器// 清空识别错误的监听器// ParseErrorListener将解析错误转换为 AnalysisException。ParseException继承AnalysisException。

2024-11-30 11:45:35 1812

Hive测试,可以基于TPC-H基准和TPC-DS基准

Hive测试,可以基于TPCH基准和TPCDS基准。压缩包里包含tpch-kit-tpch_2_17_0.zip,tpcds-kit-2.9.0.zip,hive-testbench-hdp3.zip,使用说明https://donny.blog.csdn.net/article/details/151230051?spm=1011.2415.3001.5331

2025-09-09

JSR107 最终规范 英文原版

关于Java Cache的规范文件

2022-03-02

基于SpringBoot3和JDK17,集成H2数据库和jpa

基于SpringBoot3和JDK17,集成H2数据库和jpa,学会用H2数据库,为了快速写出需要处理数据关系的demo。使用actuator进行动态日志级别的调整demo

2024-06-01

java+告警采集通知

告警接收demo(纯后端),基础功能:接收告警,告警通知,告警策略管理,管理功能的api。 业务场景说明见https://blog.csdn.net/weixin_43820556/article/details/138580891。 demo的技术实现使用jdk17+springboot3.2.6+mysql+mybatis+阿里druid数据源

2024-05-29

JAVA-JDK多模块示例代码

JAVA_JDK多模块示例代码

2024-02-17

Streaming 101与Streaming 102

Streaming 101与Streaming 102 Tyler Akidau的介绍流引擎的原文

2023-08-22

用java实现Thrift的demo

用java实现Thrift的demo

2023-07-27

zinc-0.3.15.tgz

zinc-0.3.15.tgz,Spark编译是可以用到

2023-07-13

屏幕录制软件 GifCam

屏幕录制软件生成gif文件 支持全屏幕录制 支持屏幕自定义选择录制 支持三段FPS选择 支持导出AVI格式

2022-09-09

JDK Linux一键安装脚本

JDK Linux一键安装脚本 Linux服务器,作者使用centos7操作系统,支持裸机安装JDK或者没有安装过JDK的用户安装JDK。 运行说明 1. 拥有**root**用户使用权 2. 将安装脚本和JDK安装包(tar.gz包)拷贝至服务器上。 3. 通过root用户 执行脚本,例如:`sh installJDK.sh gudong /opt/software`。 脚本执行参数说明: 1. 第一个参数是需要安装jdk的用户。--<font color=red>必填项</font> 2. 第二个参数是JDK安装包所在的目录(绝对地址)。--<font color=red>必填项</font> 4. 脚本提示安装成功之后,即可验证使用。安装详情,可在日志文件`installJDK_log_${yyyy_mm_dd}.log`中找到。文件在脚本同级目录。

2022-08-25

java 的HttpHelper类

提供简单的Http请求,包含GET请求,HTTP请求,暂时不包含账号认证

2022-05-13

nycTaxiRides.gz

flink-training-1.10的练习数据

2022-01-26

nycTaxiFares.gz

flink-training-release-1.10练习的数据

2022-01-26

MyBTree.java

B-tree的Java实现

2021-12-10

avrojava.rar

java中使用avro1.10.2示例

2021-07-16

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除