自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(50)
  • 收藏
  • 关注

原创 5.kafka集群安装

zookeeper 版本3.1.0。

2025-09-02 15:55:21 257

原创 3.kafka常用命令

在 0.9.0.0 之后的 Kafka,出现了几个新变动,一个是在 Server 端增加了 GroupCoordinator 这个角色,另一个较大的变动是将 topic 的 offset 信息由之前存储在 zookeeper 上改为存储到一个特殊的 topic(__consumer_offsets)中。本文测试版本:kafka_2.12-3.1.0。

2025-08-30 17:05:07 287

原创 3.ssh免密登录

将.ssh目录下的id_rsa.pub,复制到目标服务器的.ssh/authorized_keys.如果目标服务没有authorized_keys文件,就执行下面命令。这里需要输入 10.128.15.213的密码。从test01免密调转到test02。输入命令后,一路回车,不用输入。将上面的命令操作换成手动复制。如果还没有,就手动创建一个。

2025-06-27 11:04:18 451

原创 16.大数据监控

监控主要构成。软件版本。

2025-06-19 14:26:46 499

原创 7.atlas安装

软件版本参考:hl=zh-cn由于hive3.1.3不完全支持jdk8,所以将hive的版本调整成4.0.1。这个版本没有验证过,需要读者自己抉择。所有的软件都安装再/opt/apps下。

2025-05-30 16:58:26 951

原创 11.spark源码编译

构建环境:jdk 11scala 2.12maven 3.9spark 3.5。

2025-05-29 15:32:34 873

原创 3.maven settings.xml

里面配置有代理,如果不需要,可以注释。给一个仓库比较全的配置文件。

2025-05-09 15:42:24 273

原创 12.hbase 源码构建

构建环境:jdk 11maven 3.9。

2025-05-08 13:25:18 242

原创 13.jupyter安装

安装前提:1.在一台hadoop集群的客户端上安装。2.机器上安装了anacoda.3.有spark客户端。

2025-05-08 10:07:21 281

原创 2.maven 手动安装 jar包

有的时候,maven仓库无法下载,可以手动安装。本文以pentaho-aggdesigner-algorithm-5.1.5-jhyde.jar为例。

2025-05-02 16:15:34 513

原创 6.atlas源码构建

软件版本参考:hl=zh-cn构建版本为2.2.0.源码来源于github atlas。

2025-03-06 10:02:57 437

原创 2.mysqldump常见用法

mysqldump的常见用法。mysql版本:8.0.35。

2025-02-24 14:29:27 223

原创 4.hive集群搭建

软件版本参考:hl=zh-cn由于hive3.1.3不完全支持jdk8,所以将hive的版本调整成4.0.1。这个版本没有验证过,需要读者自己抉择。集群规划。

2025-02-21 10:07:17 543

原创 3.hadoop3.3.6 HA集群搭建

软件版本参考:hl=zh-cnhadoop HA, 主要分为HDFS的HA和YARN的HA。集群规划。

2025-02-17 16:05:47 1020

原创 2.zookeeper3.8.4安装

zookeeper 版本3.8.4。

2025-02-14 16:48:15 459

原创 1.hadoop3.3.6集群搭建

软件版本参考:hl=zh-cn集群规划。

2025-02-12 14:06:19 535

原创 Nacos 2.2.3 源码启动

nacos 的控制台是 nacos-console 这个工程, 启动 参建加入 -Dnacos.standalone=true。之前编译了2.0.3的源码,感觉不是很好看,又有点过时。重新编译2.2.3.新的版本,比老版本编译容易多了。然后切换分支 到 2.2.3。好了,可以愉快的学习了。

2024-11-04 17:23:50 462

转载 5.Http常见状态码

引用文章HTTP状态码(HTTP Status Code)状态码并不是每个都有,为了后期扩展。

2024-08-23 08:53:56 99

原创 4.jinfo使用

jinfo(Java Virtual Machine Configuration Information)是JDK提供的一个可以实时查看Java虚拟机各种配置参数和系统属性的命令行工具。使用jps命令的-v参数可以查看Java虚拟机启动时显式指定的配置参数,如果想查看没有显式指定的配置参数就可以使用jinfo命令进行查看。另外,jinfo命令还可以查询Java虚拟机进程的System.getProperties()的内容。jps常用。

2024-08-09 13:17:43 1159 1

原创 3. jstat使用

jstat位于java的bin目录下,主要利用JVM内建的指令对Java应用程序的资源和性能进行实时的命令行的监控,包括了对Heap size和垃圾回收状况的监控。jstat可以用来监视VM内存内的各种堆和非堆的大小及其内存使用量。jstat -class pid:显示加载class的数量,及所占空间等信息。jstat -compiler pid:显示VM实时编译的数量等信息。jstat -gc pid:可以显示gc的信息,查看gc的次数,及时间。

2024-08-06 14:55:22 860

原创 1.隐形字符串带来的问题

easyexcel 文件导入,隐形字符串,导致Long类型转换失败。

2024-07-30 11:13:56 856

原创 4.制作的docker镜像

制作镜像,不要一次搞太大,不然可能推不上去。可以多次提交,多层。最近工作需要,制作docker镜像,用做构建使用。然后在容器里面安装,此处省略。好了,到此制作镜像,推送完成。1.拉取基础镜像ubuntu:22.04。还有其他方式的登录,可以去google.如果安装软件失败,可以更新下软件。2.运行ubuntu容器。4.复制资源到容器中。

2024-06-28 10:51:14 348

原创 3.压缩和解压缩命令

列举下linux中常用的压缩和解压缩命令。

2024-06-18 10:43:15 229

原创 2.spring cloud gateway 源码编译

spring cloud gateway编译。

2024-06-13 17:42:41 655

原创 1.gradle项目突然出现circular reference

将问题定位为gradle构建的问题,而且换了一个电脑,构建运行成功,把另外一个电脑构建成功的jar包,拿到运行失败的电脑上可以正常运行。(同样的gradle版本,同样jdk版本,同样的操作系统版本)切换k8s环境的时候,gradle构建镜像,构建成功,在k8s运行不起来。同样的代码,同样的gradle版本,同样的操作系统版本,构建的项目运行不一样。将gradle的jar包单独拿出来运行,运行失败,报上面的错。跟同事讨论,以前遇到类似的问题,解决循环依赖就可以了。在切换环境的时候,出的问题,没有代码修改。

2024-05-23 16:24:32 605

原创 Ubuntu终端多窗口分屏Terminator优化

Ubuntu终端多窗口分屏Terminator页面不美观,可以使用以下步骤优化。1.创建或者修改配置文件。2.config 内容。

2024-04-03 19:41:28 912

原创 mybatis plus分页

分页过程中,出现total为0的情况。可以如下解决。

2024-02-18 13:17:27 399

原创 Nacos 2.0.3 源码启动

可以填加 Protocol Buffers maven 插件, 然后在 idea 右侧 protobuf 下 点击 compile。nacos 的控制台是 nacos-console 这个工程, 启动 参建加入 -Dnacos.standalone=true。很不幸,java: 程序包com.alibaba.nacos.consistency.entity不存在。这个包在 nacos-consistency 工程, 需要对 proto 进行编译生成 java 类。在最外层的 pom 文件 执行。

2023-05-21 16:57:48 376

原创 常用1-yaml语法

yaml语法语法格式使用空格作为缩进不允许使用tab键,只允许使用空格一般开通缩进2个空格字符后缩进一个空格,比如冒号,逗号等使用#注释,行注释

2022-04-03 17:43:52 360

原创 3.git 将本地仓库推到远程

1.创建一个本地仓库git init2.把文件添加到版本仓库中git add .3.生成提交记录git commit -m "git init"4.关联到远程库git remote add origin 你的远程库5.获取远程库与本地库合并git pull --rebase origin master如果远程库不为空,必须执行这一步6.将本地仓库推送到远程git push -u origin master如果没有配置免密,需要输入账号和密码。...

2022-02-16 13:31:48 644

原创 初识kafka

初识kafka初识kafka新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入初识kafkakafka是由LinkedIn公司开发的一个多分区,多副本的基于zk协调的分布式消息系统,现在已经捐给apache基金会。目前ka

2020-06-21 18:21:53 206

原创 1.jdk8时间处理

常用jdk8时间处理1.格式化时间2020-05-20T17:29:06+08:00 LocalDateTime dateTime = LocalDateTime.now(); System.out.println(dateTime); String effecticeTime = "2020-05-20T17:29:06+08:00"; // SimpleDateFormat format = new SimpleDateFormat("yyyy-MM-dd'T'HH:mm:s

2020-06-11 15:24:21 359

原创 java jstack性能排查

top使用top使用参考文献top使用top参考文献

2020-05-08 10:59:04 262

原创 1.kafka简介

1.kafka的作用1.消息系统2.存储系统3.流式处理平台

2020-04-27 23:06:11 216

原创 1.git基本配置

1.配置git姓名和邮箱git config --global user.name "your name"git config --global user.email "your email"2.查看git config -l

2020-04-09 00:18:21 201

原创 2.linux git显示分支名

@linux git显示分支名linux git显示分支名解决linux里面git不会显示分支名。1.在 .bash_profile 里面添加# display the git branch name function git-branch-name {git symbolic-ref --short -q HEAD 2>/dev/null}function git-bran...

2020-04-05 12:05:52 1386

原创 花1-ElasticSearch安装ik

花1-ElasticSearch安装ik花1-ElasticSearch安装ik联网安装ES,注意把命令后面的版本号改成对应的ES版本号。bin/elasticsearch-plugin install https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v6.1.1/elasticsearch-analy...

2020-03-27 17:39:02 191

原创 linux升级内核

linux升级内核linux升级内核,是一个高危操作,升级前做好系统和数据备份。避免失败,搞坏机器,影响到数据。生产环境操作前,做好各种测试和数据备份。参考博客CentOS 7 升级 Linux 内核,操作前请仔细阅读参考的博客。1.查看内核版本uname -r3.10.0-514.26.2.el7.x86_642.更新仓库yum -y update3.启用 ELRepo 仓...

2019-12-08 12:00:36 535

原创 centos7-minimal版本服务器搭建

centos7-minimal版本服务器搭建说明:本文假设阅读者都是比较熟悉linux虚拟机服务器搭建的,如果不熟悉,建议先用basic-server。1.安装安装minimal版本的centos72.配置网络vi /etc/sysconfig/network-scripts/ifcfg-ensxx使用vi,此时未安装vim。后面的文件,可能是类似文件。 BOOTPROTO...

2019-12-08 11:25:31 1135

原创 1.走进ElasticSEarch

elasticsearch写在前面的话本人最近在学习elasticsearch,会写个系列的学习笔记。学习的基础是张超老师的《Elasticsearch源码解析与优化实战 》,附上jd购买链接Elasticsearch源码解析与优化实战。写作时有改动。行文方式:摘抄书中比较重要的知识,再根据笔者自己的理解做一定改动,使之更加丰富、完整。小熊批注代表作者的理解,思考代表作者的思考,希望也...

2019-10-20 22:24:07 289

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除