自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(29)
  • 收藏
  • 关注

原创 Haproxy安装部署

准备下载安装包官方下载地址如果速度慢可换成国内镜像wget https://mirrors.huaweicloud.com/haproxy/2.1/src/haproxy-2.1.5.tar.gz安装1、解压tar -xvf haproxy-2.1.5.tar.gz2、编译make TARGET=linux-glibc#如果自定义安装路径make TARGET=linux-glibc PREFIX=/home/hadmin/haproxy3、安装make install#如

2020-07-09 18:04:28 644 2

原创 Flume + Rsyslog + Haproxy日志接入

介绍Flume是一款分布式的ETL工具,以流式进行数据接入。它具有分布式、容错机制、可水平扩容的特性,并且使用简单,内置丰富的组件,通过配置文件即可实现数据的转移,不需要编写任何代码,特殊情况下需自行实现接口,编写自定义的组件。架构**Source:**数据源,数据通过Source接口进入Flume,内置多种Source,可直接与其他软件进行对接**Channel:**管道,相当于缓存,Souce中的数据经过处理后会直接进入Channel中**Sink:**输出,Sink接收Channel中的数据

2020-07-09 17:18:44 503

原创 Kafka监控之CMAK

介绍CMAK就是Kafka Manager的前身,能够管理多个集群,最主要的是可以查看Consumer Offset,方便查看消费进度。环境要求1、Kafka 0.8+2、Java 11+。新版本都是用JDK11编译的,所以需要自行下载JDK113、CMAK3.0安装包:ZIP包下载地址 GitHub项目地址说明:CMAK运行需要JDK11,在启动时候可以指定java-home,因此与系统JDK环境不会冲突准备我的部署环境:Kafka:2.2.0Java:JDK8、JDK11

2020-07-09 14:54:37 5340

原创 Flink架构原理基础知识

Flink架构基础知识

2020-04-22 15:28:36 665

原创 Flink三种安装部署方式(HA)

Flink集群安装部署

2020-04-17 18:55:36 15892 3

原创 Kafka架构原理

kafka架构原理

2020-04-14 19:26:06 198

原创 Kafka集群安装部署

Kafka集群安装部署

2020-04-13 16:11:08 195

原创 RocketMQ集群安装部署(多主多从)

RocketMQ 2m-2s-async集群安装部署

2020-04-08 16:12:28 3189 1

原创 Spark Shuffle(基础)过程

Spark Shuffle

2020-04-07 16:04:25 218

转载 Spark宽依赖和窄依赖

Spark宽依赖和窄依赖

2020-03-26 16:48:45 124

原创 Spark架构和原理

Spark基础架构知识

2020-03-26 16:36:02 702

原创 Spark集群安装部署

Spark安装部署

2020-03-25 14:21:26 1265

原创 Storm架构运行原理

Storm架构和运行原理

2020-03-23 16:41:02 301

原创 Storm集群安装部署

Storm集群安装

2020-03-23 14:41:50 161

原创 Hive数据倾斜问题

Hive数据倾斜

2020-03-19 21:40:42 246

原创 Hive高级(自定义)函数

Hive高级函数

2020-03-19 20:07:19 446

原创 Hive分区(Partition)和桶(Bucket)

Hive分区和桶

2020-03-19 16:36:12 1330 1

原创 Hive安装部署

Hive安装部署

2020-03-17 19:51:04 148

原创 Hbase缓存读写优化

Hbase二级缓存

2020-03-17 17:42:12 1363

原创 Hbase数据热点和倾斜问题

Hbase数据倾斜热点问题

2020-03-16 16:31:04 686

原创 Hbase架构原理基础介绍

Hbase基础架构原理

2020-03-15 19:04:31 135

原创 Hbase分布式安装部署

Hbase分布式安装部署

2020-03-15 16:20:00 1523

原创 MapReduce的Shuffle过程

MapReduce的Shuffle过程原理...

2020-03-14 19:31:26 5027 1

原创 Hadoop架构和原理

Hadoop架构原理

2020-03-13 19:09:27 620

原创 Hadoop集群HA环境搭建

Hadoop集群HA搭建

2020-03-12 22:16:00 219

原创 HashMap四种遍历

HashMap遍历

2020-03-11 20:00:12 117

原创 二分查找

二分查找

2020-03-11 18:58:09 73

原创 归并排序

归并排序

2020-03-10 15:53:11 67

原创 快速排序

快速排序算法

2020-03-10 14:36:57 72

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除