自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(43)
  • 收藏
  • 关注

原创 spark sql-Broadcast Hash Join、SMB-JOIN

brocast join、SMB-join

2023-12-05 09:54:54 792

原创 spark sql基于CBO的优化

SparkSql RBO

2023-12-05 09:15:50 696

原创 spark sql基于RBO的优化

SparkSql、RBO

2023-12-04 23:59:11 767

原创 flink集群部署

flink集群部署

2023-10-06 07:08:29 724

原创 spark on hive

spark on hive

2023-10-05 18:10:28 1262

原创 spark集群搭建

虚拟机配置bigdata-hmaster 192.168.135.112 4核心 32GBbigdata-hnode1 192.168.135.113 4核心 16GBbigdata-hnode2 192.168.135.114 4核心 16GBspark常用端口:8081:主界面18080:历史服务,该配置在配置文件中指定hosts配置,且三台机器中master节点能够通过ssh免密登录其它两台机器。

2023-10-05 17:37:49 371

原创 ReentrantLock详解

ReentrantLock

2023-10-05 12:48:13 108

原创 flink的状态和容错

RocksDB状态量受限于本地磁盘的大小,但是rocksdb支持增量的快照,对于大量变化的缓慢状态应用来说是很好的。假设存在一个序列,序列中的元素是具有不同颜色与形状的图形,我们希望在序列里相同颜色的图形中寻找满足一定顺序模式的图形对(比如在红色的图形里,有一个长方形跟着一个三角形)。因为flink不具备跨task的通信,所以给予了广播流的读写权限,这样在所有task中都能够看到,并且要求对这些元素的处理是一致的,那么所有的task得到的broadcast sate是一致的。

2023-09-25 11:42:21 120

原创 java-ThreadLocal

ThreadLocal用来创建线程局部变量。线程局部变量是每个线程都有自己独立的一个变量副本,而这个副本对其他线程是不可见的。这意味着每一个线程都可以在不影响其他线程的情况下,修改自己线程的副本值。ThreadLocal的实例通常是在类中以静态字段的方式存在的。ThreadLocal的主要用途是解决多线程环境下的数据同步问题,使得每个线程都拥有独立的数据副本。因此,ThreadLocal通常用于在一个线程中保存信息,而在其他线程中不需要或者不应该访问这些信息。// 创建一个线程局部变量。

2023-09-22 07:29:10 48

原创 flink窗口相关

flink窗口

2023-09-21 14:24:15 71

原创 flink关于watermark的生成

flink关于watermark

2023-09-21 06:36:01 160

原创 mysql引擎讲解以及表结构、索引相关的优化

mysql查询优化

2023-09-15 16:01:09 60

原创 spark应用优化与调优

spark优化

2023-09-08 15:02:23 121

原创 spark结构化数据api

spark

2023-09-08 14:57:41 57

原创 java关键字:volatile、synchronized

volatile、synchronized

2023-09-03 10:01:03 72

原创 hive文件存储格式orc和parquet详解

hive orc parquet

2023-09-02 09:41:11 2967

原创 java线程池详解

java、threadPool

2023-09-02 00:32:48 180

原创 jvm虚拟机

jvm内存模型

2023-08-28 12:51:45 85

原创 hive基础知识

hive、大数据

2023-08-28 11:07:57 63

原创 kafka的架构和组成,kakfa生产者详解

kafka生产者

2023-08-15 23:00:45 222

原创 docker部署zookeeper+kafka

docker、zookeeper、kafka

2023-08-14 15:00:55 98

原创 docker部署kibana

kibana版本:7.9.3。ip替换成es所在主机ip。

2023-08-14 14:44:17 59

原创 docker部署elasticsearch

elasticsearch

2023-08-14 14:42:31 54

原创 docker部署nginx

docker、nginx

2023-08-14 14:26:44 33

原创 hadoop集群部署

linux、hadoop

2023-08-14 13:32:13 103

原创 linux部署kafka集群

linux、kafka

2023-08-12 10:59:28 137 1

原创 centos7部署zookeeper集群

linux、zookeeper

2023-08-11 22:20:08 64 1

原创 linux配置ssh免密登录

linux、ssh

2023-08-11 21:48:35 128 1

原创 docker-compose部署minio

docker、docker-compose、minio

2023-08-11 20:45:20 281 1

原创 centos7安装jdk1.8

jdk1.8

2023-08-11 17:42:25 73 1

原创 docker-compose部署nginx

docker、docker-compose、nginx、反向代理

2023-08-11 16:51:21 1278 1

原创 docker-compose部署es+kibana

docker、docker-compose、elasticsearch、kibana

2023-08-11 14:56:04 390 1

原创 docker-compose部署redis

doker-compose、redis

2023-08-11 13:08:55 823 1

原创 docker-compose部署portainer

docker-compose、portainer

2023-08-10 22:18:37 167 1

原创 ingress-controller安装

k8s、ingress-nginx

2023-08-10 18:37:13 212 1

原创 k8s可视化面板,kuboard部署

linux、k8s、kuboard

2023-08-10 18:21:41 984 1

原创 k8s集群安装

k8s、docker、linux

2023-08-10 17:34:45 44 1

原创 linux安装docker,docker-compose

linux、docker、docker-compose

2023-08-10 16:59:38 70 1

原创 centos7安装redis

centos7安装redis文章目录centos7安装redis一、创建安装目录二、需要用到的总命令三、修改配置文件四、指定配置文件运行并查看进程五、测试一、创建安装目录mkdir /mydata/app/redis 二、需要用到的总命令 1. cd /mydata/app/redis 2. wget http://download.redis.io/releases/redis-5.0.0.tar.gz 3. tar -zxvf redis-5.0.0 4. cd redis

2021-09-26 11:33:09 111

原创 springboot+spring-data-jpa并实现分页

1.项目的整个结构2.需要引入的spring-data-jpa的依赖为<!-- 版本为2.4.5最新版本--> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-jpa</artifactId>

2021-04-29 23:15:18 465

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除