自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(11)
  • 收藏
  • 关注

原创 JedisCluster Client 操作集群 Too many Cluster redirections?

具体缓存的集群信息可以打印出来看看。

2023-07-18 10:43:54 540 1

原创 flink1.15.1 Could not instantiate the executor. Make sure a planner module is on the classpath

Could not instantiate the executor. Make sure a planner module is on the classpath

2022-08-18 10:30:38 1235 1

原创 Flink No operators defined in streaming topology. Cannot execute.

Flink Exception in thread "main" java.lang.IllegalStateException: No operators defined in streaming topology. Cannot execute.

2022-07-27 18:27:39 3663

原创 大数据技术之Kettle

入门级别

2022-07-08 18:03:35 4000 1

原创 拉链表思路

拉链表思路主要是想知道维度信息的变化历史,不然的话可以存入Hbase中。为什么会有拉链表主要是针对离线数仓的维度表数据,变化缓慢的数据,比如用户的基本信息,地区维度信息,商品维度信息等等,这些数据可能一周、一个月都没有变化。但是在数仓中要用这些数据,如果是每天全量导入,并且维度表信息数据量巨大,就会影响数仓的性能,浪费大量的磁盘。mysql中维度表中的字段:基本信息+(创建时间+修改时间),每天用sqoop导入时就只要where修改时间是今天的。数仓中ods层中的维度信息:基本信息+(创建时间+修

2021-12-07 15:36:06 293

原创 数据倾斜解决思路--适合有思路

数据倾斜解决思路--有经验的

2021-12-03 11:11:10 346

原创 事务情况隔离级别

多事务的情况脏读:事务A读取了事务B刚刚更新的数据,但是事务B回滚了,这样就导致事务A读取的为脏数据 ,我们称之为脏读。如公司某账务人员更新公司入账表时,在DML语句中的数字后面少添加了一个0,但是未提交,然后吃饭,吃饭回来,发现错误,然后更正后做了提交。而在吃饭期间,老板要求秘书查看一下报表,秘书看到的是少个0的数据。这就是脏读。不可重复读:事务A读取同一条记录两次,但是在两次之间事务B对该条记录进行了修改并提交,导致事务A再次读取的数据不一样。它和脏读的区别是,脏读是事务A读取了另一个事

2021-08-18 16:55:08 62

原创 Zookeeper简介和下载

zookeeper简介ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。ZooKeeper的目标就是封装好复杂易出错的关键服务,将简单易用的接口和性能高效、功能稳定的系统提供给用户。ZooKeeper包含一个简单的原语集,提供Java和C的接口。ZooKeeper代码版本中,提供了分布式独享锁、选举、队

2021-08-03 12:10:19 105

原创 饿汉懒汉模式

饿汉单例模式是立即加载的方法,无论是否用到这个对象,都会加载。如果在构造方法里写了性能消耗较大,占时比较久的代码,比如建立与数据库的连接,那么就会在启动的时候感觉稍微有些卡顿。懒汉单例模式是延迟加载的方式,只有使用的时候才会加载。并且有线程安全问题。使用懒汉式,在启动的时候,会感觉到比饿汉式略快,因为并没有做对象的实例化,但是在第一次调用的时候,会进行实例化操作,感觉上就略慢。public class Demo1 { public static void main(String[] args

2021-08-03 11:24:27 70

原创 Comparable与Comparator

Comparable是一个接口,一个类实现了这个接口,表示自己实现了一个和自己对象进行大小比较的的规则。Comparable中只有一个方法compareTo(),返回值是int型的。[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-xF4rnOyy-1627886829792)(…/…/…/AppData/Roaming/Typora/typora-user-images/image-20210802095733926.png)][外链图片转存失败,源站可能有防盗链机制,建

2021-08-02 14:47:43 74

原创 1、下载zookeeper安装包

1、下载zookeeper安装包进入zookeeper官网选择下载链接如下: https://www-eu.apache.org/dist/zookeeper/选择最新稳定版本3.5.5,选择下载apache-zookeeper-3.5.5-bin.tar.gz,文件说明:1)apache-zookeeper-3.5.5.tar.gz 源码包2)apache-zookeeper-3.5.5-bin.tar.gz 安装包2、vim修改配置文件 /etc/hosts ,增加如下内容:192.1

2021-07-26 09:31:19 2690

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除