大数据
大数据问题排查
chenxyz707
这个作者很懒,什么都没留下…
展开
-
Flink中的类加载机制
Flink中的类加载机制Flink中的类加载机制Flink中的类加载配置项类图关系parent-first类加载child-first类加载如何处理类冲突呢Flink中的类加载机制Flink中的类加载配置项Flink中关于类加载有以下配置选项配置项默认值说明classloader.resolve-order“child-first”类加载顺序。child-first优先从Flink任务(jar包)中加载类,parent-first优先从Flink集群加载类。class原创 2020-10-13 08:49:23 · 4785 阅读 · 3 评论 -
org.apache.flink.util.FlinkException: JobMaster for job failed,Flink集群无法启动
org.apache.flink.util.FlinkException: JobMaster for job failed,Flink集群无法启动某天集群Zookeeper因为OOM挂掉,引起基于此ZK作HA的Flink集群出现故障。在Zookeeper恢复后,重启Flink集群(版本1.7.2)时出现如下报错,导致集群无法正常启动。ERROR org.apache.flink.runtime.entrypoint.ClusterEntrypoint - Fatal error oc原创 2020-06-01 14:41:48 · 6491 阅读 · 0 评论 -
Hive查询变慢及无响应问题分析
Hive查询变慢及无响应问题分析问题描述问题分析问题解决问题描述某任务使用Hive作数据查询,连续几天任务越来越慢。后面甚至出现了执行失败的错误。问题分析经排查发现连接机器A上Hive的任务运行平稳,出现问题的任务都是连接的B机器的,观测到B机器上的Hive进程CPU过高。我们查询到4154对应的进程是HiveServer2。通过Cloudera Manage查看B机器的负载情况,...原创 2020-04-27 22:27:56 · 6963 阅读 · 3 评论