![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
ITZHIHONH
这个作者很懒,什么都没留下…
展开
-
ARM下Flink1.8.1编译,Could not resolve dependencies for project
flink编译过程中下载的依赖包很多,在apache-maven-3.5.4/conf/settings.xml配置ali和huawei两个mirror,下载会加速不少。<mirror><id>nexus-aliyun</id><mirrorOf>*,!hadoop</mirrorOf><name>Nexu...原创 2020-05-06 17:40:02 · 1574 阅读 · 1 评论 -
CDH6 中 Hive2.0中文乱码问题解决
问题现象,表注释,数据库注释中文都为乱码:desc t_dm_test;address string ????rowtime string ??????????inserttime string ...原创 2020-04-08 15:53:03 · 740 阅读 · 3 评论 -
CHD6.3环境中,集中kylin3.0,错误解决.NoClassDefFoundError: org/apache/commons/configuration/ConfigurationE
1、下载文件因为CDH环境为6.3版本,所以选择/apache-kylin-3.0.1-bin-cdh60包从国内镜像下载wget https://mirrors.tuna.tsinghua.edu.cn/apache/kylin/apache-kylin-3.0.1/apache-kylin-3.0.1-bin-cdh60.tar.gz解压,我解压到/opt/kylin/a...原创 2020-04-01 10:32:01 · 981 阅读 · 0 评论 -
Scala闭包使用与理解
闭包的理解,开发java的同学需要转个弯理解,以下例子很好的解释了一个简单闭包的使用。在java中可以理解为一个内部的函数,在scala中直接简化为一个内部函数了。这个内部函数可以直接作为结果返回给调用者;其实和工厂方法有点类似,根据入参数的值,返回不通的对象,这儿是返回不同的方法:package com.atguigu.wcobject ClosePackage { de...原创 2020-03-17 14:24:11 · 410 阅读 · 0 评论 -
Hive加载HDFS文件权限失败:Permission denied by sticky bit: user=hive
修改对应的数据仓库的权限为777sudo -u hdfs hadoop fs -chmod 777 /user/hive/warehouse/*.db虽然解决了问题,但是简单粗暴,生成环境中还是不推荐这种方法。其他推荐方法,请参考:http://www.huqiwen.com/2013/07/18/hdfs-permission-denied/...原创 2020-02-20 10:27:55 · 2726 阅读 · 0 评论 -
CDH环境配置HiveHook报错:Could not initialize class org.apache.atlas.hive.hook.HiveHook 解决
Hive启动时,已经加载所有的jar文件,但是还是报错Could not initialize class org.apache.atlas.hive.hook.HiveHook,原因时初始化的时候缺少atlas-application.properties文件,官方教程时copy文件到hive的conf,但是CDH环境每次启动Hive时,会复制一份conf到process目录下,导致配置确...原创 2020-02-19 23:21:51 · 5574 阅读 · 3 评论