大数据
文章平均质量分 71
JustinXTT
菜鸟一枚,还需努力~
展开
-
【Kylin】【Hive】【hive-testbench】tpch 数据集生成失败,提示报错class org.apache.hadoop.hdfs.web.HftpFileSystem ...
hive-testbench 需要适配支持 hadoop 3.x 及以上版本原创 2022-08-29 14:54:58 · 754 阅读 · 0 评论 -
【CDH】cdh 安装新节点卡在“Acquiring installation lock...“
Description在新安装机器client上节点,出现卡在了 “Acquiring installation lock...”Root Cause当前安装节点有锁!Solution删除 需要安装机器节点上的 /tmp/.scm_prepare_node.lockrm -rf /tmp/.scm_prepare_node.lock...原创 2021-12-09 11:37:14 · 937 阅读 · 0 评论 -
【Kylin4】【AWS】【EMR-5.33.0】 Aws云上部署Kylin4
目录DescriptionStepsPrerequisite for EMR ClusterCreate VPCCreate Subnet and associated with VPC Which Created uponCreate Internet GatewayCreate Route TableCreate Security GroupCreate Rds (Optional)Init Emr 5.33CLIUIInstall kyl...原创 2021-09-07 11:27:00 · 834 阅读 · 9 评论 -
【Hbase】【CDH】hbase shell 登陆报错:zookeeper.RecoverableZooKeeper: ZooKeeper exists failed after 4 attempt
前言在Cloudera manager 环境中,给某一个client节点上添加一个新的hbase gateway。但是也就是这个时候,在client节点上执行命令[root@client ~]# hbase shell提示文章标题的错误.Description在安装了hbase client上 gateway ,进行登陆hbase,发现以下报错:[root@client ~]# hbase shell2020-06-09 16:36:59,057 INFO [main]原创 2020-06-09 17:09:16 · 1328 阅读 · 0 评论 -
Centos7上搭建hadoop2.7分布式集群环境实验记录
ps:因为实验需要和学习过程,为了更好学习hadoop,所以为了方便记录以及供学习交流,特此做一份hadoop搭建实验记录。1.准备三台虚拟机。2.修改三台虚拟机的主机名分别为master,slave01,slave02然后修改hosts文件:vi/etc/hosts,然后添加如下内容:(三台主机都要执行该步骤)172.16.136.43 mMaster172.16.136.39 mSlave0...原创 2018-04-15 11:33:27 · 730 阅读 · 0 评论 -
【坑死个人的网上复制黏贴的解决方法】hadoop native本地依赖库问题解决!
rt,网上的大部分的分享的解决方法的经验确实能让很多人搞定,但总是有些人复制黏贴别人的解决方法,也不知道自己是否复现了问题以及解决,反正我能看见的全都是相关问题关键词完全一样,百度出来的。大家都可以试试,有没有这种体会,尤其有在CSDN上的。而在这个刨坑了hadoop native本地安装库上,我的天,要么去在log4j日志提醒当中设置下个显示权限,不让看,要么就是去编译下库,我只是个初学者啊...原创 2019-02-22 10:39:35 · 1484 阅读 · 0 评论 -
【大数据】HDFS操作过程使用命令移除某个文件路径出错,提示“Permission Denied user =root, access = write”
自己在运行和操作kylin的过程当中,需要删除某个文件夹,结果提示报错如下:[root@sandbox Kyligence-Enterprise-3.3.0-Beta-hdp]# hdfs dfs -rm -r /kylin19/07/01 05:59:59 INFO fs.TrashPolicyDefault: Namenode trash configuration: Deletion...原创 2019-07-01 15:18:48 · 2098 阅读 · 0 评论