大数据生态圈
文章平均质量分 66
大数据生态圈,hadoop、hive、sqoop、azkaban
daidavid_csdn
java开发
展开
-
impala安装包 cdh5.14.0-centos
链接:https://pan.baidu.com/s/1wIc3-9J8Lz8pxCu5edk2kA 提取码:en61 一通操作耗时2天终于下载下来了,网上找了很多资料,由于impala没有提供tar包进行安装,只提供了rpm包,而安装rpm包有很多依赖包,一般建议制作本地yum源进行安装,找了几个cdn的,根本打不开啊。最终用迅雷开会员下载两天终于成功的down下来了。特地通过百度网盘分享出来。 原始地址:(通过迅雷打开直接下载,速度很慢,还不稳定) http://archive.clouder...原创 2021-06-11 17:35:43 · 1726 阅读 · 19 评论 -
azkaban2.5.0部署centos7
一、命令: type=command Command=’echo ’ 二、单点部署模式 上传azkaban-web-server-2.5.0.tar.gz、azkaban-executor-server-2.5.0.tar.gz、azkaban-sql-script-2.5.0.tar.gz三个压缩包至服务器/bdl/azkaban目录下 解压三个压缩包 tar -zxvf azkaban-web-server-2.5.0.tar.gz -C /iflytek tar -zxvf azkaban原创 2021-08-09 16:41:13 · 1255 阅读 · 0 评论 -
centos7生产环境hadoop2.6.4集群部署配置
一、安装资源准备: 1、准备好机器: 3台机器,1台master(172.16.235.138),2台worker(172.16.235.139、172.16.235.140),注意都要设置成静态IP 2、建好目录: mkdir /bdl /bdl/software /bdl/appData /bdl/software/hadoop /bdl/software/java8 -bdl --software ---hadoop –--java8 --appData 2、准备好安装包:jdk-8原创 2021-08-09 16:22:57 · 1254 阅读 · 0 评论 -
sqoop1.4.7部署centos7
1、解压 tar -zxvf sqoop-1.4.7.bin_hadoop-2.6.0.tar.gz mv sqoop-1.4.7.bin__hadoop-2.6.0 /iflytek/sqoop1.4.7 2、配置环境变量 vim /etc/profile,添加SQOOP_HOME如下: export SQOOP_HOME=/iflytek/sqoop1.4.7 export PATH=${SQOOP_HOME}/bin:$PATH export HADOOP_CLASSPATH=$HADOO原创 2021-08-09 16:37:16 · 1250 阅读 · 1 评论 -
hive1.2.1环境搭建centos7
1、上传安装包到/bdl/software/hive目录下,并解压: tar-zxvfapache-hive-1.2.1-bin.tar.gz –C /bdl 移动并更名: mv apache-hive-1.2.1-bin /bdl/hive1.2.1 2、配置环境变量: vim /etc/profile,文件最下面添加如下内容: #sethiveenv exportHIVE_HOME=/bdl/hive1.2.1 exportPATH=${HIVE_HOME}/bin:$P...原创 2021-08-09 16:34:22 · 1276 阅读 · 0 评论