- 博客(4)
- 收藏
- 关注
原创 基于CentOS7的Hadoop3.2.0+Zookeeper3.5.9+Hive3.1.2+Spark2.3.0完全分布式HA的安装部署(4)Hive on Spark2.3.0安装部署
准备工作 hadoop-3.2.0 Scala2.11.8 Maven安装 在规划安装spark的master、slave1、slave2、slave3上安装maven 下载地址 https://archive.apache.org/dist/maven/maven-3/ 解压压缩包 tar xzvf apache-maven-3.2.5-bin.tar.gz 将文件夹移动至/opt目录: mv apache-maven-3.2.5 /opt/maven-3.2.5 配置阿里...
2021-08-31 19:11:24 638
原创 基于CentOS7的Hadoop3.2.0+Zookeeper3.5.9+Hive3.1.2+Spark2.3.0完全分布式HA的安装部署(3)Hive3.1.2安装部署
准备工作 hadoop-3.2.0 mysql 部署规划 序号 服务器IP 服务器主机名 安装软件 启动进程 1 192.168.21.131 master hadoop、zookeeper、hive-metastore、spark、hue QuorumPeerMain、ResourceManager、JournalNode、DFSZKFailoverController、NameNode 2 192.168.21.132 sla..
2021-08-31 18:10:02 378
原创 基于CentOS7的Hadoop3.2.0+Zookeeper3.5.9+Hive3.1.2+Spark2.3.0完全分布式HA的安装部署(2)hadoop3.2.0安装部署
目录 准备工作 新建hadoop用户以及用户组,并赋予sudo免密码权限 新建hadoop用户 将hadoop用户加入到hadoop用户组 把hadoop用户赋予root权限,让他可以使用sudo命令 hadoop用户配置免密登录 目录规划 下载、解压 配置环境变量 配置hadoop 配置hadoop运行环境 配置core-site.xml 配置hdfs-site.xml 配置mapred-site.xml 配置yarn-site.xml 配置workers 配置fair-
2021-08-30 19:34:00 741 2
原创 基于CentOS7的Hadoop3.2.0+Zookeeper3.5.9+Hive3.1.2+Spark2.3.0完全分布式HA的安装部署(1)Zookeeper3.5.9安装部署
目录 准备工作 部署规划 安装配置zookeeper 下载 安装 目录规划 将下载的二进制包移动到/opt/install目录,解压缩文件包 配置 准备工作 配置主机名 配置IP和主机名之间映射关系 配置ssh免密码登录 配置防火墙 安装jdk 部署规划 序号 服务器IP 服务器主机名 安装软件 启动进程 1 192.168.21.131 master hadoop、zookeeper、mysql、hive、spark、hu..
2021-08-30 11:46:47 345
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人