- 博客(5)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 Hadoop集群动态添加删除节点
添加：1.首先配置主节点的hdfs-site.xml添加允许和拒绝加入集群的节点列表（如果允许的列表为空默认都允许连接，拒绝的列表为空则代表没有节点拒绝连接集群。拒绝列表的优先级大于允许的优先级）vi /usr/hadoop/hadoop-2.7.7/etc/hadoop/hdfs-site.xml配置文件：<property><name>dfs.hosts</name><value>/h...
2021-08-07 23:53:42
825
原创 ZooKeeper 组件安装配置
1.下载和安装 ZooKeeper [root@master ~]#tar -zxvf /opt/software/zookeeper-3.4.8.tar.gz -C /usr/local[root@master ~]#mv /usr/local/src/zookeeper-3.4.8 /usr/local/zookeeper2.ZooKeeper 的配置选项 2.1. 步骤一：Master 节点配置 （1）在 ZooKeeper 的安装目录下创建 data 和 logs 文件...
2021-07-31 11:06:15
347
原创 Hadoop完全分布式集群搭建（2.7.7）
完全分布式：真正的分布式，由3个及以上的实体机或者虚拟机组成的机群。一个Hadoop集群环境中，NameNode，SecondaryName和DataNode是需要分配在不同的节点上，也就需要三台服务器1.配置JAVA 环境1.1检查系统是否有JDK环境[[email protected]]# rpm -qa | grep jdk1.2卸载之前的JDK环境[[email protected]]#rpm -e --nodeps 1.3新建文件夹、解压、配置环境变...
2021-07-27 20:01:50
747
原创 Hadoop中hive的安装与配置
1、mysql安装配置1.1.1安装方法一：安装MySQL官方的Yum Repository1）[root@node~]# wget -i -c http://dev.mysql.com/get/mysql57-community-release-el7-10.noarch.rpm2）[root@node~]#yum -y install mysql57-community-release-el7-10.noarch.rpm3）安装MySQL服务器：[root@node~]...
2021-07-25 20:43:11
638
3
原创 Linux安装及配置Hadoop（2.7.7）（含本人踩雷解析）
1、安装配置JDK1.1检查系统是否有JDK环境[[email protected]]# rpm -qa | grep jdk1.2卸载之前的JDK环境[[email protected]]#rpm -e --nodeps +jdk环境1.3解压、重命名、配置环境变量[hadoop@node~]$sudo tar -zxvf jdk-8u241-linux-x64.tar.gz -C /usr/lib/jvm[root@node hadoop]#cd /usr/lib/jv...
2021-07-24 21:49:13
2742
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人