moba
文章平均质量分 80
阿陈123
学习使我快乐
展开
-
Hadoop环境搭建 Hbase环境配置
1、将Hbase安装包拉到/opt/software/文件夹中安装包版本:hbase-2.2.0-bin.tar.gz2、解压Hbase安装包到/opt/module/文件夹下cd /opt/softwaretar -zxvf 安装包名字 -C /opt/module3、修改系统环境变量vi /etc/profile在编辑面板中添加如下内容:export HBASE_HOME=/opt/module/hbase-2.2.0export PATH=$PATH:$HBA.原创 2021-12-19 20:17:23 · 236 阅读 · 0 评论 -
Hadoop环境搭建 Zookeeper集群部署
前提:关闭防火墙(1)查看防火墙是否关闭systemctl status firewalld(2)关闭防火墙systemctl stop firewalld(3)设置防火墙开机不启动systemctl disable firewalld1、将zookeeper安装包拉到/opt/software/文件夹中安装包版本:apache-zookeeper-3.5.7-bin.tar.gz2、解压cd /opt/module/tar -zxvf apache-z.原创 2021-12-16 15:13:49 · 1706 阅读 · 2 评论 -
Hadoop环境配置 Hive的安装与配置
一、Hive 安装1、下载安装包:apache-hive-3.1.2-bin.tar.gz上传至linux系统/opt/software/路径2、解压软件cd /opt/software/tar -zxvf apache-hive-3.1.2-bin.tar.gz3、修改系统环境变量vi /etc/profile4、添加内容:export HIVE_HOME=/opt/module/apache-hive-3.1.2-binexport PATH=$PATH:$H原创 2021-12-16 14:41:03 · 1309 阅读 · 0 评论 -
Hadoop环境搭建 MYSQL环境配置
1、将MySQL安装包拉到/opt/software/中 (直接拉进即可)2、检查当前系统是否安装过Mysql: rpm -qa|grep mariadb3、如果存在 mariadb-libs-5.5.56-2.el7.x86_64 通过如下命令卸载rpm -e --nodeps mariadb-libs 用此命令卸载 mariadb4、将其解压到 /opt/module 下命令为: tar -xf 要解压的文件 -C /opt/module5、...原创 2021-12-14 11:52:30 · 1941 阅读 · 0 评论 -
ssh 免密配置、修改hadoop配置文件
一、在每个节点生成公钥和私钥,并拷贝Hadoop100:生成公钥和私钥命令:ssh-keygen -t rsa这种情况直接敲(三个回车)将公钥拷贝到要免密登录的目标机器上 [root@hadoop100] ssh-copy-id +自己moba名 如图所示: 注:自己克隆的都需要输入,第一遍需输入密码(是自己虚拟机的密码),配置成功后就可以不需要密码了。没出错就算是成功的 (注:我的是已经配置过了的直接就显示了)当你在...原创 2021-12-14 11:23:22 · 2716 阅读 · 0 评论 -
二、Hadoop完全分布部署
集群配置注意:NameNode和SecondaryNameNode不要安装在同一台服务器注意:ResourceManager也很消耗内存,不要和NameNode、SecondaryNameNode配置在同一台机器上。一、核心配置文件配置:hadoop-env.sh(在/opt/module/hadoop-3.1.3/etc/hadoop目录下)1、Linux系统中获取JDK的安装路径:[soft863@ hadoop100 ~]# echo $JAVA_HOME/opt/modu原创 2021-12-12 15:30:20 · 398 阅读 · 0 评论 -
Hadoop伪分布部署
一、在hadoop中执行在/opt/module/hadoop-3.1.3/share/hadoop/mapreduce 目录中执行文件命令:hadoop jar hadoop-mapreduce-examples-3.1.3.jar wordcount /opt/test/input/ /opt/test/output/count.txt然后查看执行结果切换到存放执行后文件/opt/test/output/count.txt目录中查看执行后的文件二、伪分布部署(1)部署环境原创 2021-12-12 15:03:09 · 335 阅读 · 0 评论 -
Hadoop 环境搭建,创建moba、环境配置(1)
虚拟机连接Moba一、先打开虚拟机Hadoop100二、打开MobaXterm1、New session 创建新的moba2、红框内打自己虚拟机的IP地址黄框内是自己的管理员用户 root创建完成之后侧面就会出现自己所创建的IP3、 要在联网的情况下在开启 不然就会连接失败4、 连接成功就是下面的形式jdk、hadoop环境配置一、在opt文件夹下分别创建两个文件夹(software和module)命令:mkdir /opt/software...原创 2021-12-12 14:47:37 · 639 阅读 · 0 评论