hadoop集群搭建
大数据集群搭建
龙技术
一篇诗,一斗酒,一曲长歌,一剑天涯
展开
-
HIve安装与配置
大数据集群搭建(8):Mysql安装卸载Centos7自带的mariadb[root@node3 ~]# rpm -qa|grep mariadbmariadb-libs-5.5.64-1.el7.x86_64[root@node3 ~]# rpm -e mariadb-libs-5.5.64-1.el7.x86_64 --nodeps[root@node3 ~]# rpm -qa|grep mariadb [root@node3 ~原创 2021-10-14 19:43:32 · 160 阅读 · 0 评论 -
安装配置hadoop
大数据集群搭建(7):安装配置hadoop:上传文件 /export/server解压 tar zxvf hadoop-3.3.0-Centos7-64-with-snappy.tar.gz配置环境变量 vim /etc/profileexport HADOOP_HOME=/export/server/hadoop-3.3.0export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin# 注意source /etc/profile原创 2021-10-13 15:59:47 · 286 阅读 · 0 评论 -
zookeeper安装配置
大数据集群搭建(6):zookeeper安装配置:把zookeeper包传输到/export/server/目录下下载安装包、解压tar -zxvf zookeeper-3.4.6.tar.gzmv zookeeper-3.4.6 zookeeper修改环境变量,可选操作vi /etc/profileexport ZOOKEEPER_HOME=/export/server/zookeeperexport PATH=PATH:PATH:PATH:ZOOKEEPER_HOME/binsou原创 2021-10-13 15:22:13 · 78 阅读 · 0 评论 -
虚拟机安装jdk
大数据集群搭建(5):安装jdk:创建目录:/export/server #软件安装目录/export/software #安装包的目录/export/data #软件运行数据保存的目录/export/logs #软件运行日志mkdir -p /export/servermkdir -p /export/software mkdir -p /export/datamkdir -p /export/logs上传安装包到/export/原创 2021-10-13 11:54:36 · 151 阅读 · 0 评论 -
编写分发文件脚本
大数据机器搭建(4):编写分发文件脚本:进入环境变量目录:cd /binvim cswj#!/bin/bash#1.判断参数个数if [ $# -lt 1 ]then echo Not Enough Arguement! exit;fi#2.遍历集群所有机器for host in a1 a2 a3do echo ================== $host ================= #3.遍历所有目录,挨个发送 f原创 2021-10-13 11:28:05 · 103 阅读 · 0 评论 -
集群机器间免密登录ssh
大数据集群搭建(3):集群机器间免密登录:a1:ssh-keygenssh-copy-id a1ssh-copy-id a2ssh-copy-id a3a2重复a1的操作a2重复a1的操作a3重复a1的操作原创 2021-10-13 11:13:50 · 57 阅读 · 0 评论 -
克隆虚拟机、配置克隆后的虚拟机、远程连接克隆后的虚拟机
大数据集群搭建(2)克隆虚拟机:单击右键a1,选择管理,选择克隆等待克隆同样操作克隆a3修改a2的ip和主机名:vim /etc/sysconfig/network-scripts/ifcfg-ens33修改IP地址为 192.168.10.201-重启网络服务:systemctl restart/start/stop/diable/enable network.servicevim /etc/hostname修改主机名为 a2重启 reboot原创 2021-10-13 10:49:01 · 223 阅读 · 0 评论 -
修改ip、主机名,主机名和ip映射配置,关闭防火墙,远程连接
大数据集群搭建(1)修改ip、主机名:vim /etc/sysconfig/network-scripts/ifcfg-ens33修改IP地址为 192.168.10.200重启网络服务:systemctl restart/start/stop/diable/enable network.servicevim /etc/hostname修改主机名为 a1重启 reboot主机名和IP映射配置:vim /etc/hosts 找到主机地址映射文件 h原创 2021-10-12 22:08:42 · 313 阅读 · 0 评论 -
新建虚拟机:
新建虚拟机:跟着图片操作即可:导入iso映像文件:打开虚拟机:设置root用户账号密码:密码为:123456设置用户用户名和密码:用户名:long密码:123456设置用户用户名和密码:用户名:long密码:123456[外链图片转存中…(img-AFzZYHX4-1634044192755)]然后等待安装...原创 2021-10-12 21:24:40 · 350 阅读 · 0 评论 -
虚拟机的网络配置
虚拟机的网络配置:点击菜单中的编辑点击虚拟网络编辑器打开自己电脑上的网络配置,点击以太网点击属性原创 2021-10-12 20:11:25 · 77 阅读 · 0 评论