1基于虚拟机.hadoop集群搭建(CentOS7)
文章平均质量分 85
1
YANG_xiao_QI
这个作者很懒,什么都没留下…
展开
-
1.【虚拟机】配置虚拟机网络及.net模式网络不通解决办法
1.启用网卡设置固定ipvi /etc/sysconfig/network-scripts/ifcfg-ens33Master:修改:BOOTPROTO=static添加:IPADDR=192.168.1.4NETMASK=255.255.255.0GATEWAY=192.168.1.1DNS1=114.114.114.114修改:ONBOOT=yes2.编辑完配置网卡配置文件后执行重启网卡命令:systemctl stop NetworkManagerservice原创 2020-11-15 22:39:57 · 1482 阅读 · 0 评论 -
2.【hadoop集群搭建】安装JDK和hadoop (rz上传命令安装)
1.文件上传到虚拟机的准备(1)安装FTP,连接虚拟机IP,上传包(推荐)(2)rz命令,XShell或CRT执行下载命令安装rz,便于往分布式文件系统上传安装包。yum install -y lrzsz2.安装依赖包glibcyum install glibc.i6863.创建文件夹并进入mkdir /hadoopcd /hadoop4.上传JDK安装包rz或FTP连接虚拟机...原创 2020-11-16 14:04:08 · 2862 阅读 · 0 评论 -
3.【hadoop集群搭建】配置Hadoop环境变量
1.进入/hadoop目录,执行rz命令cd /hadoop/rz #上传hadoop 安装包2.解压hadoop安装包tar -xvzf /hadoop/hadoop-2.6.0.tar.gz原创 2020-11-16 16:36:31 · 11312 阅读 · 2 评论 -
4.【hadoop集群搭建】(更改主机名)配置host列表,ssh免密登录
1、配置主从节点主机名称用master克隆两台虚拟机slave1,slave2。更改IPvi /etc/sysconfig/network-scripts/ifcfg-ens331)在192.168.1.4主机执行hostnamectl set-hostname master2)在192.168.1.6主机执行hostnamectl set-hostname slave13)在192.168.1.7主机执行hostnamectl set-hostname slave22、配原创 2020-11-27 17:36:47 · 1362 阅读 · 0 评论 -
5.格式化master集群(&启动集群)
1)删除slave1、slave2节点历史数据两个节点分别执行 (删除hadoopdata)rm -rf /hadoop/hadoopdata/已配置集群 (这是我自己的文件路径)rm -rf /home/yrq/hadoopdata2)在192.168.1.4主机执行格式化hdfs namenode -format3)在192.168.1.4主机执行启动start-all.sh关闭stop-all.sh4)jps查看master进程,slave1和slave原创 2020-12-03 21:29:50 · 1318 阅读 · 0 评论 -
windows和Linux端口号被占用的解决办法
两个系统【windows版】1.找到使用的端口号2.找到被占用的端口号的PID后面的数字3.查看哪个程序占用端口4.结束程序或者3.4步可以从任务管理器操作【Linux版】1.CentOS系统下安装lsof命令2.以root 用户来执行`lsof -i `命令2.查看指定某一端口的占用情况【windows版】用“netstat ”查看端口状态,在Windows中,可以在命令提示符下使用“netstat ”查 看系统端口状态,可以列出系统正在开放的端口号及其状态Netstat -a -e -n -o原创 2021-08-10 17:01:51 · 1233 阅读 · 1 评论