Charles！-CSDN博客

原创 Hadoop伪分布部署

一、在hadoop中执行在/opt/module/hadoop-3.1.3/share/hadoop/mapreduce 目录中执行文件命令：hadoop jar hadoop-mapreduce-examples-3.1.3.jar wordcount /opt/test/input/ /opt/test/output/count.txt然后查看执行结果切换到存放执行后文件/opt/test/output/count.txt目录中查看执行后的文件二、伪分布部署（1）部署.

2021-12-23 14:15:18 106

原创 Hadoop 环境搭建，创建moba、环境配置

虚拟机连接Moba一、先打开虚拟机Hadoop100二、打开MobaXterm1、New session 创建新的moba2、红框内打自己虚拟机的IP地址黄框内是自己的管理员用户 root创建完成之后侧面就会出现自己所创建的IP3、要在联网的情况下在开启不然就会连接失败4、连接成功就是下面的形式jdk、hadoop环境配置一、在opt文件夹下分别创建两个文件夹(software和module)命令：mk...

2021-12-23 14:12:02 205

原创 ssh 免密配置、修改hadoop配置文件

一、在每个节点生成公钥和私钥，并拷贝Hadoop100：生成公钥和私钥命令：ssh-keygen -t rsa这种情况直接敲（三个回车）将公钥拷贝到要免密登录的目标机器上 [root@hadoop100] ssh-copy-id +自己moba名如图所示：注：自己克隆的都需要输入，第一遍需输入密码（是自己虚拟机的密码），配置成功后就可以不需要密码了。没出错就算是成功的（注：我的是已经配置过了的直接就显示了）当你在hadoop100里...

2021-12-23 14:00:29 209

原创问题：vi命令丢失，解决方法

如果vi等命令丢失的同学可以在moba里面找到/etc/下面的profile文件。下载到自己桌面上，并用记事本打开用记事本打开进行编辑找到出错的位置然后再将这个文件再次拖回到原来的文件位置。source /etc/profile如果source不能用，就重启服务...

2021-12-16 14:27:26 1000

原创修改迅windous网络配置防火墙关闭 ring通体外网

二、修改windows的网络配置在cmd中输入ping 192.168.1.100如果显示超时①虚拟机中的ip不对②出现active (running)，虚拟机中防火墙没有关掉三、防火墙的开关1.防火墙状态的查看systemctl status firewalld关闭防火墙systemctl stop firewalld开机防火墙不启动systemctl disable firewalld...

2021-12-12 15:00:09 433

原创 hadoop环境安装步骤

1.安装VM虚1.安装VM虚拟机安卓centos2.修改主机名，ip地址，映射3.修改迅windous网络配置防火墙关闭 ring通体外网4.连moba5.jdk.hadoop环境安装配置6.Hadoop本地，伪分布7.克隆（完整路径）完全分布8.群起9.mysql,hive 安装配置10.hbase安装配置拟机安卓centos2.修改主机名，ip地址，映射3.修改迅windous网络配置防火墙关闭 ring通体外网4.连moba5.jdk.had

2021-12-12 14:42:55 1771

原创修改主机名，ip地址，映射

修改ip地址（当前虚拟机的ip地址）命令：vi /etc/sysconfig/network-scripts/ifcfg-ens33修改为静态获取ipBOOTPROTO=”static”添加IP地址IPADDR=192.168.1.100添加网关GATEWAY=192.168.1.2添加子网掩码NETMASK=255.255.255.0添加域名解析器DNS1=192.168.1.2修改ip地址与主机名的映射命令: vi /etc/hosts添加对应的ip和..

2021-12-12 14:42:08 3787

m0_64965997的博客