Hadoop环境搭建
文章平均质量分 80
再也不吃土豆泥
我很懒 没有简介
展开
-
Hadoop环境的搭建(九)--Hvie搭建二
Hive搭建方法二此方法将数据库安装在虚拟机上1、MySql安装1)检查当前系统是否安装过Mysql[soft863@hadoop102 ~]$ rpm -qa|grep mariadbmariadb-libs-5.5.56-2.el7.x86_64 //如果存在通过如下命令卸载[soft863 @hadoop102 ~]$ rpm -e --nodeps mariadb-libs //用此命令卸载mariadb2)将MySQL安装包拷贝到/opt/software目录下...原创 2021-12-20 16:29:53 · 341 阅读 · 0 评论 -
Hadoop环境搭建(八)--Hive的搭建一
一、Hive搭建方法一此方法需在windows安装Mysql数据库Hive搭建1)将apache-hive-3.1.2-bin.tar.gz压缩包放在/opt/software路径下2)、[root@hadoop100 ~]# cd /opt/software3)、解压apache-hive-3.1.2-bin.tar.gz到/opt/module/路径下[root@hadoop100 software]# tar -zxvf apache-hive-3.1.2-bin.tar原创 2021-12-13 10:44:59 · 1362 阅读 · 0 评论 -
Hadoop环境搭建(七)--Hive的安装
Hive的安装1、下载安装包:hive.tar.gz上传至linux系统/opt/software/路径2、解压软件cd /opt/software/tar -zxvf hive.tar.gz-C /opt/module/3、修改系统环境变量vim /etc/profile添加内容:export HIVE_HOME=/opt/module/hiveexport PATH=$PATH:$HADOOP_HOME/sbin:$HIVE_HOME/bin重启环境配置:.原创 2021-12-13 10:37:06 · 153 阅读 · 0 评论 -
Hadoop环境搭建(六)--下载MySQL
下载mysql MySQL :: Download MySQL Community Serverhttps://dev.mysql.com/downloads/mysql/5.7.html#downloads3.将其上传到linux下/opt/software中4.检查当前系统是否安装过Mysql: rpm -qa|grep mariadbrpm -qa|grep mariadbmariadb-libs-5.5.56-2.el7.x86_64 //如果存在通过如下命令卸载5. ...原创 2021-12-10 11:34:51 · 282 阅读 · 0 评论 -
Hadoop环境搭建(五)--完全分布式
完全分布式一、配置集群 Hadoop100 Hadoop101 Hadoop102 HDFS Namenode Datanode Datanode 2nn YARN Nm Rm Nm Nm原创 2021-12-10 11:14:46 · 106 阅读 · 1 评论 -
Hadoop平台搭建(四)--Ya
Ya切换到hadoop下面的etc(配置文件都在etc下面) 在hadoop中配置core-site.xmlVi core-site.xml指定HDFS中namenode的地址。将命令放到configuration标签中<configuration><!-- 指定HDFS中NameNode的地址 --><property><name>fs.defaultFS</name><value>hdfs:/...原创 2021-12-08 16:40:36 · 1192 阅读 · 0 评论 -
Hadoop环境搭建(三)
一、Hadoop的本地部署使用目标1:统计一下一个词出现的次数~首先要有包含内容的文件(1)在/opt下面创建一个目录(文件夹)test命令:mkdir test(2)在/opt/test目录下面创建input目录(文件夹)和output目录(文件夹)命令:mkdirinputmkdiroutput(3)在/opt/test/input目录下创建包含内容的文件。(其实就是在文件中编辑文字)命令:touch (文件名).txt用hadoop去执行这个文件切换到/o...原创 2021-12-06 17:29:27 · 700 阅读 · 0 评论 -
Hadoop环境搭建(二)
一、Vm虚拟机--虚拟的模拟电脑Centos--电脑要安装的操作系统(linux系统)Moba--windows软件,windows和linux传输文件要用moba软件。Jdk--linux下面的jdkHadoop--hadoop软件,linux下的软件。二、1、打开moba创建新的连接服务2、出现以下页面(1)你之前ping192.168.1.100成功没有,没有这就打不开(2)如果你是ping192.168.1.128成功,那个这个new session就要连接192原创 2021-12-06 16:52:37 · 1994 阅读 · 0 评论 -
Hadoop环境搭建(一)
分段更新原创 2021-12-06 10:51:01 · 239 阅读 · 4 评论