Linux安装hive环境变量
1,先安装好数据库
https://blog.csdn.net/weixin_44899752/article/details/123610602?spm=1001.2014.3001.5501
2,数据库安装好之后安装hadoop的环境,我这里采用的是hadoop的伪分布式安装,
下面来安装hadoop的伪分布式
1)先找到你的hadoop安装包
2,解压安装包
tar -xzvf hadoop-2.7.3.tar.gz
3,hadoop解压出来后,重命名一下
4,hadoop重命名之后,接下来就要修改配置文件
先切换到hadoop的配置文件目录
cd hadoop/etc/hadoop
接下来修改各个配置文件
1.修改hadoop-env.sh文件
export JAVA_HOME=jdk路径
2.修改core-site.xml文件
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://mymaster:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/opt/soft/hadoop/data/tmp</value>
</property>
</configuration>
3.修改hdfs-site.xml文件
因为伪分布式是一台机器,所以写1即可
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>
4.修改mapred-env.sh文件 修改export JAVA_HOME=JDK路径
然后复制mapred-site…xml.template文件
cp mapred-site.xml.template mapred-site.xml
最后修改mapred-site.xml文件
<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
</configuration>
5.修改yarn-env.sh文件 修改export JAVA_HOME=JDK路径
修改yarn-site.xml文件
<configuration>
指定yarn的resourcemanager的地址
<property>
<name>yarn.resourcemanager.hostname</name>
<value>mymaster</value>
</property>
<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>
</configuration>
6.格式化namenode
hdfs namenode -format
7.启动hdfs和yarn
start-dfs.sh
start-yarn.sh
8.用jps查看进程
四,jdk,hadoop和mysql都安装好之后,接下来安装hive
1,先解压hive文件
2,重命名hive
mv apache-hive-2.1.0-bin hive
Hive配置文件修改
进入hive下conf目录,cd /opt/soft/hive/conf
拷贝hive-env.sh.template,重命名为hive-env.sh
cp hive-env.sh.template hive-env.sh
编辑hive-env.sh文件,设置:
export JAVA_HOME=/opt/soft/jdk
export HADOOP_HOME=/opt/soft/hadoop
export HIVE_HOME=/opt/soft/hive
#export SPARK_HOME=/usr/lib/spark
拷贝hive-default.xml.template,重命名为hive-site.xml
cp hive-default.xml.template hive-site.xml
编辑hive-site.xml(vim hive-site.xml)用于管理元数据配置:
到这里hive的配置文件就修改好了
接下来把连接数据的jar添加到hive的lib目录下
将mysql驱动包拷贝至Hive下lib中
cp mysql-connector-java-5.1.39.jar /opt/soft/hive/lib/
最后修改一下系统的环境变量
vim /etc/profile
source环境变量文件,使之生效
source /etc/profile
5,初始化Hive元数据仓库(进入hive下bin目录,执行下列命令):
./schematool -dbType mysql -initSchema
格式化成功后
最后直接输入hive命令**
hive