Hadoop系列(六)Hive的使用

本文介绍了数据仓库工具Hive的使用,强调了数据仓库与数据库的区别,并详细阐述了Hive的安装配置过程,包括下载解压、配置文件修改、驱动jar包拷贝等步骤。同时,提到了Hive与MySQL数据库的元数据交互以及在遇到YARN内存不足时的解决办法。
摘要由CSDN通过智能技术生成

数据仓库工具

数据仓库和数据库 是不一样的概念

数据库:针对数据的增删改查,业务性操作

数据仓库:存储日志数据或统计好的数据,主要用于分析数据、捕获数据、存储历史数据,多为报表 主要提供决策支持而非业务。进行数据提取、转化、加载,是一种可以存储,查询和分析,底层hdfs。使用近似的sql语句去操作hdfs和进行简单的mapreduce操作。一般来做的操作是增加和查询。mapreduce出来的结果存储在数据仓库

不同点:
在这里插入图片描述

​ 数据内容的不一致
​ 数仓一般不会修改源数据,数据库不一样(增删改)
​ 目的性不一样,数据库为程序运行,数仓为决策支持
​ 操作不一样,数据库增删改查,数仓分析处理(上端下端)

两者相辅相成关系,数据仓库主要面向主题设计。数据库主要面向事务的操作

1、下载,解压

hive-1.1.0-cdh5.15.1.tar hive版本要和hadoop版本一致

解压
tar -zxvf 压缩包名称
删除安装包
rm -fr 压缩包名称

2、修改配置文件

​ hive-env.sh

​ hive-site.xml

3、拷贝驱动jar包到lib文件夹中

修改hive-env.sh

在conf目录下

mv hive-env.sh.template hive-env.sh
编辑模式
修改HADOOP_HOME的位置 had
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值