Hadoop环境配置之hive环境配置详解
准备mysql的数据库与驱动包
在hadoop的基础上搭建(单机.伪分布式.分布式均可)
什么是hive
HIVE简介
hive是基于Hadoop的一个数据仓库工具,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表,并提供SQL查询功能,能将SQL语句转变成MapReduce任务来执行。Hive的优点是学习成本低,可以通过类似SQL语句实现快速MapReduce统计,使MapReduce变得更加简单,而不必开发专门的MapReduce应用程序。hive是十分适合数据仓库的统计分析和Windows注册表文件。
配置hive
1. 安装mysql:yum源安装
1.1 安装MySQL镜像
先查看最新镜像:
https://dev.mysql.com/downloads/repo/yum/
1
1.2 下载
wget http://dev.mysql.com/get/mysql57-community-release-el7-11.noarch.rpm
1
1.3 安装mysql镜像
yum install mysql57-community-release-el7-11.noarch.rpm
1
1.4 安装mysql服务,安装时间很长(慢慢等待)
yum install mysql-commu