分布式搭建-7 Hive安装

最新推荐文章于 2022-08-17 12:30:04 发布
最新推荐文章于 2022-08-17 12:30:04 发布
阅读量228 收藏 1
点赞数
分类专栏： 大数据组件安装部署教程
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/QYmufeng/article/details/101274346
版权
这篇博客详细介绍了如何进行Hive 0.13.1的分布式安装，包括Hive的下载、解压和配置，特别是将MySQL设置为Hive的元数据库，并详细阐述了两种Hive与Hbase集成的方法，最后展示了如何创建与Hbase集成的Hive外部表并验证数据。
摘要由CSDN通过智能技术生成

（一）Hive 概述：

 

 参考： hive下载   hive-0.13.1

hadoop下载及版本选择

 

 

1.解压

tar -zxvf hive-0.13.1-cdh5.3.6.tar.gz -C /opt/modules/

cd /opt/modules/
mv hive-0.13.1-cdh5.3.6/ hive-0.13.1

2.配置

cd /opt/modules/hive-0.13.1/conf

1.配置 hive-log4j.properties 

mv
了解本专栏 订阅专栏 解锁全文 超级会员免费看
Toroidals
关注
专栏目录
订阅专栏
分布式搭建-7 hue安装
QYmufeng的博客
10-02 369
Hue是一个开源的Apache Hadoop UI系统，最早是由Cloudera Desktop演化而来，由Cloudera贡献给开源社区，它是基于Python Web框架Django实现的。通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据，例如操作HDFS上的数据，运行MapReduce Job等等。 hue下载地址：http://gethue.c...
分布式搭建-6 Mysql安装
QYmufeng的博客
09-24 353
一.在线安装mysql 1.修改yum源 为阿里源 1.更改yum源为阿里。 首先备份 /etc/yum.repos.d/CentOS-Base.repo mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup 2.、下载新的CentOS-Base.repo 到/etc/yum.r...
Hadoop分布式 Hive 搭建
qq_42886289的博客
05-26 579
说明： Hive 搭建需要借助 MySQL 存储元数据，因此要安装 MySQL 具体参考： MySQL 安装 Hive 是建立在 Hadoop 上的，因此需要先搭建 Hadoop 具体参考：Hadoop 搭建 注意：Hive只需在Hadoop集群的NameNode节点上安装即可，无需在DataNode节点上安装 下载并解压hive安装包到 /opt 目录下 改变所属用户为当前用户 下载地址 ...
分布式Hive环境搭建
向阳争渡
02-28 785
分布式搭建hive环境 环境准备： 系统：Ubuntu 14.04 IP：192.168.110.101 192.168.110.102 192.168.110.103 Hadoop版本：2.6.4 MySQL 需要事先准备好Hadoop集群，并启动。 安装MySQL 在MySQL上创建hive元数据库，并对hive进行授权 安装完MySQL后，新建hive数据库...
hive完全分布式搭建
qq_38320702的博客
12-27 3277
上篇hadoop-ha伪分布式平台基于yarn，后续脚本需要看这里 node1做mysql node3做metastore server node4做客户端 安装配置mysql（node1） yum clean all yum makecache yum install mysql-server 开启mysql 并开机启动 service my...
hive分布式搭建【带有hive配套博客的安装包，在hive单节点演示链接中】
lyq7269的博客
03-11 155
hive分布式搭建 首先hive单机搭建 注： 现在master机器上搭建，并初始化生成mysql中hive数据库 参考博主的单机搭建博客试一试（里面包含了安装包无需寻找对应安装包） hive单机安装教程，简单实用 hive集群搭建 在server节点上进行安装hive，配置hive-site.xml文件，并且配置相应的环境变量等。但是不要进行初始化，即使你进行了也不会成功，但最好别这样做。 配置hive-site.xml文件有变化 <?xml version="1.0"?> <?xml-
hive2 mysql 完全分布式_hive-2.1.1完全分布式搭建
weixin_39717029的博客
01-19 162
释放双眼，带上耳机，听听看~！hive-2.1.1完全分布式搭建，受限制于时间，直接上参数了本文关键词：hive,完全分布式,搭建安装mysqlmkdir /home/lina/Software/mysql //建立下载目录cd /home/lina/Software/ mysql //进入下载目录wget http://dev.MySQL.com/get/Downloads/MySQL-5.7/...
大数据平台分布式搭建 - Hive(HWI)+MySQL分布式配置
Santorinisu Blogs
11-13 541
Part I - 文件清单 Hive安装包 apache-hive-1.2.2-bin.tar.gz HIve-HWI Web监测：apache-hive-1.2.2-src.tar.gz HIve-HWI Web编译依赖环境：apache-ant-1.10.7-bin.tar.gz Hive与MySQ链接包：mysql-connector-java-5.1.39.jar 避免HWI出现JSP问...
Hadoop-伪分布式单节点搭建hive
weixin_56749456的博客
12-01 1712
1.在搭建hadoop完成一台电脑后，hive是利用的MySQL数据库进行操作（推荐与Java技术不好MySQL学的好的学生使用）话不多说操作如下： 2.先把hive数据包和MySQL连接jar包放到Linux； 3.安装hive到/opt目录下； tar -zxvf apache-hive-1.2.1-bin.tar.gz -C /opt/ 4.hive安装完后名字太长我们改成hive ...
Hive分布式安装部署
weixin_44295572的博客
08-17 1180
ps:这里以tar包的形式安装，如果想以rpm的形式安装自行百度。
apache-hive-1.1.0-cdh5.7.1-bin.tar.gz
05-22
部署安装mysql5.6， hadoop-2.6.0-cdh5.7.1 伪分布式已启动，即在hadoop上部署hive
hive搭建
Qiniin的博客
01-07 496
Hive搭建实验环境实验步骤1.安装hive2.安装mysql3.修改配置4.hive实例化5.验证hive 实验环境 master：192.168.10.131 slave1：192.168.10.129 slave2：192.168.10.130 操作系统ubuntu-16.04.3 hadoop-2.7.1 zookeeper-3.4.8 hive-2.1.1 实验步骤 1.安装hive 下载并安装 wget https://archive.apache.org/dist/hive/hive-2.1
分布式Hive环境安装
CWeeYii的专栏
01-08 3385
1.HIVE安装hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。所有首先需要安装分布式环境的hadoop程序（参考：http://bl
ubuntu 16.04 搭建完全分布式之：HIVE搭建
fdsjzs1的博客
09-16 638
对于hadoop集群来说，任何一个服务器按我理解都是可以弄hive的，反正hive就是个关系数据库，应该都是可以的 反正我在namenode机器上面弄的 哎……昨天写了好多，然后我以为相同的提交页面也是可以用的，结果我就把HIVE的那个页面提交了一下FLUME。。结果就TMD覆盖啊，我悔恨啊！ 我就大概记录一下HIVE的搭建过程，然后记录一下坑有哪些吧 hadoop 2.7.7 介绍 HIVE和H...
hive分布式安装部署
洲小洲
05-02 819
hive的安装与部署 开始本次操作前，确保Hadoop和zk顺利启动。 如图所示，mysql server应安装在node2节点上，Hiver Client 安装在了 master 节点，MySql Server 安装在 node2 节点。 本次安装需要如下的安装包: mysql-connector-java-5.1.5-bin.jar apache-hive-2.3.7-bin.tar 首先在...
最详细的Hadoop+Hbase+Hive完全分布式环境搭建教程（一）
热门推荐
超级码力
11-12 1万+
一、准备工作 1. 预备安装包 (我将需要的包全部放到百度盘里了，可以一次搞定，这个链接只管7天，评论留下邮箱私戳)： 链接: https://pan.baidu.com/s/15dZ9DLPln0uf0K5iVMS9pQ 提取码: tdfb hadoop-2.8.5.tar.gz、hbase-2.1.1-bin.tar.gz、apache-hive-2.3.4-bin.tar.gz、jdk-8u...
Hadoop完全分布式安装Hive
SuperMan程序人生（关注微信公众号）
10-25 5423
推荐阅读《Hive编程指南》 编译安装 Hive 如果需要直接安装 Hive，可以跳过编译步骤，从 Hive 的官网下载编译好的安装包，下载地址为http://hive.apache.org/downloads.html。 Hive的环境配置需要MySQL的支持，所以首先需要安装MySQL，没有安装MySQL的先看上一篇：安装MySQL C.1 编译Hive C.1.1 下载 H...
Hive-3.1.2 远程模式部署
好记性不如烂笔头
11-03 1528
前置条件 需要安装好了jdk环境、mysql、以及全分布的Hadoop集群 一、安装 将安装包解压到 /opt 目录下 tar -zxf apache-hive-3.0.0-bin.tar.gz -C /opt 配置环境变量 vi /etc/profile export HIVE_HOME=/opt/hive-3.0.0-bin export PATH=${HIVE_HOME}/bin:$PATH 使用mysql存储hive元数据 ## 创建hive数据库 create database hive;
hive实例化schema报错： Failed to get schema version.
QYmufeng的博客
01-31 1万+
具体报错： Metastore connection URL:     jdbc:mysql://hm02:3306/hive?createDatabaseIfNotExist=true Metastore Connection Driver :     com.mysql.cj.jdbc.Driver Metastore connection User:     hive org.apach...
4.1搭建流程 从虚拟机模板机--》分布式集群--》OpenResty--》Hadoop--》Zookeeper--》Flume--》Hive(MySql)--》--》Zeppelin-->DolphinScheduler--》SuperSet可视化。
最新发布
05-29
搭建流程如下： 1. 创建虚拟机模板机：先安装虚拟化软件，如VMware Workstation，然后安装一个操作系统，如CentOS，配置好环境和软件，最后将其保存为虚拟机模板机。 2. 创建分布式集群：使用虚拟机模板机创建多个虚拟机，每个虚拟机都要安装相同的操作系统和软件，配置好网络和主机名等信息。然后使用分布式集群软件，如Apache Hadoop，将这些虚拟机组成一个分布式集群。 3. 安装OpenResty：在分布式集群中选择一台虚拟机，安装OpenResty，配置好Nginx和Lua环境，实现高性能的Web应用开发。 4. 安装Hadoop：在分布式集群中选择一台虚拟机，安装Hadoop，配置好HDFS和MapReduce等组件，实现大规模数据的分布式存储和处理。 5. 安装Zookeeper：在分布式集群中选择一台虚拟机，安装Zookeeper，配置好ZAB协议，实现分布式应用程序协调服务。 6. 安装Flume：在分布式集群中选择一台虚拟机，安装Flume，配置好数据采集和传输管道，实现数据的收集和传输。 7. 安装Hive和MySQL：在分布式集群中选择一台虚拟机，安装Hive和MySQL，配置好元数据和数据存储，实现数据的查询和分析。 8. 安装Zeppelin：在分布式集群中选择一台虚拟机，安装Zeppelin，配置好可视化工具和数据源，实现数据的可视化和探索。 9. 安装DolphinScheduler：在分布式集群中选择一台虚拟机，安装DolphinScheduler，配置好任务调度和执行，实现自动化任务的执行和管理。 10. 安装SuperSet：在分布式集群中选择一台虚拟机，安装SuperSet，配置好可视化工具和数据源，实现数据的可视化和探索。 以上是搭建流程的大致步骤，具体实现过程需要根据实际情况进行配置和调整。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Toroidals

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值