入门篇：从零到一搭建大数据开发平台（五）Hive安装部署教程(derby单机版不推荐 强烈推荐集群式)

最新推荐文章于 2024-07-02 13:04:49 发布
最新推荐文章于 2024-07-02 13:04:49 发布
阅读量491 收藏 1
点赞数 1
分类专栏： # Hive 大数据环境搭建全家桶
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/dlc_996/article/details/104993513
版权
本文档介绍了如何在CentOS6.9环境下，从零开始搭建基于Hadoop2.6-CDH5.15的大数据开发平台，特别是不推荐使用derby单机版，而推荐采用MySQL作为共享数据库进行Hive的安装部署。教程涵盖了从安装JDK、Hadoop，到使用MySQL作为元数据存储的详细步骤，包括配置环境变量、安装mysql软件包、授权、修改配置文件等，最后介绍了通过hiveserver2服务进行Hive交互的两种方式。
摘要由CSDN通过智能技术生成

环境：

VMware15.5Pro【安装传送门】

CentOS6.9【安装传送门】

JKD1.8【安装传送门】

Hadoop2.6-CDH5.15【安装传送门】

 

一、derby单机版（了解即可不推荐学习）

1、上传安装包和mysql连接包  到指定目录

 2、解压安装包

 tar -zxvf hive-1.1.0-cdh5.14.0.tar.gz -C ../servers/

3、进入hive-1.1.0-cdh5.14.0 目录 执行启动命令就是derby版

cd /export/servers/hive-1.1.0-cdh5.14.0/

启动命令： bin/hive  

Hive derby版有很大的缺点：多个地方安装hive后，每一个hive是拥有一套自己的元数据，大家的库、表就不统一；

 

二、使用MySQL共享数据库

最低0.47元/天 解锁文章
BigData攻城狮
关注
专栏目录
【硬刚大数据之面试篇】2021年从零到大数据专家面试篇之Hive篇
微信搜：import_bigdata，大数据领域硬核原创作者
08-12 1462
欢迎关注博客主页：https://blog.csdn.net/u013411339 欢迎点赞、收藏、留言 ，欢迎留言交流！本文由【王知无】原创，首发于 CSDN博客！本文首发CSDN论坛，未经过官方和本人允许，严禁转载！ 本文是对《【硬刚大数据之学习路线篇】2021年从零到大数据专家的学习指南(全面升级版)》的面试部分补充。 硬刚大数据系列文章链接： 2021年从零到大数据专家的学习指南(全面升级版) 2021年从零到大数据专家面试篇之Hadoop/HDFS/Yarn篇 2.
以可视化的方式来打开大数据，tableau是如何连接到Hadoop hive的？
wenyusuran的专栏
03-16 7024
前言 Hadoop Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的SQL查询功能；可以将SQL语句转换为MapReduce任务进行运行，优点是学习成本低；可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。本文将详细介绍Tableau如何连接Hadoop Hive及其注意事项。 以下链接为博主精心整理的tableau学习教程，包含基础部分及高级教程，有需要的小伙伴可自行订阅。
Derby版Hive的安装与部署
weixin_38097878的博客
11-21 1117
文章目录说明开始安装部署Hive一、解压缩derby版Hive二、配置hive环境变量三、直接启动Hive四、使用MySQL共享Hive元数据1、yum安装mysql1.1、在线安装mysql相关的软件包1.2、启动mysql的服务1.3、进入mysql的客户端进行授权1.4、配置远程连接1.5、设置root用户连接mysql的密码2、修改hive的配置文件2.1修改 hive-env.sh2.2...
说说单节点集群里安装hive、3\5节点集群里安装hive的诡异区别（版本搭配）
weixin_30736301的博客
11-02 90
　　这几天，无意之间，被这件事情给迷惑，不解！先暂时贴于此，以后再解决！ 详细问题如下： 　　在hive的安装目录下（我这里是 /home/hadoop/app/hive-1.2.1），hive的安装目录的lib下（我这里是/home/hadoop/app/hive-1.2.1/lib）存放了mysql-connector-java-5.1.21.jar。 　　我的mysq...
Nacos单机部署、集群部署以及Nacos默认持久化derby数据库和配置mysql数据库
最新发布
Benjamin
07-02 2694
2.2 通过derby脚本bin目录下面的使用输入ij使用ij工具（或单击ij.bat后启动ij工具），连接数据库，通过ij.bat工具连接derby数据库，双击ij.bat文件，连接命令如下：dedb是数据库名。找到nacos下面的derby-data，用户名/密码 nacos/ nacos。连接数据后，执行derby数据库脚本，sql脚本在nacos/config/derby-schema.sql。单机启动会在nacos/data/derby-data包，存储的是数据库信息。
（3）安装Hive仓库——开发企业级大数据平台
qq_40959369的博客
07-19 121
hive版本： apache-hive-2.3.6-bin.tar.gz 下载地址：https://archive.apache.org/dist/hive/hive-2.3.6/ #放入hadoop用户的soft目录下 #解压文件 cd soft tar zxvf apache-hive-2.3.6-bin.tar.gz #将解压文件放入home目录 mv apache-hive-2.3.6-bin home/ #查看文件路径 cd home/apache-hive-...
Hive(1)--本地derby安装与配置
Mr_huang的博客
10-26 791
Hive–本地derby安装和配置 一、Hive安装地址 1．Hive官网地址 http://hive.apache.org/ 2．文档查看地址 https://cwiki.apache.org/confluence/display/Hive/GettingStarted 3．下载地址 http://archive.apache.org/dist/hive/ 4．github地址 https://...
hive mysql集群安装_基于Hadoop集群的Hive安装配置（Derby数据库）
weixin_42511990的博客
03-04 236
Hive是一个数据仓库基础工具在Hadoop中用来处理结构化数据，提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行(具体的Hive架构大家自行搜索)。接下来主要讲下Hadoop集群下Hive的安装配置，并搭载Derby数据库(一款小巧的数据库，用于测试，不推荐开发使用，具体大家自行百度)，进行一些基本的数据库操作，好了，让我们开始吧。一、环境：同样的启用三个节点，分别...
Hadoop集群搭建及Hive的安装与使用
12-14
本教程将详细介绍如何搭建Hadoop集群以及安装和使用Hive。 首先，我们来了解Hadoop集群的搭建步骤： 1. **环境准备**：确保所有节点的操作系统一致，通常选择Linux发行版，如Ubuntu或CentOS。安装Java开发套件...
Hive如何搭建和使用
zenglaoshi的博客
11-28 321
Overview Apache Hive数据仓库软件有助于使用SQL读取，编写和管理驻留在分布式存储中的大型数据集。 可以将结构投影到已存储的数据中。 提供了命令行工具和JDBC驱动程序以将用户连接到Hive。 一、Hive环境搭建 1.安装一个mysql Ubuntu 16.04下安装MySQL的过程： 首先执行下面三条命令： sudo apt-get install mysql-server ...
Hive3 单机版(含Derby 多用户及Spark on Hive)
yoshubom的专栏
11-19 1675
Hive3 单机版(含Derby 多用户及Spark on Hive)
Hive企业级应用环境部署
EnjoyToShare | 资源分享平台
07-20 710
一、配置zookeeper 1.分别在4台服务器上初始化ID(id=1,2,3,4) 根据实际服务器台数而定ID echo ID > /var/lib/zookeeper/myid [root@master1 ~]# echo 1 > /var/lib/zookeeper/myid [root@master2 ~]# echo 2 > /var/lib/zookeepe...
大数据入门教程系列之Hive环境搭建--Linux(Centons7)下配置安装Hive
zjh_746140129的博客
09-12 652
本篇文章主要介绍在windows下使用vmware虚拟机中的Linux(Centons7)下配置安装Hive。 简要步骤： ①、下载hive解压包 ②、安装mysql服务器，教程可参照笔者博客 yum方式安装mysql数据库 ③、进入hive的conf目标新建一个hive-site.xml ④、在hive-site.xml中写入mysql连接信息 ⑤、将mysql的驱动包复制到hive...
Hive相关（概述、环境搭建、命令、API、JDBC、HBase整合等）
MCY的博客
01-04 314
Hive Apache Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的类sql查询功能，可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。 Hive是建立在 Hadoop 上的数据仓库基础构架。它提...
docker 安装 vi_如何使用docker快速搭建hive环境
weixin_29041443的博客
01-06 179
写在前面想练练Hive SQL，但是没有hive shell环境。现在只有一台空的CentOS 7机子，一想要弄jdk、hadoop、mysql、hive就头疼。于是在网上找了找，发现用docker部署hive会快很多，在此记录一下部署过程。以下过程每一步在文末都附有参考文档，出错的朋友可以去看对应的参考文档。步骤安装docker安装git，配置github。因为用的是github上大佬写好的do...
Haddoop大数据教程笔记_08_Hive搭建及使用
Snowing_inhope的博客
04-17 446
目录 Hive操作笔记 Hive 安装 1、Mysql安装(hive元数据记录可以使用内嵌derby数据库,但一般选择MySQL) 2、hive安装： 3.hive使用方式 最基本使用方式 启动一个hive交互shell 启动hive服务使用 脚本化运行 4.hive建库建表与数据导入 4.1.建库 4.2.建表 5.hive查询语法 6.hive常见参数 7.h...
Hive搭建教程：从内嵌到本地模式
"这篇文档详述了如何在大数据集群环境下搭建Hive，提供了一种简单易懂的傻瓜式步骤，适用于初学者。文档涵盖了Hive的三种运行模式：内嵌模式、本地模式和远程模式，并重点介绍了本地模式的安装过程，包括下载Hive二...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值