CDH-5.14.2添加Hive

最新推荐文章于 2023-09-26 17:41:00 发布
最新推荐文章于 2023-09-26 17:41:00 发布
阅读量1.3k 收藏 5
点赞数
分类专栏： 环境搭建 Hive 文章标签： hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u014310499/article/details/103827837
版权
本文详细介绍了在CDH-5.14.2环境下添加Hive服务的过程，包括分发mysql-connector、配置Hive服务、创建metastore数据库以及处理安装过程中的错误。关键步骤包括修改hive-site.xml配置文件，使用schematool创建metastore，并提供了解决安装错误的方法和相关参考资料。
摘要由CSDN通过智能技术生成

1. 分发mysql-connector
添加mysql-connector-java.jar包到hive的lib目录下，并分发到每一个节点中（集群分发脚本）

[root@node01 ~]# cp /opt/software/mysql-connector-java.jar /opt/cloudera/parcels/CDH-5.14.2-1.cdh5.14.2.p0.3/lib/hive/lib/
[root@node01 lib]# xsync mysql-connector-java.jar

2. 添加Hive服务

在这里插入图片描述
3. 创建metastore数据库

在所选择MetaStore的节点上，配置hive的hive-site.xml（/opt/cloudera/parcels/CDH/lib/hive/conf/hive-site.xml），添加以下配置：

<configuration>
  <property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://node02.kaikeba.com:3306/metastore?createDatabaseIfNotExist=true&amp;useSSL=false</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value
最低0.47元/天 解锁文章
猫不夜行
关注
  • 0
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
CDH 部署 Hive，Oozie，Hue
涵sir的博客
10-23 779
前言 在CDH集群上添加Hue，首先要部署Hive和Oozie。 Hive 是一种数据仓库系统，提供名为 HiveQL 的 SQL 类语言。 Oozie 是群集中管理数据处理作业的工作流协调服务。 Hue 是与包括 Apache Hadoop 的 Cloudera Distribution 配合使用的图形用户界面。 一、准备工作 Hive、Oozie、Hue都需要创建数据库和用户 CREATE DATABASE hive DEFAULT CHARACTER SET UTF8; CREATE USER '
Hadoop实战（8）_CDH添加Hive服务及Hive基础
分享数据科学家的自我修养
11-14 5155
CDH Hadoop系列目录：Hadoop实战（3）_虚拟机搭建CDH的全分布模式Hadoop实战（4）_Hadoop的集群管理和资源分配Hadoop实战（5）_Hadoop的运维经验Hive体系结构Hive有2个服务端守护进程：Hiveserver2：支撑JDBC访问，Thrift服务。MetaStore Server：支撑访问元数据库的服务。Hive内核结构Complier：编译器，编译hql语
Hive-CDH-5.14.2添加Hive
u011250186的博客
09-26 211
Hive-CDH-5.14.2添加Hive
cdh5.7.4上hive的配置
eric_lee的专栏
01-04 925
cdh hive安装配置
hive-1.1.0-cdh5.14.2.tar.gz
08-07
hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低，可以通过类SQL语句快速实现简单的...
hadoop-2.6.0-cdh5.14.2.tar.gz
05-12
标题中的"hadoop-2.6.0-cdh5.14.2.tar.gz"是一个针对Apache Hadoop的软件包，具体来说是CDH（Cloudera Distribution Including Apache Hadoop）5.14.2版本，它基于Hadoop 2.6.0。CDH是由Cloudera公司提供的一个开源...
数据仓库hive-1.1.0-cdh5.14.2
08-11
hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。
hive-1.1.0-cdh5.14.2.tar.zip
最新发布
01-04
在CDH 5.14.2环境中安装Hive 1.1.0，首先需要解压`hive-1.1.0-cdh5.14.2.tar.gz`文件，然后根据Cloudera的官方文档进行配置，包括设置环境变量、配置Hive Metastore、连接数据库、初始化Hive服务等步骤。在完成安装...
CDH5上安装Hive,HBase,Impala,Spark等服务
热门推荐
真正的才智是刚毅的志向
06-22 2万+
Apache Hadoop的服务的部署比较繁琐，需要手工处理配置文件、下载依赖包等。Cloudera Manager以GUI的方式的管理CDH集群，提供向导式的安装步骤。由于需要对Hive,HBase,Impala,Spark进行功能测试，就采用了Cloudera Manager方式进行安装。本文讲解的是parcel安装方式。
使用IDEA工具连接CDH集群里面的hive组件
12-19
IDEA工具 连接CDH集群里面的hive组件 亲自测试通过 可以连接使用
CDH详细安装教程
08-02
文档为CDH安装教程，代码为5.4.3版本，同样适用于新版本的安装，下载相应包即可按步骤安装。本人安装centos7+CDH5.12.1（3台虚拟机）成功，文档含安装过程中遇到的问题及解决方法，共勉。
cdh的hive配置中，修改 添加 hive-site.xml 配置 && hive 增加用户 role 更改权限
fairynini的博客
05-11 2887
dh的hive配置中，修改 添加 hive-site.xml 配置 CDH版本的hive-site.xml是通过CM配置生成的文件，每次启动，都会根据CM选项还原配置，因此，我们必须用CM界面，找到Hive的配置选项，修改Hive的配置项。之前我一直没找到配置中怎么增加参数，直到看到大佬的博客： https://blog.csdn.net/gdkyxy2013/article/details/105722837 按照大佬博客操作即可更改到配置。 hive的权限问题： 增加用户，对用户赋权，但表多，用户多
cm 安装cdh 后添加hive服务
weixin_30596165的博客
12-25 456
cm 安装cdh 后添加hive服务，出现错误提示 添加服务时候hive 配置如下： 错误信息提示： 错误日志： xec /opt/cloudera/parcels/CDH-5.4.7-1.cdh5.4.7.p0.3/lib/hadoop/bin/hadoop jar /opt/cloudera/parcels/CDH-5.4.7-1.cdh5.4.7.p0.3/lib...
cdh版本的hive安装以及配置
weixin_30726161的博客
02-08 951
hive依赖hadoop 需要的软件包：hive-0.13.1-cdh5.3.6.tar.gz 、hadoop-2.5.0-cdh5.3.6.tar.gz 1、hadoop的安装步骤请访问： 　　　　http://www.cnblogs.com/xningge/articles/8433297.html 2、将hive软件包上传到Linux系统指定的目录：/opt/softwares/cd...
CDH大数据平台搭建之HIVE安装
qq_41924766的博客
06-10 1164
CHD大数据平台搭建之HIVE安装前言一、下载二、安装1.解压2.配置3.启动4.注意 前言 一、下载 1、官网下载 2、网盘下载 提取码：cdh5 备注：官网下载的是apache版本，网盘的是cdh5.7.6的版本 二、安装 1.解压 tar -zxvf hive-1.1.0-cdh5.7.6.tar.gz -C /opt/modules/ 2.配置 1、进入配置文件夹： cd /opt/modules/hive-1.1.0-cdh5.7.6/conf 2、重命名文件 mv hive-env.sh.
cdh hive配置mysql_Hive学习（CDH版Hadoop、Hive安装）
weixin_32797081的博客
02-07 554
1、CDH简介大家认知度比较高的Hadoop项目一般指的是Apache的Hadoop，但是该项目版本比较复杂，兼容性也很差，一般没法直接用于生产。所以针对这个情况，衍生了几个比较著名的第三方版本(CDH、HDP、MapR)，核心内容还是基于原生的hadoop代码。但是相对于原生版，第三方的版本的版本管理清晰，兼容性好，有大量的生产项目实践经验，更有简单易用的部署方案，最后的监控管理也非常人性化，所...
使用Cloudera Manager搭建Hive服务
qq_36306519的博客
04-27 430
使用Cloudera Manager搭建Hive服务
cdh的hive配置文件位置_配置CDH6使用文件存储HDFS
weixin_39685392的博客
12-22 1145
CDH6 Hive服务的元数据存储在Mysql，进入存储Hive元数据的Mysql数据库，修改DBS表和SDS表相应的值，如下所示。说明 在进行元数据修改的时候，建议使用root用户，或者其他有权限的用户，避免因为权限问题导致修改失败。其中mysql服务的root用户密码是在搭建CDH服务时设置的密码。MySQL [(none)]> use cdh6hive ;#修改表“DBS”中的数据My...
[root@server1 sqoop]# bin/sqoop import-all-tables \ > --connect jdbc:mysql://192.168.88.132:3306/meta_erp_data \ > --username root \ > --password 666666 \ > --create-hive-database meta_erp_data \ > --hive-import --create-hive-table 2023-05-26 18:26:04,495 INFO sqoop.Sqoop: Running Sqoop version: 1.4.6-cdh5.14.2 2023-05-26 18:26:04,666 WARN tool.BaseSqoopTool: Setting your password on the command-line is insecure. Consider using -P instead. 2023-05-26 18:26:04,667 ERROR tool.BaseSqoopTool: Error parsing arguments for import-all-tables: 2023-05-26 18:26:04,667 ERROR tool.BaseSqoopTool: Unrecognized argument: --create-hive-database 2023-05-26 18:26:04,667 ERROR tool.BaseSqoopTool: Unrecognized argument: meta_erp_data 2023-05-26 18:26:04,667 ERROR tool.BaseSqoopTool: Unrecognized argument: --hive-import 2023-05-26 18:26:04,667 ERROR tool.BaseSqoopTool: Unrecognized argument: --create-hive-table Try --help for usage instructions.
05-27
根据您提供的错误信息，Sqoop无法识别`--create-hive-database`、`meta_erp_data`、`--hive-import`和`--create-hive-table`这些选项。这可能是因为您使用的Sqoop版本不支持这些选项。 请注意，`--create-hive-...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值