cdh的hive配置文件位置_cdh版本的hive安装以及配置

最新推荐文章于 2022-10-12 01:35:38 发布
最新推荐文章于 2022-10-12 01:35:38 发布
阅读量1.9k 收藏
点赞数
文章标签： cdh的hive配置文件位置
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_39867212/article/details/111835730
版权
本文档详细介绍了在CDH环境下安装和配置Hive的步骤，包括依赖的hadoop版本，软件包准备，Hadoop的安装链接，Hive的解压、配置文件修改，如hive-env.sh, hive-site.xml, hive-log4j.properties，JDBC驱动的拷贝，HDFS目录的创建及权限设置，以及启动Hive客户端进行验证。" 95359927,7756868,Vue 指令详解：v-if、v-show 和 v-for 实战,"['Vue', '前端开发', 'Vue框架', '数据绑定']
摘要由CSDN通过智能技术生成

hive依赖hadoop

需要的软件包：hive-0.13.1-cdh5.3.6.tar.gz 、hadoop-2.5.0-cdh5.3.6.tar.gz

1、hadoop的安装步骤请访问：

http://www.cnblogs.com/xningge/articles/8433297.html

2、将hive软件包上传到Linux系统指定的目录：/opt/softwares/cdh

3、解压hive-0.13.1-cdh5.3.6.tar.gz到指定的目录：/opt/modules/cdh/

tar -zxvf hive-0.13.1-cdh5.3.6.tar.gz -C /opt/modules/cdh/

4、重命名hive-env.sh (去掉.template)

HADOOP_HOME=/opt/modules/cdh/hadoop-2.5.0-cdh5.3.6

export HIVE_CONF_DIR=/opt/modules/cdh/hive-0.13.1-cdh5.3.6/conf

5、重命名hive-site.xml (去掉.template，修改为site)

javax.jdo.option.ConnectionURL

jdbc:mysql://hadoop01.xningge.com:3306/cdhmetastore?createDatabaseIfNotExist=true

javax.jdo.option.ConnectionDriverName

com.mysql.jdbc.Driver

javax.jdo.option.ConnectionUserName

xningge

javax.jdo.option.ConnectionPassword

???

最低0.47元/天 解锁文章
weixin_39867212
关注
CDH大数据平台搭建之HIVE安装
qq_41924766的博客
06-10 1268
CHD大数据平台搭建之HIVE安装前言一、下载二、安装1.解压2.配置3.启动4.注意 前言 一、下载 1、官网下载 2、网盘下载 提取码：cdh5 备注：官网下载的是apache版本，网盘的是cdh5.7.6的版本 二、安装 1.解压 tar -zxvf hive-1.1.0-cdh5.7.6.tar.gz -C /opt/modules/ 2.配置 1、进入配置文件夹： cd /opt/modules/hive-1.1.0-cdh5.7.6/conf 2、重命名文件 mv hive-env.sh.
cdh的hive配置文件位置_手动安装Cloudera Hive CDH
weixin_34043280的博客
01-26 956
本文主要记录手动安装Cloudera Hive集群过程，环境设置及Hadoop安装过程见手动安装Cloudera Hadoop CDH,参考这篇文章，hadoop各个组件和jdk版本如下：1234hadoop-2.0.0-cdh4.6.0hbase-0.94.15-cdh4.6.0hive-0.10.0-cdh4.6.0jdk1.6.0_38hadoop各组件可以在这里下载。集群规划为7个节点，每...
CDH CM元数据梳理，包括HIVE
weixin_33701251的博客
03-14 616
一、Schema SCM 表结构梳理（对应生产BAOFOO_SCM） AUDITS 登录信息、服务，角色重启、配置更改 PROCESSES 进程信息。这里面有很多信息。开放的web端口。 HOSTS 主机信息，包括IP地址，所在机架，内存，CPU等信息 CLIENT_CONFIGS...
cdh的hive配置文件位置_配置CDH6使用文件存储HDFS
weixin_39685392的博客
12-22 1149
CDH6 Hive服务的元数据存储在Mysql，进入存储Hive元数据的Mysql数据库，修改DBS表和SDS表相应的值，如下所示。说明 在进行元数据修改的时候，建议使用root用户，或者其他有权限的用户，避免因为权限问题导致修改失败。其中mysql服务的root用户密码是在搭建CDH服务时设置的密码。MySQL [(none)]> use cdh6hive ;#修改表“DBS”中的数据My...
基于CDH 6.3.0 搭建 Hive on Spark 及相关配置和调优
05-25
### 基于CDH 6.3.0 搭建 Hive on Spark 及相关配置和调优 #### 概述 随着大数据技术的发展，Hadoop生态系统不断成熟与完善，其中Apache Hive作为数据仓库工具，支持通过SQL语句进行查询、分析存储在Hadoop文件系统...
使用IDEA工具连接CDH集群里面的hive组件
10-06
通常，这些配置文件可以从CDH集群的Hive页面上下载，比如`hiveserver2-site.xml`、`core-site.xml`和`hdfs-site.xml`。下载后解压，将它们放在项目中的一个新创建的“resource”目录下。 最后，我们就可以开始编写...
hive2.1.1-cdh6.3.2
05-08
2. **hive-exec-2.1.1-cdh6.3.2.jar**：这个文件包含了Hive执行引擎的核心库，用于处理查询解析、优化、计划生成以及实际的数据处理任务。它是Hive服务端的一部分，通常在Hive服务器上运行，而非客户端。 3. **hive...
Cloudera_HiveJDBC_2.5.4.1006，hive-1.1.0-cdh5.13.2.tar
12-10
可用于在DataGrip连接CDH HIVE，也可以用于在idea或eclipse中连接hive使用，压缩包中包含hive-1.1.0-cdh5.13.2.tar和Cloudera_HiveJDBC_2.5.4.1006，已测试成功，尽情享用！
CDH550@hive安装部署
11-14
cdh5.5.0下的hive的安装部署详细操作。hive的安装其实有两部分组成，一个是Server端、一个是客户端，所谓服务端其实就是Hive管理Meta的那个Hive,服务端可以装在任何节点上，当hive服务并发量不高时推荐部署在数据节点上，并发量高时推荐单独部署在若干台机器
[转载] - CDH集群配置、日志、jar包以及安装目录汇总
兀坐晴窗独饮茶
11-23 856
1. 总结 在查找CDH 中hive的日志 看到一篇很不错的文章, 总结了 集群配置以及日志等安装目录的位置 这里转载过来方便自己查看 转载出处 : CDH集群配置、日志、jar包以及安装目录汇总 2. 关键目录 2.1 开启应用目录：默认可以直接敲命令行 /opt/cloudera/parcels/CDH/bin 查询 # ls avro-tools kite-da...
cdh版 hive hive-site.xml 位置
qq_38250124的博客
12-07 6504
真心感觉cdh不好用，乱糟糟的 找了半天没发现在哪里，/etc里面的那个配置是thirft的配置不能用，需要mysql为元数据的那个配置 偶然间发现在 登录cm 左下角点进去hive  左下角 Hive metaStore Server 点进去 roletype 下面的随便点击一个 进去在上面的Process里面记录了hive-site.xml mysql 为元数据库 密码为加密 坑爹的...
hive安装与配置
Ara_gakiYui的博客
05-25 1808
Hive安装与配置 准备工作： Hadoop伪分布式 apache-hive-2.1.1-bin.tar mysql-connector-java-5.1.18-bin 安装过程： 首先确保虚拟机上已经安装了hadoop伪分布式，并且可以正常启动。 在此基础上安装配置hive(因为hive本质是mapreduce,需要运行在hdfs上) 安装hive ->从官网http://hive.apache.org下载h...
cm管理器安装的CDH添加HIVE UDF函数，两种方式
allen的博客
06-12 3961
1.临时的： 在如下目录下面创建auxlib/etc/hive/auxlib将jar添加到该目录下然后在cm管理器的hive配置文件里面找到： 添加属性： /etc/hive/auxlib在配置文件里面找到： 添加属性：HIVE_AUX_JARS_PATH=/etc/hive/auxlib然后在hive客户端创建临时函数2.永久的：将jar包上传到hdfshadoop dfs -mkdir
CDH目录结构
weixin_41538547的博客
05-23 517
本文转载自：https://blog.csdn.net/didi7696/article/details/103462528 CDH目录结构 meihuiziaaaaaa 2019-12-09 18:15:41 103 收藏 1 展开 一、总结目的 因为CDH集群的配置、日志、jar包以及安装文件的目录非常多，而且分散，每次绕进去就有种绕不出来的感觉。所以，下决心总结一下，防止自己后面采坑。 二、关键目录 1.开启应用目录：默认可以直接敲命令行 /opt/cloudera/parcels/CDH/b
基于CDH环境下的Hive数仓配置及优化
小叮当的博客
10-12 2038
Hive数仓及优化
CDH集群配置目录汇总
Tate的博客
11-02 6300
CDH集群配置目录汇总1、CDH目录汇总2、CM详解2.1 Service Monitor：2.2 Host Monitor：2.3 server/agent配置目录2.4 server/agent日志目录2.5 Parcels包安装目录2.5.1 服务软件包数据(parcels)2.5.2 服务软件包缓存数据2.6 CDH配置数据库连接信息脚本目录3、CDH安装路径4、CDH组件详解4.1 组件安装目录4.2 组件配置路径4.3 组件shell客户端命令4.4 组件日志目录4.5 服务运行时所有组件的配置
cdh hive配置
最新发布
06-02
好的，关于 CDH 集群中 Hive 的配置，可以按照以下步骤进行： 1. 修改 Hive 配置文件 在 Hive 安装目录下的 conf 目录中，找到 hive-site.xml 文件，修改其中的相关配置项。 2. 配置 Hive 数据库 在 Hive 安装目录下的 scripts 目录中，找到 metastore_db 脚本，运行该脚本以创建 Hive 数据库。 3. 启动 Hive 元数据服务 在 Hive 安装目录下的 bin 目录中，执行以下命令启动 Hive 元数据服务： ``` hive --service metastore ``` 4. 启动 Hive 服务 在 Hive 安装目录下的 bin 目录中，执行以下命令启动 Hive 服务： ``` hive --service hiveserver2 ``` 以上就是 CDH 集群中 Hive 的基本配置步骤，具体配置细节可以根据实际情况进行调整。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值