CDH 中使用 hive-shell

最新推荐文章于 2022-10-12 01:35:38 发布
最新推荐文章于 2022-10-12 01:35:38 发布
阅读量974 收藏
点赞数
分类专栏： Cloudera 文章标签： hive hadoop 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hell_oword/article/details/119975049
版权

CDH 中使用 hive-shell

问题描述

Cannot find hadoop installation: $HADOOP_HOME or $HADOOP_PREFIX must be set or hadoop must be in the path
在这里插入图片描述

解决方案

编辑 hadoop-env.sh

# 1. 进入 hive 安装目录(可能不同，以自己的目录为准)
cd /opt/cloudera/parcels/CDH/lib/hive/conf
vim hadoop-env.sh

# 2. 在末尾增加如下内容
export HADOOP_HOME=/opt/cloudera/parcels/CDH/lib/hadoop
export HIVE_CONF_DIR=/opt/cloudera/parcels/CDH/lib/hive/conf

# 3. 刷新
source hadoop-env.sh

在这里插入图片描述

半吊子Kyle
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Hive-命令行CDH访问开启kerberos的hive
小蜗牛的博客
09-27 792
Hive-命令行CDH访问开启kerberos的hive
CDH550@hive 使用及操作说明
11-14
cdh5.5.0下的hive的使用和操作介绍。hive作为数据SQL解析引擎，分析、处理数据；Hadoop提供的分布式文件系统（HDFS）作为数据文件的存储介质；Zookeeper作为分布式协调服务器存在，用于管理集群中各节点状态
CDH简单的hive示例
大壮的博客
05-14 2413
首先准备hive数据，这个例子ok之后，我们要开始数据仓库建设了，我们分4层即可，ods数据准备层、dw数据明细层、dm数据集市、st数据应用层 构建数据仓库 create database test; show databases; 准备数据(employees.txt) 1201 Gopal 45000 Technical manager 1202 M...
CDH集群hive使用以及性能测试
Rio.的博客
05-08 2966
1.CDH集群里面的Hive角色分配及作用 如图所示，Hive主要有三个角色：HiveServer2、Metastore Server、以及代理角色Gateway 主要两个服务端守护进程： 1、Hiveserver2：支撑JDBC访问，Thrift服务，部署在masternode3节点。 2、MetaStore Server：支撑访问元数据库的服务，部署在toolnode1节点。 2.Hive内...
cdh6.2.1下hive on spark配置使用，hue使用，beeline使用，hive-jdbc使用及日志进度获取
weixin_43455443的博客
03-31 2543
CDH6.2.1 环境 1、开启hive on spark配置： 在hive配置中搜索 spark ，更改一下配置： YARN 服务上的 Spark 选择spark 默认执行引擎 hive.execution.engine ：spark 执行程序初始数 spark.dynamicAllocation.initialExecutors ：2 ，启动sparksession时，默认初始启动的executor个数，如果配置了 set spark.executor.instances=3 （启动的e
使用IDEA工具连接CDH集群里面的hive组件
12-19
IDEA工具 连接CDH集群里面的hive组件 亲自测试通过 可以连接使用
hive-shell批量命令执行脚本的实现方法
01-20
HIVE_HOME='/opt/module/cdh-5.3.6-ha/hive-0.13.1-cdh5.3.6' ####### execute hive ###### sql=$(cat <<!EOF use db_01; drop table dept_nopart; create table IF NOT EXISTS dept_part( deptno int, dname ...
yum安装CDH5.5 hive、impala的过程详解
09-15
使用Hive命令行或Impala Shell验证Hive和Impala是否正常工作，创建测试表并插入数据，执行查询以确保能正确读取数据。 通过以上步骤，你已经在CDH5.5环境中成功安装了Hive和Impala，并进行了必要的配置。确保所有...
minimal-cdh-docker-test-cluster
05-11
#####已安装的服务HDFS 纱JobHistoryServer Oozie 猪蜂巢色调实际使用的是HDFS和HIVE，其余用于将来的应用程序。 ##构建Docker映像警告构建过程将下载超过1.5 GB的数据。 可以分发较小且已完全安装的映像。 这在...
docker-cdh5.4:Cloudera CDH 5.4.0
05-23
此目录中的Docker脚本会生成CentOS 6 Docker VM并安装所有CDH组件（Hadoop，Spark，Hbase，Hive，Impala，Hue，Zookeeper，Oozie等）。 如何建立cdh容器？ docker build -t docker-cdh54 . 如何运行cdh容器？ ...
shell脚本开发
07-22
2.hive源表：创建hive源表，每个shell脚本对应一个hive源表 #!/bin/bash source /etc/profile CUR_DATE=`date +%Y%m%d` echo "-- CUR_DATE:"$CUR_DATE /opt/cloudera/parcels/CDH/bin/hive （进入hive） USE ...
CDH环境下关于Hive的部分命令(一)
大数据开发
05-30 1116
创建student表, 并声明文件分隔符’\t’ create table stu(id int, sex string) row format delimited fields terminated BY '\t'; 加载本地/run1/stu.txt 文件到stu数据库表中。 load data local inpath '/run1/stu.txt' into table stu; 如何...
CDH环境下关于Hive的部分命令（二）
大数据开发
06-06 299
1.集合数据类型 数据格式： xiaobing,basketball_volleyball,phone1:18_phone2:19,zhongyunqu_zhengzhou xiaocheng,basketball_badminton,phone1:18_phone2:19,fugouxian_zhoukou 创表语法： create table demo( name string, like ...
基于CDH5.x 下面使用eclipse 操作hive 。使用java通过jdbc连接HIVESERVICE 创建表出现的问题及解决
wxzsebastain的博客
10-26 1049
基于CDH5.x 下面使用eclipse 操作hive 。使用java通过jdbc连接HIVESERVICE No privilege 'Create' found for outputs { database:default }
hive shell进入
memiracle的专栏
04-26 2219
进入hive shell步骤 1./etc/init.d/hive-server2 stop 2.如果是安全模式，需要先退出安全模式     su hdfs     hdfs dfsadmin -safemode leave     exit 3. chown -R hive.hive /var/lib/hive/metastore/metastore_db 4. hive shel
基于CDH环境下的Hive数仓配置及优化
小叮当的博客
10-12 1746
Hive数仓及优化
(超详细,带你踩坑)linux centos7 基于CDH6.0.1配置hive on tez 执行引擎(亲测有效)
cmqzyd2222的博客
10-09 1497
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
hive 在linux界面操作
mantoli的博客
09-26 2869
hive 在linux界面操作笔记 在linux展示功能 hive -h 或者 hive --help 输入该命令后将展示 -i 从文件初始化HQL -e 从命令行执行指定的HQL -f 执行HQL脚本 -v 输出执行的HQL语句到控制台 -s 静默Slient模式 ... HIVE-执行hive的两种常用方法 ① 在bash中直接通过 hive -e 命令 ，hive -e 直接执行sql语句 1.hive -e "select * from student where sex = ''秀吉"
Linux中操作Hive常用命令
qq_30713721的博客
09-29 4118
Linux中操作Hive常用命令：登录Hive、Hive的基本操作包含数据库、数据表等等。
[root@server1 sqoop]# bin/sqoop import-all-tables \ > --connect jdbc:mysql://192.168.88.132:3306/meta_erp_data \ > --username root \ > --password 666666 \ > --create-hive-database meta_erp_data \ > --hive-import --create-hive-table 2023-05-26 18:26:04,495 INFO sqoop.Sqoop: Running Sqoop version: 1.4.6-cdh5.14.2 2023-05-26 18:26:04,666 WARN tool.BaseSqoopTool: Setting your password on the command-line is insecure. Consider using -P instead. 2023-05-26 18:26:04,667 ERROR tool.BaseSqoopTool: Error parsing arguments for import-all-tables: 2023-05-26 18:26:04,667 ERROR tool.BaseSqoopTool: Unrecognized argument: --create-hive-database 2023-05-26 18:26:04,667 ERROR tool.BaseSqoopTool: Unrecognized argument: meta_erp_data 2023-05-26 18:26:04,667 ERROR tool.BaseSqoopTool: Unrecognized argument: --hive-import 2023-05-26 18:26:04,667 ERROR tool.BaseSqoopTool: Unrecognized argument: --create-hive-table Try --help for usage instructions.
最新发布
05-27
根据您提供的错误信息，Sqoop无法识别`--create-hive-database`、`meta_erp_data`、`--hive-import`和`--create-hive-table`这些选项。这可能是因为您使用的Sqoop版本不支持这些选项。 请注意，`--create-hive-database`选项是从Sqoop 1.4.7版本开始支持的，而`--hive-import`和`--create-hive-table`选项是在Sqoop 1.4.0版本中引入的。因此，如果您的Sqoop版本太旧，则无法使用这些选项。 您可以尝试升级Sqoop版本，或者使用以下命令来导入所有表： ``` sqoop import-all-tables --connect jdbc:mysql://192.168.88.132:3306/meta_erp_data --username root --password 666666 --hive-import --hive-database meta_erp_data ``` 这将从MySQL中导入所有表，并将它们存储到名为`meta_erp_data`的Hive数据库中。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值