hive安装问题01

最新推荐文章于 2024-07-22 09:46:18 发布
最新推荐文章于 2024-07-22 09:46:18 发布
阅读量600 收藏
点赞数
分类专栏： hive 文章标签： hadoop hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u014151160/article/details/78034198
版权

    1、首先，请打开HADOOP再启动Hive，我一开始就是这么天真的以为Hive可以单独使用，所以疯狂的报错，出现以下的错误。其实认真看看报错信息就知道是与Hadoop相关（前提是你的hadoop本身真的是可用的）。

[hadoop@mini01 bin]$ ./hive

Logging initialized using configuration in jar:file:/home/hadoop/apps/hive-1.2.1/lib/hive-common-1.2.1.jar!/hive-log4j.properties
Exception in thread "main" java.lang.RuntimeException: java.net.ConnectException: Call From mini01/192.168.176.61 to mini01:9000 failed on connection exception: java.net.ConnectException: 拒绝连接; For more details see:  http://wiki.apache.org/hadoop/ConnectionRefused
    at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:522)
    at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:677)
    at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:621)
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
    at java.lang.reflect.Method.invoke(Method.java:606)
    at org.apache.hadoop.util.RunJar.run(RunJar.java:221)
    at org.apache.hadoop.util.RunJar.main(RunJar.java:136)
Caused by: java.net.ConnectException: Call From mini01/192.168.176.61 to mini01:9000 failed on connection exception: java.net.ConnectException: 拒绝连接; For more details see:  http://wiki.apache.org/hadoop/ConnectionRefused
    at sun.reflect.NativeConstructorAccessorImpl.newInstance0(Native Method)
    at sun.reflect.NativeConstructorAccessorImpl.newInstance(NativeConstructorAccessorImpl.java:57)
    at sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45)
    at java.lang.reflect.Constructor.newInstance(Constructor.java:526)
    at org.apache.hadoop.net.NetUtils.wrapWithMessage(NetUtils.java:791)
    at org.apache.hadoop.net.NetUtils.wrapException(NetUtils.java:731)
    at org.apache.hadoop.ipc.Client.call(Client.java:1473)
    at org.apache.hadoop.ipc.Client.call(Client.java:1400)
    at org.apache.hadoop.ipc.ProtobufRpcEngine$Invoker.invoke(ProtobufRpcEngine.java:232)
    at com.sun.proxy.$Proxy17.getFileInfo(Unknown Source)
    at org.apache.hadoop.hdfs.protocolPB.ClientNamenodeProtocolTranslatorPB.getFileInfo(ClientNamenodeProtocolTranslatorPB.java:752)
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
    at java.lang.reflect.Method.invoke(Method.java:606)
    at org.apache.hadoop.io.retry.RetryInvocationHandler.invokeMethod(RetryInvocationHandler.java:187)
    at org.apache.hadoop.io.retry.RetryInvocationHandler.invoke(RetryInvocationHandler.java:102)
    at com.sun.proxy.$Proxy18.getFileInfo(Unknown Source)
    at org.apache.hadoop.hdfs.DFSClient.getFileInfo(DFSClient.java:1977)
    at org.apache.hadoop.hdfs.DistributedFileSystem$18.doCall(DistributedFileSystem.java:1118)
    at org.apache.hadoop.hdfs.DistributedFileSystem$18.doCall(DistributedFileSystem.java:1114)
    at org.apache.hadoop.fs.FileSystemLinkResolver.resolve(FileSystemLinkResolver.java:81)
    at org.apache.hadoop.hdfs.DistributedFileSystem.getFileStatus(DistributedFileSystem.java:1114)
    at org.apache.hadoop.fs.FileSystem.exists(FileSystem.java:1400)
    at org.apache.hadoop.hive.ql.session.SessionState.createRootHDFSDir(SessionState.java:596)
    at org.apache.hadoop.hive.ql.session.SessionState.createSessionDirs(SessionState.java:554)
    at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:508)
    ... 8 more
Caused by: java.net.ConnectException: 拒绝连接
    at sun.nio.ch.SocketChannelImpl.checkConnect(Native Method)
    at sun.nio.ch.SocketChannelImpl.finishConnect(SocketChannelImpl.java:735)
    at org.apache.hadoop.net.SocketIOWithTimeout.connect(SocketIOWithTimeout.java:206)
    at org.apache.hadoop.net.NetUtils.connect(NetUtils.java:530)
    at org.apache.hadoop.net.NetUtils.connect(NetUtils.java:494)
    at org.apache.hadoop.ipc.Client$Connection.setupConnection(Client.java:608)
    at org.apache.hadoop.ipc.Client$Connection.setupIOstreams(Client.java:706)
    at org.apache.hadoop.ipc.Client$Connection.access$2800(Client.java:369)
    at org.apache.hadoop.ipc.Client.getConnection(Client.java:1522)
    at org.apache.hadoop.ipc.Client.call(Client.java:1439)
    ... 28 more

2、你的mysql没有打开远程登录的权限，报错内容主要选段如下（太长太长了，可能也漏点了一些很重要的）：

[hadoop@mini01 bin]$ ./hive

Logging initialized using configuration in jar:file:/home/hadoop/apps/hive-1.2.1/lib/hive-common-1.2.1.jar!/hive-log4j.properties
Exception in thread "main" java.lang.RuntimeException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
    at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:522)
    at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:677)
    at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:621)
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)

Caused by: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient

----------------------------------------------------------
Caused by: javax.jdo.JDOFatalDataStoreException: Unable to open a test connection to the given database. JDBC url = jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true, username = root. Terminating connection pool (set lazyInit to true if you expect to start your database after your app). Original Exception: ------
java.sql.SQLException: null,  message from server: "Host 'mini01' is not allowed to connect to this MySQL server"
    at com.mysql.jdbc.SQLError.createSQLException(SQLError.java:1086)
    at com.mysql.jdbc.SQLError.createSQLException(SQLError.java:989)

---------------------------------------------------------
NestedThrowables:
java.sql.SQLException: Unable to open a test connection to the given database. JDBC url = jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true, username = root. Terminating connection pool (set lazyInit to true if you expect to start your database after your app). Original Exception: ------
java.sql.SQLException: null,  message from server: "Host 'mini01' is not allowed to connect to this MySQL server"
    at com.mysql.jdbc.SQLError.createSQLException(SQLError.java:1086)

----------------------------------------------------------  
Caused by: java.sql.SQLException: Unable to open a test connection to the given database. JDBC url = jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true, username = root. Terminating connection pool (set lazyInit to true if you expect to start your database after your app). Original 
Exception: ------
java.sql.SQLException: null,  message from server: "Host 'mini01' is not allowed to connect to this MySQL server"
    at com.mysql.jdbc.SQLError.createSQLException(SQLError.java:1086)
---------------------------------------------------------
Caused by: java.sql.SQLException: null,  message from server: "Host 'mini01' is not allowed to connect to this MySQL server"
    at com.mysql.jdbc.SQLError.createSQLException(SQLError.java:1086)

    开启Mysql中的权限

[hadoop@mini01 ~]$ mysql -uroot -p

mysql> GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY 'root' WITH GRANT OPTION;
Query OK, 0 rows affected (0.00 sec)

mysql> FLUSH PRIVILEGES;
Query OK, 0 rows affected (0.00 sec)

mysql> exit
Bye

    3、hive中一个为jline的包与hadoop里yarn的包重复了，yarn中的那个包一搬版本都是有点低的，可删除了然后将hive中的jline包添加进hadoop去。报错信息如下：


 [hadoop@mini01 bin]$ ./hive

Logging initialized using configuration in jar:file:/home/hadoop/apps/hive-1.2.1/lib/hive-common-1.2.1.jar!/hive-log4j.properties
[ERROR] Terminal initialization failed; falling back to unsupported
java.lang.IncompatibleClassChangeError: Found class jline.Terminal, but interface was expected
    at jline.TerminalFactory.create(TerminalFactory.java:101)
    at jline.TerminalFactory.get(TerminalFactory.java:158)
    at jline.console.ConsoleReader.<init>(ConsoleReader.java:229)
    at jline.console.ConsoleReader.<init>(ConsoleReader.java:221)
    at jline.console.ConsoleReader.<init>(ConsoleReader.java:209)
    at org.apache.hadoop.hive.cli.CliDriver.setupConsoleReader(CliDriver.java:787)
    at org.apache.hadoop.hive.cli.CliDriver.executeDriver(CliDriver.java:721)
    at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:681)
    at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:621)
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
    at java.lang.reflect.Method.invoke(Method.java:606)
    at org.apache.hadoop.util.RunJar.run(RunJar.java:221)
    at org.apache.hadoop.util.RunJar.main(RunJar.java:136)

Exception in thread "main" java.lang.IncompatibleClassChangeError: Found class jline.Terminal, but interface was expected
    at jline.console.ConsoleReader.<init>(ConsoleReader.java:230)
    at jline.console.ConsoleReader.<init>(ConsoleReader.java:221)
    at jline.console.ConsoleReader.<init>(ConsoleReader.java:209)
    at org.apache.hadoop.hive.cli.CliDriver.setupConsoleReader(CliDriver.java:787)
    at org.apache.hadoop.hive.cli.CliDriver.executeDriver(CliDriver.java:721)
    at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:681)
    at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:621)
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
    at java.lang.reflect.Method.invoke(Method.java:606)
    at org.apache.hadoop.util.RunJar.run(RunJar.java:221)
    at org.apache.hadoop.util.RunJar.main(RunJar.java:136)

    修改步骤如下：

当前目录是hive的lib目录

[hadoop@mini01 lib]$ rm ~/apps/hadoop-2.6.4/share/hadoop/yarn/lib/jline-0.9.94.jar
[hadoop@mini01 lib]$ cp ./jline-2.12.jar  ~/apps/hadoop-2.6.4/share/hadoop/yarn/lib/

祈祷：仙女一定不会有BUG

盐井很闲又有钱
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
hive的安装
leanaoo的博客
10-23 2158
概览 1.上传解压 2.配置环境变量 3.配置hive-site.xml 4.将mysql的连接驱动放到hive/lib下 5.初始化操作 6.执行hive命令并测试 7.异常处理 如果是集群版,Hive安装在一台虚拟机上就行 首先确保hdfs和mysql是正确启动的 1.上传解压 软件:hive-2.3.3 在/usr在创建hive文件夹,用来存放压缩包和作为安装路径 [root@master ...
那些年踩过的坑 hive 启动异常
天角蚁
09-17 1243
Exception in thread "main" java.lang.RuntimeException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient 异常 异常) Logging initialized using configuration in jar:file:/opt/software/hive/lib/hiv
hive/lib/hive-common-2.2.0.jar!/hive-log4j2.properties Async: true
小苟的专栏
04-09 3934
今天安装hive的时候报这个错，用的是hive2.2.0的版本，花了两个小时才解决。Logging initialized using configuration in jar:file:/opt/software/hive/lib/hive-common-2.2.0.jar!/hive-log4j2.properties Async: trueException in thread "main"...
HIVE 报错 转自https://blog.csdn.net/xiesai588/article/details/51317478
u012099568的专栏
09-03 305
搭建hive时出现下面的错误： Logging initialized using configuration in jar:file:/root/apache-hive-1.2.1-bin/lib/hive-common-1.2.1.jar!/hive-log4j.properties [ERROR] Terminal initialization failed; falling back ...
hive启动时报错
博博的博客
03-05 992
[root@bigdata2 conf]# hive Logging initialized using configuration in jar:file:/root/training/hive/lib/hive-common-1.2.2.jar!/hive-log4j.properties Exception in thread "main" java.lang.RuntimeEx
Hive 配置
热门推荐
小杨的技术博客
04-30 2万+
我使用的hive版本是1.2.1，以下是默认的配置文件。 hive-env.sh 重命名hive-env.sh.template为hive-env.sh，修改如下信息： # Set HADOOP_HOME to point to a specific hadoop install directory # 设置Hadoop安装目录 export HADOOP_HOME=/opt/module/ha...
hive安装依赖以及启动脚本
06-11
hive安装依赖以及启动脚本 文件包含如下： 01_mysql-community-common-5.7.29-1.el7.x86_64.rpm 02_mysql-community-libs-5.7.29-1.el7.x86_64.rpm 03_mysql-community-libs-compat-5.7.29-1.el7.x86_64.rpm 04_...
Hive2.3.4安装文档
06-05
Hive2.3.4安装文档 Hive是一款基于Hadoop的数据仓库工具，主要用于数据的存储、查询和...Hive安装完成后，我们可以使用Hive来存储和查询数据了。Hive提供了强大的数据仓库功能，可以帮助我们更好地管理和分析数据。
hive安装及相关知识整理
12-26
以下是对Hive安装及相关知识的详细讲解： **一、Hive简介** Hive最初由Facebook开发，用于解决海量日志数据分析的问题。它将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，使得非专业的编程人员也能对...
Hive安装配置记录
07-29
以下是对 Hive 安装配置、常用命令及其功能的详细说明： 1. **Hive 的安装配置** - **下载与解压**：从 Apache 官方镜像站点下载稳定版本的 Hive，例如 `hive-0.7.1.tar.gz`，并将其解压到已安装 Hadoop 的主机...
在CentOS7中安装Hive1.2.2
04-06
在 hadp01 中切换到 Hive 安装文件所在目录，使用以下命令解压缩安装文件： `cd /home/root/` `tar -xzvf apache-hive-1.2.2-bin.tar.gz -C apps` 将解压缩的默认目录改名为 `hive-1.2.2`： `mv apache-hive-...
HIve安装踩坑手册
b379685397的博客
06-26 648
hive是基于Hadoop的一个数据仓库工具，所以我们要安装hive首先要安装Hadoop。本文hadoop和hive的安装方式和我踩的一些坑记录起来分享给大家 目录 一、安装环境 二、安装Hadoop 1、下载hadoop 2、修改环境变量 三、安装hive 1、下载hive 2、修改环境变量 3、修改hivesite 配置 4、验证是否安装成功 四、错误记录 1、配置文件中存在异常字符 二、guava版本不一致 一、安装环境 JDK 1.8 二、安装Hadoop 1、下
Hadoop搭建Hive异常处理
qq_23871147的博客
07-22 297
Logging initialized using configuration in jar:file:/root/apache-hive-1.2.1-bin/lib/hive-common-1.2.1.jar!/hive-log4j.properties [ERROR] Terminal initialization failed; falling back to unsupported j
hadoop-hive安装配置
狐狸叫
11-04 1354
hadoop-hive安装配置 下载hive-0.8.1.tar.gz   ---------在ahdoop1.0.0这个版本上要使用这个版本以上     把这个文件解压在/hadoop/app目录下 1.添加bin/hive-config.sh，添加jdk支持 exportJAVA_HOME=/usr/java/jdk1.7.0_02 exportHIVE_HOME
java sessionstate_解决：Permission denied at org.apache.hadoop.hive.ql.session.SessionState.start(Sess...
weixin_35176891的博客
02-13 702
Permission denied at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:522)Logging initialized using configuration in jar:file:/opt/hive/1.2.1/lib/hive-common-1.2.1.jar!/hive-log...
Hive学习（三）安装配置
新新许愿树
12-22 535
目录 安装部署 Hive基本操作 将本地文件导入hive 查看在hive中输入的所有历史命令 Hive常见属性配置 数据仓库位置配置 查询后信息显示配置 运行日志信息配置 配置参数方式 官网地址：https://hive.apache.org/ 下载地址：https://www-eu.apache.org/dist/hive/ 官方wiki文档：https://cwiki....
hive配置报错，及解决措施
weixin_43872683的博客
03-18 1203
Logging initialized using configuration in jar:file:/usr/local/src/apache-hive-1.2.2-bin/lib/hive-common-1.2.2.jar!/hive-log4j.properties [ERROR] Terminal initialization failed; falling back to unsupp...
Hadoop-HDFS
最新发布
weixin_42029860的博客
07-22 342
Hadoop的HDFS（Hadoop Distributed File System）是一个分布式文件系统，它被设计用来在普通的硬件上运行，并且提供高吞吐量访问应用程序数据的能力。
Centos7下安装hive详细步骤
03-25
以下为 CentOS 7 下安装 Apache Hive 的详细步骤： 1. 确认 Java 版本 Hive 需要 Java 7 或更高版本才能运行。请使用以下命令来检查 Java 版本： ``` java -version ``` 如果 Java 未安装或版本不符合要求，请安装 Java 并设置 JAVA_HOME 环境变量。 2. 下载和安装 Hive 从官方网站（http://hive.apache.org/downloads.html）下载 Hive 的二进制安装包，解压到指定目录下。可以使用以下命令来下载和解压缩 Hive： ``` wget http://mirrors.advancedhosters.com/apache/hive/hive-3.1.2/apache-hive-3.1.2-bin.tar.gz tar -xzvf apache-hive-3.1.2-bin.tar.gz sudo mv apache-hive-3.1.2-bin /usr/local/hive ``` 3. 配置 Hive 3.1 修改环境变量 将 Hive 的 bin 目录添加到 PATH 环境变量中： ``` export PATH=$PATH:/usr/local/hive/bin ``` 3.2 修改 hive-site.xml 复制 hive-default.xml.template 并重命名为 hive-site.xml： ``` cp /usr/local/hive/conf/hive-default.xml.template /usr/local/hive/conf/hive-site.xml ``` 编辑 hive-site.xml 文件，按照以下配置进行修改： ``` <property> <name>hive.metastore.warehouse.dir</name> <value>/usr/local/hive/warehouse</value> <description>location of Hive table</description> </property> <property> <name>hive.metastore.uris</name> <value>thrift://localhost:9083</value> <description>URI for the remote metastore.</description> </property> ``` 3.3 配置 Hive 元数据库 Hive 默认使用 Derby 作为元数据库。如果需要使用 MySQL 或其他 RDBMS 作为元数据库，则需要进行相应的配置。 首先，安装 MySQL 和 MySQL JDBC 驱动程序： ``` sudo yum install mysql-server mysql-connector-java ``` 然后创建 Hive 元数据库，并授予相应权限（这里假设您的 MySQL 用户名是 hiveuser，密码是 password，数据库名是 hive）： ``` mysql -u root -p CREATE DATABASE hive; CREATE USER 'hiveuser'@'localhost' IDENTIFIED BY 'password'; GRANT ALL PRIVILEGES ON hive.* TO 'hiveuser'@'localhost'; FLUSH PRIVILEGES; exit ``` 现在，将以下配置添加到 hive-site.xml 中，以使用 MySQL 作为 Hive 元数据库： ``` <property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value> <description>JDBC connect string for a JDBC metastore</description> </property> <property> <name>javax.jdo.option.ConnectionDriverName</name> <value>com.mysql.jdbc.Driver</value> <description>Driver class name for a JDBC metastore</description> </property> <property> <name>javax.jdo.option.ConnectionUserName</name> <value>hiveuser</value> <description>username to use against metastore database</description> </property> <property> <name>javax.jdo.option.ConnectionPassword</name> <value>password</value> <description>password to use against metastore database</description> </property> ``` 另外，还需要将 MySQL JDBC 驱动程序拷贝到 Hive 的 lib 目录下： ``` sudo cp /usr/share/java/mysql-connector-java.jar /usr/local/hive/lib/ ``` 4. 启动 Hive 元服务 启动 Hive 元服务，可以使用以下命令： ``` hive --service metastore ``` 5. 启动 Hive shell 现在，可以启动 Hive shell，使用以下命令： ``` hive ``` 6. 示例：创建和查询表 以下示例演示如何使用 Hive 创建和查询表： 创建一个名为 sales 的表： ``` CREATE TABLE sales ( id INT, date STRING, amount FLOAT, category STRING ); ``` 向表中插入一些数据： ``` INSERT INTO sales VALUES (1, '2021-01-01', 1000.0, 'Electronics'); INSERT INTO sales VALUES (2, '2021-01-02', 2500.0, 'Clothing'); INSERT INTO sales VALUES (3, '2021-01-03', 3000.0, 'Electronics'); INSERT INTO sales VALUES (4, '2021-01-04', 1500.0, 'Books'); ``` 查询表中的数据： ``` SELECT * FROM sales; ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值