Hive中java对数据库、表的操作

在应用Hive之前,首先搭建Hive环境,关于Hive的搭建 参考之前的搭建文档

http://blog.csdn.net/liulihui1988/article/details/74351532

java代码执行Hive脚本

java代码执行Hive脚本,需要启动Hive的内部服务,供其他或者java代码链接,Hive内部服务启动命令

# ./hive --service hiveserver2

这里写图片描述

启动成功后tcp会自动监听 一个10000的端口

这里写图片描述

但是这里监听的IP是127.0.0.1,是不能供其它链接的,需要修改配置文件,指定服务地址,IP或者服务器名称

  • 需改 Hive-site.xml 的配置文件
# vi ../conf/hive-site.xml 

需要把如下value的localhost 改为服务器名称或者IP

<property>
  <name>hive.server2.thrift.bind.host</name>
  <value>centos-node6</value>
  <description>Bind host on which to run the HiveServer2 Thrift interface.
  Can be overridden by setting $HIVE_SERVER2_THRIFT_BIND_HOST</description>
</property>

再次启动Hive的内部服务,查看监听的tcp和端口号服务

这里写图片描述

内部服务开启成功,现在可以供其它链接Hive,本地测试 命令进入/bin目录下

# ./beeline 
beeline> !connect jdbc:hive2://centos-node6/default;

这里写图片描述

用户名默认:root 密码:无

登陆成功后命令查看default数据库中的表

show tables

出现错误 5000L,这是Hive的一个bug,需要修改配置文件

这里写图片描述

修改配置文件 hive-site.xml,修改value值为5000

<property>
  <name>hive.server2.long.polling.timeout</name>
  <value>5000</value>
  <description>Time in milliseconds that HiveServer2 will wait, before responding to asynchronous calls that use long polling</description>
</property>

再次命令查看default 中的表 show tables

这里写图片描述

远程链接Hive测试成功!

java代码JDBC链接Hive

  • jdbc测试链接Hive代码如下
import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.ResultSet;
import java.sql.Statement;

/**
 * Hive远程测试连接
 * @author llh
 *
 */
public class HiveTest {

    public static void main(String[] args) throws Exception{
        Class.forName("org.apache.hive.jdbc.HiveDriver");
        Connection conn = DriverManager.getConnection("jdbc:hive2://centos-node6/default", "root", "");
        try {
            Statement st = conn.createStatement();
            ResultSet re = st.executeQuery("select count(*) from t_emp"); 
            if(re.next()){
                System.err.println("t_emp数据条数:"+re.getInt(1));
            }
        } catch (Exception e) {
            e.printStackTrace();
        }finally{
            conn.close();
        }
    }

}

这里写图片描述

测试成功

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
基于hadoop的Hive数据仓库JavaAPI简单调用的实例,关于Hive的简介在此不赘述。hive提供了三种用户接口:CLI,JDBC/ODBC和 WebUI CLI,即Shell命令行 JDBC/ODBC 是 HiveJava,与使用传统数据库JDBC的方式类似 WebGUI是通过浏览器访问 Hive 本文主要介绍的就是第二种用户接口,直接进入正题。 1、Hive 安装: 1)hive的安装请参考网上的相关文章,测试时只在hadoop一个节点上安装hive即可。 2)测试数据data文件'\t'分隔: 1 zhangsan 2 lisi 3 wangwu 3)将测试数据data上传到linux目录下,我放置在:/home/hadoop01/data 2、在使用 JDBC 开发 Hive 程序时, 必须首先开启 Hive 的远程服务接口。使用下面命令进行开启: Java代码 收藏代码 hive --service hiveserver >/dev/null 2>/dev/null & 我们可以通过CLI、Client、Web UI等Hive提供的用户接口来和Hive通信,但这三种方式最常用的是CLI;Client 是Hive的客户端,用户连接至 Hive Server。在启动 Client 模式的时候,需要指出Hive Server所在节点,并且在该节点启动 Hive Server。 WUI 是通过浏览器访问 Hive。今天我们来谈谈怎么通过HiveServer来操作Hive。   Hive提供了jdbc驱动,使得我们可以用Java代码来连接Hive并进行一些类关系型数据库的sql语句查询等操作。同关系型数据库一样,我们也需要将Hive的服务打开;在Hive 0.11.0版本之前,只有HiveServer服务可用,你得在程序操作Hive之前,必须在Hive安装的服务器上打开HiveServer服务,如下: 1 [wyp@localhost/home/q/hive-0.11.0]$ bin/hive --service hiveserver -p10002 2 Starting Hive Thrift Server 上面代你已经成功的在端口为10002(默认的端口是10000)启动了hiveserver服务。这时候,你就可以通过Java代码来连接hiveserver,代码如下:

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值