【JDBC-Hive】使用JDBC操作Hive数据库_jdbc操作hive到本地

2401_84183070

于 2024-04-12 04:51:07 发布

阅读量174

点赞数 1

分类专栏： 2024年程序员学习文章标签： hive 数据库 hadoop

本文链接：https://blog.csdn.net/2401_84183070/article/details/137661937

版权

2024年程序员学习专栏收录该内容

60 篇文章 0 订阅

订阅专栏

<dependency>
   <groupId>org.apache.hive</groupId>
   <artifactId>hive-jdbc</artifactId>
   <version>2.1.1</version>
   <exclusions>
       <exclusion>
           <groupId>jdk.tools</groupId>
           <artifactId>jdk.tools</artifactId>
       </exclusion>
       <exclusion>
           <groupId>org.slf4j</groupId>
           <artifactId>slf4j-api</artifactId>
       </exclusion>
       <exclusion>
           <groupId>org.slf4j</groupId>
           <artifactId>slf4j-log4j12</artifactId>
       </exclusion>
       <exclusion>
           <groupId>org.apache.logging.log4j</groupId>
           <artifactId>log4j-slf4j-impl</artifactId>
       </exclusion>
   </exclusions>
</dependency>
<dependency>
   <groupId>org.apache.hadoop</groupId>
   <artifactId>hadoop-client</artifactId>
   <version>2.7.2</version>
   <exclusions>
       <exclusion>
           <groupId>org.slf4j</groupId>
           <artifactId>slf4j-api</artifactId>
       </exclusion>
       <exclusion>
           <groupId>org.slf4j</groupId>
           <artifactId>slf4j-log4j12</artifactId>
       </exclusion>
   </exclusions>
</dependency>
<dependency>
   <groupId>org.apache.hadoop</groupId>
   <artifactId>hadoop-common</artifactId>
   <version>2.7.2</version>
</dependency>

2）使用JDBC进行Hive数据库操作

2.1.写入

import java.io.IOException;
import java.sql.\*;

public class Test{
    //Hive连接信息
    private static String JDBC\_DRIVER = "org.apache.hive.jdbc.HiveDriver";
    private static String HIVE\_URL = "jdbc:hive2://192.168.1.1:25005/test";
    private static String HIVE\_USERNAME = "root";
    private static String HIVE\_PASSWORD = "123456";

    //Hive源
    private static String SOURCE = "`ods\_x8v`.`ods\_tsp\_tab\_tbox\_change`";
    private static String TARGET = "`dw\_x8v`.`dwd\_tsp\_tab\_tbox\_change`";

    private static Connection conn = null;
    private static ResultSet rs = null;
    private static PreparedStatement ps = null;

    public static void main(String[] args) {
        //HiveJDBC驱动
        try {
            Class.forName(JDBC\_DRIVER);
        } catch (ClassNotFoundException e) {
            e.printStackTrace();
        }
        //连接Hive
        try {
            conn = DriverManager.getConnection(HIVE\_URL, HIVE\_USERNAME, HIVE\_PASSWORD);
        } catch (SQLException e) {
            e.printStackTrace();
        }
        try {
            ps = conn.prepareStatement("insert into " + SOURCE + " values(?, ?)");
            //写入数据id为1234，name为张三
            ps.setInt(1,1234);
            ps.setString(2, "张三");
            rs = ps.executeUpdate();
        } catch (Exception e) {
            e.printStackTrace();
        }
    }
}

2.2.删除

import java.io.IOException;
import java.sql.\*;

public class Test{
    //Hive连接信息
    private static String JDBC\_DRIVER = "org.apache.hive.jdbc.HiveDriver";
    private static String HIVE\_URL = "jdbc:hive2://192.168.1.1:25005/test";
    private static String HIVE\_USERNAME = "root";
    private static String HIVE\_PASSWORD = "123456";

    //Hive源
    private static String SOURCE = "`ods\_x8v`.`ods\_tsp\_tab\_tbox\_change`";
    private static String TARGET = "`dw\_x8v`.`dwd\_tsp\_tab\_tbox\_change`";

    private static Connection conn = null;
    private static ResultSet rs = null;
    private static PreparedStatement ps = null;

    public static void main(String[] args) {
        //HiveJDBC驱动
        try {
            Class.forName(JDBC\_DRIVER);
        } catch (ClassNotFoundException e) {
            e.printStackTrace();
        }
        //连接Hive
        try {
            conn = DriverManager.getConnection(HIVE\_URL, HIVE\_USERNAME, HIVE\_PASSWORD);
        } catch (SQLException e) {
            e.printStackTrace();
        }
        try {
            ps = conn.prepareStatement("delete from " + SOURCE + " where id = ?");
            //删除id为1234的数据
            ps.setInt(1,1234);
            //执行数据更新操作
            rs = ps.executeUpdate();
        } catch (Exception e) {
            e.printStackTrace();
        }
    }
}

2.3.修改

import java.io.IOException;
import java.sql.\*;

public class Test{
    //Hive连接信息
    private static String JDBC\_DRIVER = "org.apache.hive.jdbc.HiveDriver";
    private static String HIVE\_URL = "jdbc:hive2://192.168.1.1:25005/test";
    private static String HIVE\_USERNAME = "root";
    private static String HIVE\_PASSWORD = "123456";

    //Hive源
    private static String SOURCE = "`ods\_x8v`.`ods\_tsp\_tab\_tbox\_change`";
    private static String TARGET = "`dw\_x8v`.`dwd\_tsp\_tab\_tbox\_change`";

    private static Connection conn = null;
    private static ResultSet rs = null;
    private static PreparedStatement ps = null;

    public static void main(String[] args) {
        //HiveJDBC驱动
        try {
            Class.forName(JDBC\_DRIVER);
        } catch (ClassNotFoundException e) {
            e.printStackTrace();
        }
        //连接Hive
        try {
            conn = DriverManager.getConnection(HIVE\_URL, HIVE\_USERNAME, HIVE\_PASSWORD);
        } catch (SQLException e) {
            e.printStackTrace();
        }
        try {
            ps = conn.prepareStatement("update " + SOURCE + " set name = ? where id = ?");
			//修改id为1234的数据name字段为张三
            ps.setString(1, "张三");
            ps.setInt(2,1234);
            //执行数据更新操作
            rs = ps.executeUpdate();
        } catch (Exception e) {
            e.printStackTrace();
        }
    }
}

2.4.查询

import java.io.IOException;
import java.sql.\*;



**自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。**

**深知大多数大数据工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！**

**因此收集整理了一份《2024年大数据全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。**
![img](https://img-blog.csdnimg.cn/img_convert/8c0866a401e43b622b007446eed66773.png)
![img](https://img-blog.csdnimg.cn/img_convert/af35affdaac3e5d762b1b9a12ab83295.png)
![img](https://img-blog.csdnimg.cn/img_convert/b530403cf6f13f7415dbb21cbda5814d.png)
![img](https://img-blog.csdnimg.cn/img_convert/72ca06b9cfdd5cc255d1d3c7b17a8a9e.png)
![img](https://img-blog.csdnimg.cn/img_convert/4d1334169a44781c16160c2df814058d.png)

**既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上大数据开发知识点，真正体系化！**

**由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新**

**如果你觉得这些内容对你有帮助，可以添加VX：vip204888 （备注大数据获取）**
![img](https://img-blog.csdnimg.cn/img_convert/51afa70ef60c9b42f4ed7512940f9389.png)

习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上大数据开发知识点，真正体系化！**

**由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新**

**如果你觉得这些内容对你有帮助，可以添加VX：vip204888 （备注大数据获取）**
[外链图片转存中...(img-eS2sy2cB-1712868598827)]